python scrapy爬取快递单号信息 用的模拟登入--

项目地址:https://gitee.com/zhangjianyu/scrapy_grabs_express_data/tree/master

1, 创建项目

《python scrapy爬取快递单号信息 用的模拟登入--》

scrapy  startproject kuaididanhao

2. 创建爬虫

首先进入创建项目的跟目录

《python scrapy爬取快递单号信息 用的模拟登入--》

创建完成后查看下文件目录

《python scrapy爬取快递单号信息 用的模拟登入--》

如图就代表创建成功了

对爬虫进行代码编写 在spiders/kuaidi.py 

《python scrapy爬取快递单号信息 用的模拟登入--》

然后到 settings.py 进行配置

《python scrapy爬取快递单号信息 用的模拟登入--》

分析下要爬的页面

《python scrapy爬取快递单号信息 用的模拟登入--》
《python scrapy爬取快递单号信息 用的模拟登入--》

然后到middlewares.py 进行配置

《python scrapy爬取快递单号信息 用的模拟登入--》
《python scrapy爬取快递单号信息 用的模拟登入--》
《python scrapy爬取快递单号信息 用的模拟登入--》 效果图

《python scrapy爬取快递单号信息 用的模拟登入--》

    原文作者:a十二_4765
    原文地址: https://www.jianshu.com/p/b347dc192823
    本文转自网络文章,转载此文章仅为分享知识,如有侵权,请联系博主进行删除。
点赞