python|python scrapy爬取快递单号信息 用的模拟登入--

项目地址:https://gitee.com/zhangjianyu/scrapy_grabs_express_data/tree/master
1, 创建项目
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
scrapystartproject kuaididanhao
2. 创建爬虫
【python|python scrapy爬取快递单号信息 用的模拟登入--】首先进入创建项目的跟目录
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
创建完成后查看下文件目录
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
如图就代表创建成功了
对爬虫进行代码编写 在spiders/kuaidi.py
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
然后到 settings.py 进行配置
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
分析下要爬的页面
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
然后到middlewares.py 进行配置
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片
效果图

python|python scrapy爬取快递单号信息 用的模拟登入--
文章图片

    推荐阅读