• 欢迎访问金笔头博客,这是一个菜鸟(伪)程序员的自留地,欢迎访问我的github:点击进入

标签:scrapy 数据传递

爬虫技术

Scrapy学习笔记(4)-实现多级链接跟随爬取以及数据传递

Scrapy学习笔记(4)-实现多级链接跟随爬取以及数据传递
前言系统环境:CentOS7本文假设你已经安装了virtualenv,并且已经激活虚拟环境ENV1,如果没有,请参考这里:使用virtualenv创建python沙盒(虚拟)环境,在上一篇文章(Scrapy学习笔记(3)-循环爬取以及数据库操作)中我们已经能够跟踪next(下一页)链接循环爬取http://quotes.toscrape.com/中的ar……继续阅读 »

2年前 (2016-11-19) 4981浏览