scrapy是一个专门用于写爬虫的python框架。它将抓取页面内容，处理结果，执行做了很好的模块化处理。1.安装scrapy  准备环境：一定要安装pip,因为用sudoapt-get安装的scrapy版本很旧，会出现很多问题，在ubuntu16.0.4下执行sudoapt-getinstallscrapy好像是找不到package的。切记！不要偷懒，安装pip之后再装scrapy。sudoapt-getinstallpython-pipsudoapt-getinstallpython-devsudoapt-getinstalllibevent-devsudoapt-getinstalllibssl-dev 安装好pip之后，再执行sudopipinstallscrapy就可以了。（注意区分大小写，scrapy要全小写。）sudopipinstallscrapy2.简单的项目示例  1.在命令行创建scrapy项目：创建项目目录，并cd到该目录，执行命令：scrapystartproject项目名   &...