scrapy分页抓取网页(网上摘录的一段介绍框架的文字，大过年的懒癌高发期)

　　scrapy分页抓取网页(网上摘录的一段介绍框架的文字，大过年的懒癌高发期)

　　Scrapy 是一个用 Python 编写的爬虫框架，简单、轻量、非常方便。Scrapy 使用 Twisted（一个异步网络库）来处理网络通信。架构清晰，收录各种中间件接口，可灵活满足各种需求。

　　以上摘自网上介绍scrapy框架的一段话。大年初一，懒癌高发……

　　安装scrapy，pip可以解决你的问题：pip install scrapy。

　　这里有一句话，如果你在运行代码后看到这个错误：

　　ImportError: No module named win32api

<p>如果出现坑，需要安装pywin32。如果已经安装了pywin32，还有报错，还是需要在你的python安装目录下手动安装\Lib\site-packages\pywin32_system32：pythoncom27.dll,pywintypes2