excel抓取网页动态数据，都给他们这些爬虫使用，好处多多

　　excel抓取网页动态数据，都给他们这些爬虫使用，好处多多

　　excel抓取网页动态数据，都给他们这些爬虫使用，并可以写到mysql数据库，同时可以读取mysql数据库，好处多多，想来不少用户也都心动了。

　　都不是。有一个可以把网页变得更快，就是把url后缀加上.php后缀，然后看php里面有没有header、allowhttpmethods之类的东西，有就上，不行就爬。

　　php的爬虫也有局限啊你不能直接调用scrapy出去的页面，然后导入模板，这个页面也要重新抓。也不能说爬虫不好啊，毕竟很多网站都已经停止了，但是通过被抓取的页面抓取还是可以拿到里面的数据。如果是要爬传统型的网站，可以考虑以下几个：搜索引擎：requestsurllib库开发的爬虫抓取实时消息：python的libpcap能达到实时消息格式化的要求我不专业，都是一点点自己抓的。有机会可以自己去抓些来试试看，毕竟python爬虫好像还是挺好找工作的。

　　一般情况下，用户量一大，一批爬虫就有可能崩溃，人肉抓取要抓取到什么的都不好说，建议爬虫是不是还是使用python比较好用，web2py和openerpk这些爬虫都要求python3.2.3或更高版本，如果python3.2.3的话可以考虑用web2py，速度非常快，能满足最简单的post请求，也可以利用web2py+pymysql来开发crud的爬虫工作。但是要注意爬虫前提你得有项目经验。