php 爬虫抓取网页数据(php爬虫抓取网页数据，模板比你的代码还多)

　　php 爬虫抓取网页数据(php爬虫抓取网页数据，模板比你的代码还多)

　　php爬虫抓取网页数据，

　　1、使用wordpress的模板程序，修改页面，

　　2、利用简单的数据抓取工具，

　　3、开始修改规则：设置参数，

　　4、保存！抓取结果保存在content目录；

　　5、关于静态数据保存，也有很多简单方式；另外，关于分布式保存，可参考他人的分布式数据抓取器，facebook用的是redis，国内也有不少大拿用mongodb。

　　我认为可以加一个库，可以把爬的结果标签化，

　　目前随着网络技术的发展，各种打包工具已经多如牛毛，对于纯php,php-fpm架构是目前大型公司业务中互相拉起一个大搜索服务平台经常用到的。利用这些优势技术也可以做出更高性能的抓取工具。我们以php-fpm架构为例，可以做出一个基于php-fpm框架中php结构库的框架，使用php-fpm创建单体服务器，而php-fpm集群可以做到节省很多配置。

　　我也想问，不想用写爬虫也不想设备架设，

　　写一个爬虫模块吧

　　根据你的需求选择不同的抓取模块，比如lastprefs(redisbased)、twofilter(redismanifest)，或者就用php-fpm，包括php-config.php等，

　　完全没必要用框架，框架是套的php的模板，模板比你的代码还多。你应该想想要做什么。