php 抓取网页(python和php都是比较好的方法而且是php自己的东西,)

　　php 抓取网页(python和php都是比较好的方法而且是php自己的东西,)

　　php抓取网页内容还是非常容易的，网上介绍这个的很多。抓取速度取决于服务器的性能，比如服务器直接双核双线程，下载速度大大提升。抓取加密程度取决于服务器本身的加密，比如rsa，aes，你自己开发的密码框也不一定加密，解密也不一定安全。总之个人认为爬虫这个东西发展的很快，一开始只是抓一些不方便抓取的信息，等渗透测试时分析出来是被谁抓的，再加上自己的思路能力和自己的技术能力去完成一个爬虫，然后进行数据分析等等。

　　如果是为了解决快速的话，因为对抓取后的数据很难进行统计分析，

　　应该是网站不可靠，用我们学校一个defer了的程序试试看，参考个人的经验还是搞定该应用平台的效率高，

　　单机写脚本爬虫就可以了，再分析数据就基本用到分布式或者paxos。

　　数据库的一些操作比如select的时候就需要反射了，如果是用ruby反射的那些特性应该就很容易了。python，如果你是web方向的，搞爬虫也是极好的，如果抓html，

　　反射和动态生成。注意，是动态生成，不是python实现动态生成。

　　泻药。当然是php咯.ruby也行。

　　可以用iis后端获取数据啊

　　我觉得..python和php都是比较好的方法,而且是php自己的东西,更适合你.php学习曲线并不是特别的高