php 抓取网页数据(php抓取网页数据必须先注册域名然后通过xmlhttprequest来请求)

　　php 抓取网页数据(php抓取网页数据必须先注册域名然后通过xmlhttprequest来请求)

　　php抓取网页数据必须先注册域名然后通过xmlhttprequest来请求，不像java需要去获取https的数据。你可以这样来理解php的抓取和java是不一样的。说一下php的抓取过程。先把需要抓取的信息保存在mysql或者mongodb中，你也可以用nosql的方式，比如redis或者mongodb，但前提是你必须理解php是怎么用这些数据库，学会使用这些数据库的模块才能更快的利用这些数据。

　　然后编写抓取代码，比如写几个很简单的业务逻辑，用于验证等。写好以后打包成doc模块，不仅方便传给其他项目，也方便自己理解代码。然后在服务器上编写一个java接口接收抓取过来的数据，并返回给php解析。遇到爬虫js原始script会有处理。如果需要抓取文件，需要写一个解析工具和一个加密工具。这个其实比较简单，可以学着写写就行了。

　　。

　　首先，它们都是基于php。一个是web,一个是java。

　　曾经不止一次地在后台那里面用过java写爬虫，但是因为不习惯java让大量问题非常繁琐，现在基本上php+switchyomega来解决任何问题。

　　php不是go的对手，而rust才是go的对手。

　　一个弱语言，一个强语言，php是个弱语言，java是个强语言，go才是go的对手。重要的事情说三遍。java并不是不能做爬虫，而是性能低，需要读取静态html(那种静态的html都不是垃圾，用get来操作)。