php 循环抓取网页内容(php中根据url来获得网页内容非常的方便，可以通过系统内置函数file_get_contents)

　　php 循环抓取网页内容(php中根据url来获得网页内容非常的方便，可以通过系统内置函数file_get_contents)

　　在PHP中，根据URL获取网页内容非常方便。您可以使用系统内置的函数文件uGet uContents（），传入URL以返回网页的内容。例如，百度主页的内容代码为：

　　$html=文件获取内容（'#39；）

　　echo$html

　　可以显示百度主页的内容。但是，此功能不是万能的，因为某些服务器禁用此功能，或者服务器拒绝响应，因为它没有向服务器传递一些必要的参数。例如：

　　$html=文件获取内容（'#39；）

　　echo$html

　　此代码无法获取网易主页的完整代码。它将返回到下一页。在这个时候，我们需要考虑其他方式

　　这里我们介绍PHP的curl库，它可以简单有效地抓取网页。你只需要运行一个脚本并分析你抓取的网页，然后你就可以通过一种程序化的方式获得你想要的数据。无论您是想从链接获取一些数据，还是想获取一个XML文件并将其导入数据库，即使只是为了获取网页内容，curl都是一个功能强大的PHP库。要使用它，必须首先在PHP配置文件中打开它。打开时，可能需要windows中的一些DLL。我不相信这里的介绍。检查是否启用了curl。您可以调用phpinfo（）；如果启用，它将显示在“加载的扩展名”中

　　以下是使用curl获取网页代码的简单示例：

　　$ch=curl_uinit（）

　　$timeout=10；//设置为零表示无超时

　　curl_uusetopt（$ch，CURLOPT_uurl，#39；）

　　curl_uusetopt（$ch，CURLOPT_RETURNTRANSFER，1)）

　　curl_setopt（$ch，CURLOPT_USERAGENT，'Mozilla/5.0（Windows NT6.1 ; WOW64)AppleWebKit/537.36（KHTML，像壁虎）铬/34.0.184 7.131狩猎/537.36'）

　　curl_setopt（$ch，CURLOPT_CONNECTTIMEOUT，$timeout）

　　$html=curl\u exec（$ch）

　　echo$html

　　网易主页的内容可以通过此代码输出，这里红色标记的代码是关键，因为它模拟了浏览器的代理，所以服务器会认为它是被浏览器访问的，所以会返回正确的HTML