php curl抓取网页内容(这里有新鲜出炉的PHP面向对象编程，程序狗速度看过来！)

　　php curl抓取网页内容(这里有新鲜出炉的PHP面向对象编程，程序狗速度看过来！)

　　这里是新发布的PHP面向对象编程，看看程序狗的速度！

　　PHP 开源脚本语言 PHP（外文名：Hypertext Preprocessor，中文名：“超文本预处理器”）是一种通用的开源脚本语言。语法吸收了C语言、Java和Perl的特点，入门门槛低，易学，应用广泛。主要适用于Web开发领域。PHP 的文件扩展名是 php。

　　下面小编为大家带来php curl常用的5个经典例子。我觉得还不错，现在分享给大家，给大家参考。跟着小编一起来看看吧

　　我用的是php，curl主要是用来抓数据的，当然我们也可以用其他的方法来抓，比如fsockopen，file_get_contents等，但是只能抓取那些可以直接访问的页面。如果要抓取带有页面访问控制的页面，或者登录后的页面，就比较困难了。

　　1.获取文件没有访问控制

　　2.使用代理进行爬取

　　为什么要使用代理进行抓取？以谷歌为例。如果你抓取谷歌的数据，如果你在短时间内频繁抓取它，你将无法抓取它。Google 限制您的 IP 地址。这时候可以换个proxy再抓一次。

　　3.post数据后，抓取数据

　　单独说一下数据提交数据，因为在使用curl的时候，经常会有数据交互，所以比较重要。

　　在upload.php文件中，print_r($_POST); 使用 curl 捕获upload.php Array的输出（[name] => test [sex] => 1 [birth] => 20101010）

　　4. 获取一些带有页面访问控制的页面

　　之前写过一篇文章。有兴趣的可以看看页面访问控制的3种方法。

　　如果使用上述方法进行catch，会报如下错误

　　您无权查看此页面

　　您无权使用您提供的凭据查看此目录或页面，因为您的 Web 浏览器正在发送 Web 服务器未配置为接受的 WWW-Authenticate 标头字段。

　　这时候我们会使用 CURLOPT_USERPWD 来验证

　　以上5个php curl常用的经典例子，都是小编分享的内容。希望能给大家一个参考，也希望大家多多支持PHPERZ。