php网页抓取标题(php网页抓取标题、描述、评论等信息，我们可以利用mozillafirefox浏览器就可以完成)

　　php网页抓取标题(php网页抓取标题、描述、评论等信息，我们可以利用mozillafirefox浏览器就可以完成)

　　php网页抓取标题、描述、评论等信息，我们可以利用mozillafirefox浏览器就可以完成，

　　1、php执行第一步http请求；

　　2、读取图片html里的图片id信息（主要有三个：标题，评论id，评论人id），

　　3、根据读取的图片id信息，得到所有相关信息（评论类型，

　　4、解析图片中的文本，

　　5、用python的正则表达式抓取图片评论内容关键词

　　6、把图片内容保存到本地php代码基本可以实现图片抓取和转存。还有关于直接调用requests2库来获取评论类型等网页信息，我以后再总结。更多高级操作文章，

　　可以先做个爬虫爬取到pp_id的所有评论，大概爬取三千多条。然后使用正则表达式获取评论类型、评论人id、评论内容、评论人昵称等。爬虫代码参考我的博客：八撸python爬虫，解密图片评论。

　　这里试了一下，用了beautifulsoup，包括了评论字段、评论人、评论时间、评论者身份，

　　4)applewebkit/537。36(khtml,likegecko)chrome/58。3640。132safari/537。36'}url=''prod=requests。get(url=url,headers=headers)soup=beautifulsoup(prod。text,'lxml')result=soup。

　　findall('text')[1]while(!soup。style。new_input!='')and!soup。style。new_input。import_other()and!soup。style。new_input。link_link()!=''):foriinrange(0,。

　　8):forjinrange(1,

　　9):text=beautifulsoup(text,'lxml')。findall('。test-container')[0]。findall('。rank')[1]。findall('。text')[2]。findall('。capital')[3]。findall('。id')[4]。findall('。

　　level')[5][6]text。extract('。rank')#获取各位置的评论html=beautifulsoup(text,'lxml')。findall('。test-container')[0]。findall('。text')[1]。findall('。rank')[2]。findall('。

　　text')[3]。findall('。text')[4]。findall('。text')[5]。findall('。ran。