获取网页数据-火狐浏览器我们使用的数据工具

　　获取网页数据-火狐浏览器我们使用的数据工具

　　抓取网页数据工具googlechrome，一个可以查看各种类型数据的浏览器，还可以实现图形化设置查看列表、文字翻译等功能，采用的是现有的爬虫技术。获取网页数据-火狐浏览器我们使用chrome浏览器进行数据抓取，chrome浏览器是目前最流行的浏览器，可以说其最大的特点之一是性能可靠，任何页面都可以保证超快的响应速度。

　　tampermonkey教程火狐浏览器开发者工具，简称chromechrome的开发者工具可以用于抓取来自google、yahoo、netflix等国外网站的数据。所以我们首先要安装tampermonkey这个扩展程序。tampermonkey是由adobe公司开发的浏览器插件，可用于在浏览器内部使用脚本。

　　importtampermonkeyfrom'tampermonkey'name='tampermonkey'executable_url='/'#打开tampermonkey扩展工具，获取dom元素name='name'#获取tampermonkey扩展程序所在的安装目录multiwebmonkey，谷歌团队自创的一款浏览器插件，它能够让开发者利用谷歌浏览器的自定义功能来浏览google、yahoo、stackoverflow、medium等网站。

　　主要内容为谷歌查询、google翻译、google预览、google照片、google三维弹幕、dayz等等。importtampermonkeyfrom'tampermonkey'name='multiwebmonkey'from'tampermonkey'from'medium'target='google'headers={'user-agent':'mozilla/5.0(windowsnt6.1;win64;x64)applewebkit/537.36(khtml,likegecko)chrome/73.0.3651.110safari/537.36'}page=tampermonkey.chrome(headers=headers)page.select('.http-xhr')page.select('.latex-image')page.select('.date')page.select('.music')page.select('.babel-preset-env')#添加一个命令，进行javascript渲染target='preferences'link=target+''#使用google分析能力preferences=['google','yahoo','stackoverflow','dayz']time=time.time()foriteminpage:response=requests.get(item.document.text)text=response.render(u'google</a>',transform=true)#将获取的图片转换为字符串形式picture=list(json.loads(text))print(item['attr']['src'])#保存图片列表attr是html标签中接受参数的一个列表，esphase为该标签中接受的所有参数列表。

　　#order-index可以将图片用untype(order)分类page.select(tops=1,tops=3,tops=5。