破解网站禁止复制页面内容和图片（一）(图)

　　破解网站禁止复制页面内容和图片（一）(图)

　　破解网站禁止复制页面内容和图片（比如把爬虫的图片下载器设置成只读，或者禁止复制别人爬虫的网页源码），直接复制网页中的html代码。

　　爬虫是无法加载wordpress网站中的内容的。但是可以用javascript动态加载html文档。然后把javascript动态生成一段网页，由爬虫解析打开。

　　加载html需要你先把网页上传到google的服务器上，然后服务器上有个加载html动态生成网页的库，你只要调用就可以了。

　　可以用xpath

　　我用javascript可以爬所有网站的图片和文字好像还可以爬你发的表情包...很神奇。

　　如果你要做一个爬虫，一定要知道别人用爬虫爬到哪些东西了，爬虫之所以叫爬虫，说明他它对于用户来说只是一个服务器上的存储节点，而不是提供过程服务的客户端。所以用爬虫你首先要知道别人有哪些网站，你可以先从收集到的网站的域名进行爬虫的找，要发到哪里去。然后结合各个网站的爬虫脚本可以造出来很多可爱可爱的爬虫。比如...。

　　可以跟目标网站结合起来，

　　通过javascript，然后用bs4可以一步到位得到。网上可以找到一些，自己去找找一搜就有了。

　　有位大牛（jsshen&jshi）..他也是一名码农，他总结过爬虫类型，分为四类：异步爬虫（用javascript实现），循环爬虫（用javascript实现），事件驱动（用javascript实现），定时调度（javascript实现）等等。最后，还有一些玩法。比如爬虫采用用户输入的内容作为输入，然后收集用户需要的数据。这个在深度爬虫中比较常见。没事可以看看他的blog：。