文章采集调用(注意事项雷电模拟器要用3.96.0版本的,用7.1版本我的思路)
优采云 发布时间: 2022-04-14 20:26文章采集调用(注意事项雷电模拟器要用3.96.0版本的,用7.1版本我的思路)
一、算法
算法确实好用,但是破解的难度大家应该都知道。随着版本的更新,算法会经常发生变化,你的软件也会随着变化而更新,这样会增加开发成本。,你不得不说采集效率!就个人而言,我不认为它快得多。毕竟,访问的频率也是有限的。访问后不能更改代理,对吗?这个多少钱?
二、浏览器
不知道大家有没有发现,用户的主页是用浏览器打开的,但是用户的作品却完全没有显示出来。相信很多人的算法都是通过网页版获取的,所以这就造成了一个现象,网页版的算法,往往需要多次请求才能返回一组数据。当然,不排除有通过APP逆向获得的大神。这种情况我就不在这里讨论了,因为我也是半桶水倒过来。
三、捕获(提琴手)
Fiddler 可以说是 TCP 之外非常常见的抓包工具。证书安装好后,什么都不用做。缺点是没有API可以调用,除非你重新开发。一个调用第三方的dll库,我们在自己的程序中调用这个dll,把自己当做代理服务器,所有经过的请求都会先经过我这边,这样我就可以处理数据了。
四、备注
迅雷模拟器使用3.96.0版本,apk使用7.1版本
我的思路:
1.使用Fiddler做代理服务器,具体代码和dll库可以百度。
2.用模拟器操作,安装证书,挂代理,你刷你的视频,我的服务器会自动过滤数据,留下有用的
(1)配置模拟器,模拟器选择手机版本,分辨率可选
(2)使用模拟器中的浏览器打开软件上的链接(地址:端口),例如(192.168.0.109:8888)@ > 继续安装证书
(3)配置模拟器网络代理
就这么简单,不知道你看懂Get了吗?这个方法,不管你放在什么app上,都是可行的,只要你要抓的数据是通过http或者https传输的,那么这个方法是可以的,但是在模拟器段,你可能要写一个脚本操作请求的触发器。与破解算法相比,自动化脚本可不是小菜一碟。
关于抖音在模拟器中无法正常显示数据,可以下载7.1版本的apk,不屏蔽模拟器的7.1版本。
这是我自己的批量去水印下载的示例。有兴趣的可以自行下载试用。有问题或者需要更*敏*感*词*可以私信我交流。下载后右键属性解锁,否则可能无法正常使用。
对了,win7系统可能不行,因为很多win7 Fiddler证书无法正常安装,所以软件不能抓取https,这个可以自己测试。