httpclient 抓取网页(HttpClient抓取网页js生成内容的问题-HttpClient的侠客们)
优采云 发布时间: 2021-11-28 19:13httpclient 抓取网页(HttpClient抓取网页js生成内容的问题-HttpClient的侠客们)
HttpClient抓取网页js生成内容。曾经的骑士。来看看吧。非常感谢您来看我的问题。我要去抢京东产品的产品标题。红色部分的title后面是通过js加载的。这是不可用的。有什么办法可以好起来吗?有类似经历的同胞能指点一下吗? - - - 解决方案 - - - - - - - - - - - - - - - - - - - - - - ------------- 需要抓取ajax的内容,这个是js动态加载的httpclient,但是获取不到,那么就需要直接模拟ajax了。根据你的需求,我阅读了,需要访问 获取其页面后在产品地址中添加标题红色部分,搜索skuidkey,获取其值,然后访问String skuidkey Stringurl +skuidkey+ callback= 使用Get访问这个url \u76F4\u964D900\u5143\uFF0C\u4EC5\u9650\ u4ECA\u592914:00-18:00\u9650\u62A2D\ECA\u500D \u6B64\u4E00\u6279\uFF01 结果已经得到了标题的红色部分。当然需要把unicode编码的文本转成中文,不知道怎么转百度