ajax抓取网页内容(用Chrome浏览器的开发者工具看到所有的请求链接及其请求)
优采云 发布时间: 2021-10-01 03:13ajax抓取网页内容(用Chrome浏览器的开发者工具看到所有的请求链接及其请求)
直接回答:
https://www.zhihu.com/node/ProfileFolloweesListV2
详细答复:
正如@tweelveandone所说,您可以使用Chrome浏览器的开发工具查看所有请求,包括Ajax的目标链接及其请求消息
例如,要查看与主题相关的人员,请首先打开此页面:/people/feng-xing-53-25/如下
然后打开chrome的开发者工具窗口,监控网络(自己学习具体使用方法)
下拉页面,直到触发Ajax请求以获取下一页的用户列表(显示为页面上的加载),您可以在开发者工具栏中看到特定的请求链接(即/node/ProfileFollowsListV2)),以及相应的请求和响应
如果使用Python捕获知乎数据,可以参考以下两项:
==============================以下是广告时间。如果您不感兴趣,可以跳过它====================
如果您对go感兴趣,还可以查看我不久前编写的库,并参考前面提到的两个Python库: