采集 工具(采集工具的工作原理一般分为很多种1，服务器数据)

　　采集 工具(采集工具的工作原理一般分为很多种1，服务器数据)

　　采集工具的工作原理一般分为很多种1，服务器抓取数据，直接post给username2，web抓取数据，ftp等，针对web端使用第三方浏览器等进行抓取3，专门的爬虫公司抓取数据，通过一些算法等一些手段保证数据质量4，专门的抓包公司抓取数据，主要是https网页等等5，专门的抓包工具，抓包工具通过调用浏览器的api来抓取数据，一般需要设置抓包的返回格式。

　　抓包分单链接抓包和对网页进行https改造抓包，前端、后端都需要抓包技术，抓包还需要其他技术支持。爬虫抓包主要抓网页html，再提取数据的关键字进行爬取。网页抓包主要抓数据的ajax交互逻辑，抓取ajax交互就可以抓取到整个网页的数据。

　　抓包分很多，单线条抓包是需要一定javascript基础的，然后需要找iis、fiddler、wireshark这些，所以推荐通过第三方平台抓包，爬虫抓包可以用友盟市场中的抓包库，

　　你好，爬虫抓包，要看你抓包的目的了，是要抓取页面数据，还是想抓取请求返回数据，如果想抓请求返回数据，需要抓包工具做相应的api接口，可以找相应的抓包库。

　　转载java欢迎开始node之旅。

　　抓包抓request.response返回值进行拼接。

　　抓网页html数据用fiddler，抓包工具用最常用的友盟iis或者wireshark。抓整个网页数据用https，不过很不方便。