制作网络抓取工具优采云采集器的发布模块的示例
优采云 发布时间: 2020-08-09 01:02什么是WEB发布模块?也就是说,在使用优采云采集器 V9时,手动在网站背景中发布内容的整个过程包括登录网站背景,选择列以及发布写入优采云采集器 V9中的文章等,这是通过以下方式完成的: 优采云采集器. 模拟,实现自动发布的功能,这是WEB发布模块. 然后,规则采集的值通过标签名称传递到在线发布模块,并将数据提交到网站. 这是dedecms文章发布的示例,以下是操作的示例:
一个,点击Web发布配置-新模块
上图中的菜单为:
网站自动登录: 设置网站登录信息的数据
获取列列表: 设置已发布列的列表
随机访问网页: 在帖子数据中设置随机值
内容发布参数: 设置发布页面的POST数据包
高级功能: 文件上传设置和数据结构
2. “ WEB发布设置界面”和“内容发布参数”设置
我们填写需要在发布页面上发布的字段值(不要单击publish),然后打开fiddler(请注意,如果数据流凌乱,请按Ctrl + X清除数据流优先)
如图所示,填写标题,来源,选择列和内容:
Ctrl + X清除数据流后的提琴手:
这时单击“发布”,分析提琴手中的数据包,单击提琴手①➯②,然后单击数据流列表⑤以找到POST类型的数据流⑥,
然后单击⑦以文本形式查看
数据包发布如下:
POST http://127.0.0.1:801/dede/dede/article_add.php HTTP/1.1<br />
Host: 127.0.0.1:801<br />
Connection: keep-alive<br />
Content-Length: 3571<br />
Cache-Control: max-age=0<br />
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,**;q=0.8<br />
Origin: http://127.0.0.1:801<br />
User-Agent: Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 <br />
(KHTML, like Gecko) Chrome/43.0.2357.124 Safari/537.36<br />
Content-Type: application/x-www-form-urlencoded<br />
Referer: http://127.0.0.1:801/dede/dede/login.php?gotopage=/dede/dede/index.php<br />
Accept-Encoding: gzip, deflate<br />
Accept-Language: zh-CN,zh;q=0.8<br />
Cookie: menuitems=1_1,2_1,3_1; PHPSESSID=f21a42f70199c81955f3219623343735;<br />
ENV_GOBACK_URL=/dede/dede/content_list.php?channelid=1<br />
<br />
gotopage=/dede/dede/index.php&dopost=login&adminstyle=newdedecms&userid=admin&pwd=admin&validate=lcmt&sm1=<br />
设置如下:
测试结果:
基本上可以,因此可以使用内置浏览器或数据包登录名登录该模块. 完整的发布模块已完成. 如有任何疑问,可以访问Web爬网工具优采云采集器 V9官方网站()了解或咨询官方客户服务.