百度网页关键字抓取(几种网站分析工具获取百度关键字的方法及获取方法介绍)

　　百度网页关键字抓取(几种网站分析工具获取百度关键字的方法及获取方法介绍)

　　内容

　　更新：2020-12

　　2015年百度全面升级https后，搜索词wd/word被屏蔽。第三方网站分析工具无法获取百度搜索关键词。无论是SEO还是SEM，都只提供一个eqid，可以使用eqid通过Referral API查询搜索关键字，此时品牌专区不受影响，直接通过wd即可。

　　2020年，将取消付费搜索SEM的eqid，SEO也将有eqid。这时候品牌区不会受到影响，可以直接通过wd。

　　但是仍然有一些方法可以获取搜索关键字。以下是获取百度关键词的几种方法：

　　由 UTM 标记

　　UTM 有三个必需参数，以及两个可选参数 term 和 content。这两个可选参数可用于存储搜索关键字。例如，当用户搜索“GA小站”时，对应的登陆页面为：

　　小站

　　这样就可以通过UTM上的参数知道词搜索进来的流量，从而实现关键词的爬取。但是，这种方法得到的展示位置关键词和用户搜索关键词是两个不同的概念，但如果做得足够仔细，它们看起来是等价的。

　　注意：但是这种方法有局限性，即只适用于SEM关键词。如果是 SEO，您无能为力。

　　百度的推荐API

　　虽然百度屏蔽了搜索关键词，但百度提供了Referral API，让用户可以获取不同落地页对应的关键词。

　　具体原理是百度搜索的时候，会先跳转到一个带有eqid的url，然后再跳转到搜索到的页面。中间带 eqid 的 url 是为了关联关键字。

　　比如我在百度搜索“GA小站”，显示的网址是小站，可以看到上面的wd就是搜索关键词。

　　但是点击一个链接后，首先会跳转到一个百度转账页面，没有wd。

　　我们需要得到eqid，然后通过百度Referral API将eqid和关键词关联起来。

　　百度提供的API接口有几个特点：

　　百度推荐api地址：

　　注：2020年7月去掉了SEM的eqid，所以这种方法无法实现SEM的关键词，SEO还行。

　　百度统计API

　　如果不想付费，也可以使用百度统计API，其实就是百度统计中的数据导出服务。

　　这个方法需要维护一个表。当有用户搜索时，通过百度统计API导出当天所有的搜索关键词，将数据与上次导出的数据进行匹配，查看新增了哪个关键词。或者哪个关键字的IP数据增加了，那么这次用户的搜索词就是它了。

　　广告触发的关键字 ID

　　这是一种通过 URL 通配符实现的免费方法。目前，百度风潮系统仅支持向第三方平台开放关键词ID和创意ID。国内有增长工具采用这种方式获取百度关键词。诸葛IO、TalkingData等采用这种方式。

　　通过将 {keywordid} 添加到 关键词 目标链接，例如

　　{keywordid}&creative={creative}&{mediatype}={mediatype}&matchtype={matchtype}&adposition={adposition}&pagenum={pagenum}

　　当用户点击广告时，百度会自动将{keywordid}替换为百度系统中关键词的id：

　　;{mediatype}=1&matchtype=2&adposition=mb1&pagenum=1

　　其中动态参数分析：

　　登陆页面上会有keywordid=12123。我们需要使用这个keywordid通过百度统计API获取搜索关键词。可以看到前面方法导出的数据中有一个keywordid字段，与搜索关键字一一对应。，从而实现关键字匹配。

　　注意：此方法仅适用于 SEM。

　　搜索词返回 API

　　返回API链接的方法是点击广告后，从百度服务器发送到客户监控服务器的延迟监控请求（可能有15-30分钟的延迟），客户基于对采集到的反馈信息进行进一步处理，目前支持账号ID、搜索词、ip、点击时间4个信息：

　　比如我们要订阅账号ID、搜索词、时间和ip，那么返回链接可以设置如下：

　　? uid={userid}&query={query}&ip={ip}&time={time}

　　点击广告时的真实请求示例如下：

　　%e9%b2%9c%e8%8a%b1&ip=106.115.104.89&time=00

　　然后就可以根据IP和时间戳来匹配着陆页，就可以知道对应的着陆页是哪个搜索关键词来的。

　　有关更多信息，请参阅：

　　注：此方法适用于扫描电镜

　　总结

　　方法

　　是否付费

　　扫描电镜

　　搜索引擎优化

　　要求

　　UTM

　　自由

　　支持

　　不支持

　　百度推荐API

　　有薪酬的

　　不支持

　　支持

　　企业认证，百度云北京区域服务器

　　百度统计API

　　自由

　　支持

　　支持

　　关键字 ID

　　自由

　　支持

　　不支持

　　广告需要开放通配符，依赖百度统计API

　　搜索词返回 API

　　自由

　　支持

　　不支持

　　需要开通服务

　　GA肖战，版权所有丨如未注明，均为原创

　　转载请注明标题：用Google Analytics获取百度搜索关键词的5种方法！

　　关联：！