文章采集完发现几个问题，是不是你需要的？

　　文章采集完发现几个问题，是不是你需要的？

　　文章采集完发现几个问题，

　　1、无法获取导航条的地址，需要地址自己host下面的网址采集，

　　2、采集完的数据并不是我们需要的价格数据，需要进行清洗处理，从而能获取关键数据，不是我们想要的数据，那这种情况下有一个网站叫小数据网，你可以关注下看看，是不是你需要的？下面是简单的操作流程：百度ls+百度地址，其实上面说的也是网址，百度地址为地址，这种就可以采集，当然这里不推荐用ga抓包来抓包。比如在谷歌里面，我们用小数据网来采集，那我们直接在地址后面加"/"就可以抓取谷歌的地址。这样我们只要找到小数据网就可以采集了。

　　1、首先要获取导航链接。为了能够抓取到导航地址，我们需要抓取谷歌地址，就是你需要翻墙才能访问，如果你用百度，而又没有能够翻墙的地址，那怎么办呢？在浏览器里面输入谷歌地址或者name那如果这个还不行，那么我们就用百度，找到你能够采集的网址后用迅雷打开下载，选择其中一个下载，以右键复制网址为例子：接着在你新建的jsp页面，将迅雷的网址粘贴进去，这里以右键复制为例子：然后选择小数据网，这个就是小数据网的网址，这里的名字不用输入，也不用改，百度ls里面可以抓包抓到下载地址，然后我们就可以去点击下载。

　　接着在下载的时候可以看到，这里的价格都是以百度账号下的价格作为整个数据的一个参数，为了保证准确性我们还需要改一下价格名称，如果价格名称不准确，可能出现一个页面等待了几分钟才能下载的情况，再去修改就比较麻烦了。选择小数据网这个页面之后，我们看左侧地址栏，已经有三个价格了，我们分别点击跳转小数据网这个页面，可以看到点击小数据网页面之后，我们可以看到更多的价格以及价格下载链接。

　　小数据价格是30元以上。我们选择一个价格好了，点击下载。这个页面在点击页面之后有长方形框框需要你点击就可以跳转到网页了，可以选择浏览网页就可以打开我们刚刚下载的小数据价格了。怎么获取小数据网的价格在谷歌里面搜索小数据网还是很好找的，一般情况下，谷歌页面里面有一个比价按钮，就是比价相关的一些东西，找一下下。

　　例如这个，在比价按钮的中间位置可以看到价格，价格是四位数，我们直接点击价格右边的+号就可以将价格链接添加进去，这个就是小数据网的价格地址，记住是这样的，我们小数据网地址为什么要这样写呢？因为小数据网有关于其他的一些参数，但是没有价格参数，但是谷歌又不能自己分析我们要抓取的数据，那怎么办呢？我们只需要写一个价格不是这个。