网站内容抓取(如何把网页数据直接抓取成Excel表格有多好？)

　　网站内容抓取(如何把网页数据直接抓取成Excel表格有多好？)

　　在shopping网站,hotelticket网站，搜索需要比较和研究的产品列表。也许您需要在工作中列出竞争产品的清单，或者您需要抓取数据与朋友讨论旅行计划。这时候有没有什么有效的方法让我不用手动把数据一一复制整理，直接把网页数据抓取到Excel表格里多好？

　　或者你正在搜索某个“软件下载”的话题文章（网站右上角有搜索功能！），发现一堆你想阅读的文章搜索结果，有什么办法可以直接把搜索结果中的十多二十个文章自动转换成表格列表。类似的百科资料，学习网站，可以更快的整理出你需要的参考资料。

　　今天要介绍一个可以帮助大家更快完成上述动作的工具：“Listly”。只要输入网页网址，此工具就可以自动下载网页上的项目和数据列表并将其转换为Excel表格。并且在我的实际测试中，对于中文内容的购物网站和数据网站是可以支持的，免费账号也有一定的使用。

　　1.“Listly”网页自动转Excel效果演示：

　　先来看看“Listly”将网页转成Excel的效果。

　　下图是我在 Google Play 电影中的“愿望清单”。

　　使用“Listly”，我可以自动抓取愿望清单网页的内容到下面的数据库表中。

　　而且只要按下抓取按钮，它就会从网页中抓取各种数据格式，如下图所示。

　　然后我就可以一键下载抓到的数据，下载Excel数据表如下图。

　　不一样的网站，把“Listly”抓到一张桌子上的效果未必100%完美。例如，在 Google Play 电影的愿望清单中，某些“Play Books”的名称字段更改为空白或正在运行的版本。

　　但是，如果您最初必须手动完成，从头到尾会花费很多时间，“Listly”会先帮助您做出 80% 正确的表格，然后我们可以从这里修复和调整，这将节省大量时间。 .

　　2.「Listly」超简单操作教程：

　　如何操作“Listly”？它比我们想象的要简单得多，基本上任何人都可以立即开始。

　　我们可以输入“Listly”网站，输入我们要爬取的网址。也可以安装“Listly Chrome Plugin”，在想要抓取的网页上点击抓取按钮。

　　例如，让我们在下面演示另一个示例。我去shopping网站搜索某种类型的产品。在搜索结果页面上，我按下“Listly”抓取按钮。

　　就是这样！几秒钟后，您将看到以下成功捕获屏幕。

　　“Listly”会抓取网页上的各种数据组织，所以会抓取很多类型的内容，我们可以用[page]来切换抓取的不同内容，比如这个页面就是搜索结果另一个页面的产品列表可能是左侧的项目类别列表。

　　查看您需要什么样的信息，只需切换到该标签即可。

　　确认你想要的数据的分页后，点击上方的【下载为Excel】按钮，即可得到如下图的Excel表格！可以看到产品名称、网站、价格等一应俱全。

　　真的很简单吗？

　　当然，如前所述，爬取的表中可能有一些你不需要的数据。我们只需要转到 Excel 并手动调整即可。

　　3.“Listly”抓取搜索结果并定期跟踪它们：

　　有时，我们的目的是跟踪和研究一些将要更新的信息。此时，“Listly”还提供了“定时自动抓取内容”服务。

　　比如下图中，我在小园搜索了某个话题的文章信息。同样，在搜索结果页面上，按“Listly”抓取按钮。

　　此时，搜索结果的文章list结构也被捕获。如果您注册了“Listly”帐户，您可以将捕获的结果保存在您的控制面板中。

　　并使用【添加日程】设置自动爬取周期，比如一个月爬一次，看看我有没有添加更多相关话题文章。

　　同样，也可以将捕获的文章列表导出到Excel表格中，节省您手动复制标题和URL的时间。

　　相信你在搜索信息的过程中经常需要“把所有的数据整理成一个list”，这时候“Listly”确实可以节省不少时间。

　　此外，“Listly”免费账户提供“每月抓取10个网页”的配额，跟踪1个网页更新。对于免费用户偶尔使用，应该足够了。当然，如果你是出于商业目的，可以考虑“Listly”付费账号。

　　记得之前有人问过我，有没有办法把网页数据转成Excel，看来“Listly”是个不错的解决方案。

　　文章link:

　　文章Title：Listly 自动抓取网页并转换成 Excel 表格！支持中文购物和data网站