网页新闻抓取(应用软件（APP）取代网页成为内容分发的重要渠道(图))

　　网页新闻抓取(应用软件（APP）取代网页成为内容分发的重要渠道(图))

　　烈云注：PC互联网时代，谷歌依靠搜索引擎抓取外部内容，成为内容分发的重要渠道。在此基础上，它建立了庞大的搜索广告商业模式。然而，面对手机APP孤岛，它已经俘获了谷歌内容。收购和广告方面提出了严峻的挑战。通过两年的努力，谷歌通过与外部App服务商的合作，抓取了大量的内容，暂时缓解了移动搜索的内容困境，但这还远远没有结束。移动搜索的商业模式再次摆在了谷歌面前。另一个问题。以下内容转自腾讯科技翻译：

　　搜索引擎是继内容门户之后互联网的第二次重大技术革命。但是，随着智能手机的普及，应用软件（APP）已经取代了网页，成为主流技术。由于APP的内容一时间无法被搜索引擎抓取，人们惊呼移动互联网将给搜索引擎带来生存危机。

　　不过，通过与应用软件开发商的合作，谷歌在一定程度上化解了这场危机。几天前，谷歌宣布已在海量应用中抓取了 300 多页内容。手机上搜索到的信息量也会更加丰富。

　　谷歌搜索团队于 4 月 16 日在官方博客文章中宣布了这一消息。

　　谷歌工程师拉詹帕特尔向媒体透露，谷歌两年前就开始抓取外部应用的内部链接和内容，目前累计抓取超过300亿。

　　在传统的WEB页面中，谷歌可以在未经站长许可的情况下通过软件“蜘蛛”自动访问和抓取。

　　在App内容的抓取上，谷歌需要与应用软件开发商建立合作。谷歌提供了相应的软件开发接口（API），开发者可以通过这些接口向谷歌搜索开放数据，从而实现搜索引擎的内容抓取。

　　据悉，目前已经有大量移动端软件与谷歌合作，包括微博推特、短租工具Airbnb、消费者点评工具Yelp、手机订餐工具OpenTable、图片采集社交网络Pinterest、房地产搜索工具 Trulia 等。

　　当然，还有大量的移动媒体应用，也被谷歌抓取用于新闻报道。

　　超过 300 亿个链接的内容与 Google 抓取的网络数据库相比微不足道。此前有报道称，谷歌蜘蛛抓取的网页数量高达数百亿。

　　然而，在智能手机时代，人们使用搜索的目的更多，场景信息也更多。因此，主流应用和超过300亿的链接足以为用户提供他们需要的信息。

　　据介绍，此前在手机上进行搜索时，谷歌客户端会观察用户智能手机上安装了哪些应用，谷歌只会返回已安装应用的搜索结果。

　　日前，谷歌团队还宣布，对收录在搜索结果中的APP进行了修改。即使用户没有安装某个APP，只要有相关性，它的内容就会出现在搜索结果中。

　　例如，如果用户的手机没有安装点餐工具OpenTable，但是在搜索餐厅时，Google 仍然可能会呈现来自OpenTable 的消费者评论。

　　不过，对于谷歌来说，能够抓取大量APP的内容，并不意味着它已经彻底摆脱了“搜索危机”。

　　有观点认为，在智能手机端，手机一族希望以最快的速度获得最准确的搜索结果，因此各种专业APP逐渐取代了传统网页搜索的地位。例如，人们可能会在热门的团购应用中搜索当地的餐馆和电影，而不是在谷歌上输入关键词，然后看到茫茫烟海的结果。

　　移动搜索消费者行为的变化也给谷歌的发展前景蒙上了一层阴影。Google 90% 的收入来自搜索结果右侧的搜索广告。如果人们远离电脑和传统搜索引擎，谷歌将成为一个非常危险的公司，没有可观的替代收入。