c 抓取网页数据(自动获取“悟空问答”站点的问题标题和地址信息 )

　　c 抓取网页数据(自动获取“悟空问答”站点的问题标题和地址信息

)

　　亲爱的朋友们您好，欢迎来到《使用CefSharp和Javascript实现网络爬虫》。

　　最近学习使用CefSharp和Javascript实现一个网络爬虫，自动获取“悟空问答”网站的题名和地址信息，实现了“哔哩哔哩”直播网站自定义弹幕自动回复，以及制作了两个通过自动化程序提高效率的工具小工具。我准备记录下具体的实现过程，分享给感兴趣的朋友。

　　网络爬虫是根据一定的规则自动爬取互联网上的网站页面信息的程序或脚本。提到网络爬虫，首先想到的就是用Python实现，既高效又方便。不过对于不熟悉Python，但熟悉C#或Javascript的朋友，可以尝试使用CefSharp和Javascript来实现网络爬虫。此外，由CefSharp和Javascript组成的工具软件具有安装、发布方便、界面友好等优点。如果还添加了不想公开的代码逻辑，可以使用C#语言编译保护。

　　首先，让我们简要了解一下 CefSharp 和 Javascript。CefSharp可以简单理解为基于谷歌Chrome-ChromiumEmbeddedFramework（CEF）开源版本的浏览器控件。CefSharp 浏览器控件丰富而强大。因为基于 CEF，CefSharp 支持 Webkit & Chrome 中实现的 HTML5 功能，性能接近 Chrome。CefSharp 是在 C# 应用程序中嵌入浏览器的最佳选择。它支持 WinForms 和 WPF 应用程序。英语好的朋友可以访问：网址进行深入学习。

　　Javascript 是一种广泛使用的 Web 前端编程语言。使用 CefSharp 和 Javascript 实现网络爬虫需要使用 Javascript 进行 DOM 操作。DOM（Document Object Model，文档对象模型）是一种操作XML和HTML文档的常用方法。JavaScript 可以通过 DOM 接口操作每个 HTML 节点。在下一篇文章中，我将介绍使用 CefSharp 和 Javascript 实现网络爬虫的过程中会用到的 C# 和 Javascript 的主要知识。