
免费采集系统
下载了Kucai信息采集系统的人也下载了它
采集交流 • 优采云 发表了文章 • 0 个评论 • 394 次浏览 • 2020-08-07 23:48
支持多种编码: GBK,BIG5,UNICODE和UTF8.
支持多种网站类型: 包括HTML,Rss和Ajax.
网站登录验证: 支持网站登录和网站Cookie,即使需要验证码才能登录的网站也可以轻松通过.
自定义采集规则: 通过采集规则的定义,您几乎可以从所有网站搜索所需的任何内容.
智能采集和识别: 系统将识别网页上的图片,FLASH,PDF,MP3,视频,JavaScript链接,电子邮件,电话号码等,并将其下载或保存到库中.
任务计划和信息监视: 可以定期启动系统以完成采集工作;您还可以锁定某个网页,并仅在找到必要的链接以实现信息监视功能时采集.
条件采集: 可以在采集过程中设置某些条件或关键字. 也就是说,需要的东西被采集了,不需要的东西没有被采集.
分页采集: 它可以采集分页的网页,并合并多个页面的内容以进行处理.
数据自动重新加权: 默认情况下,系统将处理重复的网页,您还可以自定义其他字段的重新加权设置.
数据格式处理: 可以保留或删除所采集内容的段落格式,并且可以更改所收录图片或附件的路径(例如将下载的图片路径更改为本地路径)
多线程和多任务: 可以同时启动多个线程,并且多个任务可以协同工作而不会相互干扰;可以根据系统性能随时添加或减少线程数,以最大化其工作效率.
所见即所得: 您可以实时查看采集的数据,错误信息和线程工作信息.
<p>自动数据保存: 实时构建采集的数据并将其保存在系统自己的数据库中(用户也可以自定义数据库,但是表和字段的创建由系统完成),而无需手动设置... 查看全部
酷!它是一款功能强大的软件产品,可以采集和挖掘Internet信息并同时更新数据库. 它使我们摆脱了许多简单而繁琐的复制和粘贴工作,并使我们能够在短时间内拥有大量数据.
支持多种编码: GBK,BIG5,UNICODE和UTF8.
支持多种网站类型: 包括HTML,Rss和Ajax.
网站登录验证: 支持网站登录和网站Cookie,即使需要验证码才能登录的网站也可以轻松通过.
自定义采集规则: 通过采集规则的定义,您几乎可以从所有网站搜索所需的任何内容.
智能采集和识别: 系统将识别网页上的图片,FLASH,PDF,MP3,视频,JavaScript链接,电子邮件,电话号码等,并将其下载或保存到库中.
任务计划和信息监视: 可以定期启动系统以完成采集工作;您还可以锁定某个网页,并仅在找到必要的链接以实现信息监视功能时采集.
条件采集: 可以在采集过程中设置某些条件或关键字. 也就是说,需要的东西被采集了,不需要的东西没有被采集.
分页采集: 它可以采集分页的网页,并合并多个页面的内容以进行处理.
数据自动重新加权: 默认情况下,系统将处理重复的网页,您还可以自定义其他字段的重新加权设置.
数据格式处理: 可以保留或删除所采集内容的段落格式,并且可以更改所收录图片或附件的路径(例如将下载的图片路径更改为本地路径)
多线程和多任务: 可以同时启动多个线程,并且多个任务可以协同工作而不会相互干扰;可以根据系统性能随时添加或减少线程数,以最大化其工作效率.
所见即所得: 您可以实时查看采集的数据,错误信息和线程工作信息.
<p>自动数据保存: 实时构建采集的数据并将其保存在系统自己的数据库中(用户也可以自定义数据库,但是表和字段的创建由系统完成),而无需手动设置...
优采云采集器 v3.5.1正式版
采集交流 • 优采云 发表了文章 • 0 个评论 • 334 次浏览 • 2020-08-07 18:17
软件功能
1. 简单的规则配置和强大的采集功能
1. 可视化的自定义采集过程
完整的问答指南,可视化操作,自定义采集过程
自动记录和模拟网页操作顺序
高级设置可以满足更多采集需求
2,单击以提取网页数据
鼠标单击以选择要爬网的Web内容,操作简单
您可以选择提取文本,链接,属性,html标记等.
3. 运行批量数据采集
该软件会根据采集过程和提取规则自动分批采集
快速稳定地实时显示采集速度和过程
可以将软件切换为在后台运行,而不会影响前台工作
4. 导出并发布采集的数据
采集的数据将自动制成表格,并且可以自由配置字段
支持将数据导出到Excel等本地文件
一键式发布到CMS网站/数据库/微信公众号及其他媒体
两个. 支持采集不同类型的网站
电子商务,生活服务,社交媒体,新闻论坛,本地网站...
强大的浏览器内核,超过99%的网站可以使用它!
三,完整的平台支持,所有免费的可视化操作
支持所有操作系统: Windows + Mac + Linux
采集和导出都是免费的,可以放心地无限使用
可视化的采集规则配置,傻瓜式操作
四个强大的功能,箭头的快速迭代
智能识别网络数据,多种导出数据的方式
该软件会定期更新和升级,并且会不断添加新功能
客户的满意是我们最大的肯定!
如何使用优采云采集器采集百度搜索结果数据?
第1步: 创建采集任务
1)启动优采云采集器,进入主界面,单击“创建任务”按钮创建“向导采集任务”
2)输入百度搜索的网址,包括三种方式
1. 手动输入: 直接在输入框中输入网址,多个网址之间必须用换行符分隔
2. 单击以从文件中读取: 用户选择一个文件来存储URL. 文件中可以有多个URL地址,并且这些地址需要用换行符分隔.
3. 批量添加方法: 通过添加和调整地址参数来生成多个常规地址
第2步: 自定义采集过程
1)单击创建后,它将自动打开第一个URL进入向导设置. 在这里,选择列表页面,然后单击下一步
2)填写用于搜索关键字和选择关键字的输入框,然后单击“下一步”
3)进入第一个关键字搜索结果页面后,单击“设置搜索”按钮,然后单击“下一步”
4)单击列表块中的第一个元素
5)单击结果列表块中的另一个元素,此时将自动选择列表块. 点击下一步
6)选择下一页按钮,选择选项以选择下一页,然后单击页面上的下一页按钮以填充第一个输入框,并且可以调整第二个数据框以单击下一个采集操作频率中的页面按钮. 理论上,次数越多,采集的数据就越多. 点击下一步
7)选择要采集的字段: 在焦点框中单击要提取的元素,然后单击“下一步”
8)选择不进入详细信息页面. 点击保存或保存并运行
第3步: 数据采集和导出
1)采集任务正在运行
2)采集完成后,选择“导出数据”以将所有数据导出到本地文件
3)选择“导出方法”以导出采集的数据,在这里您可以选择excel作为导出格式
4)如下所示导出采集的数据后
更新日志
v3.5.1更新日志(2020-5-10)
解决常规处理问题 查看全部
优采云采集器是一款全新的智能网络数据采集软件,由原创的Google技术团队创建. 它具有简单的规则配置和强大的采集功能,可以支持电子商务,生活服务,社交媒体,新闻等不同类型的网站(例如论坛),以各种方式智能地识别网页数据和导出数据,其中大多数是完全免费的. 它是行业分析,精准营销,品牌监控和风险评估的好帮手. 优采云免费采集器支持所有操作系统版本更新和功能升级,以同步所有平台,采集和导出全部免费,轻松使用无限制,并支持后台操作而不会打扰您的其他前台工作. 这是为您的助手提供的最佳数据采集.

软件功能
1. 简单的规则配置和强大的采集功能
1. 可视化的自定义采集过程
完整的问答指南,可视化操作,自定义采集过程
自动记录和模拟网页操作顺序
高级设置可以满足更多采集需求
2,单击以提取网页数据
鼠标单击以选择要爬网的Web内容,操作简单
您可以选择提取文本,链接,属性,html标记等.
3. 运行批量数据采集
该软件会根据采集过程和提取规则自动分批采集
快速稳定地实时显示采集速度和过程
可以将软件切换为在后台运行,而不会影响前台工作
4. 导出并发布采集的数据
采集的数据将自动制成表格,并且可以自由配置字段
支持将数据导出到Excel等本地文件
一键式发布到CMS网站/数据库/微信公众号及其他媒体
两个. 支持采集不同类型的网站
电子商务,生活服务,社交媒体,新闻论坛,本地网站...
强大的浏览器内核,超过99%的网站可以使用它!
三,完整的平台支持,所有免费的可视化操作
支持所有操作系统: Windows + Mac + Linux
采集和导出都是免费的,可以放心地无限使用
可视化的采集规则配置,傻瓜式操作
四个强大的功能,箭头的快速迭代
智能识别网络数据,多种导出数据的方式
该软件会定期更新和升级,并且会不断添加新功能
客户的满意是我们最大的肯定!
如何使用优采云采集器采集百度搜索结果数据?
第1步: 创建采集任务
1)启动优采云采集器,进入主界面,单击“创建任务”按钮创建“向导采集任务”

2)输入百度搜索的网址,包括三种方式
1. 手动输入: 直接在输入框中输入网址,多个网址之间必须用换行符分隔
2. 单击以从文件中读取: 用户选择一个文件来存储URL. 文件中可以有多个URL地址,并且这些地址需要用换行符分隔.
3. 批量添加方法: 通过添加和调整地址参数来生成多个常规地址

第2步: 自定义采集过程
1)单击创建后,它将自动打开第一个URL进入向导设置. 在这里,选择列表页面,然后单击下一步

2)填写用于搜索关键字和选择关键字的输入框,然后单击“下一步”

3)进入第一个关键字搜索结果页面后,单击“设置搜索”按钮,然后单击“下一步”

4)单击列表块中的第一个元素

5)单击结果列表块中的另一个元素,此时将自动选择列表块. 点击下一步

6)选择下一页按钮,选择选项以选择下一页,然后单击页面上的下一页按钮以填充第一个输入框,并且可以调整第二个数据框以单击下一个采集操作频率中的页面按钮. 理论上,次数越多,采集的数据就越多. 点击下一步

7)选择要采集的字段: 在焦点框中单击要提取的元素,然后单击“下一步”

8)选择不进入详细信息页面. 点击保存或保存并运行

第3步: 数据采集和导出
1)采集任务正在运行
2)采集完成后,选择“导出数据”以将所有数据导出到本地文件
3)选择“导出方法”以导出采集的数据,在这里您可以选择excel作为导出格式
4)如下所示导出采集的数据后

更新日志
v3.5.1更新日志(2020-5-10)
解决常规处理问题
免费和开源的分布式系统日志采集框架无一例外
采集交流 • 优采云 发表了文章 • 0 个评论 • 670 次浏览 • 2020-08-07 15:31
我去年曾答应埃里克(《无尽之境》的作者之一)帮助在中国推广“无尽之境”,但出于各种原因,我没有做到这一点. 我向埃里克道歉.
无与伦比的介绍
Exceptionless是一个开源实时日志采集框架,可以在基于ASP.NET,ASP.NET Core,Web Api,Web Forms,WPF,控制台,MVC和其他技术堆栈的应用程序中使用,并提供Rest接口可以在Javascript和Node.js中使用. 它使日志采集变得简单易用,并且不需要了解太多相关的技术细节和配置.
过去,我们主要使用Log4net,Nlog和其他框架进行日志采集. 当应用程序变得复杂且集群化时,传统方法可能不太适合,因为采集各种日志并对其进行分析将发生变化. 这很麻烦,很浪费时间.
现在,卓越团队为我们提供了更好的框架. 我认为这很棒而且有意义. 谢谢他们.
让我们一起看看.
官方网站:
GitHub:
入门
1. 首先,您需要访问官方网站注册一个帐户(您知道是否无法打开),然后在注册后登录系统.
ps: 无例外的系统也可以部署到本地服务器
2. 按照提示添加您的项目:
然后您将看到一个下拉菜单,选择项目类型,您可以看到Exceptionless支持多种项目. 让我们选择一个ASP.NET Core项目:
3. 选择完成后,将有一个详细的步骤,说明如何在项目中使用它.
using Exceptionless;
......
public void Configure(IApplicationBuilder app, IHostingEnvironment env, ILoggerFactory loggerFactory)
{
// xxxxx 处填写上图画红线部分的key
app.UseExceptionless("xxxxxxxxxxxxxxxxxxxxxxxxxx");
app.UseStaticFiles();
app.UseMvc();
}
这时,Exceptionless已经可以在您的项目中工作,它将自动在项目中记录异常.
检查日志是否异常
在“入门”步骤中,我们创建了一个ASP.NET Core项目. 让我们运行它,看看它如何工作.
打开HomeController.cs文件并修改“关于”的操作方法以人为地创建异常消息:
public IActionResult About() {
throw new Exception("test exception");
return View();
}
接下来,刷新“例外”页面. 在仪表板的主仪表板中,您可以看到有关整个项目的异常,并且以多种方式列出了异常,包括分布图,最常见的异常和最新的异常等.
这是我们刚刚在Abount Action中创建的例外. 例外情况已被记录. 单击后,您可以查看详细信息:
在上图中,您可以直观地看到异常的一些特定信息. 除了一些基本的异常类型,时间和堆栈外,它还包括访问者的坐标,IP地址,发生异常的URL地址,以及浏览器信息,操作系统,甚至是发生异常时请求的cookie值. <//p
p将事件发送到异常/p
p除了熟悉的异常信息外,Exceptionless还可以记录许多其他信息,这些信息统称为事件./p
p在无与伦比的情况下,事件有几种类型: 日志,功能使用,404,自定义事件./p
p在Exceptionless中发送不同类型的事件非常简单,代码如下:/p
pprecodeusing Exceptionless;
// 发送日志
ExceptionlessClient.Default.SubmitLog("Logging made easy");
// 你可以指定日志来源,和日志级别。
// 日志级别有这几种: Trace, Debug, Info, Warn, Error
ExceptionlessClient.Default.SubmitLog(typeof(Program).FullName, "This is so easy", "Info");
ExceptionlessClient.Default.CreateLog(typeof(Program).FullName, "This is so easy", "Info").AddTags("Exceptionless").Submit();
// 发送 Feature Usages
ExceptionlessClient.Default.SubmitFeatureUsage("MyFeature");
ExceptionlessClient.Default.CreateFeatureUsage("MyFeature").AddTags("Exceptionless").Submit();
// 发送一个 404
ExceptionlessClient.Default.SubmitNotFound("/somepage");
ExceptionlessClient.Default.CreateNotFound("/somepage").AddTags("Exceptionless").Submit();
// 发生一个自定义事件
ExceptionlessClient.Default.SubmitEvent(new Event { Message = "Low Fuel", Type = "racecar", Source = "Fuel System" });
/code/pre/p
p手动发送已处理的异常/p
p有时,我们在程序代码中显式处理一些异常. 目前,我们可以手动将一些异常信息发送给Exceptionless./p
pprecodetry
{
throw new ApplicationException(Guid.NewGuid().ToString());
}
catch (Exception ex)
{
ex.ToExceptionless().Submit();
}
/code/pre/p
p在发送的事件中添加其他标签/p
p发送事件时,如果添加坐标,标签,属性等,则可以为当前事件添加其他上下文信息./p
pprecodetry
{
throw new ApplicationException("Unable to create order from quote.");
}
catch (Exception ex)
{
ex.ToExceptionless()
// 为事件设定一个编号,以便于你搜索
.SetReferenceId(Guid.NewGuid().ToString("N"))
// 添加一个不包含CreditCardNumber属性的对象信息
.AddObject(order, "Order", excludedPropertyNames: new [] { "CreditCardNumber" }, maxDepth: 2)
// 设置一个名为"Quote"的编号
.SetProperty("Quote", 123)
// 添加一个名为“Order”的标签
.AddTags("Order")
// 标记为关键异常
.MarkAsCritical()
// 设置一个地理位置坐标
.SetGeo(43.595089, -88.444602)
// 设置触发异常的用户信息
.SetUserIdentity(user.Id, user.FullName)
// 设置触发用户的一些描述
.SetUserDescription(user.EmailAddress, "I tried creating an order from my saved quote.")
// 发送事件
.Submit();
}
/code/pre/p
p统一处理已发送事件/p
p默认情况下,您可以将其他事件绑定到ExceptionlessClient.Default.SubmittingEvent,以统一自定义某些处理./p
pprecodeExceptionlessClient.Default.SubmittingEvent += OnSubmittingEvent;
private void OnSubmittingEvent(object sender, EventSubmittingEventArgs e) {
// 仅处理未被处理过的异常
if (!e.IsUnhandledError)
return;
// 忽略404事件
if (e.Event.IsNotFound()) {
e.Cancel = true;
return;
}
// 获取error对象
var error = e.Event.GetError();
if (error == null)
return;
// 忽略 401 或 `HttpRequestValidationException`异常
if (error.Code == "401" || error.Type == "System.Web.HttpRequestValidationException") {
e.Cancel = true;
return;
}
// 忽略不是指定命名空间代码抛出的异常
var handledNamespaces = new Liststring { "Exceptionless" };
if (!error.StackTrace.Select(s => s.DeclaringNamespace).Distinct().Any(ns => handledNamespaces.Any(ns.Contains))) {
e.Cancel = true;
return;
}
e.Event.AddObject(order, "Order", excludedPropertyNames: new [] { "CreditCardNumber" }, maxDepth: 2);
e.Event.Tags.Add("Order");
e.Event.MarkAsCritical();
e.Event.SetUserIdentity(user.EmailAddress);
}
与NLog或Log4Net一起使用
有时,需要在程序中(例如在开发阶段)详细记录日志信息. 此时,您可以与log4net或nlog一起使用. 您可以查看此示例以了解详细信息.
如果程序在短时间内生成大量日志,例如每分钟数千个日志. 这时,您需要使用内存中的存储事件,以便客户端不将事件序列化到磁盘,这样会更快. 这样,您可以使用Log4net或Nlog将某些事件存储到磁盘,并将无异常事件存储在内存中.
using Exceptionless;
ExceptionlessClient.Default.Configuration.UseInMemoryStorage();
摘要
本文主要介绍Exceptionless,然后介绍Exceptionless如何发送日志.
由于Exceptionless网站目前在国外,并且该网站中调用了一些Google API,因此在中国访问可能会有些麻烦. 您首先可以科学地体验这些功能. 毕竟,Exceptionless是开源且免费的,并且服务器也可以在本地部署.
如果您认为本文对您有所帮助,并希望更多的人了解Exceptionless,请多谢您的帮助.
如果您对Exceptionless感兴趣或想学习Exceptionless的代码,可以加入该小组.
无与伦比的QQ组: 330316486.
本文的地址:
作者博客: Savorboard
欢迎转载,请在明显的位置注明出处和链接 查看全部
前言
我去年曾答应埃里克(《无尽之境》的作者之一)帮助在中国推广“无尽之境”,但出于各种原因,我没有做到这一点. 我向埃里克道歉.
无与伦比的介绍
Exceptionless是一个开源实时日志采集框架,可以在基于ASP.NET,ASP.NET Core,Web Api,Web Forms,WPF,控制台,MVC和其他技术堆栈的应用程序中使用,并提供Rest接口可以在Javascript和Node.js中使用. 它使日志采集变得简单易用,并且不需要了解太多相关的技术细节和配置.
过去,我们主要使用Log4net,Nlog和其他框架进行日志采集. 当应用程序变得复杂且集群化时,传统方法可能不太适合,因为采集各种日志并对其进行分析将发生变化. 这很麻烦,很浪费时间.
现在,卓越团队为我们提供了更好的框架. 我认为这很棒而且有意义. 谢谢他们.
让我们一起看看.
官方网站:
GitHub:
入门
1. 首先,您需要访问官方网站注册一个帐户(您知道是否无法打开),然后在注册后登录系统.
ps: 无例外的系统也可以部署到本地服务器

2. 按照提示添加您的项目:

然后您将看到一个下拉菜单,选择项目类型,您可以看到Exceptionless支持多种项目. 让我们选择一个ASP.NET Core项目:

3. 选择完成后,将有一个详细的步骤,说明如何在项目中使用它.

using Exceptionless;
......
public void Configure(IApplicationBuilder app, IHostingEnvironment env, ILoggerFactory loggerFactory)
{
// xxxxx 处填写上图画红线部分的key
app.UseExceptionless("xxxxxxxxxxxxxxxxxxxxxxxxxx");
app.UseStaticFiles();
app.UseMvc();
}
这时,Exceptionless已经可以在您的项目中工作,它将自动在项目中记录异常.
检查日志是否异常
在“入门”步骤中,我们创建了一个ASP.NET Core项目. 让我们运行它,看看它如何工作.
打开HomeController.cs文件并修改“关于”的操作方法以人为地创建异常消息:
public IActionResult About() {
throw new Exception("test exception");
return View();
}
接下来,刷新“例外”页面. 在仪表板的主仪表板中,您可以看到有关整个项目的异常,并且以多种方式列出了异常,包括分布图,最常见的异常和最新的异常等.

这是我们刚刚在Abount Action中创建的例外. 例外情况已被记录. 单击后,您可以查看详细信息:




在上图中,您可以直观地看到异常的一些特定信息. 除了一些基本的异常类型,时间和堆栈外,它还包括访问者的坐标,IP地址,发生异常的URL地址,以及浏览器信息,操作系统,甚至是发生异常时请求的cookie值. <//p
p将事件发送到异常/p
p除了熟悉的异常信息外,Exceptionless还可以记录许多其他信息,这些信息统称为事件./p
p在无与伦比的情况下,事件有几种类型: 日志,功能使用,404,自定义事件./p
p在Exceptionless中发送不同类型的事件非常简单,代码如下:/p
pprecodeusing Exceptionless;
// 发送日志
ExceptionlessClient.Default.SubmitLog("Logging made easy");
// 你可以指定日志来源,和日志级别。
// 日志级别有这几种: Trace, Debug, Info, Warn, Error
ExceptionlessClient.Default.SubmitLog(typeof(Program).FullName, "This is so easy", "Info");
ExceptionlessClient.Default.CreateLog(typeof(Program).FullName, "This is so easy", "Info").AddTags("Exceptionless").Submit();
// 发送 Feature Usages
ExceptionlessClient.Default.SubmitFeatureUsage("MyFeature");
ExceptionlessClient.Default.CreateFeatureUsage("MyFeature").AddTags("Exceptionless").Submit();
// 发送一个 404
ExceptionlessClient.Default.SubmitNotFound("/somepage");
ExceptionlessClient.Default.CreateNotFound("/somepage").AddTags("Exceptionless").Submit();
// 发生一个自定义事件
ExceptionlessClient.Default.SubmitEvent(new Event { Message = "Low Fuel", Type = "racecar", Source = "Fuel System" });
/code/pre/p
p手动发送已处理的异常/p
p有时,我们在程序代码中显式处理一些异常. 目前,我们可以手动将一些异常信息发送给Exceptionless./p
pprecodetry
{
throw new ApplicationException(Guid.NewGuid().ToString());
}
catch (Exception ex)
{
ex.ToExceptionless().Submit();
}
/code/pre/p
p在发送的事件中添加其他标签/p
p发送事件时,如果添加坐标,标签,属性等,则可以为当前事件添加其他上下文信息./p
pprecodetry
{
throw new ApplicationException("Unable to create order from quote.");
}
catch (Exception ex)
{
ex.ToExceptionless()
// 为事件设定一个编号,以便于你搜索
.SetReferenceId(Guid.NewGuid().ToString("N"))
// 添加一个不包含CreditCardNumber属性的对象信息
.AddObject(order, "Order", excludedPropertyNames: new [] { "CreditCardNumber" }, maxDepth: 2)
// 设置一个名为"Quote"的编号
.SetProperty("Quote", 123)
// 添加一个名为“Order”的标签
.AddTags("Order")
// 标记为关键异常
.MarkAsCritical()
// 设置一个地理位置坐标
.SetGeo(43.595089, -88.444602)
// 设置触发异常的用户信息
.SetUserIdentity(user.Id, user.FullName)
// 设置触发用户的一些描述
.SetUserDescription(user.EmailAddress, "I tried creating an order from my saved quote.")
// 发送事件
.Submit();
}
/code/pre/p
p统一处理已发送事件/p
p默认情况下,您可以将其他事件绑定到ExceptionlessClient.Default.SubmittingEvent,以统一自定义某些处理./p
pprecodeExceptionlessClient.Default.SubmittingEvent += OnSubmittingEvent;
private void OnSubmittingEvent(object sender, EventSubmittingEventArgs e) {
// 仅处理未被处理过的异常
if (!e.IsUnhandledError)
return;
// 忽略404事件
if (e.Event.IsNotFound()) {
e.Cancel = true;
return;
}
// 获取error对象
var error = e.Event.GetError();
if (error == null)
return;
// 忽略 401 或 `HttpRequestValidationException`异常
if (error.Code == "401" || error.Type == "System.Web.HttpRequestValidationException") {
e.Cancel = true;
return;
}
// 忽略不是指定命名空间代码抛出的异常
var handledNamespaces = new Liststring { "Exceptionless" };
if (!error.StackTrace.Select(s => s.DeclaringNamespace).Distinct().Any(ns => handledNamespaces.Any(ns.Contains))) {
e.Cancel = true;
return;
}
e.Event.AddObject(order, "Order", excludedPropertyNames: new [] { "CreditCardNumber" }, maxDepth: 2);
e.Event.Tags.Add("Order");
e.Event.MarkAsCritical();
e.Event.SetUserIdentity(user.EmailAddress);
}
与NLog或Log4Net一起使用
有时,需要在程序中(例如在开发阶段)详细记录日志信息. 此时,您可以与log4net或nlog一起使用. 您可以查看此示例以了解详细信息.
如果程序在短时间内生成大量日志,例如每分钟数千个日志. 这时,您需要使用内存中的存储事件,以便客户端不将事件序列化到磁盘,这样会更快. 这样,您可以使用Log4net或Nlog将某些事件存储到磁盘,并将无异常事件存储在内存中.
using Exceptionless;
ExceptionlessClient.Default.Configuration.UseInMemoryStorage();
摘要
本文主要介绍Exceptionless,然后介绍Exceptionless如何发送日志.
由于Exceptionless网站目前在国外,并且该网站中调用了一些Google API,因此在中国访问可能会有些麻烦. 您首先可以科学地体验这些功能. 毕竟,Exceptionless是开源且免费的,并且服务器也可以在本地部署.
如果您认为本文对您有所帮助,并希望更多的人了解Exceptionless,请多谢您的帮助.
如果您对Exceptionless感兴趣或想学习Exceptionless的代码,可以加入该小组.
无与伦比的QQ组: 330316486.
本文的地址:
作者博客: Savorboard
欢迎转载,请在明显的位置注明出处和链接
YGBOOK小说采集系统
采集交流 • 优采云 发表了文章 • 0 个评论 • 625 次浏览 • 2020-08-07 11:19
正式介绍
YGBOOK小说采集系统是一种基于ThinkPHP + MySQL技术开发的小说网站系统,提供了轻量级的小说网站解决方案.
软件功能
1. 自动采集2345种导航小说的数据,内置的采集规则,无需您自己进行管理
2. 数据存储,无需担心目标站的版本或挂断
3. 网站本身提供小说的介绍和章节列表的显示,并且章节阅读采用跳转到原创站点的方式来避免版权问题
4. 它具有伪静态功能,但不能自由定制,没有手机版本,没有站点搜索,没有站点地图,没有结构化数据
YGBOOK是基于ThinkPHP + MYSQL开发的,可以在大多数普通服务器上运行.
例如Windows服务器,IIS + PHP + MYSQL,
Linux服务器,Apache / Nginx + PHP + MYSQL
强烈建议使用Linux服务器,这样可以发挥更大的性能优势
在软件方面,PHP需要版本5.3或更高版本,并且不能在低于5.3的版本上运行.
在硬件方面,具有常规配置的虚拟主机可以正常运行系统,并且最好有服务器.
有关伪静态配置,请参阅压缩包中的txt文件. 针对不同环境有不同的配置说明(内置的.htacess文件已针对兼容性进行了重新优化,并解决了apache + nts模式下可能出现的“未指定输入文件. ”问题. )
安装步骤:
1. 解压缩文件并将其上传到相应的目录等.
2. 必须先使用伪静态配置网站(请参阅上一步中的配置),然后才能正常安装和使用网站(第一次访问首页时,您将自动进入安装页面,或手动输入域名) .com / install)
3. 同意使用该协议进入下一步以检查目录权限
<p>4. 测试通过后,填写常规数据库配置项,填写正确,安装成功,安装成功后,将自动进入后台页面域名.com / admin,并填写后台管理员和安装期间输入的用于登录的密码 查看全部
YGBOOK是用于新颖网站的新颖采集软件. 您可以通过YGBOOK直接从其他网站采集新颖数据. 它功能强大且易于使用. 这是一个非常好的网站小说采集器. 朋友,不要错过它.
正式介绍
YGBOOK小说采集系统是一种基于ThinkPHP + MySQL技术开发的小说网站系统,提供了轻量级的小说网站解决方案.
软件功能
1. 自动采集2345种导航小说的数据,内置的采集规则,无需您自己进行管理
2. 数据存储,无需担心目标站的版本或挂断
3. 网站本身提供小说的介绍和章节列表的显示,并且章节阅读采用跳转到原创站点的方式来避免版权问题
4. 它具有伪静态功能,但不能自由定制,没有手机版本,没有站点搜索,没有站点地图,没有结构化数据
YGBOOK是基于ThinkPHP + MYSQL开发的,可以在大多数普通服务器上运行.
例如Windows服务器,IIS + PHP + MYSQL,
Linux服务器,Apache / Nginx + PHP + MYSQL
强烈建议使用Linux服务器,这样可以发挥更大的性能优势
在软件方面,PHP需要版本5.3或更高版本,并且不能在低于5.3的版本上运行.
在硬件方面,具有常规配置的虚拟主机可以正常运行系统,并且最好有服务器.
有关伪静态配置,请参阅压缩包中的txt文件. 针对不同环境有不同的配置说明(内置的.htacess文件已针对兼容性进行了重新优化,并解决了apache + nts模式下可能出现的“未指定输入文件. ”问题. )
安装步骤:
1. 解压缩文件并将其上传到相应的目录等.
2. 必须先使用伪静态配置网站(请参阅上一步中的配置),然后才能正常安装和使用网站(第一次访问首页时,您将自动进入安装页面,或手动输入域名) .com / install)
3. 同意使用该协议进入下一步以检查目录权限
<p>4. 测试通过后,填写常规数据库配置项,填写正确,安装成功,安装成功后,将自动进入后台页面域名.com / admin,并填写后台管理员和安装期间输入的用于登录的密码
蓝橙网站信息采集系统下载
采集交流 • 优采云 发表了文章 • 0 个评论 • 346 次浏览 • 2020-08-06 18:07
Blue Orange网站信息采集系统的主要功能:
1. 支持登录网站采集,提交采集,脚本网页采集,动态网页采集; 2.该软件具有内置的多个采集模板,可以在不了解太多技术的情况下使用方便,简单实用. 3.多线程访问技术,您可以在几分钟内下载整个网站页面; 4.采集的数据支持EXCEL导出,还支持自动保存到SQL数据库; 5.无论新闻,论坛,视频,黄页,图片,下载如何. 对于类似的网站,只要可以通过浏览器看到的结构化内容,通过指定匹配规则,就可以采集所需的内容. 在采集过程中,可以动态保存FLV,Flashget,Thunder,快速广播,图片和客户公司的姓名,联系人,电话,手机,QQ号码,电子邮件地址,MP3,视频和其他下载地址,并对它们进行分类; 6,软件可以自动跳过网站的会员帐号认证,以采集需要认证的动态数据; 7,该软件支持二次分析,可以对初次采集后的数据进行分析,处理和过滤,以获取有价值,准确的数据; 8,软件采用全自动采集方式,无需人工操作; 9.可以根据自己的需要设置. 自动采集关键词和链接; 10.能够按组发送电子邮件. 查看全部
Blue Orange网站信息采集系统是一个完全自主开发的网络信息采集,处理和发布工具!用户可以根据设置的规则自动分批采集网页,论坛,博客等内容,并对采集到的数据进行处理后保存到数据库或发布到网站.
Blue Orange网站信息采集系统的主要功能:
1. 支持登录网站采集,提交采集,脚本网页采集,动态网页采集; 2.该软件具有内置的多个采集模板,可以在不了解太多技术的情况下使用方便,简单实用. 3.多线程访问技术,您可以在几分钟内下载整个网站页面; 4.采集的数据支持EXCEL导出,还支持自动保存到SQL数据库; 5.无论新闻,论坛,视频,黄页,图片,下载如何. 对于类似的网站,只要可以通过浏览器看到的结构化内容,通过指定匹配规则,就可以采集所需的内容. 在采集过程中,可以动态保存FLV,Flashget,Thunder,快速广播,图片和客户公司的姓名,联系人,电话,手机,QQ号码,电子邮件地址,MP3,视频和其他下载地址,并对它们进行分类; 6,软件可以自动跳过网站的会员帐号认证,以采集需要认证的动态数据; 7,该软件支持二次分析,可以对初次采集后的数据进行分析,处理和过滤,以获取有价值,准确的数据; 8,软件采用全自动采集方式,无需人工操作; 9.可以根据自己的需要设置. 自动采集关键词和链接; 10.能够按组发送电子邮件.
快速折扣淘宝折扣系统(免费API自动采集)
采集交流 • 优采云 发表了文章 • 0 个评论 • 294 次浏览 • 2020-08-06 18:07
“快速折扣淘宝折扣系统V2.5免费API集合”是适合淘宝促销折扣商品的程序. 老手和新手都可以在短时间内赚到很多佣金. 它不同于广泛的淘宝访客单一产品推广网站. 该程序可以手动添加产品,还配备了功能强大的多功能收款插件,多种收款方案,内置9.9元,19.9元免运费收款规则,可以收款,也可以自定义收款规则,自动无人值守集合无需手动维护即可更新网站. 默认提供精美的页面设计模板,超级用户访问体验,超高转化率. 它对搜索引擎友好,并且对整个站点都具有伪静态技术. 它具有快速的访问速度,无需等待很长时间即可生成HTML页面. 后台傻瓜式操作,简洁明了,是淘宝客座网站管理员在2013年推荐的最新单品促销计划.
程序前端演示:
程序后台演示:
后台用户: 演示密码: kuaidazhe
程序功能:
1. 解决了淘宝API的新限制,包括淘宝的收款功能,内置功能强大的多任务收款插件,内置多个收款规则如9.9 / 19.9元免运费,用户还可以自定义收款规则,多次收款程序. 可以采集包括婴儿业务,婴儿详细信息,婴儿评论等在内的信息. 定期且定量地无人值守自动采集和更新网站内容,等待佣金.
第二,您可以手动添加和编辑婴儿信息,也可以在后台直接输入高权限婴儿连接地址,自动获取婴儿信息并自动添加婴儿数据!清楚地,快乐地享受高收入!
3. 前台集成了商户注册和提交活动中心. 淘宝商家可以一键登录以发布产品信息. 只需输入商家的婴儿地址即可,它简单快捷,无需手动输入信息!
四个独立的高级数据统计分析功能,可以统计和监视网站中类别,关键字,企业,婴儿等的点击数据,及时了解热门点击产品,及时调整热门产品,以及开展新的促销创意.
5. 内置广告管理系统. 网站的后端具有添加广告代码的功能. 您可以添加来自各种联盟(例如Google Adsense和百度联盟)的广告,以帮助您增加广告收入,并增加淘宝客户的收入.
6. 可以使用诸如友谊连接,网站名称,域名,关键字,网站描述,模板选择,淘宝客户PID,淘宝API,网站统计代码和记录号等参数配置网站背景.
七,后台配置QQ /淘宝/微博免注册一键登录界面,产品页面集成多方留言板,后台自定义设置首页幻灯片放映,友情连接等.
8. 该程序由Php + Mysql独立开发,在安全性和网站程序性能方面都非常出色. 面对中型和大型数据量,该程序可以正常运行. 整个站点的前端采用最新的HTM5,DIV + CSS进行建筑设计,风格清新美丽,用户体验极佳.
环境要求:
PHP5.2 + MYSQL + ZEND OPTIMIZER 3.3
此版本为php5.2版本,如果需要php5.3版本,请到官方网站下载!谢谢您的支持!
V2.5升级日志:
1. 修复已知的错误
2. 优化网站网页的URL并添加.html后缀
3. 优化核心采集算法以提高采集效率
4. 为采集的数据添加折扣信息
5. 优化模板以增强用户的购买意愿 查看全部
程序简介:
“快速折扣淘宝折扣系统V2.5免费API集合”是适合淘宝促销折扣商品的程序. 老手和新手都可以在短时间内赚到很多佣金. 它不同于广泛的淘宝访客单一产品推广网站. 该程序可以手动添加产品,还配备了功能强大的多功能收款插件,多种收款方案,内置9.9元,19.9元免运费收款规则,可以收款,也可以自定义收款规则,自动无人值守集合无需手动维护即可更新网站. 默认提供精美的页面设计模板,超级用户访问体验,超高转化率. 它对搜索引擎友好,并且对整个站点都具有伪静态技术. 它具有快速的访问速度,无需等待很长时间即可生成HTML页面. 后台傻瓜式操作,简洁明了,是淘宝客座网站管理员在2013年推荐的最新单品促销计划.
程序前端演示:
程序后台演示:
后台用户: 演示密码: kuaidazhe
程序功能:
1. 解决了淘宝API的新限制,包括淘宝的收款功能,内置功能强大的多任务收款插件,内置多个收款规则如9.9 / 19.9元免运费,用户还可以自定义收款规则,多次收款程序. 可以采集包括婴儿业务,婴儿详细信息,婴儿评论等在内的信息. 定期且定量地无人值守自动采集和更新网站内容,等待佣金.
第二,您可以手动添加和编辑婴儿信息,也可以在后台直接输入高权限婴儿连接地址,自动获取婴儿信息并自动添加婴儿数据!清楚地,快乐地享受高收入!
3. 前台集成了商户注册和提交活动中心. 淘宝商家可以一键登录以发布产品信息. 只需输入商家的婴儿地址即可,它简单快捷,无需手动输入信息!
四个独立的高级数据统计分析功能,可以统计和监视网站中类别,关键字,企业,婴儿等的点击数据,及时了解热门点击产品,及时调整热门产品,以及开展新的促销创意.
5. 内置广告管理系统. 网站的后端具有添加广告代码的功能. 您可以添加来自各种联盟(例如Google Adsense和百度联盟)的广告,以帮助您增加广告收入,并增加淘宝客户的收入.
6. 可以使用诸如友谊连接,网站名称,域名,关键字,网站描述,模板选择,淘宝客户PID,淘宝API,网站统计代码和记录号等参数配置网站背景.
七,后台配置QQ /淘宝/微博免注册一键登录界面,产品页面集成多方留言板,后台自定义设置首页幻灯片放映,友情连接等.
8. 该程序由Php + Mysql独立开发,在安全性和网站程序性能方面都非常出色. 面对中型和大型数据量,该程序可以正常运行. 整个站点的前端采用最新的HTM5,DIV + CSS进行建筑设计,风格清新美丽,用户体验极佳.
环境要求:
PHP5.2 + MYSQL + ZEND OPTIMIZER 3.3
此版本为php5.2版本,如果需要php5.3版本,请到官方网站下载!谢谢您的支持!
V2.5升级日志:
1. 修复已知的错误
2. 优化网站网页的URL并添加.html后缀
3. 优化核心采集算法以提高采集效率
4. 为采集的数据添加折扣信息
5. 优化模板以增强用户的购买意愿
Blue Orange网站信息采集系统
采集交流 • 优采云 发表了文章 • 0 个评论 • 333 次浏览 • 2020-08-06 16:07
类似软件
版本说明
软件地址
Blue Orange网站信息采集系统的主要功能:
1. 支持登录网站采集,提交采集,脚本网页采集,动态网页采集; 2.该软件具有内置的多个采集模板,可以在不了解太多技术的情况下使用方便,简单实用. 3.多线程访问技术,您可以在几分钟内下载整个网站页面; 4.采集的数据支持EXCEL导出,还支持自动保存到SQL数据库; 5.无论新闻,论坛,视频,黄页,图片,下载如何. 对于类似的网站,只要可以通过浏览器看到的结构化内容,通过指定匹配规则,就可以采集所需的内容. 在采集过程中,可以动态保存FLV,Flashget,Thunder,快速广播,图片和客户公司的姓名,联系人,电话,手机,QQ号码,电子邮件地址,MP3,视频和其他下载地址,并对它们进行分类; 6,软件可以自动跳过网站的会员帐号认证,以采集需要认证的动态数据; 7,该软件支持二次分析,可以对初次采集后的数据进行分析,处理和过滤,以获取有价值,准确的数据; 8,软件采用全自动采集方式,无需人工操作; 9.可以根据自己的需要设置. 自动采集关键词和链接; 10.能够按组发送电子邮件. 查看全部
Blue Orange网站信息采集系统是一个完全自主开发的网络信息采集,处理和发布工具!用户可以根据设置的规则自动分批采集网页,论坛,博客等内容,并对采集到的数据进行处理后保存到数据库或发布到网站.
类似软件
版本说明
软件地址
Blue Orange网站信息采集系统的主要功能:
1. 支持登录网站采集,提交采集,脚本网页采集,动态网页采集; 2.该软件具有内置的多个采集模板,可以在不了解太多技术的情况下使用方便,简单实用. 3.多线程访问技术,您可以在几分钟内下载整个网站页面; 4.采集的数据支持EXCEL导出,还支持自动保存到SQL数据库; 5.无论新闻,论坛,视频,黄页,图片,下载如何. 对于类似的网站,只要可以通过浏览器看到的结构化内容,通过指定匹配规则,就可以采集所需的内容. 在采集过程中,可以动态保存FLV,Flashget,Thunder,快速广播,图片和客户公司的姓名,联系人,电话,手机,QQ号码,电子邮件地址,MP3,视频和其他下载地址,并对它们进行分类; 6,软件可以自动跳过网站的会员帐号认证,以采集需要认证的动态数据; 7,该软件支持二次分析,可以对初次采集后的数据进行分析,处理和过滤,以获取有价值,准确的数据; 8,软件采用全自动采集方式,无需人工操作; 9.可以根据自己的需要设置. 自动采集关键词和链接; 10.能够按组发送电子邮件.
WebRadar网络信息采集系统V1.1
采集交流 • 优采云 发表了文章 • 0 个评论 • 349 次浏览 • 2020-08-06 13:21
[基本介绍] WebRadar帮助用户从Internet采集信息. 它使用Internet爬虫技术从您感兴趣的任何网站采集和提取任何网页中的信息. 公司可以使用WebRadar采集商机信息或竞争情报,政府机构可以使用WebRadar监视民意,网站管理员可以使用WebRadar采集新闻或信息以丰富其网站等;只要您需要获取网络信息,WebRadar就能满足您的要求. [软件功能] 1.精确采集您可以精确控制采集任务. WebRadar可以设置信息的源网站,控制爬网程序的爬网路径和爬网的网页,指定网页中收录的关键字,甚至可以控制爬网程序的爬网速度和深度. 2.准确准确的提取WebRadar可以为您提取网页中的特定内容. 除了Web页面的常规标题,URL,关键字,文本内容和其他属性外,WebRadar还允许您自定义Web内容的提取规则以准确获取所需的信息. 3.快速,稳定WebRadar使用高效的编程语言来开发,高效运行和快速采集. 经过长期测试和使用,系统运行稳定. 4.智能-灵活地使用WebRadar采集的信息可以存储在本地,通过浏览器查看,或者由局域网或Internet中的内部和外部人员同时访问;您还可以定义发布规则,WebRadar可以直接使用该集合. 信息生成到网页文件中以进行发布;当然,采集到的信息也可以存储在本地或远程数据库中.
优采云采集器V2.8.0.0的免费安装版本
采集交流 • 优采云 发表了文章 • 0 个评论 • 284 次浏览 • 2020-08-06 10:02
软件功能
1. 零阈值: 如果您不了解网络抓取工具技术,则可以上网采集网站数据.
2. 多引擎,高速且稳定: 内置的高速浏览器引擎,还可以切换到HTTP引擎模式运行,采集数据更加高效. 它还具有内置的JSON引擎,无需分析JSON数据结构,直观地选择JSON内容.
3. 适用于各种网站: 它可以采集Internet上99%的网站,包括动态网站,例如单页应用程序Ajax加载.
软件功能
1. 该软件易于操作,并且可以通过单击鼠标轻松选择要捕获的内容;
2. 支持三种高速引擎: 浏览器引擎,HTTP引擎,JSON引擎,内置优化的Firefox浏览器以及原创内存优化,因此浏览器集合也可以高速运行,甚至可以快速转换为HTTP方式运行,享受更高的采集速度!捕获JSON数据时,您还可以使用浏览器可视化方法单击要用鼠标捕获的内容. 无需分析JSON数据结构,因此非网页专业设计人员可以轻松获取所需数据;
3. 无需分析网页请求和源代码,但它支持更多网页采集;
4. 先进的智能算法可以一键生成目标元素XPATH,自动识别网页列表,并自动识别分页中的下一页按钮.
5. 支持丰富的数据导出方法,可以通过以下方式将其导出到txt文件,html文件,csv文件,excel文件或现有数据库(如sqlite数据库,access数据库,sqlserver数据库,mysql数据库)中. 可以轻松导出到目标网站数据库.
软件优势
可视化向导: 所有集合元素将自动生成集合数据.
1. 预定任务: 灵活定义运行时间,全自动运行.
2. 多引擎支持: 支持多个采集引擎,内置的高速浏览器内核,HTTP引擎和JSON引擎.
3. 智能识别: 它可以自动识别网页列表,采集字段和分页.
4. 拦截请求: 自定义拦截域名,以方便过滤异地广告并提高采集速度.
5. 多种数据导出: 可以导出到Txt,Excel,MySQL,SQLServer,SQlite,Access,网站等. 查看全部
优采云采集器是一个非常实用的网页信息采集工具. 该工具界面简洁,操作简单,功能强大. 有了它,我们就可以采集所需网页上的所有信息,且阈值为零,新手用户可以使用它.

软件功能
1. 零阈值: 如果您不了解网络抓取工具技术,则可以上网采集网站数据.
2. 多引擎,高速且稳定: 内置的高速浏览器引擎,还可以切换到HTTP引擎模式运行,采集数据更加高效. 它还具有内置的JSON引擎,无需分析JSON数据结构,直观地选择JSON内容.
3. 适用于各种网站: 它可以采集Internet上99%的网站,包括动态网站,例如单页应用程序Ajax加载.
软件功能
1. 该软件易于操作,并且可以通过单击鼠标轻松选择要捕获的内容;
2. 支持三种高速引擎: 浏览器引擎,HTTP引擎,JSON引擎,内置优化的Firefox浏览器以及原创内存优化,因此浏览器集合也可以高速运行,甚至可以快速转换为HTTP方式运行,享受更高的采集速度!捕获JSON数据时,您还可以使用浏览器可视化方法单击要用鼠标捕获的内容. 无需分析JSON数据结构,因此非网页专业设计人员可以轻松获取所需数据;
3. 无需分析网页请求和源代码,但它支持更多网页采集;
4. 先进的智能算法可以一键生成目标元素XPATH,自动识别网页列表,并自动识别分页中的下一页按钮.
5. 支持丰富的数据导出方法,可以通过以下方式将其导出到txt文件,html文件,csv文件,excel文件或现有数据库(如sqlite数据库,access数据库,sqlserver数据库,mysql数据库)中. 可以轻松导出到目标网站数据库.
软件优势
可视化向导: 所有集合元素将自动生成集合数据.
1. 预定任务: 灵活定义运行时间,全自动运行.
2. 多引擎支持: 支持多个采集引擎,内置的高速浏览器内核,HTTP引擎和JSON引擎.
3. 智能识别: 它可以自动识别网页列表,采集字段和分页.
4. 拦截请求: 自定义拦截域名,以方便过滤异地广告并提高采集速度.
5. 多种数据导出: 可以导出到Txt,Excel,MySQL,SQLServer,SQlite,Access,网站等.
Little Xiong Xiong免费漫画CMS程序,漫画串行CMS开源并免费使用,包括系统采集API
采集交流 • 优采云 发表了文章 • 0 个评论 • 278 次浏览 • 2020-08-06 07:03
备注: 我最近想开个漫画站,所以我找到了一个很好的系统Xiaoxiong Xiong Comics CMS,它是免费的,基于ThinkPHP 5.1和Redis缓存,它随附有Youcai Cloud API,以方便我们采集和发布,功能只是不多说,您可以看到下面的截图,几乎与漫画系统相似. 作者也正在积极更新,似乎他计划加入会员系统和其他职能,所以我将在此处发布.
环境要求: PHP 5.6-7.2,MySQL> = 5.7,Redis,Redis扩展
这是一条简单的路线,使用宝塔面板进行演示
安装宝塔后,进入面板,单击左侧的软件管理,然后安装PHP 7.2,Nginx,Mysql 5.7 +,Redis.
2,安装程序
让我们单击左侧的网站以添加网站!我不需要教这个! ! !
如果不能,请稍后观看我的视频教程! ! !
,设置伪静态
单击“域设置”-“网站目录”,运行目录以选择“公共”,然后删除“反跨站点”复选框并重新启动PHP. 然后单击伪静态并输入以下代码:
if (!-e $request_filename) {
rewrite ^(.*)$ /index.php?s=/$1 last;
break;
}
然后打开您的网站/ install以开始安装过程.
如果要启用404而不显示cms错误消息,则需要修改config / app.php文件:
#删除第一行中的//.
‘exception_tmpl’ => Env::get(‘app_path’) . ‘index/view/pub/404.html’,
‘exception_tmpl’ => Env::get(‘think_path’) . ‘tpl/think_exception.tpl’,
采集
在正常情况下,漫画网站中有两种类型的图片资源,一种是本地化的,另一种是热链接的. 建议对图片进行本地化以确保网站资源的稳定性,并且该程序还提供了优采云的采集器的API可以轻松地连接到优采云采集器以采集漫画和章节图片.
首先,我们需要一个优采云采集器,但是它分为免费版和付费版,但是由于某些功能限制,免费版不能满足图像本地化的需求,因此暂时不适用. 如果有钱,您可以购买A付费版本,但如果没有钱,也可以. 您可以直接使用优采云V7.6企业破解版. 最新的破解版本也可以满足程序的采集需求
可以下载管理员设置 查看全部


备注: 我最近想开个漫画站,所以我找到了一个很好的系统Xiaoxiong Xiong Comics CMS,它是免费的,基于ThinkPHP 5.1和Redis缓存,它随附有Youcai Cloud API,以方便我们采集和发布,功能只是不多说,您可以看到下面的截图,几乎与漫画系统相似. 作者也正在积极更新,似乎他计划加入会员系统和其他职能,所以我将在此处发布.
环境要求: PHP 5.6-7.2,MySQL> = 5.7,Redis,Redis扩展
这是一条简单的路线,使用宝塔面板进行演示
安装宝塔后,进入面板,单击左侧的软件管理,然后安装PHP 7.2,Nginx,Mysql 5.7 +,Redis.
2,安装程序
让我们单击左侧的网站以添加网站!我不需要教这个! ! !
如果不能,请稍后观看我的视频教程! ! !
,设置伪静态
单击“域设置”-“网站目录”,运行目录以选择“公共”,然后删除“反跨站点”复选框并重新启动PHP. 然后单击伪静态并输入以下代码:
if (!-e $request_filename) {
rewrite ^(.*)$ /index.php?s=/$1 last;
break;
}
然后打开您的网站/ install以开始安装过程.
如果要启用404而不显示cms错误消息,则需要修改config / app.php文件:
#删除第一行中的//.
‘exception_tmpl’ => Env::get(‘app_path’) . ‘index/view/pub/404.html’,
‘exception_tmpl’ => Env::get(‘think_path’) . ‘tpl/think_exception.tpl’,
采集
在正常情况下,漫画网站中有两种类型的图片资源,一种是本地化的,另一种是热链接的. 建议对图片进行本地化以确保网站资源的稳定性,并且该程序还提供了优采云的采集器的API可以轻松地连接到优采云采集器以采集漫画和章节图片.
首先,我们需要一个优采云采集器,但是它分为免费版和付费版,但是由于某些功能限制,免费版不能满足图像本地化的需求,因此暂时不适用. 如果有钱,您可以购买A付费版本,但如果没有钱,也可以. 您可以直接使用优采云V7.6企业破解版. 最新的破解版本也可以满足程序的采集需求
可以下载管理员设置
飞来地图大数据采集系统免费版
采集交流 • 优采云 发表了文章 • 0 个评论 • 528 次浏览 • 2020-08-06 07:03
软件简介
Feilai Maps大数据采集软件是一款可根据百度地图,高德地图,腾讯地图,谷歌地图,关键字,地区和行业以及自定义搜索条件准确采集商业意图的软件. 用于客户联系信息的营销软件. 可以采集公司名称,联系人,手机号码以及公司行业和地址. 采集的数据庞大,准确,并及时更新. 它是您进行微信营销,电话营销,SMS组发送和电子邮件组发送的必备软件.
软件功能
1. 实时采集,不是历史数据,而是官方网站上的最新POI数据.
2. 该操作简单易用,傻瓜式操作,分三个步骤完成(配置城市和行业词汇;单击以开始采集;导出数据). 无需手动编写任何规则. 操作就是这么简单. 3.支持国家,多省/多城市采集. (同时在多个城市中使用多个关键字)使搜索更加“简单,快速,有效”.
4. 快速搜索,极快的操作体验,流畅舒适.
5. 如果您一次从整个国家或多个省市采集数据,则可以为每个省市生成Excel文件. (行业独有)
6. 采集效率和数据完整性领先业界.
7. 及时处理客户反馈和建议还使该软件能够很好地处理许多细节.
8. 具有自动升级功能: 新版本正式发布后,客户端打开后将自动升级到最新版本.
软件功能
1. 五个地图数据已集成在一起,数据更加全面.
2. 内置数据库支持数十万个数据.
3. 多种采集算法可采集更多数据.
4. 数据存储功能,意外关闭或下次数据仍打开
5. 一键导出到CSV,EXCEL,VCF和其他文件.
6. 可以将VCF文件导入到电话通讯簿中,方便,快捷
7. 可能是最完善的地图采集软件.
软件功能
1. 数据采集,准确定位,准确数据,并且易于使用.
2. 搜索结果包括电话号码和特定地址.
功能
小巧,美观,简单,高效,出色的性能
Quakewang大数据采集系统,界面极为简洁,没有多余的东西,操作非常简单,人性化,但性能出色,具有良好的用户体验,并实现了大数据采集系统快速自动采集业务信息,以帮助客户快速采集准确的客户信息
大数据挖掘和云计算技术
Mookewang的大数据采集系统是2018年的最新技术,它基于百度地图上披露的最新业务或公司信息,并通过大数据挖掘和云计算技术,准确匹配了城市关键字和行业关键字.
覆盖全国1,000多个县市
Quakewang大数据采集系统,覆盖全国近1000个地市及市级以上的城市,具有覆盖面广,海量最新业务数据信息数据库,通过大数据和云计算技术,快速处理分类,精确匹配
在360个行业中准确匹配数万个关键字
Quakewang大数据采集系统,涵盖360个行业和数以万计的关键字,用于精确匹配搜索,您可以选择座机或手机号码,并以最快的速度准确定位目标企业客户群,真正实现精准营销
更新日志
1. 增加登录界面的日志查看功能
2. 解决搜狗数据无法采集的问题
特殊说明 查看全部

软件简介
Feilai Maps大数据采集软件是一款可根据百度地图,高德地图,腾讯地图,谷歌地图,关键字,地区和行业以及自定义搜索条件准确采集商业意图的软件. 用于客户联系信息的营销软件. 可以采集公司名称,联系人,手机号码以及公司行业和地址. 采集的数据庞大,准确,并及时更新. 它是您进行微信营销,电话营销,SMS组发送和电子邮件组发送的必备软件.
软件功能
1. 实时采集,不是历史数据,而是官方网站上的最新POI数据.
2. 该操作简单易用,傻瓜式操作,分三个步骤完成(配置城市和行业词汇;单击以开始采集;导出数据). 无需手动编写任何规则. 操作就是这么简单. 3.支持国家,多省/多城市采集. (同时在多个城市中使用多个关键字)使搜索更加“简单,快速,有效”.
4. 快速搜索,极快的操作体验,流畅舒适.
5. 如果您一次从整个国家或多个省市采集数据,则可以为每个省市生成Excel文件. (行业独有)
6. 采集效率和数据完整性领先业界.
7. 及时处理客户反馈和建议还使该软件能够很好地处理许多细节.
8. 具有自动升级功能: 新版本正式发布后,客户端打开后将自动升级到最新版本.

软件功能
1. 五个地图数据已集成在一起,数据更加全面.
2. 内置数据库支持数十万个数据.
3. 多种采集算法可采集更多数据.
4. 数据存储功能,意外关闭或下次数据仍打开
5. 一键导出到CSV,EXCEL,VCF和其他文件.
6. 可以将VCF文件导入到电话通讯簿中,方便,快捷
7. 可能是最完善的地图采集软件.
软件功能
1. 数据采集,准确定位,准确数据,并且易于使用.
2. 搜索结果包括电话号码和特定地址.
功能
小巧,美观,简单,高效,出色的性能
Quakewang大数据采集系统,界面极为简洁,没有多余的东西,操作非常简单,人性化,但性能出色,具有良好的用户体验,并实现了大数据采集系统快速自动采集业务信息,以帮助客户快速采集准确的客户信息
大数据挖掘和云计算技术
Mookewang的大数据采集系统是2018年的最新技术,它基于百度地图上披露的最新业务或公司信息,并通过大数据挖掘和云计算技术,准确匹配了城市关键字和行业关键字.
覆盖全国1,000多个县市
Quakewang大数据采集系统,覆盖全国近1000个地市及市级以上的城市,具有覆盖面广,海量最新业务数据信息数据库,通过大数据和云计算技术,快速处理分类,精确匹配
在360个行业中准确匹配数万个关键字
Quakewang大数据采集系统,涵盖360个行业和数以万计的关键字,用于精确匹配搜索,您可以选择座机或手机号码,并以最快的速度准确定位目标企业客户群,真正实现精准营销
更新日志
1. 增加登录界面的日志查看功能
2. 解决搜狗数据无法采集的问题
特殊说明
六个免费网站数据采集器(优采云,haia,cloud collection,ET,三个人,youcai cloud collection)的比较
采集交流 • 优采云 发表了文章 • 0 个评论 • 336 次浏览 • 2020-08-06 04:11
让我们对这些采集工具进行简单的比较.
1. 优采云
优采云应该是国内采集软件的成功范例之一,并且用户数量(包括收费用户)应该是最大的.
功能: 强大的功能,快速的速度,支持最多的网站以及丰富的扩展名.
优点: 功能齐全,采集速度较快,主要用于CMS,可在短时间内采集很多,过滤和更换都很好,更详细;许多人编写接口,规则和发布模块,并且接口相对完整. 支持的扩展非常易于使用,如果您是技术熟练的网站管理员,则可以使用PHP或C#开发任何功能扩展;附件采集功能非常完美.
缺点: 采集规则的汇编对于许多网站管理员而言并不是一个小门槛. 随着更多功能和更大软件的使用,内存和CPU资源将被更多占用,并且资源回收也无法得到很好的控制. 另外,绑定计算机的授权有时不方便. 它只能在Windows平台上使用,没有Linux版本.
技术: 论坛和许多帮助文件主要支持该技术. 有收费和免费版本.
优采云官方网站
2. 海纳
功能: 关键字捕获,您无需编写规则即可预览采集的内容.
优点: 它可以在网站上抓取很多关键字文章,这似乎很适合网站的主题,尤其是文章和博客.
缺点: 分类不便,即采集的文章不方便分类,手册(自动容易混淆),特定的界面,采集的内容有限,一次只能采集一次,分批采集是不可能的,它需要连接到网站的后端网页. 在安装过程中,需要海纳技术人员的现场技术支持很麻烦.
技术: 没有论坛. 收费,免费功能过于严格,就像鸡肋一样.
海纳官方网站
3. 云采集
功能: 优采云和海纳的优势完美融合,功能强大,速度快,关键字捕获,无需编写规则. 提供一个基于Web的界面,供第三方致电以进行创新.
优点: 功能强大,无需编写任何规则,易于使用,具有多线程,快速,可采集多个关键字,批量采集和批量存储,傻瓜采集,时间采集和发布,没有人值班,适合网站主题. 它可以与任何CMS紧密集成,例如PHP,ASP.NET(C#),JSP,Ruby等开发的CMS. 与网站的后端通道无缝对接,以方便文章发布. 安装简单,并且支持Windows和Linux.
缺点: 尽管它也相对知名,但是与优采云和Heina相比它具有相对较短的开发时间和相对先进的技术. 偶尔采集的内容不准确,但易于纠正和调整.
技术: QQ技术支持,论坛,微博. 有永久免费版和付费版. 付费版本还可以通过嵌入式代码资源交换免费使用,这非常灵活.
Cloud Collection官方网站
4.ET工具
特征: 无人看管,稳定,资源使用最少,基本安静.
优点: 无人值守,自动更新,用户群主要集中在长期潜水站长. 该软件清晰明了,所需功能也很完善,该软件是免费的,听说已经添加了中英文翻译功能的集合.
缺点: 对论坛和CMS的支持是平均水平.
技术: 论坛支持,该软件本身是免费的,但也提供付费服务. 帮助文件很少,上手并不容易.
ET官方网站
5. 三人排队
主要用于论坛集合,功能比较齐全. 首先,我不知道三星和优采云之间的关系是什么,但是界面和功能都不是同一模型.
功能: 对于大型论坛,移动,移动,快速而准确.
优点: 仍然适用于论坛,适用于论坛.
技术: 付费技术,免费广告.
缺点: 超级复杂,难以上手,并且对CMS的支持不佳.
三星官方网站
6. 优采云
功能: 允许您的新论坛在开始时拥有大量成员.
优点: 非常适合采集discuz论坛.
缺点: 过于具体且不兼容.
优采云官方网站
摘要: 追求简单易用,功能更完整的您可以选择云集合. 如果您想要一个非常完整的功能,则可以选择优采云. Cloud Collection和Youcai Cloud都可以快速采集大量资源来丰富网站内容. 如果您是论坛,请选择一个三人小组,该小组可以实现许多论坛功能,例如采集论坛,回复和移动. 对于长期站点,您可以选择ET或云集合. 花一些时间和理解是一个长期的好处. 它们都可以像打开QQ一样长时间运行,没有内存,并自动采集和更新. 至于海纳尔,他似乎没有编写规则,入门起来也很容易,但是发表文章则比较麻烦. 另外,这里仅提及六个主要采集工具. 实际上,还有网络矿工,网络神,易采矿,gooseeker,soukey,存钱罐采集器,超级采集器,千帆采集器等. 这些采集器也各有优缺点. ,但总的来说,它属于获取工具领域的第二梯队,因此我不再赘述. . . . . 查看全部
在当前的网站站长圈子中,有更多受欢迎的采集工具,但总而言之,还有一些较有名的免费工具: 优采云,Haina,Cloud Collection,ET,Threesome,Youcai cloud.
让我们对这些采集工具进行简单的比较.
1. 优采云
优采云应该是国内采集软件的成功范例之一,并且用户数量(包括收费用户)应该是最大的.
功能: 强大的功能,快速的速度,支持最多的网站以及丰富的扩展名.
优点: 功能齐全,采集速度较快,主要用于CMS,可在短时间内采集很多,过滤和更换都很好,更详细;许多人编写接口,规则和发布模块,并且接口相对完整. 支持的扩展非常易于使用,如果您是技术熟练的网站管理员,则可以使用PHP或C#开发任何功能扩展;附件采集功能非常完美.
缺点: 采集规则的汇编对于许多网站管理员而言并不是一个小门槛. 随着更多功能和更大软件的使用,内存和CPU资源将被更多占用,并且资源回收也无法得到很好的控制. 另外,绑定计算机的授权有时不方便. 它只能在Windows平台上使用,没有Linux版本.
技术: 论坛和许多帮助文件主要支持该技术. 有收费和免费版本.
优采云官方网站
2. 海纳
功能: 关键字捕获,您无需编写规则即可预览采集的内容.
优点: 它可以在网站上抓取很多关键字文章,这似乎很适合网站的主题,尤其是文章和博客.
缺点: 分类不便,即采集的文章不方便分类,手册(自动容易混淆),特定的界面,采集的内容有限,一次只能采集一次,分批采集是不可能的,它需要连接到网站的后端网页. 在安装过程中,需要海纳技术人员的现场技术支持很麻烦.
技术: 没有论坛. 收费,免费功能过于严格,就像鸡肋一样.
海纳官方网站
3. 云采集
功能: 优采云和海纳的优势完美融合,功能强大,速度快,关键字捕获,无需编写规则. 提供一个基于Web的界面,供第三方致电以进行创新.
优点: 功能强大,无需编写任何规则,易于使用,具有多线程,快速,可采集多个关键字,批量采集和批量存储,傻瓜采集,时间采集和发布,没有人值班,适合网站主题. 它可以与任何CMS紧密集成,例如PHP,ASP.NET(C#),JSP,Ruby等开发的CMS. 与网站的后端通道无缝对接,以方便文章发布. 安装简单,并且支持Windows和Linux.
缺点: 尽管它也相对知名,但是与优采云和Heina相比它具有相对较短的开发时间和相对先进的技术. 偶尔采集的内容不准确,但易于纠正和调整.
技术: QQ技术支持,论坛,微博. 有永久免费版和付费版. 付费版本还可以通过嵌入式代码资源交换免费使用,这非常灵活.
Cloud Collection官方网站
4.ET工具
特征: 无人看管,稳定,资源使用最少,基本安静.
优点: 无人值守,自动更新,用户群主要集中在长期潜水站长. 该软件清晰明了,所需功能也很完善,该软件是免费的,听说已经添加了中英文翻译功能的集合.
缺点: 对论坛和CMS的支持是平均水平.
技术: 论坛支持,该软件本身是免费的,但也提供付费服务. 帮助文件很少,上手并不容易.
ET官方网站
5. 三人排队
主要用于论坛集合,功能比较齐全. 首先,我不知道三星和优采云之间的关系是什么,但是界面和功能都不是同一模型.
功能: 对于大型论坛,移动,移动,快速而准确.
优点: 仍然适用于论坛,适用于论坛.
技术: 付费技术,免费广告.
缺点: 超级复杂,难以上手,并且对CMS的支持不佳.
三星官方网站
6. 优采云
功能: 允许您的新论坛在开始时拥有大量成员.
优点: 非常适合采集discuz论坛.
缺点: 过于具体且不兼容.
优采云官方网站
摘要: 追求简单易用,功能更完整的您可以选择云集合. 如果您想要一个非常完整的功能,则可以选择优采云. Cloud Collection和Youcai Cloud都可以快速采集大量资源来丰富网站内容. 如果您是论坛,请选择一个三人小组,该小组可以实现许多论坛功能,例如采集论坛,回复和移动. 对于长期站点,您可以选择ET或云集合. 花一些时间和理解是一个长期的好处. 它们都可以像打开QQ一样长时间运行,没有内存,并自动采集和更新. 至于海纳尔,他似乎没有编写规则,入门起来也很容易,但是发表文章则比较麻烦. 另外,这里仅提及六个主要采集工具. 实际上,还有网络矿工,网络神,易采矿,gooseeker,soukey,存钱罐采集器,超级采集器,千帆采集器等. 这些采集器也各有优缺点. ,但总的来说,它属于获取工具领域的第二梯队,因此我不再赘述. . . . .
ptcms采集系统的官方版本
采集交流 • 优采云 发表了文章 • 0 个评论 • 475 次浏览 • 2020-08-05 12:51
ptcms采集系统是基于PTFramework框架的全自动采集系统. 其功能是实现新型cms系统的资源自动采集. 这次,我们将为您带来ptcms集合系统源代码的破解版的下载,以及详细的安装教程. 需要cms系统助手的朋友不妨尝试一下! ptcms功能: PT单一新颖的程序响应式布局,多屏适配,云采集,站点范围的HTML,可让您快速构建站点! PT模仿站工具箱可远程打包和下载各种资源,例如CSS,图片等,从而使模仿站变得越来越简单. 网站定制服务的专业技术团队将竭诚为您服务. 我们为您提供程序定制,二次开发和模板设计. 可靠的安全保护基于PTFramework框架,严格的代码编写可确保系统安全,可靠和稳定地运行. ptcms安装教程: 1.环境要求linux + nginx + php5.6 + mysql5 + Memcache 2.建议安装宝塔linux系统环境并建一个网站. 文件夹工具下的nginx.conf的内容是伪静态添加的: Markupif(!-e $ request_filename){?rewrite ^ /(. *)/index.phps=$1 last; 3.授予目录777的权限,否则将无法安装和自动采集新颖网站的源代码. 4.构建它之后,直接打开您的网站并根据提示输入名称,数据库链接信息,设置网站后端帐户密码... 5.然后转到后端以配置采集信息或导入采集规则,并添加任务. 慢慢学习. 6.一些小错误,由于个人能力有限,如果大个子修复,请记住与我分享,谢谢~~ 7. PC站和WAP站的域名是分开的,设置在后台〜新颖cms捕获相关视频: ptcms平台简介: PTCMS成立于2009年12月,主要从事软件开发,程序定制,网络获取,电子商务,搜索引擎优化和其他方面的研发. 2014年,我们成立了一个新团队,成员来自百度,新浪,360,移动和其他主要公司. 我们将继续整合多种资源,完善产品结构体系,并继续以原创内容发布程序为主要方向,依靠强大,稳定,高负荷的PTCMS FrameWork作为核心软件框架,努力注入新的活力. 进入互联网. 软件截图2
下载了Kucai信息采集系统的人也下载了它
采集交流 • 优采云 发表了文章 • 0 个评论 • 394 次浏览 • 2020-08-07 23:48
支持多种编码: GBK,BIG5,UNICODE和UTF8.
支持多种网站类型: 包括HTML,Rss和Ajax.
网站登录验证: 支持网站登录和网站Cookie,即使需要验证码才能登录的网站也可以轻松通过.
自定义采集规则: 通过采集规则的定义,您几乎可以从所有网站搜索所需的任何内容.
智能采集和识别: 系统将识别网页上的图片,FLASH,PDF,MP3,视频,JavaScript链接,电子邮件,电话号码等,并将其下载或保存到库中.
任务计划和信息监视: 可以定期启动系统以完成采集工作;您还可以锁定某个网页,并仅在找到必要的链接以实现信息监视功能时采集.
条件采集: 可以在采集过程中设置某些条件或关键字. 也就是说,需要的东西被采集了,不需要的东西没有被采集.
分页采集: 它可以采集分页的网页,并合并多个页面的内容以进行处理.
数据自动重新加权: 默认情况下,系统将处理重复的网页,您还可以自定义其他字段的重新加权设置.
数据格式处理: 可以保留或删除所采集内容的段落格式,并且可以更改所收录图片或附件的路径(例如将下载的图片路径更改为本地路径)
多线程和多任务: 可以同时启动多个线程,并且多个任务可以协同工作而不会相互干扰;可以根据系统性能随时添加或减少线程数,以最大化其工作效率.
所见即所得: 您可以实时查看采集的数据,错误信息和线程工作信息.
<p>自动数据保存: 实时构建采集的数据并将其保存在系统自己的数据库中(用户也可以自定义数据库,但是表和字段的创建由系统完成),而无需手动设置... 查看全部
酷!它是一款功能强大的软件产品,可以采集和挖掘Internet信息并同时更新数据库. 它使我们摆脱了许多简单而繁琐的复制和粘贴工作,并使我们能够在短时间内拥有大量数据.
支持多种编码: GBK,BIG5,UNICODE和UTF8.
支持多种网站类型: 包括HTML,Rss和Ajax.
网站登录验证: 支持网站登录和网站Cookie,即使需要验证码才能登录的网站也可以轻松通过.
自定义采集规则: 通过采集规则的定义,您几乎可以从所有网站搜索所需的任何内容.
智能采集和识别: 系统将识别网页上的图片,FLASH,PDF,MP3,视频,JavaScript链接,电子邮件,电话号码等,并将其下载或保存到库中.
任务计划和信息监视: 可以定期启动系统以完成采集工作;您还可以锁定某个网页,并仅在找到必要的链接以实现信息监视功能时采集.
条件采集: 可以在采集过程中设置某些条件或关键字. 也就是说,需要的东西被采集了,不需要的东西没有被采集.
分页采集: 它可以采集分页的网页,并合并多个页面的内容以进行处理.
数据自动重新加权: 默认情况下,系统将处理重复的网页,您还可以自定义其他字段的重新加权设置.
数据格式处理: 可以保留或删除所采集内容的段落格式,并且可以更改所收录图片或附件的路径(例如将下载的图片路径更改为本地路径)
多线程和多任务: 可以同时启动多个线程,并且多个任务可以协同工作而不会相互干扰;可以根据系统性能随时添加或减少线程数,以最大化其工作效率.
所见即所得: 您可以实时查看采集的数据,错误信息和线程工作信息.
<p>自动数据保存: 实时构建采集的数据并将其保存在系统自己的数据库中(用户也可以自定义数据库,但是表和字段的创建由系统完成),而无需手动设置...
优采云采集器 v3.5.1正式版
采集交流 • 优采云 发表了文章 • 0 个评论 • 334 次浏览 • 2020-08-07 18:17
软件功能
1. 简单的规则配置和强大的采集功能
1. 可视化的自定义采集过程
完整的问答指南,可视化操作,自定义采集过程
自动记录和模拟网页操作顺序
高级设置可以满足更多采集需求
2,单击以提取网页数据
鼠标单击以选择要爬网的Web内容,操作简单
您可以选择提取文本,链接,属性,html标记等.
3. 运行批量数据采集
该软件会根据采集过程和提取规则自动分批采集
快速稳定地实时显示采集速度和过程
可以将软件切换为在后台运行,而不会影响前台工作
4. 导出并发布采集的数据
采集的数据将自动制成表格,并且可以自由配置字段
支持将数据导出到Excel等本地文件
一键式发布到CMS网站/数据库/微信公众号及其他媒体
两个. 支持采集不同类型的网站
电子商务,生活服务,社交媒体,新闻论坛,本地网站...
强大的浏览器内核,超过99%的网站可以使用它!
三,完整的平台支持,所有免费的可视化操作
支持所有操作系统: Windows + Mac + Linux
采集和导出都是免费的,可以放心地无限使用
可视化的采集规则配置,傻瓜式操作
四个强大的功能,箭头的快速迭代
智能识别网络数据,多种导出数据的方式
该软件会定期更新和升级,并且会不断添加新功能
客户的满意是我们最大的肯定!
如何使用优采云采集器采集百度搜索结果数据?
第1步: 创建采集任务
1)启动优采云采集器,进入主界面,单击“创建任务”按钮创建“向导采集任务”
2)输入百度搜索的网址,包括三种方式
1. 手动输入: 直接在输入框中输入网址,多个网址之间必须用换行符分隔
2. 单击以从文件中读取: 用户选择一个文件来存储URL. 文件中可以有多个URL地址,并且这些地址需要用换行符分隔.
3. 批量添加方法: 通过添加和调整地址参数来生成多个常规地址
第2步: 自定义采集过程
1)单击创建后,它将自动打开第一个URL进入向导设置. 在这里,选择列表页面,然后单击下一步
2)填写用于搜索关键字和选择关键字的输入框,然后单击“下一步”
3)进入第一个关键字搜索结果页面后,单击“设置搜索”按钮,然后单击“下一步”
4)单击列表块中的第一个元素
5)单击结果列表块中的另一个元素,此时将自动选择列表块. 点击下一步
6)选择下一页按钮,选择选项以选择下一页,然后单击页面上的下一页按钮以填充第一个输入框,并且可以调整第二个数据框以单击下一个采集操作频率中的页面按钮. 理论上,次数越多,采集的数据就越多. 点击下一步
7)选择要采集的字段: 在焦点框中单击要提取的元素,然后单击“下一步”
8)选择不进入详细信息页面. 点击保存或保存并运行
第3步: 数据采集和导出
1)采集任务正在运行
2)采集完成后,选择“导出数据”以将所有数据导出到本地文件
3)选择“导出方法”以导出采集的数据,在这里您可以选择excel作为导出格式
4)如下所示导出采集的数据后
更新日志
v3.5.1更新日志(2020-5-10)
解决常规处理问题 查看全部
优采云采集器是一款全新的智能网络数据采集软件,由原创的Google技术团队创建. 它具有简单的规则配置和强大的采集功能,可以支持电子商务,生活服务,社交媒体,新闻等不同类型的网站(例如论坛),以各种方式智能地识别网页数据和导出数据,其中大多数是完全免费的. 它是行业分析,精准营销,品牌监控和风险评估的好帮手. 优采云免费采集器支持所有操作系统版本更新和功能升级,以同步所有平台,采集和导出全部免费,轻松使用无限制,并支持后台操作而不会打扰您的其他前台工作. 这是为您的助手提供的最佳数据采集.

软件功能
1. 简单的规则配置和强大的采集功能
1. 可视化的自定义采集过程
完整的问答指南,可视化操作,自定义采集过程
自动记录和模拟网页操作顺序
高级设置可以满足更多采集需求
2,单击以提取网页数据
鼠标单击以选择要爬网的Web内容,操作简单
您可以选择提取文本,链接,属性,html标记等.
3. 运行批量数据采集
该软件会根据采集过程和提取规则自动分批采集
快速稳定地实时显示采集速度和过程
可以将软件切换为在后台运行,而不会影响前台工作
4. 导出并发布采集的数据
采集的数据将自动制成表格,并且可以自由配置字段
支持将数据导出到Excel等本地文件
一键式发布到CMS网站/数据库/微信公众号及其他媒体
两个. 支持采集不同类型的网站
电子商务,生活服务,社交媒体,新闻论坛,本地网站...
强大的浏览器内核,超过99%的网站可以使用它!
三,完整的平台支持,所有免费的可视化操作
支持所有操作系统: Windows + Mac + Linux
采集和导出都是免费的,可以放心地无限使用
可视化的采集规则配置,傻瓜式操作
四个强大的功能,箭头的快速迭代
智能识别网络数据,多种导出数据的方式
该软件会定期更新和升级,并且会不断添加新功能
客户的满意是我们最大的肯定!
如何使用优采云采集器采集百度搜索结果数据?
第1步: 创建采集任务
1)启动优采云采集器,进入主界面,单击“创建任务”按钮创建“向导采集任务”

2)输入百度搜索的网址,包括三种方式
1. 手动输入: 直接在输入框中输入网址,多个网址之间必须用换行符分隔
2. 单击以从文件中读取: 用户选择一个文件来存储URL. 文件中可以有多个URL地址,并且这些地址需要用换行符分隔.
3. 批量添加方法: 通过添加和调整地址参数来生成多个常规地址

第2步: 自定义采集过程
1)单击创建后,它将自动打开第一个URL进入向导设置. 在这里,选择列表页面,然后单击下一步

2)填写用于搜索关键字和选择关键字的输入框,然后单击“下一步”

3)进入第一个关键字搜索结果页面后,单击“设置搜索”按钮,然后单击“下一步”

4)单击列表块中的第一个元素

5)单击结果列表块中的另一个元素,此时将自动选择列表块. 点击下一步

6)选择下一页按钮,选择选项以选择下一页,然后单击页面上的下一页按钮以填充第一个输入框,并且可以调整第二个数据框以单击下一个采集操作频率中的页面按钮. 理论上,次数越多,采集的数据就越多. 点击下一步

7)选择要采集的字段: 在焦点框中单击要提取的元素,然后单击“下一步”

8)选择不进入详细信息页面. 点击保存或保存并运行

第3步: 数据采集和导出
1)采集任务正在运行
2)采集完成后,选择“导出数据”以将所有数据导出到本地文件
3)选择“导出方法”以导出采集的数据,在这里您可以选择excel作为导出格式
4)如下所示导出采集的数据后

更新日志
v3.5.1更新日志(2020-5-10)
解决常规处理问题
免费和开源的分布式系统日志采集框架无一例外
采集交流 • 优采云 发表了文章 • 0 个评论 • 670 次浏览 • 2020-08-07 15:31
我去年曾答应埃里克(《无尽之境》的作者之一)帮助在中国推广“无尽之境”,但出于各种原因,我没有做到这一点. 我向埃里克道歉.
无与伦比的介绍
Exceptionless是一个开源实时日志采集框架,可以在基于ASP.NET,ASP.NET Core,Web Api,Web Forms,WPF,控制台,MVC和其他技术堆栈的应用程序中使用,并提供Rest接口可以在Javascript和Node.js中使用. 它使日志采集变得简单易用,并且不需要了解太多相关的技术细节和配置.
过去,我们主要使用Log4net,Nlog和其他框架进行日志采集. 当应用程序变得复杂且集群化时,传统方法可能不太适合,因为采集各种日志并对其进行分析将发生变化. 这很麻烦,很浪费时间.
现在,卓越团队为我们提供了更好的框架. 我认为这很棒而且有意义. 谢谢他们.
让我们一起看看.
官方网站:
GitHub:
入门
1. 首先,您需要访问官方网站注册一个帐户(您知道是否无法打开),然后在注册后登录系统.
ps: 无例外的系统也可以部署到本地服务器
2. 按照提示添加您的项目:
然后您将看到一个下拉菜单,选择项目类型,您可以看到Exceptionless支持多种项目. 让我们选择一个ASP.NET Core项目:
3. 选择完成后,将有一个详细的步骤,说明如何在项目中使用它.
using Exceptionless;
......
public void Configure(IApplicationBuilder app, IHostingEnvironment env, ILoggerFactory loggerFactory)
{
// xxxxx 处填写上图画红线部分的key
app.UseExceptionless("xxxxxxxxxxxxxxxxxxxxxxxxxx");
app.UseStaticFiles();
app.UseMvc();
}
这时,Exceptionless已经可以在您的项目中工作,它将自动在项目中记录异常.
检查日志是否异常
在“入门”步骤中,我们创建了一个ASP.NET Core项目. 让我们运行它,看看它如何工作.
打开HomeController.cs文件并修改“关于”的操作方法以人为地创建异常消息:
public IActionResult About() {
throw new Exception("test exception");
return View();
}
接下来,刷新“例外”页面. 在仪表板的主仪表板中,您可以看到有关整个项目的异常,并且以多种方式列出了异常,包括分布图,最常见的异常和最新的异常等.
这是我们刚刚在Abount Action中创建的例外. 例外情况已被记录. 单击后,您可以查看详细信息:
在上图中,您可以直观地看到异常的一些特定信息. 除了一些基本的异常类型,时间和堆栈外,它还包括访问者的坐标,IP地址,发生异常的URL地址,以及浏览器信息,操作系统,甚至是发生异常时请求的cookie值. <//p
p将事件发送到异常/p
p除了熟悉的异常信息外,Exceptionless还可以记录许多其他信息,这些信息统称为事件./p
p在无与伦比的情况下,事件有几种类型: 日志,功能使用,404,自定义事件./p
p在Exceptionless中发送不同类型的事件非常简单,代码如下:/p
pprecodeusing Exceptionless;
// 发送日志
ExceptionlessClient.Default.SubmitLog("Logging made easy");
// 你可以指定日志来源,和日志级别。
// 日志级别有这几种: Trace, Debug, Info, Warn, Error
ExceptionlessClient.Default.SubmitLog(typeof(Program).FullName, "This is so easy", "Info");
ExceptionlessClient.Default.CreateLog(typeof(Program).FullName, "This is so easy", "Info").AddTags("Exceptionless").Submit();
// 发送 Feature Usages
ExceptionlessClient.Default.SubmitFeatureUsage("MyFeature");
ExceptionlessClient.Default.CreateFeatureUsage("MyFeature").AddTags("Exceptionless").Submit();
// 发送一个 404
ExceptionlessClient.Default.SubmitNotFound("/somepage");
ExceptionlessClient.Default.CreateNotFound("/somepage").AddTags("Exceptionless").Submit();
// 发生一个自定义事件
ExceptionlessClient.Default.SubmitEvent(new Event { Message = "Low Fuel", Type = "racecar", Source = "Fuel System" });
/code/pre/p
p手动发送已处理的异常/p
p有时,我们在程序代码中显式处理一些异常. 目前,我们可以手动将一些异常信息发送给Exceptionless./p
pprecodetry
{
throw new ApplicationException(Guid.NewGuid().ToString());
}
catch (Exception ex)
{
ex.ToExceptionless().Submit();
}
/code/pre/p
p在发送的事件中添加其他标签/p
p发送事件时,如果添加坐标,标签,属性等,则可以为当前事件添加其他上下文信息./p
pprecodetry
{
throw new ApplicationException("Unable to create order from quote.");
}
catch (Exception ex)
{
ex.ToExceptionless()
// 为事件设定一个编号,以便于你搜索
.SetReferenceId(Guid.NewGuid().ToString("N"))
// 添加一个不包含CreditCardNumber属性的对象信息
.AddObject(order, "Order", excludedPropertyNames: new [] { "CreditCardNumber" }, maxDepth: 2)
// 设置一个名为"Quote"的编号
.SetProperty("Quote", 123)
// 添加一个名为“Order”的标签
.AddTags("Order")
// 标记为关键异常
.MarkAsCritical()
// 设置一个地理位置坐标
.SetGeo(43.595089, -88.444602)
// 设置触发异常的用户信息
.SetUserIdentity(user.Id, user.FullName)
// 设置触发用户的一些描述
.SetUserDescription(user.EmailAddress, "I tried creating an order from my saved quote.")
// 发送事件
.Submit();
}
/code/pre/p
p统一处理已发送事件/p
p默认情况下,您可以将其他事件绑定到ExceptionlessClient.Default.SubmittingEvent,以统一自定义某些处理./p
pprecodeExceptionlessClient.Default.SubmittingEvent += OnSubmittingEvent;
private void OnSubmittingEvent(object sender, EventSubmittingEventArgs e) {
// 仅处理未被处理过的异常
if (!e.IsUnhandledError)
return;
// 忽略404事件
if (e.Event.IsNotFound()) {
e.Cancel = true;
return;
}
// 获取error对象
var error = e.Event.GetError();
if (error == null)
return;
// 忽略 401 或 `HttpRequestValidationException`异常
if (error.Code == "401" || error.Type == "System.Web.HttpRequestValidationException") {
e.Cancel = true;
return;
}
// 忽略不是指定命名空间代码抛出的异常
var handledNamespaces = new Liststring { "Exceptionless" };
if (!error.StackTrace.Select(s => s.DeclaringNamespace).Distinct().Any(ns => handledNamespaces.Any(ns.Contains))) {
e.Cancel = true;
return;
}
e.Event.AddObject(order, "Order", excludedPropertyNames: new [] { "CreditCardNumber" }, maxDepth: 2);
e.Event.Tags.Add("Order");
e.Event.MarkAsCritical();
e.Event.SetUserIdentity(user.EmailAddress);
}
与NLog或Log4Net一起使用
有时,需要在程序中(例如在开发阶段)详细记录日志信息. 此时,您可以与log4net或nlog一起使用. 您可以查看此示例以了解详细信息.
如果程序在短时间内生成大量日志,例如每分钟数千个日志. 这时,您需要使用内存中的存储事件,以便客户端不将事件序列化到磁盘,这样会更快. 这样,您可以使用Log4net或Nlog将某些事件存储到磁盘,并将无异常事件存储在内存中.
using Exceptionless;
ExceptionlessClient.Default.Configuration.UseInMemoryStorage();
摘要
本文主要介绍Exceptionless,然后介绍Exceptionless如何发送日志.
由于Exceptionless网站目前在国外,并且该网站中调用了一些Google API,因此在中国访问可能会有些麻烦. 您首先可以科学地体验这些功能. 毕竟,Exceptionless是开源且免费的,并且服务器也可以在本地部署.
如果您认为本文对您有所帮助,并希望更多的人了解Exceptionless,请多谢您的帮助.
如果您对Exceptionless感兴趣或想学习Exceptionless的代码,可以加入该小组.
无与伦比的QQ组: 330316486.
本文的地址:
作者博客: Savorboard
欢迎转载,请在明显的位置注明出处和链接 查看全部
前言
我去年曾答应埃里克(《无尽之境》的作者之一)帮助在中国推广“无尽之境”,但出于各种原因,我没有做到这一点. 我向埃里克道歉.
无与伦比的介绍
Exceptionless是一个开源实时日志采集框架,可以在基于ASP.NET,ASP.NET Core,Web Api,Web Forms,WPF,控制台,MVC和其他技术堆栈的应用程序中使用,并提供Rest接口可以在Javascript和Node.js中使用. 它使日志采集变得简单易用,并且不需要了解太多相关的技术细节和配置.
过去,我们主要使用Log4net,Nlog和其他框架进行日志采集. 当应用程序变得复杂且集群化时,传统方法可能不太适合,因为采集各种日志并对其进行分析将发生变化. 这很麻烦,很浪费时间.
现在,卓越团队为我们提供了更好的框架. 我认为这很棒而且有意义. 谢谢他们.
让我们一起看看.
官方网站:
GitHub:
入门
1. 首先,您需要访问官方网站注册一个帐户(您知道是否无法打开),然后在注册后登录系统.
ps: 无例外的系统也可以部署到本地服务器

2. 按照提示添加您的项目:

然后您将看到一个下拉菜单,选择项目类型,您可以看到Exceptionless支持多种项目. 让我们选择一个ASP.NET Core项目:

3. 选择完成后,将有一个详细的步骤,说明如何在项目中使用它.

using Exceptionless;
......
public void Configure(IApplicationBuilder app, IHostingEnvironment env, ILoggerFactory loggerFactory)
{
// xxxxx 处填写上图画红线部分的key
app.UseExceptionless("xxxxxxxxxxxxxxxxxxxxxxxxxx");
app.UseStaticFiles();
app.UseMvc();
}
这时,Exceptionless已经可以在您的项目中工作,它将自动在项目中记录异常.
检查日志是否异常
在“入门”步骤中,我们创建了一个ASP.NET Core项目. 让我们运行它,看看它如何工作.
打开HomeController.cs文件并修改“关于”的操作方法以人为地创建异常消息:
public IActionResult About() {
throw new Exception("test exception");
return View();
}
接下来,刷新“例外”页面. 在仪表板的主仪表板中,您可以看到有关整个项目的异常,并且以多种方式列出了异常,包括分布图,最常见的异常和最新的异常等.

这是我们刚刚在Abount Action中创建的例外. 例外情况已被记录. 单击后,您可以查看详细信息:




在上图中,您可以直观地看到异常的一些特定信息. 除了一些基本的异常类型,时间和堆栈外,它还包括访问者的坐标,IP地址,发生异常的URL地址,以及浏览器信息,操作系统,甚至是发生异常时请求的cookie值. <//p
p将事件发送到异常/p
p除了熟悉的异常信息外,Exceptionless还可以记录许多其他信息,这些信息统称为事件./p
p在无与伦比的情况下,事件有几种类型: 日志,功能使用,404,自定义事件./p
p在Exceptionless中发送不同类型的事件非常简单,代码如下:/p
pprecodeusing Exceptionless;
// 发送日志
ExceptionlessClient.Default.SubmitLog("Logging made easy");
// 你可以指定日志来源,和日志级别。
// 日志级别有这几种: Trace, Debug, Info, Warn, Error
ExceptionlessClient.Default.SubmitLog(typeof(Program).FullName, "This is so easy", "Info");
ExceptionlessClient.Default.CreateLog(typeof(Program).FullName, "This is so easy", "Info").AddTags("Exceptionless").Submit();
// 发送 Feature Usages
ExceptionlessClient.Default.SubmitFeatureUsage("MyFeature");
ExceptionlessClient.Default.CreateFeatureUsage("MyFeature").AddTags("Exceptionless").Submit();
// 发送一个 404
ExceptionlessClient.Default.SubmitNotFound("/somepage");
ExceptionlessClient.Default.CreateNotFound("/somepage").AddTags("Exceptionless").Submit();
// 发生一个自定义事件
ExceptionlessClient.Default.SubmitEvent(new Event { Message = "Low Fuel", Type = "racecar", Source = "Fuel System" });
/code/pre/p
p手动发送已处理的异常/p
p有时,我们在程序代码中显式处理一些异常. 目前,我们可以手动将一些异常信息发送给Exceptionless./p
pprecodetry
{
throw new ApplicationException(Guid.NewGuid().ToString());
}
catch (Exception ex)
{
ex.ToExceptionless().Submit();
}
/code/pre/p
p在发送的事件中添加其他标签/p
p发送事件时,如果添加坐标,标签,属性等,则可以为当前事件添加其他上下文信息./p
pprecodetry
{
throw new ApplicationException("Unable to create order from quote.");
}
catch (Exception ex)
{
ex.ToExceptionless()
// 为事件设定一个编号,以便于你搜索
.SetReferenceId(Guid.NewGuid().ToString("N"))
// 添加一个不包含CreditCardNumber属性的对象信息
.AddObject(order, "Order", excludedPropertyNames: new [] { "CreditCardNumber" }, maxDepth: 2)
// 设置一个名为"Quote"的编号
.SetProperty("Quote", 123)
// 添加一个名为“Order”的标签
.AddTags("Order")
// 标记为关键异常
.MarkAsCritical()
// 设置一个地理位置坐标
.SetGeo(43.595089, -88.444602)
// 设置触发异常的用户信息
.SetUserIdentity(user.Id, user.FullName)
// 设置触发用户的一些描述
.SetUserDescription(user.EmailAddress, "I tried creating an order from my saved quote.")
// 发送事件
.Submit();
}
/code/pre/p
p统一处理已发送事件/p
p默认情况下,您可以将其他事件绑定到ExceptionlessClient.Default.SubmittingEvent,以统一自定义某些处理./p
pprecodeExceptionlessClient.Default.SubmittingEvent += OnSubmittingEvent;
private void OnSubmittingEvent(object sender, EventSubmittingEventArgs e) {
// 仅处理未被处理过的异常
if (!e.IsUnhandledError)
return;
// 忽略404事件
if (e.Event.IsNotFound()) {
e.Cancel = true;
return;
}
// 获取error对象
var error = e.Event.GetError();
if (error == null)
return;
// 忽略 401 或 `HttpRequestValidationException`异常
if (error.Code == "401" || error.Type == "System.Web.HttpRequestValidationException") {
e.Cancel = true;
return;
}
// 忽略不是指定命名空间代码抛出的异常
var handledNamespaces = new Liststring { "Exceptionless" };
if (!error.StackTrace.Select(s => s.DeclaringNamespace).Distinct().Any(ns => handledNamespaces.Any(ns.Contains))) {
e.Cancel = true;
return;
}
e.Event.AddObject(order, "Order", excludedPropertyNames: new [] { "CreditCardNumber" }, maxDepth: 2);
e.Event.Tags.Add("Order");
e.Event.MarkAsCritical();
e.Event.SetUserIdentity(user.EmailAddress);
}
与NLog或Log4Net一起使用
有时,需要在程序中(例如在开发阶段)详细记录日志信息. 此时,您可以与log4net或nlog一起使用. 您可以查看此示例以了解详细信息.
如果程序在短时间内生成大量日志,例如每分钟数千个日志. 这时,您需要使用内存中的存储事件,以便客户端不将事件序列化到磁盘,这样会更快. 这样,您可以使用Log4net或Nlog将某些事件存储到磁盘,并将无异常事件存储在内存中.
using Exceptionless;
ExceptionlessClient.Default.Configuration.UseInMemoryStorage();
摘要
本文主要介绍Exceptionless,然后介绍Exceptionless如何发送日志.
由于Exceptionless网站目前在国外,并且该网站中调用了一些Google API,因此在中国访问可能会有些麻烦. 您首先可以科学地体验这些功能. 毕竟,Exceptionless是开源且免费的,并且服务器也可以在本地部署.
如果您认为本文对您有所帮助,并希望更多的人了解Exceptionless,请多谢您的帮助.
如果您对Exceptionless感兴趣或想学习Exceptionless的代码,可以加入该小组.
无与伦比的QQ组: 330316486.
本文的地址:
作者博客: Savorboard
欢迎转载,请在明显的位置注明出处和链接
YGBOOK小说采集系统
采集交流 • 优采云 发表了文章 • 0 个评论 • 625 次浏览 • 2020-08-07 11:19
正式介绍
YGBOOK小说采集系统是一种基于ThinkPHP + MySQL技术开发的小说网站系统,提供了轻量级的小说网站解决方案.
软件功能
1. 自动采集2345种导航小说的数据,内置的采集规则,无需您自己进行管理
2. 数据存储,无需担心目标站的版本或挂断
3. 网站本身提供小说的介绍和章节列表的显示,并且章节阅读采用跳转到原创站点的方式来避免版权问题
4. 它具有伪静态功能,但不能自由定制,没有手机版本,没有站点搜索,没有站点地图,没有结构化数据
YGBOOK是基于ThinkPHP + MYSQL开发的,可以在大多数普通服务器上运行.
例如Windows服务器,IIS + PHP + MYSQL,
Linux服务器,Apache / Nginx + PHP + MYSQL
强烈建议使用Linux服务器,这样可以发挥更大的性能优势
在软件方面,PHP需要版本5.3或更高版本,并且不能在低于5.3的版本上运行.
在硬件方面,具有常规配置的虚拟主机可以正常运行系统,并且最好有服务器.
有关伪静态配置,请参阅压缩包中的txt文件. 针对不同环境有不同的配置说明(内置的.htacess文件已针对兼容性进行了重新优化,并解决了apache + nts模式下可能出现的“未指定输入文件. ”问题. )
安装步骤:
1. 解压缩文件并将其上传到相应的目录等.
2. 必须先使用伪静态配置网站(请参阅上一步中的配置),然后才能正常安装和使用网站(第一次访问首页时,您将自动进入安装页面,或手动输入域名) .com / install)
3. 同意使用该协议进入下一步以检查目录权限
<p>4. 测试通过后,填写常规数据库配置项,填写正确,安装成功,安装成功后,将自动进入后台页面域名.com / admin,并填写后台管理员和安装期间输入的用于登录的密码 查看全部
YGBOOK是用于新颖网站的新颖采集软件. 您可以通过YGBOOK直接从其他网站采集新颖数据. 它功能强大且易于使用. 这是一个非常好的网站小说采集器. 朋友,不要错过它.
正式介绍
YGBOOK小说采集系统是一种基于ThinkPHP + MySQL技术开发的小说网站系统,提供了轻量级的小说网站解决方案.
软件功能
1. 自动采集2345种导航小说的数据,内置的采集规则,无需您自己进行管理
2. 数据存储,无需担心目标站的版本或挂断
3. 网站本身提供小说的介绍和章节列表的显示,并且章节阅读采用跳转到原创站点的方式来避免版权问题
4. 它具有伪静态功能,但不能自由定制,没有手机版本,没有站点搜索,没有站点地图,没有结构化数据
YGBOOK是基于ThinkPHP + MYSQL开发的,可以在大多数普通服务器上运行.
例如Windows服务器,IIS + PHP + MYSQL,
Linux服务器,Apache / Nginx + PHP + MYSQL
强烈建议使用Linux服务器,这样可以发挥更大的性能优势
在软件方面,PHP需要版本5.3或更高版本,并且不能在低于5.3的版本上运行.
在硬件方面,具有常规配置的虚拟主机可以正常运行系统,并且最好有服务器.
有关伪静态配置,请参阅压缩包中的txt文件. 针对不同环境有不同的配置说明(内置的.htacess文件已针对兼容性进行了重新优化,并解决了apache + nts模式下可能出现的“未指定输入文件. ”问题. )
安装步骤:
1. 解压缩文件并将其上传到相应的目录等.
2. 必须先使用伪静态配置网站(请参阅上一步中的配置),然后才能正常安装和使用网站(第一次访问首页时,您将自动进入安装页面,或手动输入域名) .com / install)
3. 同意使用该协议进入下一步以检查目录权限
<p>4. 测试通过后,填写常规数据库配置项,填写正确,安装成功,安装成功后,将自动进入后台页面域名.com / admin,并填写后台管理员和安装期间输入的用于登录的密码
蓝橙网站信息采集系统下载
采集交流 • 优采云 发表了文章 • 0 个评论 • 346 次浏览 • 2020-08-06 18:07
Blue Orange网站信息采集系统的主要功能:
1. 支持登录网站采集,提交采集,脚本网页采集,动态网页采集; 2.该软件具有内置的多个采集模板,可以在不了解太多技术的情况下使用方便,简单实用. 3.多线程访问技术,您可以在几分钟内下载整个网站页面; 4.采集的数据支持EXCEL导出,还支持自动保存到SQL数据库; 5.无论新闻,论坛,视频,黄页,图片,下载如何. 对于类似的网站,只要可以通过浏览器看到的结构化内容,通过指定匹配规则,就可以采集所需的内容. 在采集过程中,可以动态保存FLV,Flashget,Thunder,快速广播,图片和客户公司的姓名,联系人,电话,手机,QQ号码,电子邮件地址,MP3,视频和其他下载地址,并对它们进行分类; 6,软件可以自动跳过网站的会员帐号认证,以采集需要认证的动态数据; 7,该软件支持二次分析,可以对初次采集后的数据进行分析,处理和过滤,以获取有价值,准确的数据; 8,软件采用全自动采集方式,无需人工操作; 9.可以根据自己的需要设置. 自动采集关键词和链接; 10.能够按组发送电子邮件. 查看全部
Blue Orange网站信息采集系统是一个完全自主开发的网络信息采集,处理和发布工具!用户可以根据设置的规则自动分批采集网页,论坛,博客等内容,并对采集到的数据进行处理后保存到数据库或发布到网站.
Blue Orange网站信息采集系统的主要功能:
1. 支持登录网站采集,提交采集,脚本网页采集,动态网页采集; 2.该软件具有内置的多个采集模板,可以在不了解太多技术的情况下使用方便,简单实用. 3.多线程访问技术,您可以在几分钟内下载整个网站页面; 4.采集的数据支持EXCEL导出,还支持自动保存到SQL数据库; 5.无论新闻,论坛,视频,黄页,图片,下载如何. 对于类似的网站,只要可以通过浏览器看到的结构化内容,通过指定匹配规则,就可以采集所需的内容. 在采集过程中,可以动态保存FLV,Flashget,Thunder,快速广播,图片和客户公司的姓名,联系人,电话,手机,QQ号码,电子邮件地址,MP3,视频和其他下载地址,并对它们进行分类; 6,软件可以自动跳过网站的会员帐号认证,以采集需要认证的动态数据; 7,该软件支持二次分析,可以对初次采集后的数据进行分析,处理和过滤,以获取有价值,准确的数据; 8,软件采用全自动采集方式,无需人工操作; 9.可以根据自己的需要设置. 自动采集关键词和链接; 10.能够按组发送电子邮件.
快速折扣淘宝折扣系统(免费API自动采集)
采集交流 • 优采云 发表了文章 • 0 个评论 • 294 次浏览 • 2020-08-06 18:07
“快速折扣淘宝折扣系统V2.5免费API集合”是适合淘宝促销折扣商品的程序. 老手和新手都可以在短时间内赚到很多佣金. 它不同于广泛的淘宝访客单一产品推广网站. 该程序可以手动添加产品,还配备了功能强大的多功能收款插件,多种收款方案,内置9.9元,19.9元免运费收款规则,可以收款,也可以自定义收款规则,自动无人值守集合无需手动维护即可更新网站. 默认提供精美的页面设计模板,超级用户访问体验,超高转化率. 它对搜索引擎友好,并且对整个站点都具有伪静态技术. 它具有快速的访问速度,无需等待很长时间即可生成HTML页面. 后台傻瓜式操作,简洁明了,是淘宝客座网站管理员在2013年推荐的最新单品促销计划.
程序前端演示:
程序后台演示:
后台用户: 演示密码: kuaidazhe
程序功能:
1. 解决了淘宝API的新限制,包括淘宝的收款功能,内置功能强大的多任务收款插件,内置多个收款规则如9.9 / 19.9元免运费,用户还可以自定义收款规则,多次收款程序. 可以采集包括婴儿业务,婴儿详细信息,婴儿评论等在内的信息. 定期且定量地无人值守自动采集和更新网站内容,等待佣金.
第二,您可以手动添加和编辑婴儿信息,也可以在后台直接输入高权限婴儿连接地址,自动获取婴儿信息并自动添加婴儿数据!清楚地,快乐地享受高收入!
3. 前台集成了商户注册和提交活动中心. 淘宝商家可以一键登录以发布产品信息. 只需输入商家的婴儿地址即可,它简单快捷,无需手动输入信息!
四个独立的高级数据统计分析功能,可以统计和监视网站中类别,关键字,企业,婴儿等的点击数据,及时了解热门点击产品,及时调整热门产品,以及开展新的促销创意.
5. 内置广告管理系统. 网站的后端具有添加广告代码的功能. 您可以添加来自各种联盟(例如Google Adsense和百度联盟)的广告,以帮助您增加广告收入,并增加淘宝客户的收入.
6. 可以使用诸如友谊连接,网站名称,域名,关键字,网站描述,模板选择,淘宝客户PID,淘宝API,网站统计代码和记录号等参数配置网站背景.
七,后台配置QQ /淘宝/微博免注册一键登录界面,产品页面集成多方留言板,后台自定义设置首页幻灯片放映,友情连接等.
8. 该程序由Php + Mysql独立开发,在安全性和网站程序性能方面都非常出色. 面对中型和大型数据量,该程序可以正常运行. 整个站点的前端采用最新的HTM5,DIV + CSS进行建筑设计,风格清新美丽,用户体验极佳.
环境要求:
PHP5.2 + MYSQL + ZEND OPTIMIZER 3.3
此版本为php5.2版本,如果需要php5.3版本,请到官方网站下载!谢谢您的支持!
V2.5升级日志:
1. 修复已知的错误
2. 优化网站网页的URL并添加.html后缀
3. 优化核心采集算法以提高采集效率
4. 为采集的数据添加折扣信息
5. 优化模板以增强用户的购买意愿 查看全部
程序简介:
“快速折扣淘宝折扣系统V2.5免费API集合”是适合淘宝促销折扣商品的程序. 老手和新手都可以在短时间内赚到很多佣金. 它不同于广泛的淘宝访客单一产品推广网站. 该程序可以手动添加产品,还配备了功能强大的多功能收款插件,多种收款方案,内置9.9元,19.9元免运费收款规则,可以收款,也可以自定义收款规则,自动无人值守集合无需手动维护即可更新网站. 默认提供精美的页面设计模板,超级用户访问体验,超高转化率. 它对搜索引擎友好,并且对整个站点都具有伪静态技术. 它具有快速的访问速度,无需等待很长时间即可生成HTML页面. 后台傻瓜式操作,简洁明了,是淘宝客座网站管理员在2013年推荐的最新单品促销计划.
程序前端演示:
程序后台演示:
后台用户: 演示密码: kuaidazhe
程序功能:
1. 解决了淘宝API的新限制,包括淘宝的收款功能,内置功能强大的多任务收款插件,内置多个收款规则如9.9 / 19.9元免运费,用户还可以自定义收款规则,多次收款程序. 可以采集包括婴儿业务,婴儿详细信息,婴儿评论等在内的信息. 定期且定量地无人值守自动采集和更新网站内容,等待佣金.
第二,您可以手动添加和编辑婴儿信息,也可以在后台直接输入高权限婴儿连接地址,自动获取婴儿信息并自动添加婴儿数据!清楚地,快乐地享受高收入!
3. 前台集成了商户注册和提交活动中心. 淘宝商家可以一键登录以发布产品信息. 只需输入商家的婴儿地址即可,它简单快捷,无需手动输入信息!
四个独立的高级数据统计分析功能,可以统计和监视网站中类别,关键字,企业,婴儿等的点击数据,及时了解热门点击产品,及时调整热门产品,以及开展新的促销创意.
5. 内置广告管理系统. 网站的后端具有添加广告代码的功能. 您可以添加来自各种联盟(例如Google Adsense和百度联盟)的广告,以帮助您增加广告收入,并增加淘宝客户的收入.
6. 可以使用诸如友谊连接,网站名称,域名,关键字,网站描述,模板选择,淘宝客户PID,淘宝API,网站统计代码和记录号等参数配置网站背景.
七,后台配置QQ /淘宝/微博免注册一键登录界面,产品页面集成多方留言板,后台自定义设置首页幻灯片放映,友情连接等.
8. 该程序由Php + Mysql独立开发,在安全性和网站程序性能方面都非常出色. 面对中型和大型数据量,该程序可以正常运行. 整个站点的前端采用最新的HTM5,DIV + CSS进行建筑设计,风格清新美丽,用户体验极佳.
环境要求:
PHP5.2 + MYSQL + ZEND OPTIMIZER 3.3
此版本为php5.2版本,如果需要php5.3版本,请到官方网站下载!谢谢您的支持!
V2.5升级日志:
1. 修复已知的错误
2. 优化网站网页的URL并添加.html后缀
3. 优化核心采集算法以提高采集效率
4. 为采集的数据添加折扣信息
5. 优化模板以增强用户的购买意愿
Blue Orange网站信息采集系统
采集交流 • 优采云 发表了文章 • 0 个评论 • 333 次浏览 • 2020-08-06 16:07
类似软件
版本说明
软件地址
Blue Orange网站信息采集系统的主要功能:
1. 支持登录网站采集,提交采集,脚本网页采集,动态网页采集; 2.该软件具有内置的多个采集模板,可以在不了解太多技术的情况下使用方便,简单实用. 3.多线程访问技术,您可以在几分钟内下载整个网站页面; 4.采集的数据支持EXCEL导出,还支持自动保存到SQL数据库; 5.无论新闻,论坛,视频,黄页,图片,下载如何. 对于类似的网站,只要可以通过浏览器看到的结构化内容,通过指定匹配规则,就可以采集所需的内容. 在采集过程中,可以动态保存FLV,Flashget,Thunder,快速广播,图片和客户公司的姓名,联系人,电话,手机,QQ号码,电子邮件地址,MP3,视频和其他下载地址,并对它们进行分类; 6,软件可以自动跳过网站的会员帐号认证,以采集需要认证的动态数据; 7,该软件支持二次分析,可以对初次采集后的数据进行分析,处理和过滤,以获取有价值,准确的数据; 8,软件采用全自动采集方式,无需人工操作; 9.可以根据自己的需要设置. 自动采集关键词和链接; 10.能够按组发送电子邮件. 查看全部
Blue Orange网站信息采集系统是一个完全自主开发的网络信息采集,处理和发布工具!用户可以根据设置的规则自动分批采集网页,论坛,博客等内容,并对采集到的数据进行处理后保存到数据库或发布到网站.
类似软件
版本说明
软件地址
Blue Orange网站信息采集系统的主要功能:
1. 支持登录网站采集,提交采集,脚本网页采集,动态网页采集; 2.该软件具有内置的多个采集模板,可以在不了解太多技术的情况下使用方便,简单实用. 3.多线程访问技术,您可以在几分钟内下载整个网站页面; 4.采集的数据支持EXCEL导出,还支持自动保存到SQL数据库; 5.无论新闻,论坛,视频,黄页,图片,下载如何. 对于类似的网站,只要可以通过浏览器看到的结构化内容,通过指定匹配规则,就可以采集所需的内容. 在采集过程中,可以动态保存FLV,Flashget,Thunder,快速广播,图片和客户公司的姓名,联系人,电话,手机,QQ号码,电子邮件地址,MP3,视频和其他下载地址,并对它们进行分类; 6,软件可以自动跳过网站的会员帐号认证,以采集需要认证的动态数据; 7,该软件支持二次分析,可以对初次采集后的数据进行分析,处理和过滤,以获取有价值,准确的数据; 8,软件采用全自动采集方式,无需人工操作; 9.可以根据自己的需要设置. 自动采集关键词和链接; 10.能够按组发送电子邮件.
WebRadar网络信息采集系统V1.1
采集交流 • 优采云 发表了文章 • 0 个评论 • 349 次浏览 • 2020-08-06 13:21
[基本介绍] WebRadar帮助用户从Internet采集信息. 它使用Internet爬虫技术从您感兴趣的任何网站采集和提取任何网页中的信息. 公司可以使用WebRadar采集商机信息或竞争情报,政府机构可以使用WebRadar监视民意,网站管理员可以使用WebRadar采集新闻或信息以丰富其网站等;只要您需要获取网络信息,WebRadar就能满足您的要求. [软件功能] 1.精确采集您可以精确控制采集任务. WebRadar可以设置信息的源网站,控制爬网程序的爬网路径和爬网的网页,指定网页中收录的关键字,甚至可以控制爬网程序的爬网速度和深度. 2.准确准确的提取WebRadar可以为您提取网页中的特定内容. 除了Web页面的常规标题,URL,关键字,文本内容和其他属性外,WebRadar还允许您自定义Web内容的提取规则以准确获取所需的信息. 3.快速,稳定WebRadar使用高效的编程语言来开发,高效运行和快速采集. 经过长期测试和使用,系统运行稳定. 4.智能-灵活地使用WebRadar采集的信息可以存储在本地,通过浏览器查看,或者由局域网或Internet中的内部和外部人员同时访问;您还可以定义发布规则,WebRadar可以直接使用该集合. 信息生成到网页文件中以进行发布;当然,采集到的信息也可以存储在本地或远程数据库中.
优采云采集器V2.8.0.0的免费安装版本
采集交流 • 优采云 发表了文章 • 0 个评论 • 284 次浏览 • 2020-08-06 10:02
软件功能
1. 零阈值: 如果您不了解网络抓取工具技术,则可以上网采集网站数据.
2. 多引擎,高速且稳定: 内置的高速浏览器引擎,还可以切换到HTTP引擎模式运行,采集数据更加高效. 它还具有内置的JSON引擎,无需分析JSON数据结构,直观地选择JSON内容.
3. 适用于各种网站: 它可以采集Internet上99%的网站,包括动态网站,例如单页应用程序Ajax加载.
软件功能
1. 该软件易于操作,并且可以通过单击鼠标轻松选择要捕获的内容;
2. 支持三种高速引擎: 浏览器引擎,HTTP引擎,JSON引擎,内置优化的Firefox浏览器以及原创内存优化,因此浏览器集合也可以高速运行,甚至可以快速转换为HTTP方式运行,享受更高的采集速度!捕获JSON数据时,您还可以使用浏览器可视化方法单击要用鼠标捕获的内容. 无需分析JSON数据结构,因此非网页专业设计人员可以轻松获取所需数据;
3. 无需分析网页请求和源代码,但它支持更多网页采集;
4. 先进的智能算法可以一键生成目标元素XPATH,自动识别网页列表,并自动识别分页中的下一页按钮.
5. 支持丰富的数据导出方法,可以通过以下方式将其导出到txt文件,html文件,csv文件,excel文件或现有数据库(如sqlite数据库,access数据库,sqlserver数据库,mysql数据库)中. 可以轻松导出到目标网站数据库.
软件优势
可视化向导: 所有集合元素将自动生成集合数据.
1. 预定任务: 灵活定义运行时间,全自动运行.
2. 多引擎支持: 支持多个采集引擎,内置的高速浏览器内核,HTTP引擎和JSON引擎.
3. 智能识别: 它可以自动识别网页列表,采集字段和分页.
4. 拦截请求: 自定义拦截域名,以方便过滤异地广告并提高采集速度.
5. 多种数据导出: 可以导出到Txt,Excel,MySQL,SQLServer,SQlite,Access,网站等. 查看全部
优采云采集器是一个非常实用的网页信息采集工具. 该工具界面简洁,操作简单,功能强大. 有了它,我们就可以采集所需网页上的所有信息,且阈值为零,新手用户可以使用它.

软件功能
1. 零阈值: 如果您不了解网络抓取工具技术,则可以上网采集网站数据.
2. 多引擎,高速且稳定: 内置的高速浏览器引擎,还可以切换到HTTP引擎模式运行,采集数据更加高效. 它还具有内置的JSON引擎,无需分析JSON数据结构,直观地选择JSON内容.
3. 适用于各种网站: 它可以采集Internet上99%的网站,包括动态网站,例如单页应用程序Ajax加载.
软件功能
1. 该软件易于操作,并且可以通过单击鼠标轻松选择要捕获的内容;
2. 支持三种高速引擎: 浏览器引擎,HTTP引擎,JSON引擎,内置优化的Firefox浏览器以及原创内存优化,因此浏览器集合也可以高速运行,甚至可以快速转换为HTTP方式运行,享受更高的采集速度!捕获JSON数据时,您还可以使用浏览器可视化方法单击要用鼠标捕获的内容. 无需分析JSON数据结构,因此非网页专业设计人员可以轻松获取所需数据;
3. 无需分析网页请求和源代码,但它支持更多网页采集;
4. 先进的智能算法可以一键生成目标元素XPATH,自动识别网页列表,并自动识别分页中的下一页按钮.
5. 支持丰富的数据导出方法,可以通过以下方式将其导出到txt文件,html文件,csv文件,excel文件或现有数据库(如sqlite数据库,access数据库,sqlserver数据库,mysql数据库)中. 可以轻松导出到目标网站数据库.
软件优势
可视化向导: 所有集合元素将自动生成集合数据.
1. 预定任务: 灵活定义运行时间,全自动运行.
2. 多引擎支持: 支持多个采集引擎,内置的高速浏览器内核,HTTP引擎和JSON引擎.
3. 智能识别: 它可以自动识别网页列表,采集字段和分页.
4. 拦截请求: 自定义拦截域名,以方便过滤异地广告并提高采集速度.
5. 多种数据导出: 可以导出到Txt,Excel,MySQL,SQLServer,SQlite,Access,网站等.
Little Xiong Xiong免费漫画CMS程序,漫画串行CMS开源并免费使用,包括系统采集API
采集交流 • 优采云 发表了文章 • 0 个评论 • 278 次浏览 • 2020-08-06 07:03
备注: 我最近想开个漫画站,所以我找到了一个很好的系统Xiaoxiong Xiong Comics CMS,它是免费的,基于ThinkPHP 5.1和Redis缓存,它随附有Youcai Cloud API,以方便我们采集和发布,功能只是不多说,您可以看到下面的截图,几乎与漫画系统相似. 作者也正在积极更新,似乎他计划加入会员系统和其他职能,所以我将在此处发布.
环境要求: PHP 5.6-7.2,MySQL> = 5.7,Redis,Redis扩展
这是一条简单的路线,使用宝塔面板进行演示
安装宝塔后,进入面板,单击左侧的软件管理,然后安装PHP 7.2,Nginx,Mysql 5.7 +,Redis.
2,安装程序
让我们单击左侧的网站以添加网站!我不需要教这个! ! !
如果不能,请稍后观看我的视频教程! ! !
,设置伪静态
单击“域设置”-“网站目录”,运行目录以选择“公共”,然后删除“反跨站点”复选框并重新启动PHP. 然后单击伪静态并输入以下代码:
if (!-e $request_filename) {
rewrite ^(.*)$ /index.php?s=/$1 last;
break;
}
然后打开您的网站/ install以开始安装过程.
如果要启用404而不显示cms错误消息,则需要修改config / app.php文件:
#删除第一行中的//.
‘exception_tmpl’ => Env::get(‘app_path’) . ‘index/view/pub/404.html’,
‘exception_tmpl’ => Env::get(‘think_path’) . ‘tpl/think_exception.tpl’,
采集
在正常情况下,漫画网站中有两种类型的图片资源,一种是本地化的,另一种是热链接的. 建议对图片进行本地化以确保网站资源的稳定性,并且该程序还提供了优采云的采集器的API可以轻松地连接到优采云采集器以采集漫画和章节图片.
首先,我们需要一个优采云采集器,但是它分为免费版和付费版,但是由于某些功能限制,免费版不能满足图像本地化的需求,因此暂时不适用. 如果有钱,您可以购买A付费版本,但如果没有钱,也可以. 您可以直接使用优采云V7.6企业破解版. 最新的破解版本也可以满足程序的采集需求
可以下载管理员设置 查看全部


备注: 我最近想开个漫画站,所以我找到了一个很好的系统Xiaoxiong Xiong Comics CMS,它是免费的,基于ThinkPHP 5.1和Redis缓存,它随附有Youcai Cloud API,以方便我们采集和发布,功能只是不多说,您可以看到下面的截图,几乎与漫画系统相似. 作者也正在积极更新,似乎他计划加入会员系统和其他职能,所以我将在此处发布.
环境要求: PHP 5.6-7.2,MySQL> = 5.7,Redis,Redis扩展
这是一条简单的路线,使用宝塔面板进行演示
安装宝塔后,进入面板,单击左侧的软件管理,然后安装PHP 7.2,Nginx,Mysql 5.7 +,Redis.
2,安装程序
让我们单击左侧的网站以添加网站!我不需要教这个! ! !
如果不能,请稍后观看我的视频教程! ! !
,设置伪静态
单击“域设置”-“网站目录”,运行目录以选择“公共”,然后删除“反跨站点”复选框并重新启动PHP. 然后单击伪静态并输入以下代码:
if (!-e $request_filename) {
rewrite ^(.*)$ /index.php?s=/$1 last;
break;
}
然后打开您的网站/ install以开始安装过程.
如果要启用404而不显示cms错误消息,则需要修改config / app.php文件:
#删除第一行中的//.
‘exception_tmpl’ => Env::get(‘app_path’) . ‘index/view/pub/404.html’,
‘exception_tmpl’ => Env::get(‘think_path’) . ‘tpl/think_exception.tpl’,
采集
在正常情况下,漫画网站中有两种类型的图片资源,一种是本地化的,另一种是热链接的. 建议对图片进行本地化以确保网站资源的稳定性,并且该程序还提供了优采云的采集器的API可以轻松地连接到优采云采集器以采集漫画和章节图片.
首先,我们需要一个优采云采集器,但是它分为免费版和付费版,但是由于某些功能限制,免费版不能满足图像本地化的需求,因此暂时不适用. 如果有钱,您可以购买A付费版本,但如果没有钱,也可以. 您可以直接使用优采云V7.6企业破解版. 最新的破解版本也可以满足程序的采集需求
可以下载管理员设置
飞来地图大数据采集系统免费版
采集交流 • 优采云 发表了文章 • 0 个评论 • 528 次浏览 • 2020-08-06 07:03
软件简介
Feilai Maps大数据采集软件是一款可根据百度地图,高德地图,腾讯地图,谷歌地图,关键字,地区和行业以及自定义搜索条件准确采集商业意图的软件. 用于客户联系信息的营销软件. 可以采集公司名称,联系人,手机号码以及公司行业和地址. 采集的数据庞大,准确,并及时更新. 它是您进行微信营销,电话营销,SMS组发送和电子邮件组发送的必备软件.
软件功能
1. 实时采集,不是历史数据,而是官方网站上的最新POI数据.
2. 该操作简单易用,傻瓜式操作,分三个步骤完成(配置城市和行业词汇;单击以开始采集;导出数据). 无需手动编写任何规则. 操作就是这么简单. 3.支持国家,多省/多城市采集. (同时在多个城市中使用多个关键字)使搜索更加“简单,快速,有效”.
4. 快速搜索,极快的操作体验,流畅舒适.
5. 如果您一次从整个国家或多个省市采集数据,则可以为每个省市生成Excel文件. (行业独有)
6. 采集效率和数据完整性领先业界.
7. 及时处理客户反馈和建议还使该软件能够很好地处理许多细节.
8. 具有自动升级功能: 新版本正式发布后,客户端打开后将自动升级到最新版本.
软件功能
1. 五个地图数据已集成在一起,数据更加全面.
2. 内置数据库支持数十万个数据.
3. 多种采集算法可采集更多数据.
4. 数据存储功能,意外关闭或下次数据仍打开
5. 一键导出到CSV,EXCEL,VCF和其他文件.
6. 可以将VCF文件导入到电话通讯簿中,方便,快捷
7. 可能是最完善的地图采集软件.
软件功能
1. 数据采集,准确定位,准确数据,并且易于使用.
2. 搜索结果包括电话号码和特定地址.
功能
小巧,美观,简单,高效,出色的性能
Quakewang大数据采集系统,界面极为简洁,没有多余的东西,操作非常简单,人性化,但性能出色,具有良好的用户体验,并实现了大数据采集系统快速自动采集业务信息,以帮助客户快速采集准确的客户信息
大数据挖掘和云计算技术
Mookewang的大数据采集系统是2018年的最新技术,它基于百度地图上披露的最新业务或公司信息,并通过大数据挖掘和云计算技术,准确匹配了城市关键字和行业关键字.
覆盖全国1,000多个县市
Quakewang大数据采集系统,覆盖全国近1000个地市及市级以上的城市,具有覆盖面广,海量最新业务数据信息数据库,通过大数据和云计算技术,快速处理分类,精确匹配
在360个行业中准确匹配数万个关键字
Quakewang大数据采集系统,涵盖360个行业和数以万计的关键字,用于精确匹配搜索,您可以选择座机或手机号码,并以最快的速度准确定位目标企业客户群,真正实现精准营销
更新日志
1. 增加登录界面的日志查看功能
2. 解决搜狗数据无法采集的问题
特殊说明 查看全部

软件简介
Feilai Maps大数据采集软件是一款可根据百度地图,高德地图,腾讯地图,谷歌地图,关键字,地区和行业以及自定义搜索条件准确采集商业意图的软件. 用于客户联系信息的营销软件. 可以采集公司名称,联系人,手机号码以及公司行业和地址. 采集的数据庞大,准确,并及时更新. 它是您进行微信营销,电话营销,SMS组发送和电子邮件组发送的必备软件.
软件功能
1. 实时采集,不是历史数据,而是官方网站上的最新POI数据.
2. 该操作简单易用,傻瓜式操作,分三个步骤完成(配置城市和行业词汇;单击以开始采集;导出数据). 无需手动编写任何规则. 操作就是这么简单. 3.支持国家,多省/多城市采集. (同时在多个城市中使用多个关键字)使搜索更加“简单,快速,有效”.
4. 快速搜索,极快的操作体验,流畅舒适.
5. 如果您一次从整个国家或多个省市采集数据,则可以为每个省市生成Excel文件. (行业独有)
6. 采集效率和数据完整性领先业界.
7. 及时处理客户反馈和建议还使该软件能够很好地处理许多细节.
8. 具有自动升级功能: 新版本正式发布后,客户端打开后将自动升级到最新版本.

软件功能
1. 五个地图数据已集成在一起,数据更加全面.
2. 内置数据库支持数十万个数据.
3. 多种采集算法可采集更多数据.
4. 数据存储功能,意外关闭或下次数据仍打开
5. 一键导出到CSV,EXCEL,VCF和其他文件.
6. 可以将VCF文件导入到电话通讯簿中,方便,快捷
7. 可能是最完善的地图采集软件.
软件功能
1. 数据采集,准确定位,准确数据,并且易于使用.
2. 搜索结果包括电话号码和特定地址.
功能
小巧,美观,简单,高效,出色的性能
Quakewang大数据采集系统,界面极为简洁,没有多余的东西,操作非常简单,人性化,但性能出色,具有良好的用户体验,并实现了大数据采集系统快速自动采集业务信息,以帮助客户快速采集准确的客户信息
大数据挖掘和云计算技术
Mookewang的大数据采集系统是2018年的最新技术,它基于百度地图上披露的最新业务或公司信息,并通过大数据挖掘和云计算技术,准确匹配了城市关键字和行业关键字.
覆盖全国1,000多个县市
Quakewang大数据采集系统,覆盖全国近1000个地市及市级以上的城市,具有覆盖面广,海量最新业务数据信息数据库,通过大数据和云计算技术,快速处理分类,精确匹配
在360个行业中准确匹配数万个关键字
Quakewang大数据采集系统,涵盖360个行业和数以万计的关键字,用于精确匹配搜索,您可以选择座机或手机号码,并以最快的速度准确定位目标企业客户群,真正实现精准营销
更新日志
1. 增加登录界面的日志查看功能
2. 解决搜狗数据无法采集的问题
特殊说明
六个免费网站数据采集器(优采云,haia,cloud collection,ET,三个人,youcai cloud collection)的比较
采集交流 • 优采云 发表了文章 • 0 个评论 • 336 次浏览 • 2020-08-06 04:11
让我们对这些采集工具进行简单的比较.
1. 优采云
优采云应该是国内采集软件的成功范例之一,并且用户数量(包括收费用户)应该是最大的.
功能: 强大的功能,快速的速度,支持最多的网站以及丰富的扩展名.
优点: 功能齐全,采集速度较快,主要用于CMS,可在短时间内采集很多,过滤和更换都很好,更详细;许多人编写接口,规则和发布模块,并且接口相对完整. 支持的扩展非常易于使用,如果您是技术熟练的网站管理员,则可以使用PHP或C#开发任何功能扩展;附件采集功能非常完美.
缺点: 采集规则的汇编对于许多网站管理员而言并不是一个小门槛. 随着更多功能和更大软件的使用,内存和CPU资源将被更多占用,并且资源回收也无法得到很好的控制. 另外,绑定计算机的授权有时不方便. 它只能在Windows平台上使用,没有Linux版本.
技术: 论坛和许多帮助文件主要支持该技术. 有收费和免费版本.
优采云官方网站
2. 海纳
功能: 关键字捕获,您无需编写规则即可预览采集的内容.
优点: 它可以在网站上抓取很多关键字文章,这似乎很适合网站的主题,尤其是文章和博客.
缺点: 分类不便,即采集的文章不方便分类,手册(自动容易混淆),特定的界面,采集的内容有限,一次只能采集一次,分批采集是不可能的,它需要连接到网站的后端网页. 在安装过程中,需要海纳技术人员的现场技术支持很麻烦.
技术: 没有论坛. 收费,免费功能过于严格,就像鸡肋一样.
海纳官方网站
3. 云采集
功能: 优采云和海纳的优势完美融合,功能强大,速度快,关键字捕获,无需编写规则. 提供一个基于Web的界面,供第三方致电以进行创新.
优点: 功能强大,无需编写任何规则,易于使用,具有多线程,快速,可采集多个关键字,批量采集和批量存储,傻瓜采集,时间采集和发布,没有人值班,适合网站主题. 它可以与任何CMS紧密集成,例如PHP,ASP.NET(C#),JSP,Ruby等开发的CMS. 与网站的后端通道无缝对接,以方便文章发布. 安装简单,并且支持Windows和Linux.
缺点: 尽管它也相对知名,但是与优采云和Heina相比它具有相对较短的开发时间和相对先进的技术. 偶尔采集的内容不准确,但易于纠正和调整.
技术: QQ技术支持,论坛,微博. 有永久免费版和付费版. 付费版本还可以通过嵌入式代码资源交换免费使用,这非常灵活.
Cloud Collection官方网站
4.ET工具
特征: 无人看管,稳定,资源使用最少,基本安静.
优点: 无人值守,自动更新,用户群主要集中在长期潜水站长. 该软件清晰明了,所需功能也很完善,该软件是免费的,听说已经添加了中英文翻译功能的集合.
缺点: 对论坛和CMS的支持是平均水平.
技术: 论坛支持,该软件本身是免费的,但也提供付费服务. 帮助文件很少,上手并不容易.
ET官方网站
5. 三人排队
主要用于论坛集合,功能比较齐全. 首先,我不知道三星和优采云之间的关系是什么,但是界面和功能都不是同一模型.
功能: 对于大型论坛,移动,移动,快速而准确.
优点: 仍然适用于论坛,适用于论坛.
技术: 付费技术,免费广告.
缺点: 超级复杂,难以上手,并且对CMS的支持不佳.
三星官方网站
6. 优采云
功能: 允许您的新论坛在开始时拥有大量成员.
优点: 非常适合采集discuz论坛.
缺点: 过于具体且不兼容.
优采云官方网站
摘要: 追求简单易用,功能更完整的您可以选择云集合. 如果您想要一个非常完整的功能,则可以选择优采云. Cloud Collection和Youcai Cloud都可以快速采集大量资源来丰富网站内容. 如果您是论坛,请选择一个三人小组,该小组可以实现许多论坛功能,例如采集论坛,回复和移动. 对于长期站点,您可以选择ET或云集合. 花一些时间和理解是一个长期的好处. 它们都可以像打开QQ一样长时间运行,没有内存,并自动采集和更新. 至于海纳尔,他似乎没有编写规则,入门起来也很容易,但是发表文章则比较麻烦. 另外,这里仅提及六个主要采集工具. 实际上,还有网络矿工,网络神,易采矿,gooseeker,soukey,存钱罐采集器,超级采集器,千帆采集器等. 这些采集器也各有优缺点. ,但总的来说,它属于获取工具领域的第二梯队,因此我不再赘述. . . . . 查看全部
在当前的网站站长圈子中,有更多受欢迎的采集工具,但总而言之,还有一些较有名的免费工具: 优采云,Haina,Cloud Collection,ET,Threesome,Youcai cloud.
让我们对这些采集工具进行简单的比较.
1. 优采云
优采云应该是国内采集软件的成功范例之一,并且用户数量(包括收费用户)应该是最大的.
功能: 强大的功能,快速的速度,支持最多的网站以及丰富的扩展名.
优点: 功能齐全,采集速度较快,主要用于CMS,可在短时间内采集很多,过滤和更换都很好,更详细;许多人编写接口,规则和发布模块,并且接口相对完整. 支持的扩展非常易于使用,如果您是技术熟练的网站管理员,则可以使用PHP或C#开发任何功能扩展;附件采集功能非常完美.
缺点: 采集规则的汇编对于许多网站管理员而言并不是一个小门槛. 随着更多功能和更大软件的使用,内存和CPU资源将被更多占用,并且资源回收也无法得到很好的控制. 另外,绑定计算机的授权有时不方便. 它只能在Windows平台上使用,没有Linux版本.
技术: 论坛和许多帮助文件主要支持该技术. 有收费和免费版本.
优采云官方网站
2. 海纳
功能: 关键字捕获,您无需编写规则即可预览采集的内容.
优点: 它可以在网站上抓取很多关键字文章,这似乎很适合网站的主题,尤其是文章和博客.
缺点: 分类不便,即采集的文章不方便分类,手册(自动容易混淆),特定的界面,采集的内容有限,一次只能采集一次,分批采集是不可能的,它需要连接到网站的后端网页. 在安装过程中,需要海纳技术人员的现场技术支持很麻烦.
技术: 没有论坛. 收费,免费功能过于严格,就像鸡肋一样.
海纳官方网站
3. 云采集
功能: 优采云和海纳的优势完美融合,功能强大,速度快,关键字捕获,无需编写规则. 提供一个基于Web的界面,供第三方致电以进行创新.
优点: 功能强大,无需编写任何规则,易于使用,具有多线程,快速,可采集多个关键字,批量采集和批量存储,傻瓜采集,时间采集和发布,没有人值班,适合网站主题. 它可以与任何CMS紧密集成,例如PHP,ASP.NET(C#),JSP,Ruby等开发的CMS. 与网站的后端通道无缝对接,以方便文章发布. 安装简单,并且支持Windows和Linux.
缺点: 尽管它也相对知名,但是与优采云和Heina相比它具有相对较短的开发时间和相对先进的技术. 偶尔采集的内容不准确,但易于纠正和调整.
技术: QQ技术支持,论坛,微博. 有永久免费版和付费版. 付费版本还可以通过嵌入式代码资源交换免费使用,这非常灵活.
Cloud Collection官方网站
4.ET工具
特征: 无人看管,稳定,资源使用最少,基本安静.
优点: 无人值守,自动更新,用户群主要集中在长期潜水站长. 该软件清晰明了,所需功能也很完善,该软件是免费的,听说已经添加了中英文翻译功能的集合.
缺点: 对论坛和CMS的支持是平均水平.
技术: 论坛支持,该软件本身是免费的,但也提供付费服务. 帮助文件很少,上手并不容易.
ET官方网站
5. 三人排队
主要用于论坛集合,功能比较齐全. 首先,我不知道三星和优采云之间的关系是什么,但是界面和功能都不是同一模型.
功能: 对于大型论坛,移动,移动,快速而准确.
优点: 仍然适用于论坛,适用于论坛.
技术: 付费技术,免费广告.
缺点: 超级复杂,难以上手,并且对CMS的支持不佳.
三星官方网站
6. 优采云
功能: 允许您的新论坛在开始时拥有大量成员.
优点: 非常适合采集discuz论坛.
缺点: 过于具体且不兼容.
优采云官方网站
摘要: 追求简单易用,功能更完整的您可以选择云集合. 如果您想要一个非常完整的功能,则可以选择优采云. Cloud Collection和Youcai Cloud都可以快速采集大量资源来丰富网站内容. 如果您是论坛,请选择一个三人小组,该小组可以实现许多论坛功能,例如采集论坛,回复和移动. 对于长期站点,您可以选择ET或云集合. 花一些时间和理解是一个长期的好处. 它们都可以像打开QQ一样长时间运行,没有内存,并自动采集和更新. 至于海纳尔,他似乎没有编写规则,入门起来也很容易,但是发表文章则比较麻烦. 另外,这里仅提及六个主要采集工具. 实际上,还有网络矿工,网络神,易采矿,gooseeker,soukey,存钱罐采集器,超级采集器,千帆采集器等. 这些采集器也各有优缺点. ,但总的来说,它属于获取工具领域的第二梯队,因此我不再赘述. . . . .
ptcms采集系统的官方版本
采集交流 • 优采云 发表了文章 • 0 个评论 • 475 次浏览 • 2020-08-05 12:51
ptcms采集系统是基于PTFramework框架的全自动采集系统. 其功能是实现新型cms系统的资源自动采集. 这次,我们将为您带来ptcms集合系统源代码的破解版的下载,以及详细的安装教程. 需要cms系统助手的朋友不妨尝试一下! ptcms功能: PT单一新颖的程序响应式布局,多屏适配,云采集,站点范围的HTML,可让您快速构建站点! PT模仿站工具箱可远程打包和下载各种资源,例如CSS,图片等,从而使模仿站变得越来越简单. 网站定制服务的专业技术团队将竭诚为您服务. 我们为您提供程序定制,二次开发和模板设计. 可靠的安全保护基于PTFramework框架,严格的代码编写可确保系统安全,可靠和稳定地运行. ptcms安装教程: 1.环境要求linux + nginx + php5.6 + mysql5 + Memcache 2.建议安装宝塔linux系统环境并建一个网站. 文件夹工具下的nginx.conf的内容是伪静态添加的: Markupif(!-e $ request_filename){?rewrite ^ /(. *)/index.phps=$1 last; 3.授予目录777的权限,否则将无法安装和自动采集新颖网站的源代码. 4.构建它之后,直接打开您的网站并根据提示输入名称,数据库链接信息,设置网站后端帐户密码... 5.然后转到后端以配置采集信息或导入采集规则,并添加任务. 慢慢学习. 6.一些小错误,由于个人能力有限,如果大个子修复,请记住与我分享,谢谢~~ 7. PC站和WAP站的域名是分开的,设置在后台〜新颖cms捕获相关视频: ptcms平台简介: PTCMS成立于2009年12月,主要从事软件开发,程序定制,网络获取,电子商务,搜索引擎优化和其他方面的研发. 2014年,我们成立了一个新团队,成员来自百度,新浪,360,移动和其他主要公司. 我们将继续整合多种资源,完善产品结构体系,并继续以原创内容发布程序为主要方向,依靠强大,稳定,高负荷的PTCMS FrameWork作为核心软件框架,努力注入新的活力. 进入互联网. 软件截图2