网络矿工数据采集器是一款面向个人及专业用户提供的一款专业的数据采集软件,即适用于简单化配置操作,也适应针对复杂数据采集的能力,所见即可采。网络矿工独有的代理轮询采集机制,可有效的解决网站屏蔽问题,同时还提供了网络雷达功能,可用于互联网数据动态监控,一套软件的价格两套软件的功效,绝对是您的首选!
1、数据采集
以数据采集为核心提供了导航、多页、代理采集、跨层采集、文件下载、编码解码、参数配置等功能,确保在数据采集时可应对各种复杂的采集配置需求;
2、强大的采集能力
支持各种编码、压缩采集,可实现U码转换、HTML代码转换,支持cookie、自定义HTTP Header,支持代理轮询、采集延时等多种设置,支持各种排重,具备断点续采能力;
3、可视化及智能
全面支持可视化配置,从导航、翻页及数据采集规则,都支持可视化的配置;
4、数据加工
提供了各种字符串的加工方式,可边采集边进行数据加工,同时也提供了专用的数据加工工具,可进行数据表合并、创建列、数据格式化等多种方式,最终可获取到高质量的数据信息;提供OCR识别能力,图片水印功能;
5、数据发布
数据可发布到数据库(Access、mssqlserver、MySql),也可直接发布数据到网站,同时还提供了直接入库的模式,适应采集海量数据;
6、多种工具
数据加工发布工具、日志工具、HTTP嗅探器、编解码助手、正则分析器、配置助手,全面辅助您完成配置工作;
7、插件支持
支持。net插件,用户可基于接口扩展自己个性化的功能,网络矿工提供了cookie获取、数据加工及数据发布的接口操作;
8、其他
支持灵活的定时采集策略、数据监控、静默运行等多种附加功能,不仅可以方便用户的采集工作,也从数据采集实用角度大大丰富的软件的功能应用;当前版本为免费版本,可放心使用,部分功能在免费版本中会有限制!
v5.1
1、增强了数据加工的性能
2、提高了数据发布速度
140.5M / 09-05
76.4M / 03-25
55M / 06-05
237.9M / 04-13
900.9M / 03-02
96.2M / 07-06
311.2M / 07-06
335M / 07-06
200M / 07-06
413.8M / 07-06
484.7M / 09-27
165.4M / 09-05
353.9M / 06-05
131.8M / 04-13
195.6M / 03-03
45.6M / 09-08
665.2M / 07-06
2.84G / 07-06
93M / 07-06
338.3M / 07-06
1.38G / 07-26
488.3M / 07-16
109.8M / 06-03
142M / 01-08
1.2M / 11-23
548.8M / 04-13
1.6M / 04-13
1.48G / 03-18
646.6M / 03-03
133.7M / 03-03
110.5M / 09-05
33.4M / 09-05
325.8M / 08-12
60M / 04-29
254M / 04-25
659M / 04-23
1M / 12-26
253.4M / 12-08
253M / 12-08
1.19G / 11-16
369M / 09-22
181.5M / 09-22
201.2M / 09-05
488.3M / 07-16
248.9M / 12-08
248.9M / 12-08
100.6M / 03-06
148.9M / 03-06
1.12G / 07-06
1.25G / 07-06
1.76G / 09-22
1.92G / 04-17
116.2M / 04-10
201.5M / 04-13
7.31G / 07-01
94.3M / 07-06
2.48G / 07-06
7.63G / 07-06
1M / 07-06
778.1M / 07-06
561.8M / 07-11
72M / 07-06
548.7M / 07-06
1.00G / 07-06
9.13G / 07-06
126.2M / 07-06
72M / 07-06
105.1M / 07-06
132M / 07-06
132M / 07-06