<listing id="7jjxh"><cite id="7jjxh"></cite></listing>
<var id="7jjxh"><dl id="7jjxh"><progress id="7jjxh"></progress></dl></var>
<menuitem id="7jjxh"><dl id="7jjxh"></dl></menuitem>
<menuitem id="7jjxh"></menuitem>
<var id="7jjxh"></var>
<var id="7jjxh"></var>
<var id="7jjxh"></var>
<var id="7jjxh"><strike id="7jjxh"><listing id="7jjxh"></listing></strike></var>
<var id="7jjxh"><video id="7jjxh"><thead id="7jjxh"></thead></video></var>
"

✅十大信誉彩票平台✅品牌实力,资金雄厚,十大信誉彩票平台,诚信为本,原生态App体验千百款游戏,十大信誉彩票平台,7x24服务,欢迎您来体验!

<listing id="7jjxh"><cite id="7jjxh"></cite></listing>
<var id="7jjxh"><dl id="7jjxh"><progress id="7jjxh"></progress></dl></var>
<menuitem id="7jjxh"><dl id="7jjxh"></dl></menuitem>
<menuitem id="7jjxh"></menuitem>
<var id="7jjxh"></var>
<var id="7jjxh"></var>
<var id="7jjxh"></var>
<var id="7jjxh"><strike id="7jjxh"><listing id="7jjxh"></listing></strike></var>
<var id="7jjxh"><video id="7jjxh"><thead id="7jjxh"></thead></video></var>
"

解决方案

当前位置:首页>解决方案

互联网数据采集系统

时间:2021-04-21   访问量:131

微信图片_20210421095454.jpg



?  关注站点实时监控采集;支持对特定的网站、论坛、搜索引擎、社交软件、境外媒体等进行采集;

?  提供稳定的常态化数据采集;采集数据类型需覆盖文本、图片、音频、视频,可按需扩充;

?  指定网站数据监测采集;支持用户自定义采集对象;

?  元搜索方式采集:主流搜索引擎以及重点网站站内搜索引擎;

?  支持通过关键词对主流搜索引擎进行图片、音视频采集及下载;支持以图找图;

?  支持对目标网站特定数据的自动批量下载;

?  支持多任务高并发的数据采集模式;支持分布式采集,支持单程序多线程采集;

?  具备采集过程状态监控的功能;实时监测采集集群规模、物理节点数量、软件运行状态等并记录采集日志,这些状态信息将提供给采集任务管理与调度???,从而对任务执行情况进行动态监测;

?  具备采集状态异常告警功能;在采集系统意外中断或故障、采集失败时能够发出告警信息;

?  具备信息采集规则配置的功能;支持配置xpath规则;

?  具备采集模板配置的功能;用户可维护自定义采集模板;

?  具备采集站点配置的功能;支持添加定向采集站点、全网采集站点;

?  具备采集任务调度管理的功能,可接收并管理多个采集任务;

?  具备脏数据过滤、数据去重、数据抽取等功能;基于机器学习的垃圾过滤机制可以自动过滤广告、水贴等无效垃圾信息;

?  具备按模板进行数据属性值填补、属性值归一化功能;

?  具备多类型数据存储功能;数据类型需覆盖文本、图片、音频、视频,可按需扩充;

?  具备增量索引功能;支持按天、周或月自建索引;

?  具备快速检索与统计功能;

?  支持分布式部署;

?  采集支持网站数量:≥20000个;采集对象数量无限制;

?  定向监测网站的数量:≥500个;采集对象数量无限制;

?  定向监测账号和公众号覆盖数量:≥5万个;采集对象数量无限制;

?  特定数据日均更新频次:≥8/天;更新频率可配置;

?  对关键站点采全率:≥98%;

?  定向监测对象采集轮巡周期:≤5分钟;轮询频率可配置;

?  支持并发元搜索采集任务数量:≥200个;采集任务数量可配置;

?  状态监控信息反馈时间:≤0.1秒;

?  采集任务监测数量:≥200个;数量可配置

?  管理调度任务数量:≥200个;数量可配置

?  广告类信息过滤准确率:≥98%;

?  文本URL排重准确率:≥99%;

?  数据排重率:≥98%;


上一篇:句容曙光国际大酒店无线网络建设

下一篇:没有了!

发表评论:

评论记录:

未查询到任何数据!

在线咨询

点击这里给我发消息 售前咨询专员

点击这里给我发消息 售后服务专员

在线咨询

服务通话

24小时服务咨询

请输入您的联系电话,座机请加区号

服务通话

微信扫一扫

微信联系
返回顶部
十大信誉彩票平台