分布式数据采集系统（渔夫）产品

一、业务驱动力

随着互联网深度发展，不同维度的数据体量持续激增，如何挖掘其中的商机、舆情、观点和权威公示等价值数据，各行业都面临着同样的问题：

如何精准获取互联网大数据并赋能于企业运营发展？

如何解析不同网站页面规则快速获取价值数据？

如何简易部署和配置便能既见既得地采集数据？

如何动态化、周期性、高效性地自动采集海量数据?

二、总体解决方案

“渔夫”是基于分布式架构开发的一款功能齐全、操作简单、高效作业的互联网大数据采集产品，帮助各行各业客户精准获取、有效整合互联网数据，并有效运用于实际业务场景，为构建上层应用数据产品和数据服务提供基础能力。

三、客户价值

帮助客户对内进行多渠道数据整合，补充现有数据视图和基础信息库能力；对外开展数据运营，提高企业精准运营和精准营销。

通过采集泛行业基础数据并积累，构建各个行业信息库、产品库等，如终端信息库、汽车信息库、竞品信息库、酒店信息库等；

跨域整合数据资源，构建大数据资源池，完善数据维度和提高数据精度；

与业务数据融合，支撑市场洞察、竞争分析、舆情事件等分析应用，提高企业竞争力。

四、我们的优势

适配多种采集入口，支持网页文本、图片、附件、流媒体文件等多种数据元素采集，满足多种数据需求；

可以对目标网站数据源采集进行定制化能力封装，节省用户操作成本；

可提供产品部署、接口能力和数据输出的交付形式，灵活解决不同业务类型需求；

可与DPI数据解析、文本挖掘和知识图谱等技术融合，打造用户行为分析、用户意图识别等营销产品；

产品成熟度高，配置功能流程化、可视化和智能化，采集过程可监控，简单易用。

五、成功案例

“渔夫”已在电信集团、广西电信、江西电信、陕西电信等多地部署和应用，已完成企业公示、酒店信息、招标公示、地图元素等千万级数据的采集和结构化梳理，为用户在构建政企客户树、商机挖掘、辅助一线营销等方面带来显著成效。