平台简介

什么是火车头私有云

火车头私有云,为我公司对于数年的采集能力进行总结、精炼之后而诞生的一款采集产品。

其采用分布式的采集方案,极大化的利用现有的采集能力,以达到快速、大量的数据采集的目的。

火车头私有云的特点及优势

分布式采集方案

将所有的“采集任务”动态的调整分配于多个采集节点上,合理的利用系统资源进行数据采集。

模块化采集方案

对于采集流程进行精简整合,将排重、代理、共享、发布四大模块提取并且模块化,使得客户在采集时可以真正的关注与数据的采集本身。

可视化的数据采集流程

整个采集流程实现全程的监控,通过运行日志、实时采集数据、采集数据统计等多个方面对于整个采集流程进行监控。

多模式的数据管理

除了基础的数据库保存数据外,提供了通过ElasticSearch进行数据保存的方案,相比于基础数据库,更适合对于数据进行统计整理。

可扩展的数据处理服务

除了基础的采集服务之外,可以订制扩展诸如分词、打码等更多的数据处理服务,使得客户可以更加精准的获取到最终的数据。