数据增量变化跟踪采集CDC系统

DStream数据转换基于应用广泛的开源Kettle,DStream兼容Kettle组件。Kettle组件可以直接在DStream中进行调度、监控。

DStream可以看成一个加强版的Kettle.提供了全部Kettle的功能，而且提供了更强的分布式任务调度服务、任务监控等管理功能。以及修改了部分Kettle组件的BUG并且加强了部分组件功能。更加重要的是DStream还提供一系列全新组件，支持文本分析、大数据功能、自然语言分析和人工智能等。

Service consultation

高可用
分布式集群架构
建立分布式调度架构基于微服务体系，实现服务集群和任务分片2层维度分解，保证系统高可用和稳定性。
高时效
流模式数据处理
数据处理由批式处理向流式处理转变，基于高可用的分布式集群架构基础，提升数据加工处理的及时性，更好的应对海量大数据的处理需求。
全监控
资源和业务实时跟踪
从服务器资源、数据库资源、网络资源到数据处理任务、数据流日志等全方面跟踪管理，和预警监控。通过多屏实现全面监控和管理。
多形式
应用和服务支持扩展
实现结构化数据和非结构化数据、外购数据和自产数据、传统关系型数据和海量大数据多种形式数据处理；包括数据处理、网页爬虫、数据校验等服务功能