统基于Oracle GoldenGate实时采集/定时任务实现数据同步平台
实时同步:
模型配置,通过配置数据源,可以读取源库的库表结构到本地,同时根据业务进行表结构的微调。
同步,通过中间件OGG for BigData,将Oracle数据库中的变化数据实时传输到Kafka。服务端作为消费者,处理Kafka中的数据,将数据新增或更新到CDR库中。
主题监控,查看Kafka消费信息,监控消费速率,偏移量,待同步数据等。
定时任务:
集成Kettle,实现在线编辑ktr,支持定时增量或全量抽取数据 。
系统监控:
实现对OGG进程状态的实时监控,远程启停,参数配置。
医疗健康
大数据