非入侵式增量数据采集技术,通过对于源端生产库的日志文件进行解析,实时获取增加数据。数据抽取的同时,保证对于源端无压力,保证数据传输的实时性。
内置丰富转化组件
内置多达200多种数据转化组件,以满足数据清洗、加工、统计等各种使用场景。
异常处理及自恢复
对系统核心组件实时多角度监控,一旦发生故障,自动进行诸如:网络重连、进程重启、系统恢复等操作,以保证系统稳定运行,降低整体系统维护工作量。
内存流式处理技术
采用内存流式处理技术,以应对源端大数据量及复杂数据转换场景,通过流水线式的处理机制,将处理流程整体处理时间压缩到与单个组件的处理时间上,实现数据实时同步秒级延时。
简洁易用
图形化抽取流程设计,内置大量可视化图形转换组件,用户无需进行任何脚本语言编写,通过拖拽方式即可实现数据集成的快速开发和部署。
适用场景 :数据归集、数据同步、数据实时采集、异构数据源同步、数据上云、数据回流等。
应用成效
美创数据支撑平台在实践检验中交出了一张优异的成绩单,稳定性、可管理性、拓展性、灵活性均得到用户认可,成功赋能用户数据治理工作。
在医保局—医疗保障基金综合监管系统建设中,美创数据支撑平台完成对医保参保库、资源库、结算库,稽核库、异地就医等各类业务数据库的历史全量数据抽取及增量数据实时采集工作,为医疗保障数据大脑和医疗保障基金综合分析提供稳定、精准、实时的数据保障。
部分建设成果展示
此外,在卫健委、港口、人社等行业中,数据支撑平台依靠先进的底层架构设计,无侵入、可续传、实时完整的数据采集能力,完成各类业务系统的数据采集以及挖掘,在时效性方面达到秒级同步,有效为各项数据业务创新提供能力支撑。