系统价值:
自动实现源生产系统到大数据中心的数据归集或迁移工作,兼容各异构数据源,快速执行大规模并行数据归集。同时系统可以作为机构到大数据中心的前置机使用。
典型用户:
政府委办局、各行业企业,期望界定数据合理使用边界,跨网数据安全交换、实现数据复制同步、ETL、数据备份/恢复、汇聚整合、读写分离、数据分发服务等应用场景的用户。
解决用户痛点:
针对归集速度太慢,源数据类型复杂,需要大量人工做ETL开发的现状。迁移中心引导式界面操作和监控提醒,解决了长期的人力投入、性能不足和复杂性问题,不依赖人工ETL开发,就建立了机构自身的数据湖。
产品优点:
1、适配兼容:兼容并适配不同类型的数据库
2、快速: 速度非常快,适配大规模数据的并行归集
3、操作简便:引导式操作,三部完成,远没有ETL开源产品的操作复杂性
典型功能:
1、数据在线填报
2、数据在线抽取:数据库类型自动转换;按全库同步,或选择多表同步;全量、增量、update_time更新数据;自定义条件过滤,流量限速;支持代码映射转化
3、API读取数据落地
4、文件同步上传数据
5、日志binlog实时同步数据
6、采集日志管理
应用场景:
1、数据迁移:实现异构数据库之间的数据迁移,不需要更多的人工开发
2、数据灾备和读写分离:可以作为数据容灾使用,也可以作为读写分离使用,提升数据保护能力,减少主数据库的性能压力。
3、数据湖建设:从不同类型的数据库和EXCEL文本数据中筛选或过滤数据,建立数据湖。
4、大数据归集:大规模归集不同类型的数据库和EXCEL文本数据,实现多套前置机节点到数据中心的数据归集。