客户需求
某银行是西部和长江上游地区成立最早的地方性国有股份制商业银行,西部首家“A+H”上市城商行。
为满足行内各种数据交换需求,某银行决定替换传统ETL数据同步模式,以真正实现数据的实时同步和应用,打通各部门之间数据的烟囱,提高数据交换处理的准确性与高效性。
方案描述
•中间机部署,高可用模式;
•支持视图、复杂ETL语句自定义批量调用;
•定时调度同步,对作业设置定时任务;
•包含Oracle、DM、Hive、TDSQL、MySQL、Kafka等数据库与数据库、数据库与文件以及文件与文件之间的相互数据流动。
实施效果
•高效、稳定、实时的数据交换共享解决方案,极大地提升了某银行的数 据处理能力和业务效率;
•超越原数仓平台ETL卸数速度(1G每分钟);
•未跑批时,CDC实时同步分析延迟不超过3s。