Flink实时数仓CDC对比选型

实时数仓CDC对比选型

实时数仓中数据同步需要选取一个CDC工具,这里对比几种CDC的特点。

Flink CDCMaxwellCanal
断点续传有(通过checkpoint)有(保存在MySQL)有(保存在本地磁盘)
数据初始化功能有(多库多表)有(单表)
SQL与数据条数关系一对一(炸开)
封装格式自定义JSONJSON(c/s自定义)
高可用运行集群高可用即可集群(ZK)

综上可以看出,实时数仓中Flink CDC使用起来最方便。


版权声明:本文为yunweijie_cn原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。