IT博客汇
首页
精华
技术
设计
资讯
扯淡
权利声明
登录
注册
Flink 流式读取 Debezium CDC 数据写入 Hudi 表无法处理 -D / Delete 消息
bluishglc
发表于
2024-02-01 12:30:06
love
0
问题场景是:使用 Kafka Connect 的 Debezium MySQL Source Connector 将 MySQL 的 CDC 数据 (Avro 格式)接入到 Kafka 之后,通过 Flink 读取并解析这些 CDC 数据,然后以流式方式写入到 Hudi 表中,测试中发现,INSERT 和 UPDATE 消息都能很好的处理,但是,-D 类型的 Delete 消息被忽略了,即使已经开启了 ‘changelog.enabled’ = ‘true’ ,既然无效。