IT博客汇
  • 首页
  • 精华
  • 技术
  • 设计
  • 资讯
  • 扯淡
  • 权利声明
  • 登录 注册

    CDC 整合方案:MySQL > Flink CDC > Kafka > Hudi

    bluishglc发表于 2024-02-20 11:27:20
    love 0
    我们用 Flink CDC 完成 CDC 数据入湖任务:借助 Flink CDC 从源头数据库接入数据并写入到 Kafka 中,然后再使用 Flink 将数据写入到 Hudi 表中,所以这是一个完整的端到端的解决方案。上一篇文章我们省略了搭建 Kafka Connect + Debezium MySQL Connector 采集 CDC 数据的环节,因为这部分操作很复杂,Flink CDC 在应用和架构上确实比 Kafka Connect + Debezium MySQL Connector 的组合简单得多


沪ICP备19023445号-2号
友情链接