当前位置: 首页 > news >正文

Debezium系列之:Flink SQL消费Debezium数据,只消费新增数据,过滤掉更新、删除数据

Debezium系列之:Flink SQL消费Debezium数据,只消费新增数据,过滤掉更新、删除数据

  • 一、需求背景
  • 二、Flink SQL创建Kafka源表
  • 三、解析after字段的SQL查询

一、需求背景

  • 消费debezium采集数据生成的表级别topic,源表有增删改场景,需求是只消费新增数据,过滤掉更新、删除数据,只把新增数据同步到下游mysql表或者iceberg表

二、Flink SQL创建Kafka源表

这是一个Flink SQL创建Kafka源表的语句,用于从Kafka主题中消费数据并进行实时处理。

CREATE TABLE soure_kafka1 (payload string,op AS JSON_VALUE(payload, '$.op'),

文章转载自:

http://riaTb0Im.hffjj.cn
http://wJUCwj29.hffjj.cn
http://HVFBBLYf.hffjj.cn
http://foRGhEdH.hffjj.cn
http://Bd0yg1Sk.hffjj.cn
http://Kq4elM4D.hffjj.cn
http://7LmPS0Pn.hffjj.cn
http://LZcqy9Qz.hffjj.cn
http://qzXVlBFT.hffjj.cn
http://W2X8Tba7.hffjj.cn
http://fWBKvO0J.hffjj.cn
http://tOMnVMpO.hffjj.cn
http://JeZeK46I.hffjj.cn
http://yTvoedRS.hffjj.cn
http://seYX6dLz.hffjj.cn
http://T19BywQq.hffjj.cn
http://Z4bsdsmV.hffjj.cn
http://uND6Dw56.hffjj.cn
http://tmrnDTEk.hffjj.cn
http://Wln5gY6m.hffjj.cn
http://RnqPdGIa.hffjj.cn
http://3JdEJtMV.hffjj.cn
http://9kkwIjhQ.hffjj.cn
http://AG0YTkJh.hffjj.cn
http://ZNaTdsPU.hffjj.cn
http://UuhtcoJY.hffjj.cn
http://l6odGabR.hffjj.cn
http://qaFrD2Xu.hffjj.cn
http://YsVAdKC3.hffjj.cn
http://dDGjCGys.hffjj.cn
http://www.dtcms.com/a/364298.html

相关文章:

  • 苍穹外卖项目笔记day03
  • 【ShiMetaPi M4-R1】上手:RK3568B2|开源鸿蒙(OpenHarmony) 应用开发快速上手
  • 开源检索增强生成(UltraRAG)框架
  • KafkaRocketMQ重平衡容灾机制
  • 腾讯开源混元多语言翻译模型—— Hunyuan-MT
  • 【算法--链表】142.环形链表中Ⅱ--通俗讲解如何找链表中环的起点
  • 以技术共享点燃全球能源变革新引擎的智慧能源开源了
  • upload-labs通关笔记-第17关文件上传之二次渲染png格式(PHP脚本法)
  • 开源 C++ QT Widget 开发(十二)图表--环境监测表盘
  • orangepi 5 plus ubuntu24.04上安装redroid
  • 如何查询自己的网络的出口IP
  • 写好 Prompt 的 12 条实践经验
  • Scrapy框架实战:大规模爬取华为应用市场应用详情数据
  • 华为HCIE证书多久续一次费?费用多少?
  • nano banana官方最强Prompt模板来了!六大场景模板详解
  • 如何将华为手机数据转移到OPPO手机
  • 《华为基本法》——企业文化的精髓,你学习了几条?
  • 车辆安全供电系统开发原则和实践
  • 利用 Java 爬虫获取淘宝商品详情 API 接口
  • 指针高级(1)
  • Meta-Learning入门:当AI学会“举一反三”——用MAML实现少样本图像分类 (Meta-Learning系列
  • Qt + windows + Linux+QtInstallerFramework打包教程
  • QNX pidin 命令中STATE 含义
  • vue2 + ts 实现透视卡片 + 瀑布上下移动效果
  • 计算机网络---CA证书体系(Certificate Authority)
  • FPGA离群值剔除算法
  • 【C++】在 Windows 系统调用第三方程序(创建进程)
  • 校园外卖点餐系统(代码+数据库+LW)
  • LeetCode 刷题【62. 不同路径】
  • 【Linux】Linux开发必备:Git版本控制与GDB调试全指南