Flink CDC中flinksql消费kafka的数据写入doris中,没报错,但是也没有输出,大家有遇到过么?

在使用Flink CDC将Kafka中的数据写入Doris时,如果没有任何错误信息但也没有输出结果,可能的原因和解决方法包括: 检查源表的元数据:确保从Kafka读取的数据列与目标Doris表的列相匹配。这包括列的数量、名称和类型。 确认数据是否正确流入Kafka:可以使用如kafka-consol...

Flink CDC中flinksql消费kafka的数据写入doris中,没报错,有遇到过么?

Flink CDC中flinksql消费kafka的数据写入doris中,没报错,但是也没有输出,大家有遇到过么?

消息队列Kafka入门课程

4 课时 |
3098 人已学 |
免费

分布式消息系统 Kafka 快速入门

24 课时 |
640 人已学 |
免费
开发者课程背景图
FlinkSQL 实时采集Kafka内容到MySQL(实战记录)

FlinkSQL 实时采集Kafka内容到MySQL(实战记录)

01 引言最近在做实时采集Kafka发布的内容到MySQL,本文记录一下关键的点,细节不再描述,希望能帮助到大家。02 实现2.1 添加依赖在工程,除了添加基础的Flink环境依赖,还需要添加flink-connector-kafka的依赖:<dependency> <groupI...

flinkSQL 读kafka写hudi表 写入巨慢,有遇到过的没?

flinkSQL 读kafka写hudi表 写入巨慢,有遇到过的没?

请教一个问题 flinksql 中 kafka 关联 多个 hbase 之后,有遇到过的吗?

请教一个问题 flinksql 中 kafka 关联 多个 hbase 之后,使用 Event Time Temporal Join 关联,然后我的kafka数据字段就变成null了 有遇到过的吗?from kafka_rcsp_label_table t1left join hbase_mb_vi...

flinksql消费kafka,没有消费记录的分区在sp的时候是不是不保存偏移量?

flinksql消费kafka,没有消费记录的分区在sp的时候是不是不保存偏移量?

flinksql 怎么使用rebalence?kafka单个分区lag很高 flinksql没法搞?

flinksql 怎么使用rebalence?kafka单个分区lag很高 flinksql没法搞啊

Flink CDC这个权限问题的么,场景是从Kafka -> hive ,通过FlinkSQL实现?

Flink CDC这个权限问题的么,场景是从Kafka -&gt; hive ,通过FlinkSQL实现,在dolphinscheduler调度。Permission denied: user=dolphinscheduler, access=READ, inode="/warehouse/tabl...

我们的FlinkSQL数据同步任务,从kafka(ogg-json)同步到StarRocks,资源配

我们的FlinkSQL数据同步任务,从kafka(ogg-json)同步到StarRocks,资源配置是JM 1G,TM 1G,单并行度,数据量也不大(单日500W),为什么老是运行大概2~3天会内存超限,最后Container被Yarn Kill掉呢?这个里面也没有用到状态相关的

问一个现象的解决方法,flinksql从kafka读数据写入es,当任务运行一段时间,es突然断掉?

问一个现象的解决方法,flinksql从kafka读数据写入es,当任务运行一段时间,es突然断掉一个节点,恢复后,该flink任务会卡死,即写入es的那个subtask会变成100%busy这个如何解决?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

消息队列
消息队列
消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。
20+人已加入
加入
相关电子书
更多
消息队列 Kafka 版差异化特性
2019大数据技术公开课第五季—kafka 数据如何同步到 MaxCompute
任庆盛|Flink CDC + Kafka 加速业务实时化
立即下载 立即下载 立即下载