Flink1.11中kafka producer的sink,如果使用flink默认的分区#Flink

Flink1.11中kafka producer的sink,如果使用flink默认的分区器是不是只会把数据发往目标topic的一个分区?#Flink

kafka分区leader切换?报错

kafka+storm构架 kafka 版本kafka_2.10-0.8.2.1,topic 副本数为2。zk版本3.4.6,storm版本apache-storm-0.9.4 近期storm消费总发现下面这样的报错:storm.kafka.FailedFetchException: Error f...

消息队列Kafka入门课程

4 课时 |
3098 人已学 |
免费

分布式消息系统 Kafka 快速入门

24 课时 |
640 人已学 |
免费
开发者课程背景图

集群有30个slot ,source kafka单topic有100个分区,怎么设置并行#Flink

集群有30个slot ,source kafka单topic有100个分区,怎么设置并行度?#Flink

麻烦问一下,flink kafka支持动态更改分区么,是用的assgin订阅么?#Flink

麻烦问一下,flink kafka支持动态更改分区么,是用的assgin订阅么?#Flink

flink kafka consumer 正则消费,多分区动态发现

flink kafka consumer 正则消费,多分区动态发现

Kafka的同一分区副本数据是如何同步的

本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 https://developer.aliyun.com/article/706511 点击链接欢迎加入感兴趣的技术领域群。

Apache Flink - kafka生产者将消息传递给kafka主题,但在不同的分区上

现在我的flink代码正在处理一个文件并使用1分区将kafka主题上的数据下沉。 现在我有一个带有2分区的主题,我希望flink代码使用DefaultPartitioner在这两个分区上接收数据。 你能帮帮我吗? 这是我当前代码的代码片段: DataStream speStream = inputS...

Kafka制作人使用默认分区

现在我的kafka生产者正在将所有消息下沉到kafka主题的单个分区,该分区实际上有超过1个分区。如何创建将使用默认分区器并在主题的不同分区之间分发消息的生产者。我的kafka制作人的代码片段:Properties props = new Properties();props.put(Produce...

Flink kafka - Flink作业不向不同分区发送消息

我有以下配置:一个带有2个分区的kafka主题一个zookeeper实例一个kafka实例两个具有相同组ID的消费者Flink工作片段:speStream.addSink(new FlinkKafkaProducer011(kafkaTopicName,new SimpleStringSchema(...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

消息队列
消息队列
消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。
20+人已加入
加入
相关电子书
更多
消息队列 Kafka 版差异化特性
2019大数据技术公开课第五季—kafka 数据如何同步到 MaxCompute
任庆盛|Flink CDC + Kafka 加速业务实时化
立即下载 立即下载 立即下载