文章 2024-10-14 来自:开发者社区

大数据-156 Apache Druid 案例实战 Scala Kafka 订单统计

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(已更完) ...

大数据-156 Apache Druid 案例实战 Scala Kafka 订单统计
问答 2024-06-15 来自:开发者社区

消息队列Kafka版监控统计的是压缩后的流量还是解压后的流量

消息队列Kafka版监控统计的是压缩后的流量还是解压后的流量

阿里云文档 2024-04-09

通过仪表盘统计和观测kafka重点指标项

借助于阿里云ARMS Prometheus监控服务和Grafana的指标存储和展示能力,云消息队列 Kafka 版提供仪表盘功能。该功能可帮助您一站式、全方位、多维度地统计和观测指标,进而快速了解业务的运行状态。

文章 2023-11-01 来自:开发者社区

195 Spark Streaming整合Kafka完成网站点击流实时统计

1.安装并配置zk2.安装并配置Kafka3.启动zk4.启动Kafka5.创建topicbin/kafka-topics.sh --create --zookeeper node1.itcast.cn:2181,node2.itcast.cn:2181 \ --replication-factor 3 --partitions 3 --topic urlcount6.编写Spark Strea....

195 Spark Streaming整合Kafka完成网站点击流实时统计
问答 2023-08-20 来自:开发者社区

一个Flink SQl的job中,消费同一个kafka,使用滚动窗口计算每小时的统计,使用渐进式窗?

一个Flink SQl的job中,消费同一个kafka,使用滚动窗口计算每小时的统计,使用渐进式窗口计算零点到当前的统计;现在遇到一个问题:滚动窗口计算 需要设置 table.exec.emit.early-fire.enabled = true; table.exec.emit.early-fire.delay = 10000; 也就是每10秒去触发计算一次(因为页面要展示,不能每一个小时计算....

问答 2023-08-16 来自:开发者社区

Flink CDC中读取kafka数据并进行统计写入数据库为什么统计可以写入copy的数据不能写入?

Flink CDC中读取kafka数据并进行统计写入数据库并用侧输出流copy一份kafka的流直接写入数据库。为什么统计可以写入,copy的数据不能写入,查询一直是空表?

问答 2023-08-01 来自:开发者社区

问个小白问题:Flink SQL里,source读取kafka数据,然后根据orderId 统计总?

问个小白问题:Flink SQL里,source读取kafka数据,然后根据orderId 统计总量;我使用 SELECT COUNT(orderId) FROM source_table;的方式来计算总数;我的疑问点是,flink是如何处理这些source数据的,比如 kafka推过来 100W条的数据,都在 flink的内存里吗?

问答 2023-01-09 来自:开发者社区

A表 left join B表后的结果写入upsert-kafka,下游统计时如何在窗口内获取到最新

我A表 left join B表后的结果写入upsert-kafka,下游统计时如何在窗口内获取到最新的数据啊?

问答 2022-08-12 来自:开发者社区

各位,我flink读取kafka两个topic数据,然后双流join,把统计数据写到mysql,现在

各位,我flink读取kafka两个topic数据,然后双流join,把统计数据写到mysql,现在需要切换新的kafka集群,要做到业务方无感知,数据不能延迟也不能有误差。我想了下,从checkpoint重启肯定不行了,但是不从checkpoint重启中间状态就没了,有谁遇到过或有什么解决办法吗

文章 2022-02-16 来自:开发者社区

Kafka项目实战-用户日志上报实时统计之分析与设计

1.概述   本课程的视频教程地址:《Kafka实战项目之分析与设计》    本课程我通过一个用户实时上报日志案例作为基础,带着大家去分析Kafka这样一个项目的各个环节,从而对项目的整体设计做比较合理的规划,最终让大家能够通过本课程去掌握类似Kafka项目的分析与设计。下面,我给大家介绍本课程包含的课时内容,如下图所示:   接下来,我们开始第一课时的学习:《项目整体概述》。 2.内容...

Kafka项目实战-用户日志上报实时统计之分析与设计

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

云消息队列

涵盖 RocketMQ、Kafka、RabbitMQ、MQTT、轻量消息队列(原MNS) 的消息队列产品体系,全系产品 Serverless 化。RocketMQ 一站式学习:https://rocketmq.io/

+关注