阿里云文档 2024-10-18

表格存储对接 Spark Streaming 场景案例的视频介绍

表格存储对接 Spark Streaming 场景案例的视频介绍

阿里云文档 2024-10-18

表格存储对接 Spark Streaming 的操作示例

表格存储对接 Spark Streaming 的操作示例

阿里云文档 2024-10-18

表格存储对接 Spark Streaming 介绍

表格存储对接 Spark Streaming 介绍

阿里云文档 2024-07-05

如何在Spark Streaming SQL中使用INSERT INTO语句

StarRocks中INSERT INTO语句的使用方式和MySQL等数据库中INSERT INTO语句的使用方式类似, 但在StarRocks中,所有的数据写入都是一个独立的导入作业 ,所以StarRocks中将INSERT INTO作为一种导入方式介绍。本文为您介绍Insert Into导入的使用场景、相关配置以及导入示例。

阿里云文档 2024-07-05

如何通过Spark Structured Streaming流式写入Iceberg表

本文为您介绍如何通过Spark Structured Streaming流式写入Iceberg表。

问答 2021-01-21 来自:开发者社区

spark streaming job运行卡住

提交任务到yarn 显示running 我这个是新的groupId 在kafka上无法查询到group 再spark页面如上图所示,在yarn界面 卡住,没有任何日志打印

问答 2019-12-20 来自:开发者社区

spark streaming实时程序 进程总是运行三四个小时左右不知道原因挂掉

我用spark stream每两分钟从kafka拉取数据,用的是standalone模式,但是程序总是运行三四个小时左右就会挂掉,查了很久不知道什么原因。 提交程序的节点work目录下的stderr文件最后的打印是这样的: 我看进程死掉前的内存情况也挺健康的,截图如下:

问答 2019-04-26 来自:开发者社区

Spark Streaming 作业运行一段时间后无故结束

Spark Streaming 作业运行一段时间后无故结束

问答 2018-12-11 来自:开发者社区

spark streaming job运行卡住

问题 虚拟机中运行sparkStreaming job一段时间后,偶尔会卡住, 过一段时间就恢复, 需要定位原因解决 背景 1.sparkStreaming消费kafka数据, 开启反压机制, 将接收每一条kafka消息(json串)转换为对象后, 再使用Phoenix存入hbase; 2.有三台虚拟机, 三个worker节点,以standalone模式运行application3.使用3个ex....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注