问答 2024-08-26 来自:开发者社区

flink1.1.6 hadoop版本3.0.0 ,但是跑cdc作业时出现这个报错 怎么解决?

有无大佬帮忙看下,flink1.1.6 hadoop版本3.0.0 ,在yarn上是运行flink测试程序时可以正常跑的,但是跑cdc作业时出现这个报错

文章 2024-08-26 来自:开发者社区

Apache Flink 实践问题之Flume与Hadoop之间的物理墙问题如何解决

问题一:在处理信令数据时,Flume集群经常遇到哪些问题? 在处理信令数据时,Flume集群经常遇到哪些问题? 参考回答: 在处理信令数据时,Flume集群经常遇到的问题包括:Flume channel full的报警提示、防火墙超限报警、Flume写Kafka时Kafka发送端超时报警,以及下游Spark Streaming处理信令数据时的不稳定性。...

Apache Flink 实践问题之Flume与Hadoop之间的物理墙问题如何解决
问答 2024-07-31 来自:开发者社区

在Flink CDC中,Hadoop 运行在虚拟机环境报错 可能是什么原因呢?

在Flink CDC中,Hadoop 运行在虚拟机环境报错 nosuchmethoderror可能是什么原因呢?

文章 2024-07-17 来自:开发者社区

实时计算 Flink版操作报错合集之Hadoop在将文件写入HDFS时,无法在所有指定的数据节点上进行复制,该如何解决

问题一:Flink CDC里flinkcdc写hudi的时候这个错误怎么弄? Flink CDC里flinkcdc写hudi的时候这个错误怎么弄? own Source) at org.apache.hadoop.hdfs.DF...

实时计算 Flink版操作报错合集之Hadoop在将文件写入HDFS时,无法在所有指定的数据节点上进行复制,该如何解决
问答 2024-06-20 来自:开发者社区

flink-cdc执行任务找不到ExecutionConfig类,是没有装hadoop导致的吗

2024-06-20 16:47:09,090 INFO [XNIO-1 task-1] o.a.f.r.s.t.h.HadoopFSDelegationTokenProvider [HadoopFSDelegationTokenProvider.java : 76] Hadoop FS is not available (not packaged with this application):....

文章 2024-06-15 来自:开发者社区

实时计算 Flink版产品使用问题之yarn session模式中启动的任务链接是http IP,想把IP映射为主机hadoop,该怎么操作

问题一:我使用flink on yarn启动了一个任务模式 怎么看这个会话的资源被当前任务占用了多少? 我使用flink on yarn启动了一个任务 yarn session模式 怎么看这个会话的资源被当前任务占用了多少? 参考答案: 应该看不了 , 关于本问题的更多回答可点击进行查看: https://devel...

文章 2024-05-31 来自:开发者社区

分布式计算框架比较:Hadoop、Spark 与 Flink

在大数据处理领域,Hadoop、Spark 和 Flink 是三个非常重要的分布式计算框架,它们各自有着独特的特点和优势。 Hadoop 是分布式计算的先驱框架。它主要由 HDFS(分布式文件系统)和 MapReduce(计算框架)组成。Hadoop 擅长处理大规模的批量数据处理任务,具有高度的可扩...

问答 2024-05-20 来自:开发者社区

Flink有遇到开启kerbores 认证的Hadoop集群吗?

Flink有遇到开启kerbores 认证的Hadoop集群,flink(1.17.2)的stanalone模式启动报错,Failed to initialize delegation token provider {}.只要一引入Hadoop的包或者配置环境变量就报错?

文章 2024-05-16 来自:开发者社区

实时计算 Flink版产品使用合集之如果产品是基于ak的,可以提交sql任务到ecs自建hadoop集群吗

问题一:实时计算flink产品 访问 starrocks emr serverless 要开启公网访问么? 实时计算flink产品 访问 starrocks emr serverless 要开启公网访问么? 参考回答: 不用,vpc就行。 关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/a...

实时计算 Flink版产品使用合集之如果产品是基于ak的,可以提交sql任务到ecs自建hadoop集群吗
问答 2024-05-15 来自:开发者社区

Flink CDC当前hadoop最新的稳定版本是多少呢?

Flink CDC当前hadoop最新的稳定版本是多少呢?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注