文章 2024-10-14 来自:开发者社区

大数据-111 Flink 安装部署 YARN部署模式 FlinkYARN模式申请资源、提交任务

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(已更完) ...

大数据-111 Flink 安装部署 YARN部署模式 FlinkYARN模式申请资源、提交任务
问答 2024-07-15 来自:开发者社区

使用flink on yarn模式提交任务,这个是少了什么配置吗?

使用flink on yarn模式提交任务,想让其flink web固定到一台服务器启动,通过如上配置,端口生效,但是地址仍是随机到集群节点,这个是少了什么配置吗?flink1.16.2版本,我测试了1.12.7版本,这样配置是没问题的

问答 2024-07-11 来自:开发者社区

Flink在HA模式,重启ZK集群,客户端任务提交异常(疑似脑裂)

基本信息 Flink 1.11.6版本,Standalone HA模式, 滚动重启了ZK集群在Flink集群的一个节点上使用flink run 命令提交多个任务 异常现象 部分任务提交失败,异常信息如下 [Flink-DispatcherRestEndpoint-thread-2] - [WARN ] - [org.apache.flink.runtime.rpc.akka.AkkaInvoc.....

问答 2024-07-10 来自:开发者社区

Flink CDC中batch模式下这两个source都是加载同一张表没有办法优化成一个读取任务么?

Flink CDC中batch模式下 这两个source都是加载同一张表 没有办法优化成一个读取任务么 ?

问答 2024-07-08 来自:开发者社区

Flink batch模式下 这两个source都是加载同一张表 没有办法优化成一个读取任务么?

Flink batch模式下 这两个source都是加载同一张表 没有办法优化成一个读取任务么?

文章 2024-06-15 来自:开发者社区

实时计算 Flink版产品使用问题之yarn session模式中启动的任务链接是http IP,想把IP映射为主机hadoop,该怎么操作

问题一:我使用flink on yarn启动了一个任务模式 怎么看这个会话的资源被当前任务占用了多少? 我使用flink on yarn启动了一个任务 yarn session模式 怎么看这个会话的资源被当前任务占用了多少? 参考答案: 应该看不了 , 关于本问题的更多回答可点击进行查看: https://devel...

问答 2024-06-11 来自:开发者社区

DTS源为SQL Server是否支持通过Flink SQL模式配置ETL任务

DTS源为SQL Server是否支持通过Flink SQL模式配置ETL任务

文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之在Application模式下,如何在客户端中同步获取任务执行结果后再退出

问题一:flink使用rockdb作为状态后端,开了增量检查点,可以直接关闭增量检查点吗?会出现问题吗? flink使用rockdb作为状态后端,开了增量检查点,导致历史的checkpoint目录我不敢删除,可以直接关闭增量检查点吗?会出现问题吗? 参考答案: 使用带有 RocksDB 状态后端的增量检查点,而 Flink 使用 RocksDB 的内部...

实时计算 Flink版产品使用合集之在Application模式下,如何在客户端中同步获取任务执行结果后再退出
文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之使用yarn-session的模式来提交任务,空间的资源是否释放给yarn

问题一:Flink CDC UI上红色部分Busy 100%是正常的吗? Flink CDC UI上红色部分Busy 100%是正常的吗? 参考答案: 不正常,你需要看下什么导致的busy ...

实时计算 Flink版产品使用合集之使用yarn-session的模式来提交任务,空间的资源是否释放给yarn
问答 2024-04-29 来自:开发者社区

Flink使用单作业模式提交任务到yarn,出现这个错误怎么解决呀?

Flink使用单作业模式提交任务到yarn,出现这个错误怎么解决呀?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注