问答 2018-11-28 来自:开发者社区

在将Flink数据集写入hdfs时如何创建Job对象

"我想写一些数据集给hive。我试过hive jdbc,但它不支持batchExecute。所以我改为将其写入hdfs,然后生成hive表。 我尝试使用以下代码来编写hdfs: package test; import org.apache.flink.api.common.functions.FlatMapFunction;import org.apache.flink.api.java.Da....

问答 2018-11-23 来自:开发者社区

大家好,有使用flink cep的用户吗,我们现在在用,如果有一些运行时异常,cep就会直接导致job停止,不知道有什么方法可以cep处理运行时异常

大家好,有使用flink cep的用户吗,我们现在在用,如果有一些运行时异常,cep就会直接导致job停止,不知道有什么方法可以cep处理运行时异常?

问答 2018-11-23 来自:开发者社区

各位大佬,flink state mapstate 保存数据100g 采用rocksdb增量更新 job 任务运行一段时间就死了。磁盘采用非ssd 。对于large state value 任务 有什么好的建议。

各位大佬,flink state mapstate 保存数据100g 采用rocksdb增量更新 job 任务运行一段时间就死了。磁盘采用非ssd 。对于large state value 任务 有什么好的建议。

问答 2018-11-22 来自:开发者社区

flink operator 的概念是steam graph的一个node还是,job graph的一个Vertex呢

flink operator 的概念是steam graph的一个node还是,job graph的一个Vertex呢

问答 2018-11-15 来自:开发者社区

【Flink】报错 Submit blink job failed

问题描述报错信息: Submit blink job failed

问答 2018-10-30 来自:开发者社区

Flink上执行storm拓扑,在yarn模式提交job时,找不到jobmanager

问题描述:Flink上执行storm拓扑,在yarn模式提交job时,找不到jobmanager-- 需求:storm的任务迁移到flink上,为了减少改动量,使用的flink兼容storm。-- 参考:https://flink.apache.org/news/2015/12/11/storm-compatibility.html-- 现象:无法正常提交job。从日志上看问题出在无法找到yar....

问答 2018-10-18 来自:开发者社区

flink on yarn大家实际生产上,是用yarn session方式还是single yarn job?这两个方式如何选择

转自钉钉群21789141:flink on yarn大家实际生产上,是用yarn session方式还是single yarn job?这两个方式如何选择

问答 2018-10-18 来自:开发者社区

请问一下,有人用过flink monitor 的rest api吗?我cancel job每次都返回404 not found。flink 文档里写的是DELETE

转自钉钉群21789141:请问一下,有人用过flink monitor 的rest api吗?我cancel job每次都返回404 not found。flink 文档里写的是DELETE request to /jobs/:jobid/cancel. 我url是这样的http://localhost:8081/jobs/57540a64295e64f8a9a94461355348aa/ca....

问答 2018-10-18 来自:开发者社区

flink能否设置一个全局 bool变量呢 这个变量会在job运行20分钟左右发生变化,每个task要能获取到最新值(可以有延迟)

转自钉钉群21789141:flink能否设置一个全局 bool变量呢 这个变量会在job运行20分钟左右发生变化,每个task要能获取到最新值(可以有延迟)

问答 2018-10-10 来自:开发者社区

我们想把业务处理做成插件,然后每个job的main都是一个,通过动态load业务自定义jar,但flink这种结构做起来很麻烦,我不得不写了个重新打包的功能,你们blink是怎么实现这个功能的?

转自钉钉群21789141:我们想把业务处理做成插件,然后每个job的main都是一个,通过动态load业务自定义jar,但flink这种结构做起来很麻烦,我不得不写了个重新打包的功能,你们blink是怎么实现这个功能的?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注