阿里云文档 2024-11-28

如何在Dataphin自定义Ververica Flink实时任务的资源

Ververica Flink实时任务资源自定义,即指实时计算Flink配置细粒度资源的专家模式 (BETA),Flink全托管引入的全新的资源配置模式,支持对作业所使用的资源进行细粒度的资源控制,以满足作业吞吐的要求。系统会自动根据您配置的资源需求,以Native K8s的模式运行作业,TM的规格和个数将会根据Slot的规格和作业并发度,由系统自动决定。本文将介绍如何在Dataphin自定义Ve...

问答 2024-06-18 来自:开发者社区

在Flink CDC中重启任务时报了这个错,有一个表的binlog日志不存在,如何还能让任务正常跑?

在Flink CDC中重启任务时报了这个错,有一个表的binlog日志不存在了,如何还能让任务正常跑?Caused by: java.lang.IllegalStateException: The connector is trying to read binlog starting at Struct{version=1.9.7.Final,connector=mysql,name=mysql....

问答 2024-06-16 来自:开发者社区

在Flink CDC中提交的CDC任务能看到TM和JM的日志打印吗?

在Flink CDC中提交的CDC任务能看到TM和JM的日志打印吗?请参考图片:

问答 2024-06-12 来自:开发者社区

在Flink CDC中为什么提交的cdc任务无法看到TM的日志,只能通过yarn logs的命令?

在Flink CDC中为什么提交的cdc任务无法看到TM的日志,只能通过yarn logs的命令看到日志?

问答 2024-06-05 来自:开发者社区

在Flink CDC中100%复现,重启任务没用,Job Manager的日志如图1,是什么原因?

在Flink CDC中100%复现,重启任务没用,Job Manager的日志如图,是什么原因?

文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之从Oracle数据库同步数据时,checkpoint恢复后无法捕获到任务暂停期间的变更日志,如何处理

问题一:Flink CDC用oracle-cdc?它是不是不能从ckp恢复? Flink CDC用oracle-cdc?它是不是不能从ckp恢复。我用cdc同步oracle,中间把任务停掉,然后从ckp恢复,发现暂停期间的变更日志会漏掉,scan.mode设的:latest-offset? 参考答案: 从savepoint恢复试下 ...

实时计算 Flink版产品使用合集之从Oracle数据库同步数据时,checkpoint恢复后无法捕获到任务暂停期间的变更日志,如何处理
问答 2024-04-26 来自:开发者社区

Flink cdc任务运行中,日志出现这种情况,任务的checkpoint一直是成功状态然后咋办?

Flink cdc任务运行中,日志出现这种情况,然后任务的checkpoint一直是成功状态,但是没有继续采集数据了,请问有没有大佬知道是什么原因呀?

问答 2024-04-08 来自:开发者社区

Flink CDC里提交任务的时候,卡死,查日志也没查出哪里报错,要怎么办?

Flink CDC里提交任务的时候,卡死,查日志也没查出哪里报错,要怎么办?

问答 2024-03-25 来自:开发者社区

Flink cdc任务运行中,日志出现这种情况,然后任务的checkpoint一直是成功状态,为啥?

锁表会导致 flink任务的GC吗?

问答 2024-03-20 来自:开发者社区

flink的jar包任务,如果要配置日志级别修改为debug,这个是在哪里改呢?

flink的jar包任务,如果要配置日志级别修改为debug,这个是在哪里改呢?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注