问答 2025-02-20 来自:开发者社区

Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题

flink CDC任务监听mysql数据。只要不是从savepoint/checkpoint中恢复,都是能成功运行并监听数据的,但是只要从savepoint/checkpoint中恢复作业,就会报如下错误:Caused by: java.lang.RuntimeException: One or more fetchers have encountered exception at org...

阿里云文档 2024-11-28

如何在Dataphin自定义Ververica Flink实时任务的资源

Ververica Flink实时任务资源自定义,即指实时计算Flink配置细粒度资源的专家模式 (BETA),Flink全托管引入的全新的资源配置模式,支持对作业所使用的资源进行细粒度的资源控制,以满足作业吞吐的要求。系统会自动根据您配置的资源需求,以Native K8s的模式运行作业,TM的规格和个数将会根据Slot的规格和作业并发度,由系统自动决定。本文将介绍如何在Dataphin自定义Ve...

问答 2024-08-26 来自:开发者社区

要是flink进程挂掉了,之前的任务还能从savepoint恢复吗?

要是flink进程挂掉了,之前的任务还能从savepoint恢复吗

阿里云文档 2024-04-16

如何配置Flink实时任务的State过期时间

State是Flink实时任务维持和管理数据状态的机制。通过合理的配置Flink的State数据过期时间可以提高资源利用率、内存管理、数据一致性和容错性。本文将为您介绍如何配置Flink实时任务的State过期时间。

阿里云文档 2024-04-16

Flink_SQL任务开发方式有哪些

Dataphin的Flink_SQL任务支持多种开发方式,包括原生DDL+DML开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发,且不同开发方式所创建的表支持任意混用,包括镜像表。不同开发方式的使用方法、使用场景以及优缺点不同。本文将为您介绍各开发方式帮助您更好的完成Flink_SQL任务开发。

问答 2023-12-25 来自:开发者社区

想对Flink提交到k8s上的任务进行savepoint保存。报超时的错误,如下图。请问如何解决呀?

想对Flink提交到k8s上的任务进行savepoint保存。报超时的错误,如下图。请问如何解决呀?运行语句是: ./bin/flink stop --savepointPath /tmp/flink-savepoints \d99825def28c408948dc699699c038bd

问答 2023-11-01 来自:开发者社区

Flink CDC控制台上取消任务 不会保存savepoint吗?

Flink CDC控制台上取消任务 不会保存savepoint吗?FLINk CDC 任务今天遇到一条脏数据,然后想开一下容忍行 'sink.properties.max_filter_ratio' = '0.1', 结果好像全部重新消费了,数据有1亿多行

问答 2023-09-13 来自:开发者社区

Flink任务 执行完savepoint后 对原来算子内部 增加了一个状态 任务能够恢复成功吗?

Flink任务 执行完savepoint后 对原来算子内部 增加了一个状态 任务能够恢复成功吗?

问答 2023-09-06 来自:开发者社区

有哪位用过Flink CDC oracle cdc 抽取数据 任务能从savepoint恢复吗?

有哪位用过Flink CDC oracle cdc 抽取数据 支持新加表 任务能从savepoint恢复吗?

问答 2023-05-29 来自:开发者社区

Flink CDC中sql-client 如何停止任务并设置savepoint呢?

Flink CDC中sql-client 如何停止任务并设置savepoint呢?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注