阿里云文档 2024-11-28

如何在Dataphin自定义Ververica Flink实时任务的资源

Ververica Flink实时任务资源自定义,即指实时计算Flink配置细粒度资源的专家模式 (BETA),Flink全托管引入的全新的资源配置模式,支持对作业所使用的资源进行细粒度的资源控制,以满足作业吞吐的要求。系统会自动根据您配置的资源需求,以Native K8s的模式运行作业,TM的规格和个数将会根据Slot的规格和作业并发度,由系统自动决定。本文将介绍如何在Dataphin自定义Ve...

阿里云文档 2024-11-18

如何配置Flink自定义指标采集

当您的Prometheus实例需要监控Flink自定义指标数据时,您可以通过自定义指标配置功能来实现这一需求。将指标加入到自定义指标配置后,它们将被探针(Agent)侧识别并采集。默认支持两种配置方式:指标全名称配置,指标前缀配置,您还可以对两种方式进行组合配置。

阿里云文档 2024-11-18

如何配置Flink自定义指标采集

当您的Prometheus实例需要监控Flink自定义指标数据时,您可以通过自定义指标配置功能来实现这一需求。将指标加入到自定义指标配置后,它们将被探针(Agent)侧识别并采集。默认支持两种配置方式:指标全名称配置,指标前缀配置,您还可以对两种方式进行组合配置。

阿里云文档 2024-09-12

自定义指标采集和将Flink监控指标上报到其他渠道

Flink提供了监控指标(Metrics)来帮助您分析作业。如果已有指标不满足业务需要,您可以自定义监控指标,并支持将监控指标上报到其他渠道。本文为您介绍自定义配置监控指标,以及如何将监控指标上报到自建Prometheus、日志服务SLS、Kafka或自建平台,以及多渠道上报。

阿里云文档 2024-09-02

创建自定义Catalog

如果内置的Catalog类型无法满足您的业务需求,您可以使用自定义Catalog类型。本文为您介绍如何配置自定义Catalog。

问答 2023-05-23 来自:开发者社区

Flink中和各位大哥请教一下, 自定义redis数据源,定时扫描key,然后供下游使用, 请问下?

Flink中和各位大哥请教一下, 自定义redis数据源,定时扫描key,然后供下游使用, 请问下多并行度意义不大吧 ?

问答 2023-05-23 来自:开发者社区

和各位大哥请教一下, Flink CDC中自定义redis数据源,定时扫描key,然后供下游使用,?

和各位大哥请教一下, Flink CDC中自定义redis数据源,定时扫描key,然后供下游使用, 请问下多并行度意义不大吧 ?

文章 2022-11-12 来自:开发者社区

【Flink-FlinkUtils】高级自定义封装工具类实现消费kafka数据保存数据到Redis

一、FlinkKafkaToRedis思考一个问题:flink程序运行的时候,我们可以通过神魔样的形式进行传值?1.写死程序传值2.args[0],程序动态传值ParameterTool parameters = ParameterTool.fromPropertiesFile(args[0]); DataStream<String> lines = FlinkUtils.crea.....

【Flink-FlinkUtils】高级自定义封装工具类实现消费kafka数据保存数据到Redis
文章 2022-06-09 来自:开发者社区

Flink SQL 自定义 redis connector

一般情况下,我们不需要创建新的 connector,因为 Flink SQL 已经内置了丰富的 connector 供我们使用,但是在实际生产环境中我们的存储是多种多样的,所以原生的 connector 并不能满足所有用户的需求,这个时候就需要我们自定义 connector,这篇文章的重点就是介绍一下如何实现自定义 Flink SQL connector ?先来看一下官网的一张 connecto....

Flink SQL 自定义 redis connector

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注