问答 2021-11-17 来自:开发者社区

Flink SQL对接外部系统的组件Connector有几种?

Flink SQL对接外部系统的组件Connector有几种?

文章 2020-08-21 来自:开发者社区

Flink SQL FileSystem Connector 分区提交与自定义小文件合并策略

作者:LittleMagic 之前笔者在介绍 Flink 1.11 Hive Streaming 新特性时提到过,Flink SQL 的 FileSystem Connector 为了与 Flink-Hive 集成的大环境适配,做了很多改进,而其中最为明显的就是分区提交(partition commit)机制。 本文先通过源码简单过一下分区提交机制的两个要素——即触发(trigger)和策略(p....

Flink SQL FileSystem Connector 分区提交与自定义小文件合并策略

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注