阿里云文档 2026-05-07

通过Flink将数据批量导入到Hologres

Hologres推出的新版Flink Connector插件,支持通过Flink将数据批量导入到Hologres,实现高效且低负载的数据导入。

文章 2024-08-02 来自:开发者社区

"Flink+Paimon:阿里云大数据云原生运维数仓的创新实践,引领实时数据处理新纪元"

随着大数据产品云原生化的加速推进,云原生集群的规模和数量急剧增加,这给运维工作带来了前所未有的挑战。为了有效应对这些挑战,阿里云大数据团队结合Apache Flink与自研的Paimon数据湖解决方案,构建了一套实时云原生运维数仓,显著提升了运维能力和数据处理的实时性。本文将通过实际案例分析,详细阐述Flink&...

问答 2024-07-30 来自:开发者社区

Flink流式数仓如何简化工商银行的数据链路?

Flink流式数仓如何简化工商银行的数据链路?

文章 2024-07-17 来自:开发者社区

Flink SQL 在美团实时数仓中的增强与实践

摘要:本文整理自美团数据系统研发工程师董剑辉&美团数据系统研发工程师张彬,在 Flink Forward Asia 2022 平台建设专场的分享。本篇内容主要分为五个部分:Flink SQL 在美团SQL 作业细粒度配置SQL 作业变更支持从状态恢复SQL 正确性问题排查能力建设未来展望点击查看直播回放和演讲 PPT一、Flink SQL 在美团目前 Flink SQL 在美团已有 10....

Flink SQL 在美团实时数仓中的增强与实践
文章 2024-07-09 来自:开发者社区

Flink+Paimon在阿里云大数据云原生运维数仓的实践

1. 背景 随着大数据产品云原生化的推进,云原生集群的规模和数量都在增加,云原生集群的运维难度也在不断增加,云原生集群的资源审计、资源拓扑、资源趋势的需要就比较迫切。云原生集群的资源审计主要是 node 资源、pod 资源,如当前集群的 node 数量以及Pod 数量;资源拓扑主要构建用户->实例->pod->node->集群的关联关系,例如一个公有云用户,提供给运维团.....

Flink+Paimon在阿里云大数据云原生运维数仓的实践
文章 2024-06-27 来自:开发者社区

Hologres+Flink企业级实时数仓核心能力介绍

讲师:骆撷冬 Hologres PD随着业务发展,业务对于时效性的要求在逐渐提升。各种场景都需要实时,例如春晚实时直播大屏、双11 GMV实时大屏、实时个性化推荐等等多种场景,都对数据的时效性有着非常高的要求。随着实时需求的发展,大数据技术也开始发展出实时数仓的概念。相比于传统的离线数仓,有着明确的方法论...

Hologres+Flink企业级实时数仓核心能力介绍
问答 2024-06-12 来自:开发者社区

Flink实时数仓是如何构建的?

Flink实时数仓是如何构建的?目前使用Flink CDC 构建实时ODS层,但是DWD和DWS是如何构建的?除了依赖于OLAP 引擎的View,还有哪些方式啊 ?

文章 2024-06-11 来自:开发者社区

Flink 实时数仓(二)【ODS 层开发】

前言        最近投了不少的实习,也收到不错的反馈,虽然是中小公司偏多,但是毕竟现在这个环境双非进大厂实习可不同当年了。可惜的是学院不放人,无奈啊,遍身罗绮者,不是养蚕人。我累死累活肝了两年了,好不容易找到个不错的实习,可是学院...        不骂了,没那功夫扯淡。回归主题,实时数仓将...

文章 2024-06-11 来自:开发者社区

Flink 实时数仓(一)【实时数仓&离线数仓对比】(1)

前言        昨天技术面的时候,面试官说人家公司现在用的都是最新的技术,比如 Doris 等一些最新的工具,确实这些课是学校永远不会开设的,好在他说去了会带着我做一做。可是 ...... 学院这边确实不允许放人,唉,可惜可惜。        言归正传,这学还是得上的,尽管我国的高等教育中有这...

Flink 实时数仓(一)【实时数仓&离线数仓对比】(1)
文章 2024-06-11 来自:开发者社区

Flink 实时数仓(一)【实时数仓&离线数仓对比】(2)

Flink 实时数仓(一)【实时数仓&离线数仓对比】(1)https://developer.aliyun.com/article/1534237 3、项目架构设计准备 我们接下来会创建一个普通 Maven 项目 gmall2024-realtime ,并创建四个 module: realtime-common:用于引入公共的第三方依赖,编写工具类、实...

Flink 实时数仓(一)【实时数仓&离线数仓对比】(2)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注