问答 2024-08-14 来自:开发者社区

Flink基于Doris的数仓项目,按照ods,dwd,dws,ads做的数据分层,有人去实践过么?

Flink github:https://github.com/Mrkuhuo/data-warehouse-learninggitee:https://gitee.com/wzylzjtn/data-warehouse-learning基于Doris的数仓项目,按照ods,dwd,dws,ads做的数据分层,有人去实践过么?

文章 2024-08-08 来自:开发者社区

畅捷通基于Flink的实时数仓落地实践

摘要:本文整理自畅捷通总架构师、阿里云MVP专家郑芸老师在 Flink Forward Asia 2023 中闭门会上的分享。内容主要为以下四部分: 业务背景数仓建设具体案例未来展望 一、业务背景 畅捷通是用友旗下成员企业,一直持续专注于小微企业的数字化转型。我们提供以数智财税、数智商业为核心,以生态服务为延展的小微企业云服务࿰...

畅捷通基于Flink的实时数仓落地实践
文章 2024-08-02 来自:开发者社区

"Flink+Paimon:阿里云大数据云原生运维数仓的创新实践,引领实时数据处理新纪元"

随着大数据产品云原生化的加速推进,云原生集群的规模和数量急剧增加,这给运维工作带来了前所未有的挑战。为了有效应对这些挑战,阿里云大数据团队结合Apache Flink与自研的Paimon数据湖解决方案,构建了一套实时云原生运维数仓,显著提升了运维能力和数据处理的实时性。本文将通过实际案例分析,详细阐述Flink&...

阿里云文档 2024-07-17

Flink SQL开发调优实践

说明实时计算Flink版控制台界面和功能可能会发生变化,具体请以实际控制台为准。

文章 2024-07-17 来自:开发者社区

Flink SQL 在美团实时数仓中的增强与实践

摘要:本文整理自美团数据系统研发工程师董剑辉&美团数据系统研发工程师张彬,在 Flink Forward Asia 2022 平台建设专场的分享。本篇内容主要分为五个部分:Flink SQL 在美团SQL 作业细粒度配置SQL 作业变更支持从状态恢复SQL 正确性问题排查能力建设未来展望点击查看直播回放和演讲 PPT一、Flink SQL 在美团目前 Flink SQL 在美团已有 10....

Flink SQL 在美团实时数仓中的增强与实践
文章 2024-07-09 来自:开发者社区

Flink+Paimon在阿里云大数据云原生运维数仓的实践

1. 背景 随着大数据产品云原生化的推进,云原生集群的规模和数量都在增加,云原生集群的运维难度也在不断增加,云原生集群的资源审计、资源拓扑、资源趋势的需要就比较迫切。云原生集群的资源审计主要是 node 资源、pod 资源,如当前集群的 node 数量以及Pod 数量;资源拓扑主要构建用户->实例->pod->node->集群的关联关系,例如一个公有云用户,提供给运维团.....

Flink+Paimon在阿里云大数据云原生运维数仓的实践
文章 2023-09-18 来自:开发者社区

幸福里基于 Flink & Paimon 的流式数仓实践

摘要:本文整理自字节跳动基础架构工程师李国君,在 Streaming Lakehouse Meetup 的分享。幸福里业务是一种典型的交易、事务类型的业务场景,这种业务场景在实时数仓建模中遇到了诸多挑战。本次分享主要介绍幸福里业务基于 Flink & Paimon 构建流式数仓的实践经验,从业务背景、流批一体数仓架构、实践中遇到的问题和解决方案,借助 Paimon 最终能拿到的收益,以及....

幸福里基于 Flink & Paimon 的流式数仓实践
文章 2023-08-07 来自:开发者社区

芒果 TV 基于 Flink 的实时数仓建设实践

公司简介:芒果 TV 作为湖南广电旗下互联网视频平台,在“一云多屏,多元一体”的战略指导下,通过内容自制,培植核心竞争力,从独播、独特走向独创,并通过市场化运作完成 A 轮、B 轮融资,并于 2018 年 6 月,顺利实现资产重组,成为国内 A 股首家国有控股的视频平台。 一、芒果 TV 实时数仓建设历程 芒果 TV 实时数仓的建设共分为三个阶段,14-19 年为第一阶段,技术选型采用 ...

芒果 TV 基于 Flink 的实时数仓建设实践
文章 2023-07-18 来自:开发者社区

Flink CDC & MongoDB 联合实时数仓的探索实践

摘要:本文整理自 XTransfer 技术专家, Flink CDC Maintainer 孙家宝,在 Flink Forward Asia 2022 数据集成专场的分享。本篇内容主要分为四个部分: MongoDB 在实时数仓的探索 MongoDB CDC Connector 的实现原理和使用实践 FLIP-262 MongoDB Connector 的功能预览 总结...

Flink CDC & MongoDB 联合实时数仓的探索实践
问答 2023-07-12 来自:开发者社区

Flink有没有数仓相关的demo实践?

Flink有没有数仓相关的demo实践?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注