幸福里基于 Flink & Paimon 的流式数仓实践
摘要:本文整理自字节跳动基础架构工程师李国君,在 Streaming Lakehouse Meetup 的分享。幸福里业务是一种典型的交易、事务类型的业务场景,这种业务场景在实时数仓建模中遇到了诸多挑战。本次分享主要介绍幸福里业务基于 Flink & Paimon 构建流式数仓的实践经验,从业务背景、流批一体数仓架构、实践中遇到的问题和解决方案,借助 Paimon 最终能拿到的收益,以及....
基于阿里云 Flink+Hologres 搭建实时数仓
背景信息随着社会数字化发展,企业对数据时效性的需求越来越强烈。除传统的面向海量数据加工场景设计的离线场景外,大量业务需要解决面向实时加工、实时存储、实时分析的实时场景问题。传统离线数仓搭建的方法论比较明确,通过定时调度实现数仓分层(ODS->DWD->DWS->ADS);但对于实时数仓的搭建,目前缺乏明确的方法体系。基于 Streaming Warehouse 理念,实现数仓分....
芒果 TV 基于 Flink 的实时数仓建设实践
公司简介:芒果 TV 作为湖南广电旗下互联网视频平台,在“一云多屏,多元一体”的战略指导下,通过内容自制,培植核心竞争力,从独播、独特走向独创,并通过市场化运作完成 A 轮、B 轮融资,并于 2018 年 6 月,顺利实现资产重组,成为国内 A 股首家国有控股的视频平台。 一、芒果 TV 实时数仓建设历程 芒果 TV 实时数仓的建设共分为三个阶段,14-19 年为第一阶段,技术选型采用 ...
Flink CDC & MongoDB 联合实时数仓的探索实践
摘要:本文整理自 XTransfer 技术专家, Flink CDC Maintainer 孙家宝,在 Flink Forward Asia 2022 数据集成专场的分享。本篇内容主要分为四个部分: MongoDB 在实时数仓的探索 MongoDB CDC Connector 的实现原理和使用实践 FLIP-262 MongoDB Connector 的功能预览 总结...
谁能指点一下 Flink CDC数据湖与传统数仓的区别与联系呢?
问题1:谁能指点一下 Flink CDC数据湖与传统数仓的区别与联系呢? 问题2:您说的部分功能 指的是存储吗?
美团买菜基于 Flink 的实时数仓建设
摘要:本文整理自美团买菜实时数仓技术负责人严书,在 Flink Forward Asia 2022 实时湖仓专场的分享。本篇内容主要分为四个部分: 背景介绍 技术愿景和架构设计 典型场景、挑战与应对 未来规划 点击查看原文视频 & 演讲PPT 一、背景介绍 美团买菜是美团自营生鲜零售平台,上面所有的商品都由美团亲自采购,并通过供应链物流体系...
基于 Flink 的实时数仓建设实践
小米目前的技术架构,在存储侧我们主要应用数据湖 Iceberg 和自研消息队列 Talos,计算层主要应用 Flink 和 Spark,他们统一运行在 Yarn 上,统一通过 Metacat 获取元数据信息,并通过 Ranger 来进行统一的鉴权服务。我们内部使用 Spark 和 Presto 来支撑 OLAP 查询场景&#x...
本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。
实时计算 Flink版更多数仓相关
- 实时计算 Flink版构建数仓最佳实践
- 畅捷通实时计算 Flink版数仓
- 实时计算 Flink版数仓最佳实践
- 实时计算 Flink版构建数仓
- 实时计算 Flink版数仓实时数仓
- 实时计算 Flink版流式数仓
- 数仓实时计算 Flink版
- 实时计算 Flink版数仓dwd
- 实时计算 Flink版数仓ods
- 实时计算 Flink版数仓项目
- 实时计算 Flink版hologres数仓
- 数仓实时计算 Flink版实时数仓
- 实时计算 Flink版数仓平台
- 美团实时计算 Flink版数仓
- 实时计算 Flink版美团数仓
- 实时计算 Flink版流批一体数仓
- 实时计算 Flink版离线数仓
- 实时计算 Flink版数仓技术
- 数仓解决方案实时计算 Flink版
- 实时计算 Flink版实时数仓数仓离线
- bigo实时计算 Flink版数仓
- 实时计算 Flink版数仓查询
- 实时计算 Flink版数仓区别
- 数仓元数据实时计算 Flink版
- 实时计算 Flink版数仓优势
- 实时计算 Flink版数仓构建
实时计算 Flink版您可能感兴趣
- 实时计算 Flink版智能
- 实时计算 Flink版升级
- 实时计算 Flink版平台
- 实时计算 Flink版流处理
- 实时计算 Flink版agents
- 实时计算 Flink版ai
- 实时计算 Flink版hana
- 实时计算 Flink版连接器
- 实时计算 Flink版CDC
- 实时计算 Flink版湖仓
- 实时计算 Flink版数据
- 实时计算 Flink版SQL
- 实时计算 Flink版mysql
- 实时计算 Flink版报错
- 实时计算 Flink版同步
- 实时计算 Flink版任务
- 实时计算 Flink版实时计算
- 实时计算 Flink版flink
- 实时计算 Flink版版本
- 实时计算 Flink版oracle
- 实时计算 Flink版kafka
- 实时计算 Flink版表
- 实时计算 Flink版配置
- 实时计算 Flink版产品
- 实时计算 Flink版Apache
- 实时计算 Flink版设置
- 实时计算 Flink版作业
- 实时计算 Flink版模式
- 实时计算 Flink版数据库
- 实时计算 Flink版运行