数仓实时化改造:Hudi on Flink 在顺丰的实践应用

数仓实时化改造:Hudi on Flink 在顺丰的实践应用

作者 | 蔡适择(顺丰大数据平台负责人) 整理 | 赵阳(Flink 社区志愿者) 本文主要介绍顺丰在数据仓库的数据实时化、数据库 CDC、Hudi on Flink 上的实践应用及产品化经验。文章主要分为以下几部分: ● 顺丰业务介绍 ● Hudi on Flink ● 产品化支持 ● 后续计划 ...

PostgreSQL 列存, 混合存储, 列存索引, 向量化存储, 混合索引 - OLTP OLAP OLXP HTAP 混合负载应用

背景 列存优势 1、列存没有行存1666列的限制 2、列存的大量记录数扫描比行存节约资源 3、列存压缩比高,节约空间 4、列存的大量数据计算可以使用向量化执行,效率高 行存优势 1、行存查询多列时快 2、行存DML效率高 简单来说,行存适合OLTP业务,列存适合OLAP业务。 如果业务是混合负载,既...

AnalyticDB PostgreSQL 企业智能数据中台:一站式管理数据服务资产

10 课时 |
328 人已学 |
免费

云原生数据仓库AnalyticDB PostgreSQL 产品入门

1 课时 |
685 人已学 |
免费

大数据知识图谱系列—如何选择合适的OLAP引擎进行数据湖分析

4 课时 |
137 人已学 |
免费
开发者课程背景图
专治数仓疑难杂症!美团点评 Flink 实时数仓应用经验分享

专治数仓疑难杂症!美团点评 Flink 实时数仓应用经验分享

整理 | 青渊(Flink 社区志愿者)校对 | 青雉(Flink 社区志愿者)作者 | 黄伟伦@美团点评 摘要:本文根据 Apache Flink 系列直播整理而成,由美团点评数据系统研发工程师黄伟伦老师分享。主要内容如下: 实时数仓建设目的 如何建立实时数仓 仓库质量保证 Tips:点击「阅读原...

数仓系列 | Flink 窗口的应用与实现

数仓系列 | Flink 窗口的应用与实现

作者 | 张俊(OPPO大数据平台研发负责人)整理 | 祝尚(Flink 社区志愿者)校对 | 邹志业(Flink 社区志愿者) 摘要:本文根据 Apache Flink 系列直播整理而成,由 Apache Flink Contributor、OPPO 大数据平台研发负责人张俊老师分享。主要内容如下...

Flink 新场景:OLAP 引擎性能优化及应用案例

摘要:本文由阿里巴巴技术专家贺小令(晓令)分享,主要介绍 Apache Flink 新场景 OLAP 引擎,内容分为以下四部分: 背景介绍 Flink OLAP 引擎 案例介绍 未来计划 一、背景介绍 1.OLAP 及其分类 OLAP 是一种让用户可以用从不同视角方便快捷的分析数据的计算方法。主流的...

面向数据编程:ECS设计模式在数仓中应用的思考

面向数据编程:ECS设计模式在数仓中应用的思考

前言 作为一个从Java转去做大数据的开发,尤其是基于Hiv采用SQL的开发来说,抛弃了使用了很久的OOP,面向对象编程的设计思想后,总觉得有点不习惯。传统的web项目中,对SQL的使用更多还是在数据的增删改查上,而在大数据领域,更多复杂的数据分析,数据交并差的处理,导...

PostgreSQL 列存, 混合存储, 列存索引, 向量化存储, 混合索引 - OLTP OLAP OLXP HTAP 混合负载应用

PostgreSQL 列存, 混合存储, 列存索引, 向量化存储, 混合索引 - OLTP OLAP OLXP HTAP 混合负载应用

标签 PostgreSQL , 列存 , 混合存储 , 列存索引 , 向量化存储 , 混合索引 , ros , wos , cstore , ocr , vector index , roadmap 背景 列存优势 1、列存没有行存1666列的限制 2、列存的大量记录数扫描比行存节约资源 3、列存压...

如何将Teradata应用迁移至AnalyticDB for PostgreSQL

如何将Teradata应用迁移至AnalyticDB for PostgreSQL

AnalyticDB for PostgreSQL(简称:ADB for PG)对Teradata语法有着很好的兼容,将Teradata应用迁移到ADB for PG,只需进行有限的修改。本指南在将TD数仓应用迁移至ADB PG云化数仓过程中,秉承充分复用旧系统架构、ETL算法、数据结构和工具的原则...

Oracle应用迁移到AnalyticDB for PostgreSQL指导 | 6月17号云栖夜读

点击订阅云栖夜读日刊,专业的技术干货,不容错过! 阿里专家原创好文 1.Oracle应用迁移到AnalyticDB for PostgreSQL指导 AnalyticDB for PostgreSQL(简称:ADB for PG)对Oracle语法有着较好的兼容,本文介绍如何将Oracle应用迁移到...

Oracle PL/SQL应用迁移 AnalyticDB for PostgreSQL指导

AnalyticDB for PostgreSQL(简称:ADB for PG)对Oracle语法有着较好的兼容,本文介绍如何将Oracle 应用迁移到AnalyticDB for PostgreSQL。 1 开源工具ora2pg使用 在开始转换Oracle pl之前可以使用开源工具ora2pg(h...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

云原生数据仓库AnalyticDB
云原生数据仓库AnalyticDB
定期发送云原生数据仓库AnalyticDB产品重大发布和技术干货
1134+人已加入
加入
相关电子书
更多
PolarDB+AnalyticDB助力交通物流行业系统升级
2023云栖大会:AnalyticDB MySQL新特性介绍
2023云栖大会:AnalyticDB湖仓版
立即下载 立即下载 立即下载

云原生数据仓库AnalyticDB MySQL版应用相关内容