文章 2023-10-18 来自:开发者社区

VLDB论文解读|业界首个自研智能信息传递系统,AnalyticDB Anser框架技术详解

简介日前,在加拿大温哥华召开的数据库领域顶会VLDB 2023上,来自阿里云瑶池数据库团队的论文《Anser: Adaptive Information Sharing Framework of AnalyticDB》,成功入选VLDB Industrial Track。论文提出了一种在分布式计算引擎中高效传递动态执行信息的框架Anser,...

VLDB论文解读|业界首个自研智能信息传递系统,AnalyticDB Anser框架技术详解
文章 2023-08-17 来自:开发者社区

一文读懂AnalyticDB MySQL过滤条件智能下推原理

【先打一波小广告】阿里云AnalyticDB MySQL升级为湖仓一体架构,支持高吞吐离线处理和高性能在线分析,可无缝替换CDH/TDH/Databricks/Presto/Spark/Hive等。试用活动(5000ACU时+100GB存储)正在火热申请中,申请链接:https://free.aliyun...

一文读懂AnalyticDB MySQL过滤条件智能下推原理
文章 2023-05-26 来自:开发者社区

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(1)

数仓建模理论与规范作者:渠振方,大数据售前专家服务团队摘要:本文主要介绍数据仓库模型架构设计的目标、核心思想和核心步骤。一、 模型架构设计目标1. 数据仓库的定义数据仓库是一个面向主题的(Subject Oriented)、集成的(Integrated)、相对稳定的(Non-Volat...

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(1)
文章 2023-05-26 来自:开发者社区

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(2)

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(1) https://developer.aliyun.com/article/1231086?groupCode=tech_library二、 模型架构设计核心思想1. 核心原则模型架构设计的核心原则是高内聚、低耦合,即在域内内聚,域之间耦合,以及业务和模型的耦合,在此之上...

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(2)
文章 2023-05-26 来自:开发者社区

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(3)

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(2) https://developer.aliyun.com/article/1231084?groupCode=tech_library五、 数据模型设计流程数据模型设计主要分为三个阶段:需求调研,规范定义,模型设计。1. 名词解释1) 时间周期用来明确数据统计的时间范围或者时间点&#...

文章 2023-05-26 来自:开发者社区

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(4)

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(3) https://developer.aliyun.com/article/1231083?groupCode=tech_library2. 需求调研1) 业务调研业务调研的流程分三个步骤:• 输入调研模板。• 针对产品和运营进行调研。• 归纳产出:业务过程&数据域。下图举例说明业务调研的流...

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(4)
文章 2023-05-26 来自:开发者社区

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(5)

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(4) https://developer.aliyun.com/article/1231081?groupCode=tech_library3. 规范定义1) 一致性维度维度及维度属性在总线矩阵下,维度必须归属某一个数据域,维度属性的来源一种是源系统,一种是挖掘计算,如最近一...

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(5)
文章 2023-05-26 来自:开发者社区

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(6)

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(5) https://developer.aliyun.com/article/1231080?groupCode=tech_library4. 模型设计1) 设计原则• 高内聚,低耦合• 规范性,一致性• 稳定性,可扩展• 公共逻辑下沉• 成本性,能平衡• 支持多次回刷2)...

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(6)
文章 2023-05-26 来自:开发者社区

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(7)

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(6) https://developer.aliyun.com/article/1231079?groupCode=tech_library3) 事实表设计a) 事务型事实表• 针对业务过程构建的一类事实表,用以跟踪定义业务过程的个体行为,是数仓最原子的明细数据,提供丰富的分析能力。• 按...

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(7)
文章 2023-05-26 来自:开发者社区

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(8)

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(7) https://developer.aliyun.com/article/1231078?groupCode=tech_libraryc) 多事务事实表淘宝多事务事实表:dwd_tb_trd_ord_ent_di基本特征􎛏 业务过程:订单创建→支付→完结􎛏 事实...

《全链路数据治理-智能数据建模 》——数仓建模理论与规范(8)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

云原生数据仓库AnalyticDB

定期发送云原生数据仓库AnalyticDB产品重大发布和技术干货

+关注