阿里云文档 2024-11-04

使用XIHE BSP SQL将ODS层表数据写入ADS层

本文介绍如何使用XIHE BSP SQL作业开发方式,将ODS层表数据通过DWD层过滤后,写入ADS层。

问答 2024-08-20 来自:开发者社区

如何实现对存储在MySQL或RDS中的原始数据的ODS层增量更新?

如何实现对存储在MySQL或RDS中的原始数据的ODS层增量更新?

问答 2022-08-09 来自:开发者社区

请问一个问题,数据通过flink cdc读mysql写入ods层的hudi表,然后再将事实表和维度表

请问一个问题,数据通过flink cdc读mysql写入ods层的hudi表,然后再将事实表和维度表合并写入dwd层的hudi表。我发现ods层的数据量是对的,dwd层一开始新增数据时,数据量是对的,但维表有变更时,mor表数据量变少了、cow表数据量是对的。请问这个mor表数据量少的问题应该怎么排查呢?谢谢

文章 2022-02-16 来自:开发者社区

基于HybridDB for MySQL的企业ODS方案

随着DT时代的到来,数据的价值日益凸显。企业积累的数据越来越多,数据库的规模也达到成百上千个实例,数据的规模更可能达到上百TB甚至PB级。如何以合理的成本管理并维护海量实例,利用尽可能短的时间窗口进行挖掘分析,成为各个企业IT管理中的核心问题。 当前方案,在线处理和离线分离,系统架构详见下图  常见业务场景 1、为了满足分析需要,ETL策略为ELT(Extraction-Loading-...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。