表设计规范
表数据存储规范 按数据层规划数据的生命周期：源表ODS层：每天从业务系统同步过来的数据，全部保留，生命周期定义永久保存。当下游数据受损时，可以从ODS恢复数据。若ODS每天同步过来的是全量表，则可以通过全表拉链的方式来压缩存储。数据...
创建标签项目
说明 若数据板块为Dev-Prod模式，归属Prod业务板块的Basic项目中不可以构建规范建模对象，仅可以构建基础层、应用层数据，以免公共层数据标准规范性受影响、数据生产异常。基本信息 项目英文名 填写项目的英文名。命名规则如下：包含字母、...
解决方案与客户案例
每个单元内的业务架构分为接入层、服务层、数据层：接入层 业务流量通过租户侧DNS解析后按照权重分配到不同单元的接入层，进入接入层后，通过解析请求header/cookie中的分流标，对比自定义的分流规则，判断请求是否归属本单元，若归属本...
数仓规划概述
数仓分层 您可以结合业务场景、数据场景综合考虑设计数仓的数据分层，DataWorks为您默认创建业界通用的五层数仓分层：数据引入层 ODS（Operational Data Store）明细数据层 DWD（Data Warehouse Detail）汇总数据层 DWS（Data Warehouse ...
产品功能发布记录
引擎 功能名称 功能描述 发布时间 了解更多 蚂蚁区块链 产品计费 蚂蚁区块链网络实例在运行过程中，当数据超出免费存储空间后，系统支持基于 阿里云通用容量型NAS存储 实现在线自动扩容，保障业务无中断、无感知。2023.08.10 收费项2：存储...
整体架构
湖仓版中Spark计算层和存储层互相打通，您可以使用计算层资源来处理存储层数据，在创建和配置Spark资源组时更容易。访问层 访问层通过统一计费单位、统一元数据和权限、统一开发语言、统一传输链路，提升开发效率。AnalyticDB MySQL版 融合...
创建数仓分层
DataWorks的数仓分层功能，默认为您创建了 数据引入层ODS（Operational Data Store）、公共维度层DIM（Dimension）、明细数据层DWD（Data Warehouse Detail）、汇总数据层DWS（Data Warehouse Summary）及 应用数据层ADS（Application Data...
数据模型架构规范
数据层次的划分 ODS：Operational Data Store，操作数据层，在结构上其与源系统的增量或者全量数据基本保持一致。它相当于一个数据准备区，同时又承担着基础数据的记录以及历史变化。其主要作用是把基础数据引入到MaxCompute。CDM：Common ...
应用场景
3.实时数据仓库 3.1 数据总线替换传统数据库，构建实时数仓 从Lambda架构到Kappa架构，通过数据总线搭建原始数据层，实时明细层和实时汇总层，打造实时数据仓库。3.2 收益 统一的Kappa架构 传统Lambda架构的两条链路缩减为一条，大大降低...
修饰词
修饰词是基于选择的数据域创建的，是对数据域中的数据不同维度的修饰，用来限定统计数据的业务范围。例如，统计上海区域生鲜门店的销售金额，上海区域和生鲜门店就是对业务范围的限定修饰。前提条件 已创建数据域，用于确定修饰词所属的...
申请区块链
您可以申请创建联盟链部署属于您自己的区块链，成为区块链的 管理员，管理员可以 邀请用户 成为区块链的联盟方，还可以通过 配置数据分类 约定联盟内上链数据的格式。如果您是受邀请加入区块链的 联盟方，可以跳过上述步骤，直接 申请加入...
创建逻辑模型：明细表
可以指定明细表后续在数据建模分析使用时，明细表的数据存储于数仓中的哪个数据分层，一般情况下明细表可存储于数据明细层（DWD层）。明细表创建后，您可以为明细表添加字段，且可以对明细表进行关联和分区的设置，并且可使用统一的数据...
数据代理请求常见问题
登录您安装数据代理的机器，通过浏览器访问 ip:8001/status（例如 128.23.*.*:8001/status，8001 为数据代理服务的默认端口），检查您的数据代理服务是否正常启动。是，执行下一步。否，请启动您的数据代理服务。检查安装数据代理的机器...
汇总数据层（DWS）
汇总数据层以分析的主题对象作为建模驱动，基于上层的应用和产品的指标需求构建公共粒度的汇总表。汇总数据层的一个表通常会对应一个统计粒度（维度或维度组合）及该粒度下若干派生指标。汇总表设计原则 聚集是指针对原始明细粒度的数据...
数据质量风险监控
数据质量风险监控主要针对数据的准确性、一致性和完整性。本教程使用DataWorks数据质量（DQC）功能，完成数仓各层次的数据质量监控。前提条件 首先您需要完成教程 搭建互联网在线运营分析平台，并保证您的DataWorks工作空间创建区域为华东2...
表管理
通常，您可基于数仓分层将表层级划分为如下层级：数据引入层ODS（Operational Data Store）公共维度层DIM（Dimension）明细数据层DWD（Data Warehouse Detail）汇总数据层DWS（Data Warehouse Summary）应用数据层ADS（Application Data ...
解决方案与客户案例
整个部署架构分多个地域，每个地域称为一个单元，其中某个单元又承担着整个多活架构的逻辑中心角色，提供一些中心化的服务能力（如Sequence分发、强一致读服务等），每个单元内的业务架构分为接入层、服务层、数据层：接入层：业务流量通过...
派生指标
按需创建：数据域 或 业务过程 数据集市 或 主题域 公共层的派生指标：需要创建数据域或业务过程。用于确定派生指标需反映的业务数据类别。应用层的派生指标：需要创建数据集市或主题域。用于确定派生指标需反映的特定场景或产品的数据类别...
开发文档
蚂蚁区块链跨链服务是面向智能合约提供的链上数据服务，本服务在客户区块链环境中部署跨链服务合约/链码，并且提供 API 接口供用户合约/链码进行调用。跨链接服务目前提供 账本数据访问 和 合约消息推送 两类服务及其对应的 API 接口。账本...
创建逻辑模型：汇总表
汇总表用于组织一个数据域下相同时间周期、相同维度的多个派生指标的统计数据，为后续的业务查询，OLAP分析，数据分发等提供基础。本文为您介绍如何创建汇总表。前提条件 已创建数据分层。数据分层是将相同功能作用的表挂载至统一的数据层...
数据质量风险监控
数据质量风险监控主要针对数据的准确性、一致性和完整性。本教程使用DataWorks数据质量（DQC）功能，完成数仓各层次的数据质量监控。前提条件 首先您需要完成教程 搭建互联网在线运营分析平台，并保证您的DataWorks工作空间创建区域为华东2...
通过数据同步功能同步Kafka至湖仓版（推荐）
数据源及目标端配置 的参数说明如下：参数名称 参数说明 数据链路名称 数据链路名称。系统默认按数据源类型与当前时间生成名称，可按需修改。数据源 选择已有的Kafka数据源，也可新建数据源。目标端类型 目前仅支持 数据湖-OSS存储。OSS...
复合指标
由于派生指标只是针对某业务活动某段时间的数据量统计，无法满足贴近用户实际使用的业务增长率、差值计算等数据的比对需求（例如，统计某业务活动的周环比增长率）。因此，DataWorks为您提供了由派生指标通过运算规则进行计算而形成的复合...
SSL连接RDS PostgreSQL数据库
Require、Verify-CA和Verify-Full含义如下：Require：只对数据链路加密，并不验证数据库的真实性。Verify-CA：加密数据链路，同时验证数据库的真实性。Verify-Full：加密数据链路，验证数据库的真实性，同时比对证书内的CN或DNS与连接时...
创建逻辑模型：应用表
应用表是面向具体业务场景时，用于组织相同时间周期、相同维度的多个原子指标、派生指标或统计粒度的统计数据，为后续的业务查询，OLAP分析，数据分发等提供基础。本文为您介绍如何创建应用表。前提条件 已创建数据分层。数据分层是将相同...
IoT区块链Hub 的使用限制
IoT区块链Hub 相关限制 限制项 限制说明 支持的区块链类型 阿里云BaaS-Fabric区块链，Version:1.4。阿里云BaaS-蚂蚁区块链，Version:2.19。BSN-Fabric链，Version：1.4.3。...上链内容长度限制 设备上链数据的最大长度为1024个字符。
合约关键字
任何通过访问内存、区块链数据（例如 now，this.balance 或 block.number）或执行数据（msg.gas）或对外部合约的调用来给它们赋值都是不允许的。不是所有类型的状态变量都支持用 constant 来修饰，当前支持的仅有值类型和字符串。pure：被...
创建并使用MaxCompute表
层级用于定义和管理数据仓库分层，通常可划分为数据引入层ODS（Operational Data Store）、公共维度层DIM（Dimension）、明细数据层DWD（Data Warehouse Detail）、汇总数据层DWS（Data Warehouse Summary）、应用数据层ADS（Application ...
创建并使用MaxCompute表
层级用于定义和管理数据仓库分层，通常可划分为数据引入层ODS（Operational Data Store）、公共维度层DIM（Dimension）、明细数据层DWD（Data Warehouse Detail）、汇总数据层DWS（Data Warehouse Summary）、应用数据层ADS（Application ...
X-Engine简介
因为目标是面向大规模的海量数据存储，提供高并发事务处理能力和降低存储成本，在大部分大数据量场景下，数据被访问的机会是不均等的，访问频繁的热数据实际上占比很少，X-Engine根据数据访问频度的不同将数据划分为多个层次，针对每个层次...
二维图标层
二维图标层是三维城市构建器的数据映射图层，二维图标层支持独立的样式和数据配置，包括二维图标层的叠加模式、样式映射和状态等样式配置。本文介绍二维图标层配置项的含义。在场景编辑器左侧图层列表中，单击 二维图标层 图层，进入配置...
二维图标层
二维图标层是三维城市构建器的数据映射图层，二维图标层支持独立的样式和数据配置，包括二维图标层的叠加模式、样式映射和状态等样式配置。本文介绍二维图标层配置项的含义。在场景编辑器左侧图层列表中，单击 二维图标层 图层，进入配置...
矢量散点层
矢量散点层是三维城市构建器的数据映射图层，支持独立的样式和数据配置，包括矢量散点层的几何、环境、图标和背景等样式配置。本文介绍矢量散点层配置项的含义。在场景编辑器左侧图层列表中，单击 矢量散点层 图层，进入配置面板配置 矢量...
动态轨迹层
动态轨迹层是三维城市构建器的数据映射图层，以一系列三维空间点之间的顺序连线形式表示人或物体移动的轨迹。动态轨迹层图层支持独立的样式和数据配置，包括动态轨迹层是否动效、显示头部、叠加模式、飞线速度、飞线长宽和颜色等参数。本文...
动态轨迹层
动态轨迹层是三维城市构建器的数据映射图层，以一系列三维空间点之间的顺序连线形式表示人或物体移动的轨迹。动态轨迹层图层支持独立的样式和数据配置，包括动态轨迹层是否动效、显示头部、叠加模式、飞线速度、飞线长宽和颜色等参数。本文...
应用场景
只需要将原来的 N 份数据，每一份都通过分区表打散为 M 个数据分区，利用分区表打破单机的容量限制，就可以从数据层完成这一拆分过程，无需业务改造，极大地节省了成本，降低了技术风险。同时，OceanBase 数据库的分区表方案也可以使得用户...
模型加载器
当模型层请求失败时 模型层数据接口请求失败时（请求失败的情况可能是：网络问题或接口报错等）返回并经过过滤器处理后抛出的事件，同时抛出处理后的object或array类型数据。左键点击模型 当鼠标左键单击模型时抛出的事件，抛出被点击的...
调用链采样模式选择
本文介绍ARMS支持的多种调用链采样模式，帮助您根据自身场景选择合适的调用链采样模式，从而以较低成本获取想要的调用链数据。对于绝大多数的分布式系统，不是每一条调用链都值得被可观测平台记录，因为其中包含大量重复的，低关注度的信息...
定时任务
定时任务可以在固定的间隔时间执行指定的程序或者指令，应用监控的定时任务功能可以帮助您了解定时任务的详细情况，包括概览、SQL调用分析、NoSQL调用分析、异常分析、错误分析、链路下游和调用链查询。说明 ARMS应用监控目前仅支持展示XXL...
算子
AnalyticDB for MySQL 中的一个算子负责完成一个基本的数据处理逻辑，合理地组合算子、优化算子的顺序和执行方式，可以提升数据的处理效率。本文介绍 AnalyticDB for MySQL 中的常用算子及算子所对应的属性。背景信息 AnalyticDB MySQL版 ...
- 产品推荐
- 这些文档可能帮助您