问答 2024-06-17 来自:开发者社区

DataWorks数据质量功能里需要怎么配置分区表达式来实现对每个二级分区进行DQC校验呢?

DataWorks数据质量功能里,对表配置DQC监控,如果表的一级分区是yyyymmdd,二级分区是不确定的字符,要求匹配全字符,需要怎么配置分区表达式来实现对每个二级分区进行DQC校验呢,规则里面自定义sql的话,一级分区用参数 dt='$[yyyymmdd-1]' 可以引用到业务日期,但是二级分区怎么写才能引用到参数呢?

问答 2024-06-02 来自:开发者社区

DataWorks数据质量的自定义sql如何传分区参数进去?

DataWorks数据质量的自定义sql如何传分区参数进去?

一站式大数据开发治理平台DataWorks初级课程

11 课时 |
960 人已学 |
免费

DataWorks一站式大数据开发治理平台精品课程

35 课时 |
8213 人已学 |
免费
开发者课程背景图
阿里云文档 2024-05-28

设置表分区、表前缀、表的主题及层级

表管理功能用于定义DataWorks中的表分区字段、临时表、导入表的标识,方便您根据表名称即可判断该表的类别;同时,支持定义表的主题和物理层级,可基于功能、类型等多个维度,将同类型的表放置相同的主题或层级统一管理。

问答 2024-05-20 来自:开发者社区

DataWorks数据质量监控中如果监控的分区不存在 这个报警信息目前是没法同步到钉钉的 是吧?

DataWorks数据质量监控中如果监控的分区不存在 显示校验异常 这个报警信息目前是没法同步到钉钉的 是吧?

阿里云文档 2024-02-02

通过DataWorks的for-each节点操作Hologres的多个分区子表

当您需要对Hologres中分区父表的多个分区子表进行操作(例如执行INSERT、DELETE或UPDATE)时,可以通过DataWorks的for-each节点的循环遍历功能实现,简化复杂的循环处理逻辑,数据更新成功后即可在父表中查看所有分区数据。

问答 2023-12-03 来自:开发者社区

DataWorks数据质量中的分区表达式,是仅支持时间作为分区表达式的么?

DataWorks数据质量中的分区表达式,是仅支持时间作为分区表达式的么?

问答 2023-12-03 来自:开发者社区

DataWorks数据质量分区的问题。这个分区表达式要怎么写?

DataWorks数据质量分区的问题。我的表是按“日期”和“交易所”进行的分区,那么在设置数据质量的时候,这个分区表达式要怎么写?

问答 2023-08-08 来自:开发者社区

dataworks的数据质量检测,如何配置表全量的重复值监测,现在是只能单个分区监测吗?我现在配置单

dataworks的数据质量检测,如何配置表全量的重复值监测,现在是只能单个分区监测吗?我现在配置单个分区能够跑通,全分区就不行

阿里云文档 2023-07-26

如何管理数据建模的表分区

表分区是指根据一定规则,将数据库中的一张表分解成多个更小的、容易管理的部分。从逻辑上看,只有一张表,但是底层却是由多个物理分区组成。DDM目前支持对MySQL、Oracle、DB2和GaussDB等数据库进行表分区操作。在逆向数据库时,支持抽取MySQL和Oracle数据库的表分区信息至模型工具中。

问答 2023-07-13 来自:开发者社区

DataWorks中数据质量模块对表设置分区表达式是不是为了限定数据质量校验的数据范围?

DataWorks中数据质量模块对表设置分区表达式是不是为了限定数据质量校验的数据范围?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks分区相关内容

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注