资产目录
最多返回10000条数据。区域 描述 资产搜索区 您可根据资产对象的名称或描述关键字进行搜索。支持搜索框搜索定位页签下的全量资产。如果有搜索记录，为您展示最近搜索的记录，可快速点击资产并发起搜索。点击下拉列表的对象，将直接跳转到...
资产目录
资产目录为您展示不同资产对象类型的元数据信息，同时支持搜索、访问及收藏等功能，为您提供高效、快捷、准确的数据查找入口。本文为您介绍资产目录相关详情。页面入口 在Dataphin首页，单击顶部菜单栏的 资产，默认进入数据 目录 页面。...
对称条形图
当选择 单选 时，单击事件只抛出一条数据，数据格式为对象，只能高亮一个柱子；当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 条形柱子被选中状态下的颜色。柱子描边 条形柱子描边线的样式，包括描边...
百分比条形图
当选择 单选 时，单击事件只抛出一条数据，数据格式为对象，只能高亮一个柱子；当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的...
对称条形图
当选择 单选 时，单击事件只抛出一条数据，数据格式为对象，只能高亮一个柱子；当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 条形柱子被选中状态下的颜色。柱子描边 条形柱子描边线的样式，包括描边...
百分比条形图
当选择 单选 时，单击事件只抛出一条数据，数据格式为对象，只能高亮一个柱子；当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的...
区间柱状图
当选择 单选 时，单击事件只抛出一条数据，数据格式为对象，只能高亮一个柱子；当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的...
柱状图
当选择 单选 时，单击事件只抛出一条数据，数据格式为对象，只能高亮一个柱子；当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的...
柱状图
当选择 单选 时，单击事件只抛出一条数据，数据格式为对象，只能高亮一个柱子；当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的...
区间柱状图
当选择 单选 时，单击事件只抛出一条数据，数据格式为对象，只能高亮一个柱子；当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的...
条形图
当选择 单选 时，单击事件只抛出一条数据，数据格式为对象，只能高亮一个柱子；当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的...
DML操作
目录 插入单条数据 插入多条数据 单值分区表插入数据 修改数据-单条数据 修改数据-用查询结果批量修改 说明 若您需对Dataphin中逻辑表进行DML操作，请参见 逻辑表DML操作。插入单条数据 INSERT INTO<table_name>VALUES(value1,value2,value...
配置AnalyticDB for MySQL 2.0输出组件
模式 包括：Insert模式：Insert模式支持较小数据量（千万条）的写入。需配置 解析方案。填写准备语句：导入前执行的SQL脚本。填写完成语句：导入后执行的SQL脚本。Load模式：Load模式支持大批量数据（>1千万条）的写入。需配置加载策略、...
配置AnalyticDB for MySQL 2.0输出组件
模式 包括：Insert模式：Insert模式支持较小数据量（千万条）的写入。需配置 解析方案。填写准备语句：导入前执行的SQL脚本。填写完成语句：导入后执行的SQL脚本。Load模式：Load模式支持大批量数据（>1千万条）的写入。需配置加载策略、...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
配置API输出组件
单条数据：一次请求只传递一条数据，有几条数据就进行几次请求。多条数据：一次请求以数组形式传递一批数据，每次传递的数据量为批量条数的值。URL路径 非必填，输入URL中的路径，此处的路径会被拼接数据源中配置的URL后。写入JSON路径 非...
配置API输出组件
单条数据：一次请求只传递一条数据，有几条数据就进行几次请求。多条数据：一次请求以数组形式传递一批数据，每次传递的数据量为批量条数的值。URL路径 非必填，输入URL中的路径，此处的路径会被拼接数据源中配置的URL后。写入JSON路径 非...
数据去重
适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 选择去重字段 选择需要去重的字段，选中的字段将作为该算子的输出字段，数据中若包含多条重复记录则仅保留第一条数据。
创建同步ElasticSearch
配置index为 test_${col1}，如果有两条数据，这两条数据的col1分别为 AAA 和 BBB，那么这两条数据写入的index分别为 test_AAA 和 test_BBB。当ES中的index数量增多时，写入数据会变慢，过多可能会导致DataHub写入超时，因此用户使用动态...
通过DTS采集数据
注意 DataHub同步的是增量数据，您的数据库中必须插入、删除或更新一条或多条数据后，才会同步到DataHub中。本案例采用手动插入数据的方法，但在实际情况中，都是将用户的购买行为，通过程序的方式动态同步到数据库中的。进行数据抽样时，...
实时数据订阅概述
背景信息 云原生多模数据库 Lindorm 数据订阅功能支持任何一个表的每一条数据变更，您可以在客户端查看数据变更记录。当您开通某一张表的数据订阅功能后，其变更数据的操作就会被存储。每次对Lindorm表格的数据执行增删改操作时，数据订阅...
生成测试数据
默认值：1000 条数据，最多生成不超过 100W 行数据，所以用户可以在文本框中输入 1\~1000000 间的任意正整数。批处理大小 指定每生成多少条数据进行一次提交（COMMIT 命令）操作。默认每生成 200 条数据进行一次提交，最大不超过 500 条，...
如何支持超大事务
首先在数据表中导入2^25条数据，数据的 id 为0,1,2,.,2^26-1，每条数据的 c 列值为"aa.aa"（255个a的字符串）。然后开启事务，执行以下语句：UPDATE `tb` SET c=“bb.bbb”(255个b的字符串)where id?假设语句中的?为 x，则会修改共 x 条...
基本概念
分区表可存储的数据量较大，通常可以存储千万条甚至千亿条数据。维度表 维度表，又称复制表，集群的每个节点都会存储一份维度表的全量数据。因此，复制表中的数据量不宜过大，最好不超过2万行。由于维度表的变更会广播到集群的所有节点，...
数据脱敏
通过配置数据脱敏规则，您可以脱敏审计日志中的银行卡号、手机号码、身份证号等敏感信息，防止在SQL语句或返回结果中泄漏...需同时删除多条数据脱敏规则时，您可以选中多条规则并单击数据脱敏规则列表上方的 删除。在确认对话框，单击 确定。
导入数据
本文中的示例数据文件 banking.txt 中有41188条数据，banking_yescreditcard.csv、banking_uncreditcard.csv 和 banking_nocreditcard.csv 分别有3、8597、32588条数据。命令示例如下。select count(*)as num1 from bank_data;select count...
预览物理表数据
数据预览：在 数据预览 页面，默认展示500条数据，不足500则展示全部数据。当云计算资源为空间数据类型时，在 数据预览 页面左上角，打开 地图模式 开关，查看空间地图和当前加载页数据所对应的所有点、线、面图形。数据筛选：在 数据预览 ...
预览物理表数据
数据预览：在 数据预览 页面，默认展示500条数据，不足500则展示全部数据。当云计算资源为空间数据类型时，在 数据预览 页面左上角，打开 地图模式 开关，查看空间地图和当前加载页数据所对应的所有点、线、面图形。数据筛选：在 数据预览 ...
测试数据构建
性能数据参考（进行了流量控制，避免瞬时生成过多数据造成数据库负载的影响）：4个字段生成100万条数据约60s。40个字段生成100万条数据约120s-180s之间。操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 数据库开发>环境构建>测试...
数据导入性能优化
如果单条数据量过大达到数百KB，建议攒批数据大小不超过8 MB，可通过8 MB/单条数据量得到攒批条数。否则单批过大容易占用过多前端节点内存，影响导入性能。应用端并发配置 应用端导入数据时，建议多个并发同时导入数据。单进程无法完全利用...
查询机制
INSERT 当您使用INSERT插入一条数据时，具体过程如下：从数据文件中读取一个数据块到内存中，并将这行数据写入这个数据块，系统生成一条INSERT的WAL日志。当执行COMMIT命令后，系统会产生一条COMMIT的WAL日志。INSERT WAL日志和COMMIT WAL...
数据导入性能优化
如果单条数据量过大达到数百KB，建议攒批数据大小不超过8 MB，可通过8 MB/单条数据量得到攒批条数。否则单批过大容易占用过多前端节点内存，影响导入性能。应用端并发配置 应用端导入数据时，建议多个并发同时导入数据。单进程无法完全利用...
新建数据字典
说明 单击 新增数据字典值 可以添加多条数据字典值。当存在一条以上的字典时，支持下拉设置父级字典以及父级字典编码。相关操作 操作 说明 编辑数据字典 在 数据字典管理 页面，选择目标数据字典，单击 操作 列的 编辑，在 配置数据字典 ...
新建数据字典
说明 单击 新增数据字典值 可以添加多条数据字典值。当存在一条以上的字典时，支持下拉设置父级字典以及父级字典编码。相关操作 操作 说明 编辑数据字典 在 数据字典管理 页面，选择目标数据字典，单击 操作 列的 编辑，在 配置数据字典 ...
受众与核心能力
数据地图（公共云）/数据管理（专有云）：提供强大的数据搜索、数据类目、数据血缘等能力。数据资产管理（仅专有云）：统一管理整个平台的数据表、API等各类数据资产。数据安全：数据脱敏、权限控制等能力。应用开发（仅公共云）：基于Web...
数据集成概述
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，导致因为转换不合理而无法写入的数据。您可以在同步任务配置时，控制同步...
同步时源库为Db2 for LUW的注意事项及限制
由于DTS的延迟时间是根据同步到目标库最后一条数据的时间戳和当前时间戳对比得出，源库长时间未执行DML操作可能导致延迟信息不准确。如果任务显示的延迟时间过大，您可以在源库执行一个DML操作来更新延迟信息。说明 如果同步对象选择为整库...
数据洞察
说明 数据范围支持 随机10000条数据 或 全部数据。数据源和数据范围默认选中您最近一次的操作，分区默认选最近一个分区。（可选）如果您还未开启增强分析，请根据页面提示单击 去体验。等待数据洞察完成。说明 数据洞察期间，所选条件不再...
配置SAP Table输入组件
Rowskip 输出的第一条数据的行号（从0开始）。Rowcount 从rowskip开始，一共输出的数据行数（0代表所有数据）。过滤条件 表查询条件，可使用SAP query operator进行条件过滤。SAP query operator如下：EQ：等于。NE：不等于。LT：小于。LE...
配置SAP Table输入组件
Rowskip 输出的第一条数据的行号（从0开始）。Rowcount 从rowskip开始，一共输出的数据行数（0代表所有数据）。过滤条件 表查询条件，可使用SAP query operator进行条件过滤。SAP query operator如下：EQ：等于。NE：不等于。LT：小于。LE...
- 产品推荐
- 这些文档可能帮助您