相关性函数
相关性算子可以计算两组数据的相关系数，用于分析这两组数据的变化趋势是否存在关联关系。相关性算子 只支持华东2（上海）地域。相关性算子支持最大数据量为1000万行。用于离线调度的相关性算子。计算两组数据的相关系数r。两组数据之间的...
相关性分析
相关性分析组件支持对历史数据进行相关性分析，计算出指定变量之间的相关系数，并绘制出相关图表。相关性分析是指对两个或多个具备相关性的变量元素进行分析，从而衡量两个变量因素的相关密切程度。相关性的元素之间需要存在一定的联系或者...
数据建模
进行数据探索 相关性分析 在左侧组件列表，将 统计分析 下的 相关系数矩阵 组件拖入画布中。通过连线，将 相关系数矩阵-1 节点作为 data4ml 节点的下游节点。右键单击 相关系数矩阵-1，在快捷菜单，单击 执行该节点。待运行完成后，右键...
C100售后支持相关问题
数据库审计实例配置相关问题 使用数据库审计时，我可以为RAM用户授予哪些权限？如何选择数据库审计版本？已经购买数据库审计服务后，如何配置？如何将跨地域、跨VPC或跨账号的服务器接入数据库审计系统？无法打开云盾·数据库审计系统，...
数据导入性能优化
云原生数据仓库AnalyticDB MySQL版 提供的多种数据导入方法，满足不同场景下的数据导入需求。然而数据导入性能依然受各种各样的因素影响，如表的建模不合理导致长尾、导入配置低无法有效利用资源等。本文介绍不同场景下的数据导入调优方法...
数据导入性能优化
云原生数据仓库AnalyticDB MySQL版 提供的多种数据导入方法，满足不同场景下的数据导入需求。然而数据导入性能依然受各种各样的因素影响，如表的建模不合理导致长尾、导入配置低无法有效利用资源等。本文介绍不同场景下的数据导入调优方法...
数据风险点监控
下面为您介绍使用DataWorks的数据质量（DQC）保障MaxCompute离线数据的准确性。说明 执行数据质量需使用DataWorks任务调度资源。DQC以数据集（DataSet）为监控对象，当离线MaxCompute数据发生变化时，DQC会对数据进行校验，并阻塞生产链路...
数据导入方式介绍
为满足多样化的数据导入需求，云原生数据仓库AnalyticDB MySQL版 提供了多种数据导入方式，包括：通过外表导入数据、使用DataWorks导入数据和利用JDBC通过程序导入数据等。本文介绍各导入方式的特性及适用场景，帮助您选择正确的数据导入...
敏感数据审计
您可以选择功能模块、时间范围，输入用户名、数据库名、表名、列名等维度的敏感数据相关信息，单击 搜索，搜索审计日志。说明 产品默认展示近1天的敏感数据审计日志。在审计列表中，您可以查看每个工单或任务的操作人员、所属功能模块、...
全景视角
阿里云DataWorks为您提供数据生产、数据使用、数据管理视角下的主要数据治理情况。您可以根据需求选择合适的视角，高效的进行数据治理工作。背景信息 为提高不同使用场景下的数据治理效率和质量，DataWorks为您提供以下视角：数据管理视角...
数据保护伞概述
功能使用 目前仅支持使用数据识别和动态脱敏功能对EMR、MaxCompute、CDH、Hologres引擎的敏感数据进行识别和脱敏。其中，识别EMR引擎敏感数据并进行脱敏的使用限制如下：敏感数据识别和脱敏目前仅支持部分EMR集群类型和表类型。如下所示：...
数据上传
本文为您介绍如何使用数据上传功能上传数据。使用限制 数据来源限制：仅支持上传 本地文件、DataWorks数据分析的电子表格、阿里云对象存储OSS 的数据。本地文件：支持 CSV、XLSX 格式，CSV 文件最大支持上传数据的数据量为5GB，XLSX 文件...
质量规则模板类型
实时元表模板类型 模板详情分类 描述 一致性 实时离线对比 当实时数据与离线数据使用相同的统计逻辑时，用于数据的最终值差异的校验。如果差异较大，可能存在较大数据质量的问题需要进行确认和修复。实时多链路对比 高可用场景下，需要构建...
质量规则模板类型
实时元表模板类型 模板详情分类 描述 一致性 实时离线对比 当实时数据与离线数据使用相同的统计逻辑时，用于数据的最终值差异的校验。如果差异较大，可能存在较大数据质量的问题需要进行确认和修复。实时多链路对比 高可用场景下，需要构建...
功能特性
数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...
元数据采集
支持的数据源及元数据采集方式 数据源类型 元数据采集方式 是否能在数据地图中看到采集器 元数据更新时效性 数据表/字段 分区 数据血缘 MaxCompute 数据开发-绑定数据源 自动启动采集 否 普通项目：实时 外部项目：T+1 国内地域：实时 海外...
创建并使用MaxCompute表
基于业务流程管理表 使用 表管理 新建的表，可通过导入的方式添加至数据开发具体的业务流程中，并基于业务流程来管理、查看该业务相关的表。具体操作如下图所示。被引用：指该表在当前业务流程中有被查询（select）。被写入：指当前业务...
创建并使用MaxCompute表
基于业务流程管理表 使用 表管理 新建的表，可通过导入的方式添加至数据开发具体的业务流程中，并基于业务流程来管理、查看该业务相关的表。具体操作如下图所示。被引用：指该表在当前业务流程中有被查询（select）。被写入：指当前业务...
ETL工作流快速体验
智慧城市人口财产主题分析 DataWorks MaxCompute 数据开发 以人口、房产等相关数据整合与人口特征提取为例，使用DataStudio 数据开发 模块。通过数据加工处理，并设置调度策略，实现数据处理的自动化，从而向您展示智慧城市项目下数据加工...
产品计费
本文介绍 数据库自治服务DAS 不同版本的费用、到期、欠费以及续费说明。...相关文档 DAS经济版介绍 DAS企业版介绍 管理DAS经济版和企业版 取消使用DAS经济版和企业版 DAS企业版间支持数据迁移，详情请参见 DAS企业版间数据如何迁移？
入门概述
以下使用流程可帮助您快速了解和使用 Web 版 ODC：顺序 操作 说明 1 登录 Web 版 ODC 在 OceanBase 管理控制台页面的左侧导航栏中，单击 数据研发 按钮即可直接登录 Web 版的 ODC，后续对数据库的数据源配置以及保存工作区的 SQL 脚本等...
使用MaxCompute控制台（离线）
MaxCompute控制台提供数据上传功能，支持您将本地文件或阿里云对象存储服务OSS中的文件数据离线（非实时）上传至MaxCompute进行分析处理及相关管理操作。使用限制 仅支持基于 本地文件 或 阿里云对象存储OSS 上传数据，具体如下。本地文件...
数据建模：智能数据建模
智能数据建模是阿里云DataWorks自主研发的智能数据建模产品，沉淀了阿里巴巴十多年来数仓建模方法论的最佳实践，包含数仓规划、数据标准、维度建模及数据指标四大模块，帮助企业在搭建数据中台、数据集市建设过程中提升建模及逆向建模的...
SQL查询
数据源白名单访问控制 当使用数据分析操作MaxCompute表数据时，如果MaxCompute项目空间开启了白名单访问控制，数据分析的相关服务（例如，费用计算、数据下载、维表使用、数据上传等）可能会出现报错。为保证DataWorks数据分析服务能顺利...
在工作空间创建数据源或注册集群
若您需使用数据源进行数据开发、数据分析、或周期性调度任务，则请继续执行 步骤二：将数据源绑定至数据开发（DataStudio）。注册集群 进入管理中心页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 管理中心，在下拉框中...
功能简介
质量评估通过完整性、准确性、一致性、唯一性、时效性、规范性等六个方面构建数据质量指标体系，来实现对数据质量的量化评估。完整性：数据完整性是指一个数据集的特定字段或属性都被赋予了数值。准确性：数据准确性是指数据准确的反映其所...
功能简介
质量评估通过完整性、准确性、一致性、唯一性、时效性、规范性等六个方面构建数据质量指标体系，来实现对数据质量的量化评估。完整性：数据完整性是指一个数据集的特定字段或属性都被赋予了数值。准确性：数据准确性是指数据准确的反映其所...
质量评估
质量评估通过完整性、准确性、一致性、唯一性、时效性、规范性等六个维度构建数据质量指标体系，来实现对数据质量的量化评估。完整性：数据完整性是指一个数据集的特定字段或属性都被赋予了数值。准确性：数据准确性是指数据准确的反映其所...
全球多活使用限制
为保障实例稳定性和数据一致性，在使用全球多活功能时，有一些使用约束需要您注意。使用限制 子实例需满足以下条件：部署模式为 经典（原本地盘）。存储介质为 内存型。架构为标准架构或集群架构。说明 请确保各子实例规格一致，如需进行变...
全球多活使用限制
为保障实例的稳定和数据一致性，在使用 全球多活 功能时，有一些使用约束需要您注意。使用限制 子实例需满足以下条件：部署模式为 经典（原本地盘）。存储介质为 内存型。架构为标准架构或集群架构。说明 请确保各子实例规格一致，如需进行...
标准版-单副本
架构简介 标准版-单副本采用单个数据库节点部署架构，没有可实时同步数据的备用节点，适用于数据可靠性要求不高的纯缓存业务场景使用。单副本架构具有明显的价格优势，性价比较高。警告 单副本架构不能保障数据可用性和服务连续性，选用前...
步骤二：规划数仓
业务负责人 为板块数据的业务使用稳定性负责，可根据需要进行选择。数据负责人 为板块数据生产质量保障负责，可根据需要进行选择。单击 确定。步骤二：创建 MaxCompute 计算源 按照下图操作指引，进入 新建计算源 页面。在 新建计算源 页面...
功能介绍
云原生数据仓库AnalyticDB PostgreSQL版 支持周期性的基础备份与日志备份，可以有效防止数据丢失。功能原理 云原生数据仓库AnalyticDB PostgreSQL版 通过实例的基础备份加日志备份，可以将实例恢复至指定历史时刻，并保证分布式实例状态与...
如何实现恢复数据一致性
全量备份为了尽可能降低对数据库性能影响，采用无锁备份方式，并行拉取数据并备份到OSS上，全量备份会产生不同时间点数据，在数据恢复时，先恢复全量备份数据，然后恢复增量备份数据，利用增量备份恢复的幂等性来实现恢复数据一致性。...
使用限制
在使用云数据库MongoDB前，您需要了解不同类型云数据库MongoDB实例本身存在的约束信息，使您初步了解不同类型云数据库MongoDB实例的使用限制，以帮助您选择更适合业务场景的实例。单节点实例 功能 约束 实例部署 目前不是所有地域和可用区...
使用限制
在使用云数据库MongoDB单节点实例前，您需要了解单节点实例本身存在的约束信息，使您初步了解单节点实例的使用限制，帮助您进一步确认单节点实例是否能够满足您的业务场景。功能 约束 实例部署 目前不是所有地域和可用区都支持部署单节点...
限制说明
使用场景 当数据访问分布比较均匀，数据没有明显的冷热分别时，大量的访问请求在云数据库 Memcache 版无法命中，使用云数据库 Memcache 版作为数据库缓存的效果不明显。在选择缓存时，需要充分考虑到业务模式对数据访问的要求。数据删除...
使用限制
在使用云数据库MongoDB分片集群实例前，您需要了解分片集群实例本身存在的约束信息，使您初步了解分片集群实例的使用限制，帮助您进一步确认分片集群实例是否能够满足您的业务场景。功能 DynamoDB协议实例约束 MongoDB协议实例约束 实例...
数据传输预检查
启动数据迁移项目时，为确保项目的顺利运行，OceanBase 数据传输功能会自动启动预检查环节，针对源端和目标端的数据库连通性、相关配置的正确性、增量日志参数等问题或设置进行检查。本文为您介绍数据迁移项目预检查环节的常见报错和解决...
使用场景
包含但不限于如下场景：数据迁移与同步 使用DMS任务编排配置和管理数据迁移或数据同步任务，将数据从一个数据源迁移到另一个数据源，或实现同数据源、不同数据源之间的数据实时同步。数据清洗与加工 DMS任务编排可以用于数据清洗和加工任务...
- 产品推荐
- 这些文档可能帮助您