一级菜单 二级菜单 说明 元数据采集 采集概览 元数据支持丰富的采集源类型,如传统数据库MySQL、Oracle,大数据存储Hive、Hologres等,可一览不同数据源类型已创建的采集任务、已创建的数据源、采集对象类型和支持的版本。采集任务 通过...
通过DMS控制台,您可以导出多个或所有实例的配置信息,包含实例的管控模式、环境类型、实例来源等,便于在线下管理实例资源。前提条件 系统角色为DBA或管理员。更多信息,请参见 查看我的系统角色。操作步骤 登录 数据管理DMS 5.0。在顶部...
背景信息 数据管理DMS 提供 自由操作、稳定变更、安全协同 三种管控模式,有关各管控模式的具体说明,请参见 管控模式介绍。操作步骤 登录 数据管理DMS 5.0。查看单个实例的管控模式。在DMS控制台页面左侧的实例列表区域的搜索栏中,搜索...
数据库分层架构 在数据库分层架构中,使用 Tablestore 配合MySQL来完成应用系统的业务需求,利用MySQL的事务能力来处理对事务强需求的写操作与部分读操作,利用 Tablestore 的数据检索能力和大数据存储来实现数据存储、查询与分析。...
本文介绍对象存储OSS的Python SDK各种使用场景下的示例代码。源码地址 请访问 GitHub 获取源码。示例代码 OSS Python SDK...存储空间 对象/文件 权限控制 数据安全 数据管理 传输管理 数据处理 LiveChannel管理 中文和时间 异常处理 常见问题
实例录入数据管理DMS后,DMS会自动采集实例中数据库的字典信息。当您在DMS发现实例信息不一致时,您可以手动同步字典。如果您在DMS进行数据库结构变更,DMS会自动同步字典,否则需要手动同步字典。背景信息 字典信息用于实现数据库、表、...
大部分阿里云用户以CSV格式将数据存储在OSS上,若要提高数据扫描性能,需要借助第三方工具对文件进行格式转换,然后将转换后的数据上传至OSS,整个过程比较繁琐。为减轻用户工作量,您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...
数据管理 数据时效设置 您可以通过控制台或者 API 设置数据的有效期。数据时效开启并设置完成后,系统对于定义的过期数据将立即标记失效,并在特定时间进行自动化清理。数据清理 您可以在控制台上根据度量(Metric)进行数据清理,或者通过...
创建用户 登录 数据管理DMS 5.0。登录目标数据库,详情请参见 登录数据库。单击首页左侧的数据库实例,在实例列表中右键单击目标实例名称,再单击 数据库账号管理。在 数据库账号管理 页面,单击左上角的 创建数据库账号。在弹出的窗口中,...
对象存储OSS提供标准、低频访问、归档、冷归档、深度冷归档多种存储类型,全面覆盖从热到冷的各种数据存储场景。说明 各存储类型的定价,请参见 OSS产品定价。各存储类型的计费方式,请参见 存储费用。标准存储(Standard)提供高可靠、高...
Dataphin数据源管理标签以标签的形式能够更好...在 管理数据源标签 对话框,单击 新建标签 按钮创建标签,您可以对标签执行编辑和删除操作。单击 确定,完成标签创建。若标签在数据源中被引用,您可以点击数据源引用数后的 图标查看引用详情。
实例录入至DMS后,若需要调整单个实例的基本信息(包含数据库账号、安全规则等)、高级信息(包含实例的环境类型、开启无锁结构变更、查询和导出超时时间等),或通过批量编辑来调整多个实例的通用信息,您可参考本文进行操作。前提条件 您...
存储类型 计费详情 热数据存储 购买集群后已经拥有了热数据存储空间,与购买集群的存储空间相同。冷数据存储 采用按量付费模式。无需提前购买固定的存储空间,先使用,后付费,并按照实际使用的存储空间每小时计费一次。冷数据存储的详细...
背景信息 冷热分界线是冷数据归档的依据,搜索引擎会根据数据存储量和查询时间覆盖的范围来确定需要将多久之前的数据归档至冷存储。Lindorm将容量型云存储作为冷存储介质,价格仅为标准型云存储的20%,大大降低了存储成本。冷热分界线的...
分析存储与时序表的数据存储相互独立,允许用户自定义数据的生命周期(TTL),对分析存储的查询操作不会对时序表的读写性能产生影响。分析存储能够自动同步时序表数据,在数据写入速率稳定的情况下,同步操作的延迟通常在 10 分钟内,如果...
权限说明 Dataphin仅支持 超级管理员、数据源管理员 新建及管理数据源标签。新建数据源管理标签 在Dataphin首页,单击顶部菜单栏 管理中心。按照下图指引,进入 管理标签 对话框。在 管理数据源标签 对话框,单击 新建标签 按钮创建标签,...
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 普通成员 管理表权限 Y N N N N 管理行级权限 Y N N Y N 管理数据源权限 Y N Y N N 管理变量权限 Y Y N N N 管理密钥权限 Y N N Y N 管理数据服务权限 Y N N N N 管理用户组权限 Y Y...
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 普通成员 管理表权限 Y N N N N 管理行级权限 Y N N Y N 管理数据源权限 Y N Y N N 管理变量权限 Y Y N N N 管理密钥权限 Y N N Y N 管理数据服务权限 Y N N N N 管理用户组权限 Y Y...
本文介绍数据管理DMS支持的实例环境类型以及更改实例环境类型的步骤。注意事项 建议您按照数据库实际环境选择实例环境类型。在安全协同管控模式下,测试环境在安全规则中默认免审批、弱管控。生产环境在安全规则中默认强管控。但您可以按需...
数据存储方案 表格存储设计了两张表分别存储数据集的meta和data:meta表示这个数据集的元数据,例如GridDataSetId、各维度长度、自定义属性等。data表示这个数据集里实际的网格数据。data相比meta在数据大小上要大很多。将数据集的meta和...
当管理员或DBA需要授予或回收实例的登录、查询或变更等权限时,您可以参考本文进行操作。前提条件 您的系统角色为管理员或DBA。查看系统角色的具体方法,请参见 查看我的系统角色。若管理员或DBA需要细粒度地管理实例的性能查看、查询、...
当需要清理分析存储中的历史数据或者希望延长数据保存时间时,您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后,表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
本文介绍了通过RDS云盘实现数据存储结构优化和冷热数据分离的实践方案。适用于数据量庞大、对成本敏感或对数据访问性能有分层需求等业务场景。冷热数据分离不仅能有效降低存储成本,还能确保关键数据的快速访问,优化资源利用。通过将低频...
当需要清理分析存储中的历史数据或者希望延长数据保存时间时,您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后,表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
当您的业务需要导出的数据量较大,且当前实例的管控模式不能满足需求时,或业务需要查找较长时间段内数据库在SQL窗口变更的相关信息时,可以变更实例的管控模式。前提条件 系统角色为DBA或管理员时,才可以变更实例的管控模式。注意事项 ...
数据管理DMS 的资产大盘功能支持T+1离线汇总当前 DMS 租户下的所有实例、数据库、表数据,并图形化展示数据资产的引擎、环境、地域、来源、类目的分布占比及数量趋势。本文介绍如何使用DMS的资产大盘。注意事项 DMS 资产大盘的 表分布占比 ...
产品系列 文档 DLF 2.0(推荐)数据目录 数据库 数据表 用户管理 角色管理 授权管理 存储优化 大数据&AI产品适配 DLF 1.0 数据目录 元数据管理 数据表-数据概况 元数据抽取 元数据迁移 元数据导出 用户管理 角色管理 权限设置 存储概览 湖...
在管理数据页面中,数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。本文介绍数据页面中各个数据功能的使用方法。数据页面分为两大模块,包括 我的数据分组 和 数据管理 页面。我的数据分组 在 我的数据分组 ...
在管理数据页面中,数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。本文介绍数据页面中各个数据功能的使用方法。数据页面分为两大模块,包括 我的数据分组 和 数据管理 页面。我的数据分组 在 我的数据分组 ...
Alluxio为数据驱动型应用和存储系统构建了桥梁,将数据从存储层移动到距离数据驱动型应用更近的位置,从而能够更容易被访问,同时使得应用程序能够通过一个公共接口连接到许多存储系统。背景信息 在大数据生态系统中,Alluxio位于数据驱动...
本文对数据管理控制台中服务器监控数据刷新频率进行说明。通过“登录服务器”,进入到服务器管理界面,“实时监控”显示的数据,是每隔5秒左右获取一次数据,如下图。关闭、退出服务器管理界面,会自动停止“实时监控”数据的采集。数据...
数据源可以是Table Store、ApsaraDB for RDS和AnalyticDB MySQL等数据存储中的数据表。流式数据服务的源头为DataHub或RocketMQ的Topic,服务封装为DataHub Topic的读取API,返回Topic中的数据。数据源可以是DataHub和RocketMQ。批量离线...
您可以访问 新版数据管理DMS,体验一站式在线数据管理平台。
数据源可以是Table Store、ApsaraDB for RDS和AnalyticDB MySQL等数据存储中的数据表。流式数据服务的源头为DataHub或RocketMQ的Topic,服务封装为DataHub Topic的读取API,返回Topic中的数据。数据源可以是DataHub和RocketMQ。批量离线...
数据资产治理(原数据治理中心)可根据预先配置的治理计划,自动发现平台使用过程中数据存储、任务计算、代码开发、数据质量及安全等维度存在的问题,并通过健康分量化评估,从全局、工作空间、个人等多个视角,以治理报告及排行榜呈现治理...
在使用 数据管理DMS 的无锁结构变更功能前,您需要先开启目标实例的无锁结构变更。本文介绍开启无锁结构变更的方法。前提条件 支持的数据库类型:RDS MySQL、PolarDB MySQL版、MyBase MySQL、其他来源MySQL。实例的管控模式为稳定变更或...
相关文档 在进入极简模式的控制台之后,您还可以进行如下操作:管理数据库。具体操作,请参见 数据库管理。在SQL Console中创建表、查询表数据和变更等。具体操作,请参见 SQL Console初体验。管理表中的敏感数据。具体操作,请参见 敏感...
当您需要将特定用户设置为数据库Owner、授予数据库的查询和导出等权限时,可参考本文进行操作。注意事项 待设置的数据库Owner需要是已录入至DMS的用户。若需要录入新的用户,请参见 用户管理。本文的数据库Owner为DMS的资源角色名。更多...
概述 数据管理DMS高级版如何升级用户数。详细信息 登录 数据管理控制台,查看高级版右侧的信息。如果购买方式是包年包月,显示的是产品到期还有*天,单击天数会弹出升级和续费按钮,然后按照提示操作即可。如果购买方式是按量付费,显示的...
本文介绍数据管理DMS的碎片率计算公式。计算公式 DMS的碎片率=(1-(表数据空间+索引空间)/总空间)*10。如图所示:适用于 数据管理DMS