模型介绍
Meta：用于描述Timeline的元数据，元数据描述采用free-schema结构，可自由包含任意列。Queue：一个Timeline内所有Message存储在Queue内。SequenceId：Queue中消息体的序列号，需保证递增、唯一。模型支持自增列、自定义两种实现模式。...
组件接入
会在Chart文件目录里生成component.yaml的元数据描述文件，如果需要指定该业务组件支持的os架构类型，可以以标准YAML格式直接编辑component.yaml文件中的spec.platforms字段然后重新使用zlink push上传业务组件。组件支持多架构可以使用数...
现代IM系统中的消息系统—模型
Meta 用于描述Timeline的元数据，元数据描述采用free-schema结构，可自由包含任意列。Queue 一个Timeline内所有Message存储在Queue内。Message Timeline内传递的消息体，也是一个free-schema的结构，可自由包含任意列。Index 包含Meta ...
管理元数据
参数分区 参数名称 描述 数据源配置 元数据名称 填写元数据的名称。命名规则如下：长度不能超过30个字符。允许任何字符。存储类型 存储类型默认为Dataphin的离线计算引擎类型，不支持修改。您也可以查看Dataphin的计算引擎，具体操作请参见...
管理元数据
参数分区 参数名称 描述 数据源配置 元数据名称 填写元数据的名称。命名规则如下：长度不能超过30个字符。允许任何字符。存储类型 存储类型默认为Dataphin的离线计算引擎类型，不支持修改。您也可以查看Dataphin的计算引擎，具体操作请参见...
约束和限制
数据湖管理使用限制 限制 描述 元数据发现支持发现的数据源 OSS SLS Tablestore 元数据发现OSS数据源的文件格式 只支持识别CSV、JSON、Parquet、ORC格式的文件 元数据发现OSS数据源目录结构 按照库/表/分区布局的路径 元数据发现OSS数据源...
0024-00000505
问题描述 元数据转换任务数量超过了上限。问题原因 您创建的元数据转换任务数量超过了上限。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 检查任务是否超过上限，删除不使用的多余任务后重试。相关文档 OSS-HDFS...
0024-00000506
问题描述 元数据转换任务中，Path数量超过了上限。问题原因 您创建的元数据转换任务中，Path数量超过了上限。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 检查Path是否超过上限，删除多余的Path任务后重试。相关...
0024-00000501
问题描述 元数据转换请求中的XML格式或参数不正确。问题原因 您发起了元数据转换相关的管理请求，请求中XML格式或参数不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 该功能为邀测功能，如果发现此错误，请...
独立RDS元数据库
本文介绍如何配置独立的阿里云RDS，作为Databricks数据洞察集群的元数据。前提条件 已购买RDS，详情请参见 创建RDS MySQL实例。说明 本文以MySQL 5.7版本为例介绍。元数据库准备 创建hivemeta的数据库 详情请参见 创建数据库和账号 中的...
0037-00000005
问题描述 元数据索引查询参数有误。问题原因 您发起了DoMetaQuery请求查询Bucket中符合条件的文件，但是查询请求体XML结构不符合规范。问题示例 无 解决方案 结合响应中的ErrorCode和ErrorMessage定位请求体XML中存在的问题，并结合...
配置自建RDS
DataLake和Custom集群参数 Hadoop集群参数 描述 元数据 选择 自建RDS。说明 仅当 Custom 集群选择了HDFS、YARN和Hive服务后，元数据 参数才可见。javax.jdo.option.ConnectionURL RDS链接 填写格式为 jdbc:mysql:/rm-xxxxxx.mysql.rds....
新建ArgoDB计算源
参数 描述 元数据获取方式 支持从元数据库获取和HMS获取方式。使用HMS请先在配置文件中上传hdfs-site.xml、hive-site.xml、core-site.xml文件及配置认证方式。数据库类型 选择ArgoDB的元数据库类型。系统目前支持ArgoDB。JDBC URL 填写对应...
新建ArgoDB数据源
通过创新建ArgoDB数据源能够实现Dataphin读取ArgoDB的业务数据或向ArgoDB写入数据。本文为您介绍如何新建ArgoDB数据源。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin...
元数据管理
元数据管理是构建数据湖重要一环，通过有效集中式的元数据管理，可以提升数据资产价值。您可以使用该功能管理元数据库和元数据表。创建元数据库 登录 数据湖管理控制台，选择 元数据 目录下的 元数据管理。单击 新建数据库。配置元数据库...
DatabaseInput
名称 类型 描述 示例值 object 数据库对象 Description string 元数据库描述文本 this is a hive database LocationUri string 元数据库保存路径，例如可填写 HDFS 路径/hdfs/hivedb/data Name string 元数据库名称，校验长度 128，不支持...
Database
名称 类型 描述 示例值 object 数据库对象 CreateTime integer 创建时间，Unix 时间戳秒数 1608707407 Description string 元数据库描述文本 this is a hive database LocationUri string 元数据库保存路径，例如 HDFS 路径/hdfs/hivedb/...
宽表模型介绍
使用宽表模型可以实现元数据、大数据等多种场景的解决方案，例如 搭建海量智能元数据管理系统、亿量级订单管理方案、基于多元索引搭建亿量级店铺搜索系统、表格存储结合Spark流批处理实现一体化存储和计算、表格存储结合实时计算Flink进行...
方案背景
本文主要为您介绍搭建海量智能元数据管理系统的技术点以及使用表格存储搭建智能元数据管理系统的方案。用户存储海量的文档、媒体文件等数据的同时，对文件元数据（Meta）的管理不可或缺。元数据拥有多维度的字段信息，基本信息包含文件大小...
0024-00000502
问题描述 管理元数据转换任务请求（修改或删除）时，设置了RoleID。问题原因 您发起了管理元数据转换任务请求（修改或删除），并设置了RoleID。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 管理元数据转换任务...
0024-00000503
问题描述 创建元数据转换任务请求中的RoleID为空。问题原因 您发起了创建元数据转换任务请求，请求中的RoleID为空。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 填写正确的RoleID。相关文档 OSS-HDFS服务的...
0011-00000007
问题描述 文件元数据中Content-Disposition的值包含非法字符。问题原因 请求中指定了文件元数据，但是文件元数据中的Content-Disposition字段包含非法字符。问题示例 例如，您发起了PostObject请求，并通过表单域中的Content-Disposition...
0011-00000008
问题描述 文件元数据中Content-Encoding的值包含非法字符。问题原因 请求中指定了文件元数据，但是文件元数据中的Content-Encoding字段包含非法字符。问题示例 例如，您发起了PostObject请求，并通过表单域中的Content-Encoding字段声明...
0024-00000507
问题描述 启动元数据转换任务时，任务状态冲突。问题原因 您启动元数据转换任务时，任务状态不为空闲。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 检查当前任务状态，如不为空闲状态，请等任务执行完成，状态为...
0011-00000010
问题描述 文件元数据中Expires的值包含非法字符。问题原因 请求中指定了文件元数据，但是文件元数据中的Expires字段包含非法字符。问题示例 例如，您发起了PostObject请求，并通过表单域中的Expires字段声明缓存内容的绝对过期时间，格式应...
0011-00000006
问题描述 文件元数据中Content-Type的值包含非法字符。问题原因 请求中指定了文件元数据，但是文件元数据中的Content-Type字段包含非法字符。问题示例 例如，您发起了PostObject请求，并通过表单域中的Content-Type字段声明上传的文件类型...
0024-00000504
问题描述 创建元数据转换任务请求时，命中前缀参数含有OSS-HDFS的特殊路径。问题原因 您发起了创建元数据转换任务请求，命中前缀参数含有OSS-HDFS的特殊路径。命中前缀不支持设置为..d、.dl、.dls、.dlsd、.dlsda、.dlsdat、.dlsdata其中...
0011-00000009
问题描述 文件元数据中Cache-Control的值包含非法字符。问题原因 请求中指定了文件元数据，但是文件元数据中的Cache-Control字段包含非法字符。问题示例 例如，您发起了PostObject请求，并通过表单域中的Cache-Control字段指定Object的缓存...
方案背景
本文以车联网场景中车辆元数据为例介绍基于设备接入平台与表格存储Tablestore搭建车辆元数据管理平台的场景需求以及方案架构。场景需求 车辆在行驶的过程中会定时上报大量的状态数据，例如车辆识别代码、行驶速度、发动机转速、车内温度等...
0037-00000004
问题描述 Bucket元数据索引库未构建完成。问题原因 您发起了DoMetaQuery或GetMetaQueryStatus请求，但是请求的目标Bucket元数据索引库未构建完成。问题示例 例如，你发起了DoMetaQuery请求，但是请求的Bucket（oss-example）元数据索引库未...
客户端加密
OSS客户端加密是在数据上传至OSS之前，由用户在本地对数据进行加密处理，确保只有密钥持有者才能解密数据，增强数据在传输和存储过程中的安全性。免责声明 使用客户端加密功能时，您需要对主密钥的完整性和正确性负责。因您维护不当导致主...
新建和管理公共标准属性
当选择 数据分类/数据分级 属性时，将对比数据标准中指定的数据分类数据分级值和其映射到的字段在安全模块配置中的数据分类数据分级值是否一致。需要开通资产安全模块才支持数据分类数据分级属性的监控。内容质量监控（需开通资产质量模块...
新建和管理公共标准属性
当选择 数据分类/数据分级 属性时，将对比数据标准中指定的数据分类数据分级值和其映射到的字段在安全模块配置中的数据分类数据分级值是否一致。需要开通资产安全模块才支持数据分类数据分级属性的监控。内容质量监控（需开通资产质量模块...
ST_SetMetaData
描述 如果传入的元数据值为空值（''），会删除该元数据项。示例 SELECT ST_MetaData(ST_SetMetaData(rast,'NETCDF_DIM_time','12345'),'NETCDF_DIM_time')FROM raster_table st_metadata-12345 SELECT ST_MetaData(ST_SetMetaData(rast,0,'...
ST_SetMetaData
描述 如果传入的元数据值为空值（''），会删除该元数据项。示例 SELECT ST_MetaData(ST_SetMetaData(rast,'NETCDF_DIM_time','12345'),'NETCDF_DIM_time')FROM raster_table st_metadata-12345 SELECT ST_MetaData(ST_SetMetaData(rast,0,'...
ST_SetMetaData
描述 如果传入的元数据值为空值（''），会删除该元数据项。示例 SELECT ST_MetaData(ST_SetMetaData(rast,'NETCDF_DIM_time','12345'),'NETCDF_DIM_time')FROM raster_table st_metadata-12345 SELECT ST_MetaData(ST_SetMetaData(rast,0,'...
ST_SetMetaData
描述 如果传入的元数据值为空值（''），会删除该元数据项。示例 SELECT ST_MetaData(ST_SetMetaData(rast,'NETCDF_DIM_time','12345'),'NETCDF_DIM_time')FROM raster_table st_metadata-12345 SELECT ST_MetaData(ST_SetMetaData(rast,0,'...
Dubbo概述
Dubbo应用托管到EDAS的价值 将Dubbo应用托管到EDAS，您只需要关注Dubbo应用自身的逻辑，无需关注注册中心、配置中心和元数据中心的搭建和维护。托管后还可以使用EDAS提供的弹性伸缩、限流降级、监控及微服务治理能力，而且整个托管过程对您...
资产全景及目录概述
名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的信息，用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。主题域：为您展示数据架构部分已经创建好的主题域，便于您根据主题域更快捷的进行资产...
资产全景及目录概述
名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的信息，用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。主题域：为您展示数据架构部分已经创建好的主题域，便于您根据主题域更快捷的进行资产...
- 产品推荐
- 这些文档可能帮助您