数据服务
背景信息 数据服务提供了数据中台建设过程中的数据服务化能力，面向数据开发者提供覆盖各个加工阶段统一体验的、便捷的数据查询转服务、服务管理、服务运维能力；面向数据资产管理者提供服务的统计分析、服务用量统计分析，实现数据中台...
添加处理后数据到数据管理
数据处理后，需要将处理后的数据添加到数据管理中，以便被用于数仓建设、标签管理等数据中台任务。本文以倾斜数据处理后为例，介绍如何添加处理后数据到数据管理。前提条件 已新建数据处理任务，具体操作，请参见 新建数据处理任务。操作...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
什么是DataWorks
从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手，不断提升数据应用效率，助力产业数字化升级。产品架构 DataWorks十多年...
客户案例
新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，大润发计划两年内将IT系统全面迁移到阿里云上，不再自建IDC。同时与阿里云合作启动数据中台项目，可以帮助大润发降低TCO的同时，更好的依托云...
空间数据（邀测中）
数据处理 支持倾斜数据处理能力，可以将OSGD格式数据转化为S3M数据，再将处理后的数据添加到数据管理中，以便被用于数仓建设、标签管理等数据中台任务。支持对数据处理任务进行管理。支持查看数据处理任务详情，包括任务的基本信息、处理的...
功能简介
数据处理 支持倾斜数据处理能力，可以将OSGB格式数据转化为S3M数据，再将处理后的数据添加到数据管理中，以便被用于数仓建设、标签管理等数据中台任务。支持对数据处理任务进行管理。支持查看数据处理任务详情，包括任务的基本信息、处理的...
统一服务
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”的传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
准备工作
开通企业数据智能平台 企业数据智能平台默认为关闭状态，使用前需要前往 AnalyticDB PostgreSQL版 控制台开通。登录 云原生数据仓库AnalyticDB PostgreSQL版控制台。在控制台左上角，选择实例所在地域。...单击 开通数据中台。
应用场景
构建数据中台，行业领域模型快速沉淀 场景：快速构建数据仓库，有效治理数据质量，实现政企客户各部门数据的业务协同和共享。痛点：以政务服务为例，政务服务部门众多，业务系统复杂、流程长，数据来源多且更新频率高；数据口径标准、数据...
功能简介
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。通用资源 提供了自定义函数和函数资源的能力，帮助用户在数据开发等过程中...
时序异常检测
算法中数据结构的空间复杂度。参数值越大算法在运行过程中越占用内存，但是算法结果越准确。lenHistoryWindow INTEGER 正整数，默认值为null，取值≥20。算法参考的时间窗口长度。如果时间窗口长度比较短，计算过程中只会将最近的数据点...
手动添加数据源
您可以通过 数据库备份DBS 的手动添加数据源功能，将不同环境的数据库添加至 数据库备份DBS 中，便于后续对数据源进行管理与备份。费用说明 添加数据源操作不会产生费用，只有在添加数据源后开启备份才会产生费用。如何开启备份，请参见 ...
清除数据
您可以在控制台清除 云原生内存数据库Tair 实例中的所有过期数据或所有数据。操作步骤 说明 在 参数设置 中禁用 FLUSHALL 命令不会影响控制台中 清除数据 功能。访问 Tair实例列表，在上方选择地域，然后单击目标实例ID。在 实例信息 页面...
清除数据
您可以在控制台清除 云数据库 Redis 版 实例中的所有过期数据或所有数据。操作步骤 说明 在 参数设置 中禁用 FLUSHALL 命令不会影响控制台中 清除数据 功能。访问 Redis实例列表，在上方选择地域，然后单击目标实例ID。在 实例信息 页面，...
常见问题概览
连接访问 打开SQLConsole页面时提示“未获取到数据库相关信息”的报错 MySQL中出现“Too many connections”报错 新增ECS自建数据库提示“因白名单问题无法连接数据库”账号或权限 如何在DMS控制台中查看数据库对应的DBA 在DMS控制台添加...
功能介绍
4 我的看板 当前区域为可视化应用中心中数据看板的展示页面，当可视化工作台中的数据看板发布后，此处即展示已发布的数据看板。可视化演播厅 序号 区域名称 说明 1 工作空间 当前区域为可视化演播厅中工作空间的管理部分，通过切换工作空间...
DataWorks交流钉钉群
说明 从2009年飞天大数据平台写下第一行代码开始，DataWorks历经10年发展，形成一套成熟的产品功能体系，满足企业数据中台搭建需求。在阿里巴巴内部，每天有数万数据、算法开发工程师正在使用DataWorks。您需要先单击 申请链接 加入“阿里...
添加DataWorks数据服务数据源
本文介绍在DataV中添加DataWorks数据服务数据源，并将通过DataWorks数据表生成的API，快速地展示在DataV可视化大屏中的方法。前提条件 已准备好待添加的DataWorks数据服务数据源。背景信息 DataWorks数据服务生成的API默认不支持HTTPS协议...
添加DataWorks数据服务数据源
本文介绍在DataV中添加DataWorks数据服务数据源，并将通过DataWorks数据表生成的API，快速地展示在DataV可视化大屏中的方法。前提条件 已准备好待添加的DataWorks数据服务数据源。背景信息 DataWorks数据服务生成的API默认不支持HTTPS协议...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
步骤五：创建并启动入湖任务 由于DLF中数据入湖功能已经停止更新，如果您有数据入湖需求请参考 DLF中数据入湖功能停止更新公告。您可以采用以下两种方式进行Delta Lake和Hudi格式的数据入湖操作。重要 Delta格式的数据入湖可选择单表离线...
C100售后支持相关问题
说明 如果服务器与数据库审计系统之间的网络无法连通，则一个数据库审计实例只能对一台服务器中的数据库进行审计。示例三，您在阿里云账号A下有5台服务器，阿里云账号B下也有5台服务器。您只需连通每台服务器与数据库审计系统之间的网络，...
配置脱敏模板和算法
配置脱敏算法 登录 数据安全中心控制台。在左侧导航栏，选择 风险治理>脱敏配置。在 脱敏配置 页面，单击 脱敏算法 页签。配置脱敏算法。单击脱敏算法右侧的 测试，在 测试 面板，完成脱敏算法测试。仅部分类型的脱敏算法支持测试，具体以...
受众与核心能力
同时，DataWorks持续打造符合企业级数仓、数据中台构建要求的功能模块，为企业业务的数字化转型提供支持。产品受众 从事数据开发、算法开发等岗位的技术人员 从事销售运营、商业智能分析等岗位的业务人员 从事数据安全与合规工作的管理人员...
Contextual Bandit 算法
推荐系统中的数据循环问题 算法决定展示内容，展示内容影响用户行为，而用户行为反馈又会决定后续算法的学习，形成循环。在这种循环下，训练集和测试集与监督学习独立同分布的假设相去甚远，同时系统层面上缺乏有效探索机制的设计，可能...
时序异常检测
数据服务提供时序异常检测算法，采用智能时序算法，实时分析设备时序数据，准确感知设备异常现象。查看基本信息 在 物联网平台控制台 的 实例概览 页面，单击目标企业版实例卡片。在左侧导航栏，选择 数据服务>数据智能。在算法模板列表中...
水印使用限制
由于嵌入水印的原理是将水印原子信息嵌入到不同特征的数据中去，因此源数据特征越多，越能嵌入完整的水印信息、提高提取成功率，并且即使缺失部分数据也不影响水印提取。所以对需要嵌入水印的数据有如下要求：待嵌入水印的源数据需要大于...
多账号统一管理
说明 部分页面不支持按照UID筛选数据，例如 工作台 页面，具体支持情况请以控制台页面显示为准。登录 数据安全中心控制台。在左侧导航栏，选择 资产中心>授权管理。在 授权管理 页签下，可以通过筛选UID，管理对应阿里云账号下的资产。删除...
我的看板
数据来源 在工作台中创建并发布的数据看板内容，会同步在此处展示，若数据看板仅编辑完成，但是未发布，则在此处不展示。如需编辑某一看板内容，请单击页面右上角的 前往可视化工作台，编辑并发布对应数据看板后，刷新当前页面即可。操作...
新建开发环境场景并运行
步骤四：连接各节点 说明 请根据算法流程的数据流向连接算法流程中的各节点。将鼠标指向上游节点下部的圆圈。当圆圈点亮时按下鼠标左键并拖拽到下游节点上部的圆圈上。当下游节点上部的圆圈点亮时松开鼠标。说明 当画布工具栏中，单击 打开...
添加 MySQL 数据源的白名单
复制 OMS 控制台 添加数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。您也可以选择 手动添加，手动输入 端口范围、授权对象 等信息。在 快速添加 对话框，粘贴复制...
引用物理表质量规则
当算法运行时，画布中引用的数据质量规则也会自动运行，以检查算法输出数据是否符合要求，可在物理表监控明细查看运行结果。本文介绍如何引用逻辑表质量规则。前提条件 已搭建算法流程，具体操作，请参见 新建开发环境场景并部署运行。算法...
创建数据源
信息项 示例值 项目名称 odc_4.2.0 数据源名称 obmysql4.2.0 集群名 odctest 租户名 mysql 数据库用户名 odctest 数据库密码*进入 OceanBase 管理控制台，在 OceanBase 管理控制台页面的左侧导航栏中，单击 数据研发 按钮即可直接登录 Web ...
如何不间断地进行时序异常检测
说明 在异常检测算法中如果需要设置 warmupCount 参数（表示至少需要多少个数据点才会开始报异常），请确保指定 adhoc_state=true 时本次查询检测的数据点数量满足 warmupCount 参数要求的数据点数量。如果异常检测查询中采用相同的异常...
添加TableStore数据源
在TableStore控制台中创建实例和数据表，具体请参见 创建实例 和 创建数据表。如下图创建了一个名称为 test 的实例，里面有3行数据，每行数据有两个列：id(主键,integer)和 test(string)。配置数据源。查询参数。使用 getRow 方式查询。...
添加TableStore数据源
在TableStore控制台中创建实例和数据表，具体请参见 创建实例 和 创建数据表。如下图创建了一个名称为 test 的实例，里面有3行数据，每行数据有两个列：id(主键,integer)和 test(string)。配置数据源。查询参数。使用 getRow 方式查询。...
添加 Oracle 数据源的白名单
复制 OMS 控制台 添加数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域，单击 快速添加。您也可以选择 手动添加，手动输入 端口范围、授权对象 等信息。在 快速添加 对话框，粘贴复制...
计费概述
下表中OTA升级、数据智能算法实例和IoT孪生引擎版本的续费前提是对应企业版实例在有效期内。服务 续费说明 相关文档 企业版实例 最迟需要在到期后的15天内完成实例资源续费，否则实例下产品、设备等数据会自动被释放，数据丢失，不可恢复。...
选型指导
初次接入服务，建议优先选择高级版服务接入，因为高级版本中包含数据诊断和推荐算法定制功能。通过数据诊断可以分析用户特征、物品特征中特征的有效性，分析用户行为表是否正确，并且决定推荐算法定制中的特征和配置参数。推荐算法定制可以...
- 产品推荐
- 这些文档可能帮助您