文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
Navicat数据可视化
前提条件 根据客户端网络环境配置 云数据库 SelectDB 版 实例网络：客户端位于阿里云ECS服务器，且与 云数据库 SelectDB 版 实例位于同一VPC下，无需配置，获取 云数据库 SelectDB 版 实例的 VPC地址 即可。其他情况，请为 云数据库 ...
常用管理
错误信息提示 在 画布编辑器 页面右上角，通过单击 图标查看当前画布中的错误信息，包括但不限于 组件数据获取失败、过滤器执行错误。报错类型 说明 组件数据获取失败 组件请求数据源发生错误时，产生该报错。数据源的请求可能发生在组件...
百度统计
如您的网站需要统计分析的工具，可使用百度统计功能，本文介绍百度统计的使用方法。获取百度统计代码：获取步骤请参见 百度统计。使用百度统计：单击 网站管理>百度统计，将已获取的代码粘贴，发布...说明 如需浏览网站数据请登录各平台浏览。
API概览
GetSkillGroupServiceCapability 获取在线监控下技能组纬度服务能力数据 获取在线监控下技能组纬度服务能力数据。GetSkillGroupAgentStatusDetails 获取技能组服务状态量 获取技能组服务状态量。GetOnlineSeatInformation 获取在线监控下...
用户价值
数据应用更智能：提供面向业务人员的无代码业务模型构建能力和数据分析能力，大大降低数据获取和分析门槛，让业务人员可以直接使用数据，积累沉淀业务模型，能够向上层应用提供更加智能的数据。数据资产更清晰：从宏观到微观助力数据管理方...
API概览
本产品（数据湖构建/2020-...ListDatabases 获取元数据库列表 获取数据湖元数据库列表，分页查询，可以根据数据库名称匹配。表 表 CreateTable 新增元数据表 新增数据湖的元数据表。DeleteTable 删除元数据表 根据名称删除数据湖的元数据表。...
使用SDK示例代码消费订阅数据
重要 您可以在Maven网站中获取最新的数据订阅SDK版本，详情请参见 数据订阅SDK的Maven页面。打开IntelliJ IDEA软件，然后单击 Open or Import。在弹出的对话框中，定位至SDK示例代码解压的目录，依次展开文件夹，找到项目对象模型文件：pom...
全量数据同步
RDS MySQL数据源已有ys_yhkh表作为数据同步来源表，表结构及数据获取请参见 RDS脚本。操作步骤 登录 数据资源平台控制台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择目标工作组。在左侧导航栏，单击>离线数据同步。在 离线...
移动图标层
数据面板 该组件数据为GeoJson格式，关于数据格式以及数据获取方法，请参见 地图数据格式。其中移动图标的移动位置可在 coordinates 字段中配置。表 1.配置项说明 配置项 说明 受控模式 打开开关，资产 初始化状态下不请求数据，仅通过回调...
API概览
DescribeCustomizeRuleTest 获取模拟测试场景下的历史模拟数据 获取模拟测试场景下的历史模拟数据。DescribeCustomizeRuleTestHistogram 获取自定义规则业务测试结果图表 获取自定义规则业务测试结果图表。DescribeLogFields 获取自定义...
热力线层
数据面板 该组件数据为GeoJson格式，关于数据格式以及数据获取方法，请参见 地图数据格式。其中每条线的 value 值可在 properties 字段中配置。说明 根据数据的 value 区间得出scale区间，从而计算从最大到最小的颜色渐变区间。表 1.配置项...
外部数据
不管使用什么外部数据包装器，本数据库会要求外部数据包装器从外部数据源获取数据，或者在更新命令的情况下传送数据到外部数据源。访问远程数据可能需要在外部数据源的授权。这些信息通过一个用户映射提供，它基于当前的本数据库角色提供了...
API概览
巡检评分 API 标题 API概述 GetInstanceInspections 获取数据库实例巡检评分结果 调用GetInstanceInspections接口，获取数据库实例巡检评分的结果。事件通知 API 标题 API概述 SetEventSubscription 配置事件订阅设置 调用...
创建Impala数据源
元数据获取方式：支持 元数据库、HMS、DLF 三种源数据获取方式。获取方式不同，所需配置信息不同。元数据库获取方式 参数 说明 数据库类型 请根据集群中使用的元数据库类型，选择对应的数据库类型。Dataphin支持选择 MySQL。MySQL 数据库...
路网轨迹层
数据面板 该组件数据为GeoJson格式，关于数据格式以及数据获取方法，请参见 地图数据格式 和基础平面地图的 地理边界geojson数据接口。配置字段说明 字段 说明 geometry 定义type类型为"LineString。coordinates 定义两个或多个经纬度坐标...
DTS订阅通道
本文档主要介绍如何添加DTS数据源以及配置数据源的参数获取。前提条件 已购买数据通道服务LTS，具体操作，请参见 开通LTS。操作步骤 登录 HBase控制台。在 集群列表 页，单击BDS目标实例ID。在 基本信息 页，单击 UI访问 区域中 BDS，进入 ...
轨迹层
数据面板 该组件数据为GeoJson格式，关于数据格式以及数据获取方法，请参见 地图数据格式。配置字段说明 字段 说明 geometry 定义 type 类型为"LineString。coordinates 定义两个或多个经纬度坐标位置。properties 定义轨迹起点和终点的...
API概览
ListDataCorrectPreCheckDB 获取预检查环节的数据库列表 获取数据变更工单中预检查环节的数据库列表。ExecuteDataCorrect 执行数据变更工单 执行数据变更工单。RetryDataCorrectPreCheck 重新执行数据变更工单预检查 重新执行数据变更工单...
通过Spark SQL读Lindorm数据
访问Lindorm中的Hive数据 获取 HDFS客户端 的 hdfs-site 配置信息。说明 您可以在 Lindorm管理控制台 的 数据库连接 页面，单击 文件引擎 页签中 一键生成配置项，获取 hdfs-site 配置信息。登录 云原生数据仓库AnalyticDB MySQL控制台，在...
数据分析：即时快速分析
流动：在线数据分析可以从不同业务系统的数据库获取数据进行分析。DataWorks数据分析支持导出数据为MaxCompute表，或分享结果数据至指定成员，并赋予其权限。数据可以在不同的系统和人员之间流动。安全：所有SQL查询、SQL结果下载等功能的...
数据库自治服务的审计事件
数据库自治服务已与操作审计服务集成，您可以在操作审计中查询用户操作数据库自治服务产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了...
增量数据同步
RDS MySQL数据源已有ys_yhkh表作为数据同步来源表，表结构及数据获取请参见 RDS脚本。操作步骤 登录 数据资源平台控制台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择目标工作组。在左侧导航栏，单击>离线数据同步。在 离线...
添加DTS数据源
本文介绍如何在 云原生多模数据库 Lindorm 控制台上添加DTS数据源。前提条件 云原生多模数据库 Lindorm 实例已开通LTS服务，具体操作请参见 开通LTS服务。操作步骤 登录LTS服务。具体操作，请参见 登录LTS服务。在左侧导航栏，选择 数据源...
API概览
ListDataDiagnoseReports 获取数据诊断报告 获取数据诊断报告（包括用户手动触发的诊断、每天产出的周期报告、数据启动时诊断的报告）。ListDataDiagnoseSampleDetails 获取数据诊断报告抽样明细 获取数据诊断报告抽样明细。
API概览
碳排管理 API 标题 API概述 报送碳排放活动数据 报送碳排放活动数据 GetDataItemList 获取数据项详情列表 本接口用于获取数据项详情列表。PushItemData 推送数据项数据 推送数据项数据。RecalculateCarbonEmission 碳盘查重新计算 重新计算...
API概览
GetSparkAppMetrics 查询Spark App指标数据 获取Spark App指标数据。ListSparkLogAnalyzeTasks 查询Spark日志分析任务列表 获取所有的Spark日志分析任务列表。SubmitSparkLogAnalyzeTask 提交Spark日志分析任务 提交一个Spark日志分析任务,...
使用数据镜像保护尚未写入完整的数据
使用场景 创建数据镜像，可确保在数据大批量写入更新期间，所有读请求从数据镜像获取数据。从而确保数据在完整写入前不会被应用程序读取到。数据镜像的读取性能与先前非镜像数据的读取性能完全保持一致。说明 数据更新完成后，可将数据正式...
API概览
ListDatasets 获取数据集列表 获取某个工作空间下的数据集列表。DeleteDataset 删除数据集 删除数据集。CreateDatasetLabels 创建数据集标签 为数据集打标签。DeleteDatasetLabels 删除数据集标签 删除数据集标签。代码配置 API 标题 API...
创建数仓分层
数仓分层保障了数据在进入数据仓库之前都经过清洗和过滤，使原始数据不再杂乱无章，优化了查询过程，有效的提高了数据获取、统计和分析的效率。同时，数仓分层实现了各种不同维度数据的关联，使多维分析更加方便，为从多角度、多层次地数据...
通过数据同步功能同步SLS至湖仓版（推荐）
Schema字段映射 默认会从日志服务的投递任务配置中获取字段，如LogStore没有配置投递任务，会默认根据最近的日志数据获取字段。支持的数据类型：BOOLEAN、INT、BIGINT、FLOAT、DOUBLE、STRING。支持同步SLS保留字段，详情请参见 保留字段。...
创建Hive数据源
元数据获取方式：支持 元数据库、HMS、DLF 三种源数据获取方式。获取方式不同，所需配置信息不同。元数据库获取方式 说明 开启模块 仅勾选实时研发 时，元数据获取方式仅支持元数据库。参数 说明 数据库类型 请根据集群中使用的元数据库...
如何配置跨域数据
因此浏览器采用同源策略，用于限制一个源站点的脚本获取其他源站点的资源。说明 同源：如果两个页面的协议（HTTP）、端口（80）和主机（userA.com）相同，那么这两个页面被认为是来自同一个源。解决方案 A.x.com和B.x.com跨域 如果两个网站...
资源密集活动统计（pg_profile）
这样就可以从profile数据获取其他数据库的统计信息。说明 profile数据库和server数据库可以创建在不同RDS PostgreSQL实例中，也可创建在同一实例中。server数据库 创建server数据库。CREATE DATABASE server;连接server数据库并创建插件。\...
DB2数据源
否 无 fetchSize 该配置项定义了插件和数据库服务器端每次批量数据获取条数，该值决定了数据同步系统和服务器端的网络交互次数，能够较大的提升数据抽取性能。说明 fetchSize 值过大（>2048）可能造成数据同步进程OOM。否 1024 Writer脚本...
数据分析概述
流动：在线数据分析可以从不同数据源获取数据进行查询和分析，并将分析结果分享至指定成员。安全：您无需下载数据至本地，即可在线上完成数据的分析，并可以控制分析和分享数据的权限。进入数据分析 登录 DataWorks控制台，切换至目标地域...
概述
使用限制 DataWorks工作空间中，不同角色使用智能数据建模的限制如下：浏览模型详情：访客、空间管理员、模型设计师、项目所有者 等所有DataWorks工作空间中的角色均可浏览数据模型的相关信息。更多DataWorks工作空间角色，详情请参见 空间...
配置数据源
使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据源，以此作为数据服务API的数据来源。开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您进一步设置请求和返回参数。本文为您介绍如何配置...
ECS应用角色（EMR 3.32及之前版本和EMR 4.5及之前版本...
dlf:BatchGetTables 批量获取数据表列表。dlf:BatchUpdatePartitions 批量更新分区信息。dlf:BatchUpdateTables 批量更新数据表。dlf:CreateDatabase 创建数据库。dlf:CreateFunction 创建函数。dlf:CreatePartition 创建分区。dlf:...
分片集群实例连接说明
登录MongoDB数据库 获取如下信息：数据库连接地址，获取方法请参见 数据库连接地址。数据库账号，初始账号为root。重要 不建议在生产环境中直接使用root账号连接数据库。您可以根据业务需求创建用户并分配权限，详情请参见 使用DMS管理...
- 产品推荐
- 这些文档可能帮助您