共享模式支持的功能
模块 功能点 个人版 敏捷研发版 基础研发版 智能研发版 研发 离线集成 支持（不支持整库迁移）支持（数据库版 不支持整库迁移）支持 支持 离线通用研发 支持 支持 支持 支持 建模研发 不支持 不支持 不支持 支持 实时研发 不支持 不支持 ...
Dataphin支持的数据源
新建数据库SQL任务 元数据采集 元数据中心负责从各业务系统中抽取、加工、集中存储和管理元数据，以支持数据治理，并加强组织内部数据的组织、检索和分析能力。元数据中心概述 实时研发 接入的数据源支持用于创建实时元表创建与实时任务的...
迁移评估概述
目前兼容性评估支持数据库对象评估、数据库 SQL 或 PL 语句评估，以及数据库画像。功能 描述 数据库对象评估 支持直接连接源端数据库，自动获取源端数据库对象的信息，评估源端数据库至 OceanBase 数据库对应版本的兼容性。目前支持进行...
快速体验
技术选型 数据建模：大数据开发治理平台 DataWorks数据建模（可选），标准版及以上版本可使用，需要单独购买。原始数据存储：云数据库 RDS MySQL（必选），本实验中DataWorks为您提供了阿里云RDS MySQL用于测试，包含了测试数据，无需您...
数据类云产品专家服务
客户应审核阿里云制定的项目技术支持计划，以书面形式（包括但不限于电子邮件）确认阿里云提供的具体技术支持计划。客户如无正当技术理由，不得否定双方已确认的技术建议或方案，以确保及时实现本服务目的。客户应在项目开始时提供必要的...
Paimon
支持在流模式与批模式下读写大规模数据集。支持分钟级到秒级数据新鲜度的批查询和OLAP查询。支持消费与产生增量数据，可作为传统数仓与流式数仓的各级存储。支持预聚合数据，降低存储成本与下游计算压力。支持历史版本回溯。支持高效的数据...
使用OSS Foreign Table进行数据湖分析
与OSS External Table的对比 OSS Foreign Table在性能、功能以及稳定性上都优于OSS External Table，具体信息如下：功能 OSS Foreign Table OSS External Table 导入OSS数据或导出数据到OSS 支持 支持 OSS数据分析（大数据量场景）大数据量...
独享模式支持的功能
模块 功能点 独享模式（半托管版）研发 离线集成 支持 实时集成 支持（可增购）数据研发 支持 任务发布 支持 基础调度运维 支持 智能运维 支持（默认赠送基础额度，可增购）治理 资产清单 支持 数据标准 支持（可增购）数据质量 支持（可...
典型场景
ETL离线数据处理 面对复杂SQL优化和海量数据大规模聚合分析等挑战，云原生数据仓库AnalyticDB PostgreSQL版 具有如下技术优势：支持标准SQL、OLAP窗口函数和存储过程。ORCA分布式SQL优化器，复杂查询免调优。MPP多节点全并行计算，PB级数据...
数据库上云实施支持服务
乙方只基于阿里云数据库和相关工具平台输出对应技术方案和提供技术支持，如使用阿里云平台以外（第三方软件、应用系统），则乙方只提供咨询与建议，不提供实施支持与技术兜底服务。乙方只基于阿里云数据库服务提供方案，不支持在云上自建...
产品简介
什么是AnalyticDB AnalyticDB是阿里云自研的云原生实时数据仓库，支持从OLTP数据库和日志文件中实时写入数据，并秒级完成PB级数据分析。AnalyticDB采用云原生存算分离的架构，存储按量付费，计算弹性伸缩，同时具备离线处理与在线分析资源...
查询报错问题
若SQL自身无法进行优化，但依旧触发该错误，可联系分析型数据库MySQL版技术支持对单个分析型数据库MySQL版的系统默认值进行调整，此操作可能会造成数据库性能下降。查询提示错误 META_COLUMN_NOT_EXIST 在分析型数据库MySQL版表新增字段后...
低成本RDS历史库
方案架构 LTS数据同步服务对接MySQL等关系行数据库支持数据的全增量一体化同步，同时提供多表迁移、数据变化、DDL感知等企业级同步能力，帮助用户简单高效完成数据的迁移。云原生多模数据库 Lindorm 提供海量数据的低成本存储能力（0.12元/...
功能简介
空间数据支持单文件、多文件、数据库等多种形态，矢量、栅格、瓦片、倾斜摄影等多种类型，不同格式的多源异构空间数据的接入和管理；支持本地上传、从OSS导入等多种方式添加数据；添加数据的同时支持各类型空间数据的元信息自动解析，支持...
空间数据（邀测中）
空间数据支持单文件、多文件、数据库等多种形态，矢量、栅格、倾斜摄影等多种类型，不同格式的多源异构空间数据的接入和管理；支持本地上传、从OSS导入等多种方式添加数据；添加数据的同时支持各类型空间数据的元信息自动解析，支持按空间...
错误码
常见 PolarDB-X 数据节点连接失败的原因如下：后端数据节点连接数已满 计算节点到数据节点的连接超时 数据节点拒绝连接 如果排除后端数据节点问题后仍然出现该错误，请联系技术支持。PXC-4103 ERR_ATOM_CONNECTION_POOL_FULL 描述：PolarDB...
SQL查询
支持查询的数据源 SQL查询支持的数据源包含MaxCompute、Hologres、EMR Hive、EMR Spark SQL、EMR Impala、EMR Presto、EMR Trino、CDH Hive、StarRocks、ClickHouse、AnalyticDB for MySQL3.0、AnalyticDB for PostgreSQL、MySQL。...
文档更新动态（2024年）
更新 通过直连数据源模式创建API 通过SQL模式创建API（服务单元）通过向导模式创建API（服务单元）查看及管理API 测试与发布API 标签工厂-数据准备/资产应用 离线数据集发布后，支持数据集修改指标以及变更已存在指标的来源字段。...
功能更新动态（2024年）
集成任务提交和发布时，支持数据源表在Prod环境下的存在性检测以及在Dev-Prod环境下表一致性检测。离线集成任务运行性能诊断 配置Oracle输入组件 配置PostgreSQL输入组件 配置SAP HANA输入组件 配置Hologres输入组件 配置Microsoft SQL ...
集成与开发概览
产品优势 流批一体技术，支持20多种数据实时、离线集成。低代码开发。100%兼容Flink、Spark。支持链路及开发过程中的数据安全。分钟级调度。多环境管理。应用场景 数据集成 运维：数据容灾、异地多活、数据归档、数据迁移、测试数据生成、...
数据中心
数据中心包含数据管理、数据配置。数据管理 数据管理模块展示并管理用户添加的数据。主要功能包括数据表引入、本地数据导入。数据表 支持用户从已注册的计算资源类型中添加数据表。支持基于已添加的数据查看表信息、表内展示的字段。支持将...
产品更新动态-共享模式（全托管）
2023年06月20日-Dataphin新版本发布 Dataphin于2023年06月20日发布V3.10版本，本次升级相比较历史版本：新增数据下载设置功能，可以更好的管控数据下载范围，提升数据安全，支持数据下载时设置水印并可设置文件格式。新增数据权限审批策略...
重要组件
此外，PolarStore使用了类似Copy On Write技术，支持秒级快照，即对数据库来说，不管底层数据有多大，都能快速完成全量数据备份，因此PolarDB支持高达100T的磁盘规格。计算节点和存储节点之间通过25G RDMA网络连接，保证数据传输不会出现...
产品计费
单价（元）计费单位 购买数量 备注 大数据技术架构方案咨询 30,000 每人日 1~20 每日8小时工作制 大数据搬站迁云方案咨询 30,000 每人日 1~20 每日8小时工作制 大数据解决方案POC 30,000 每人日 1~20 每日8小时工作制 跨地域迁移支持服务 ...
什么是DataV-Board
发展历程 DataV-Board 历经十多年发展，积累了面向大规模数据场景的实时渲染技术，沉淀了多业务场景的可视化组件库，支持专业可视化应用的低代码搭建，并且具备数字孪生应用的搭建能力。到今天，DataV-Board 发展成为一款综合性的数据可视...
使用DataWorks（离线与实时）
MaxCompute支持通过DataWorks的 数据集成 功能将其他数据源的数据以离线或实时方式导入MaxCompute，也支持将部分类型的本地文件数据导入MaxCompute。本文为您介绍使用DataWorks将数据导入MaxCompute的主要操作流程与注意事项。前提条件 已...
2024年
OBJECT TABLE 2024-11-18 新增Bloomfilter index（Beta版本）新说明 布隆过滤器（Bloomfilter，简称BF）是一种高效的概率型数据结构，MaxCompute支持使用Bloomfilter index处理大规模数据点查场景，减少查询过程中不必要的数据扫描，从而...
冷热分离介绍
背景信息 在海量大数据场景下，一张表中往往存储着大量的历史数据，如订单数据或者监控数据。随着时间的推移，这些数据被访问的频率会逐渐降低，最终被搁置。减少这部分数据的存储成本，成为一个新的问题。为解决这一问题同时降低存储成本...
数据源配置与管理
说明 目前只有标准模式的工作空间支持数据源隔离。使用域名配置数据源 如果您的数据源IP地址经常变动，或者无法通过IP直接访问数据源，您可通过为独享数据集成资源组绑定Host方式解决此问题。独享数据集成资源组配置Host详情请参见：绑定...
规格及选型
支持数据湖分析，可实现最大程度的数据分析灵活性。案例五：互联网游戏企业 用户为互联网游戏企业，需要构建数据中台，对行为数据进行分析。平台通过清洗业务日志和数据关联分析，实时支持运营工具。存在工作时间的混合业务负载和资源隔离...
简介
用户可以将分区表中的任意分区放在对象存储上，也可以将表中的时空大对象列放置在对象存储上，对象存储同样支持数据库的增删改查索引等操作，通过多级缓存保证性能，对客户而言全面透明化。多态分层存储可极大支持客户降低存储成本，同时又...
简介
用户可以将分区表中的任意分区放在对象存储上，也可以将表中的时空大对象列放置在对象存储上，对象存储同样支持数据库的增删改查索引等操作，通过多级缓存保证性能，对客户而言全面透明化。多态分层存储可极大支持客户降低存储成本，同时又...
配置跨库Spark SQL节点
大数据量处理：支持快速处理较大规模的数据（十万条以上数据）。Spark SQL语法：基于Spark 3.1.2版本部署，提供该版本所有语法特性和原生函数。原生函数包括聚合函数、窗口函数、数组函数、Map函数、日期和时间处理函数、JSON处理函数等。...
离线同步并发和限流之间的关系
目前数据集成绝大多数通道支持脏数据阈值限制能力，对于支持脏数据阈值限制的通道，常见配置场景介绍如下：不配置脏数据限制：表示容忍所有出现的脏数据，遇到脏数据不会导致任务失败，任务配置errorLimit留空。配置脏数据限制为0：表示不...
功能更新动态（2023年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
文档更新动态（2023年）
更新说明 创建Flink SQL任务 创建及管理元表 新建镜像表 新增支持创建补数据任务 新增支持创建补数据任务：支持配置补数据任务，可设置定时补数据或手动触发补数据，以回刷节点范围和业务日期相对规律，确定补数据的场景，减少人工投入。...
数据服务概述
同时，支持数据服务的运维监控和告警，便于开发运维人员根据异常数据或告警通知，及时发现并修正问题。数据服务产品价值能力，概括为以下两点：数据服务创建能力：支持将单个物理表或多个物理表进行关联形成一张逻辑表，后续开发可以基于该...
数据服务
同时，支持数据服务的运维监控和告警，便于开发运维人员根据异常数据或告警通知，及时发现并修正问题。数据服务产品价值能力，概括为以下两点：数据服务创建能力：支持将单个物理表或多个物理表进行关联形成一张逻辑表，后续开发可以基于该...
JindoData概述
JindoFSx存储加速系统 JindoFSx（JindoData服务）是原JindoFS Cache模式的全新升级版本，是面向大数据和AI生态的云原生数据湖存储加速系统，为大数据和AI应用访问各种云存储提供访问加速，支持数据缓存、元数据缓存和P2P加速等功能。...
JindoData（仅对存量用户开放）
JindoFSx存储加速系统 JindoFSx（JindoData服务）是原JindoFS Cache模式的全新升级版本，是面向大数据和AI生态的云原生数据湖存储加速系统，为大数据和AI应用访问各种云存储提供访问加速，支持数据缓存、元数据缓存和P2P加速等功能。...
- 产品推荐
- 这些文档可能帮助您