常见问题
通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移功能实现数据入湖，会产生以下费用：AnalyticDB for MySQL 的ACU弹性资源费用，计费项详情，请参见 湖仓版（3.0）计费项。OSS 的存储费用、GET类请求次数以及PUT...
新功能发布记录
Spark应用访问公网配置说明 通过Spark SQL访问MySQL数据 湖仓版（3.0）支持通过Spark SQL访问自建MySQL数据库或阿里云MySQL系列的数据库。通过Spark SQL访问MySQL数据 通过Spark SQL读Lindorm数据 湖仓版（3.0）支持通过Spark SQL访问...
基于向量分析的个性化推荐系统
然后，利用分析型数据库MySQL版向量内置的文本转换为向量函数，将从新闻标题和新闻内容中提取出的关键词转换为新闻向量导入分析型数据库MySQL版向量数据库中，用于用户新闻推荐，具体实现流程如下图所示。整个新闻推荐系统由以下两个步骤...
通过数据同步功能同步SLS数据至湖仓版
目标库表配置 的参数说明如下：参数名称 参数说明 库名 AnalyticDB for MySQL 集群 的数据库名称。表名 AnalyticDB for MySQL 集群的数据表名称。源端数据预览 单击 点击查看最近10条LogStore数据，可以查看源端SLS的10条数据。Schema字段...
通过数据同步功能同步SLS数据至数仓版
目标库表配置 的参数说明如下：参数名称 参数说明 库名 AnalyticDB for MySQL 集群 的数据库名称。表名 AnalyticDB for MySQL 集群的数据表名称。源端数据预览 单击 点击查看最近10条LogStore数据，可以查看源端SLS的10条数据。Schema字段...
Spark开发编辑器
前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）集群，详情请参见 创建集群。已创建Job型资源组，且计算预留资源需大于等于8 ACU。创建资源组，详情请参见 新建资源组。已为RAM用户授权。具体操作，请参见 为RAM用户授权。已将RAM用户（子...
FineReport
方式二：在设计器中进行连接，mysql5.x版本可参考 MySQL数据连接，mysql8.x版本可参考 MySQL8数据连接插件。如果您需要通过外网连接 AnalyticDB MySQL版 集群，请参见 申请和释放公网地址。连接AnalyticDB 打开FineReport，在菜单栏中单击 ...
支持的数据源
数据入仓 类别 数据源 导入方式 产品系列 文档链接 数据库 RDS MySQL 外表 数仓版（3.0）通过外表导入至数仓版 湖仓版（3.0）通过外表导入至湖仓版 DTS 数仓版（3.0）通过DTS导入数据 湖仓版（3.0）通过DTS导入数据 DataWorks 数仓版（3.0...
通过Spark SQL读写Hudi外表
创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录，且外表的路径需在数据库路径下。建表时必须定义primaryKey主键。preCombineField预聚合字段为可选，如未定义preCombineField在UPDATE场景会报错。步骤三：写入Hudi...
通过元数据发现导入至湖仓版
目标元数据配置 Schema名称 设置Schema名称，映射到 AnalyticDB MySQL 的数据库名称（默认每个发现任务会创建一个新的Schema）。数据库名称填写，需要注意如下两点：不能是 AnalyticDB MySQL 中已有的库名。不能与其他元数据任务的库名相同...
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
申请和释放公网地址
云原生数据仓库AnalyticDB MySQL版 集群支持VPC地址和公网地址两种类型的地址，如果需要通过公网连接集群，您需要先申请公网地址。公网和VPC网络 网络类型 说明 VPC网络 一个VPC就是一个隔离的网络环境。VPC的安全性较高，推荐您使用VPC...
SQL审计
SQL审计功能可以实时记录数据库DML和DDL操作信息，并提供数据库操作信息的检索功能。使用限制 SQL审计日志不记录以下操作：INSERT INTO VALUES REPLACE INTO VALUES UPSERT INTO VALUES 开启/关闭SQL审计 登录 云原生数据仓库AnalyticDB ...
管理运维事件
配置周期时间 周期时间对 AnalyticDB MySQL 数仓版（3.0）所有集群生效，不影响其他数据库产品运维事件的切换时间。配置周期时间后，会在指定周期时间点，对计划内所有未执行且未设置计划切换时间的事件执行切换。例如配置周期时间为周二00...
有数BI
您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 集群管理 页面，复制公网地址。端口 3306 用户名 AnalyticDB MySQL版 集群中创建的账号：高权限账号 普通账号 您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 账号管理 页面，查看...
通过Spark SQL读写OSS外表
创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录，且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径，请先创建对应...
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
删除标签
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）页签下，单击目标 集群ID。在 集群信息 页面的 集群属性 区域，单击 编辑标签。单击要删除的标签后...
访问OSS数据源
云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序，将Python程序上传至OSS。本文示例的Python程序名为 example.py，用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...
Flink数据导入
步骤三：数据验证 登录 AnalyticDB MySQL 目标数据库，来查看并验证源数据是否成功导入。步骤一：数据准备 在其中一个Flink节点的root目录下，执行 vim/root/data.csv 命令来创建一个名为data.csv的CSV文件。文件中包含的数据如下（您可以...
通过Spark SQL读写Delta外表
如果已有数据库，可跳过本步骤。CREATE DATABASE if not exists external_delta_db location"oss:/<bucket_name>/test/;用于在该路径中创建表，请替换为自己的OSS路径。执行以下语句，创建Delta外表。CREATE TABLE if not exists external_...
创建资源组
AnalyticDB MySQL 湖仓版（3.0）支持使用XIHE BSP SQL、XIHE MPP SQL、Spark SQL等不同方式进行作业开发。Job型资源组运行XIHE BSP SQL和Spark SQL，Interactive型资源组运行XIHE MPP SQL。开始作业开发前，需要先创建一个Job型和...
创建标签
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）页签下，单击目标 集群ID。在 集群信息 页面的 集群属性 区域，单击 编辑标签。在 编辑标签 页面，...
DescribeSQLPatterns-查询SQL Pattern列表
查看指定日期内AnalyticDB MySQL湖仓版集群的SQL Pattern列表。接口说明 中心的公网接入地址：adb.aliyuncs.com 。地域的公网接入地址：adb.<region-id>.aliyuncs.com 。示例：adb.cn-hangzhou.aliyuncs.com 。地域的 VPC 接入地址：adb-...
ALTER TABLE
云原生数据仓库AnalyticDB MySQL版 支持通过 ALTER TABLE 修改表结构，包括修改表名、列名、列类型、普通索引、聚集索引、外键索引、分区函数的格式、冷热分层存储策略。本文介绍 ALTER TABLE 语法。语法 ALTER TABLE table_name { ADD ANN...
分组聚合查询优化
本文介绍如何在 AnalyticDB for MySQL 中对分组聚合查询进行优化。分组聚合流程 AnalyticDB for MySQL 是分布式数据仓库，其分组聚合查询默认分为两步：完成数据的局部（PARTIAL）聚合。局部聚合节点只需要占用少量内存，聚合过程为流式...
作业投递
AnalyticDB MySQL 数仓版（3.0）的作业投递功能支持将资源组中满足一定条件的查询作业（通常为资源消耗大、耗时久的大查询）投递至指定一资源组中，避免影响资源组中其他查询作业。本文介绍如何开启并使用作业投递功能。前提条件 ...
通过Spark SQL读写C-Store表数据
AnalyticDB MySQL 湖仓版（3.0）集群支持通过Spark SQL在线或离线读写C-Store表数据。本文主要介绍通过Spark SQL在线或离线读写C-Store表数据的具体方法。前提条件 湖仓版（3.0）集群的存储预留资源需大于0 ACU。详情请参见 创建湖仓版集群...
设置报警规则
您可以为 AnalyticDB MySQL版 集群设置报警规则，实时监控集群CPU使用率、磁盘使用率、IOPS使用率、查询耗时以及数据库连接数。系统在监控数据满足条件时，会通知报警联系组中的所有联系人。背景信息 云原生数据仓库AnalyticDB MySQL版 ...
Tableau
本文测试了Tableau与 AnalyticDB MySQL 在列举数据库、查看表表等方面的兼容性，并给出测试结果图。测试环境 MySQL Tableau mysql Ver5.6.46 for osx10.13 on x86_64(Homebrew)Tableau Desktop 2019.4 测试范围 列举数据库 列举所有表 查看...
访问OSS-HDFS数据源
AnalyticDB for MySQL 湖仓版（3.0）Spark支持访问OSS-HDFS数据源，本文介绍如何使用Spark来操作OSS-HDFS数据。前提条件 AnalyticDB MySQL 湖仓版（3.0）集群与OSS存储空间位于相同地域。已在湖仓版（3.0）集群中创建Job型资源组。具体操作...
删除或退订集群
删除按量付费集群 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。根据需要删除的集群版本，选择 数仓版（3.0）或 湖仓版（3.0）页签。单击目标集群右侧的 更多>删除。在 删除...
同步数据
分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...
通过Spark Distribution SQL Engine开发Spark SQL作业
} } } 重要 启动Spark Distribution SQL Engine时，若设置了 spark.sql.hive.metastore.version=adb，则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库，否则会默认使用 default 数据库，造成连接失败。ThriftServer ...
FineBI
配置外接数据库MySQL 说明 如果在此之前您已经安装并使用过FineBI，则可跳过如下步骤直接连接 AnalyticDB MySQL版 集群。详细步骤，请参见 连接AnalyticDB。打开FineBI。单击服务器地址，按照系统提示进行 账号设置。单击 下一步，选择数据...
查看资源弹性计划执行日志
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）或 湖仓版（3.0）页签下，单击目标集群ID。数仓版（3.0）集群，在左侧导航栏，单击 资源弹性扩容。...
数据迁移方案概览
“数据传输”导入 事务引擎/分析引擎 使用数据传输（Data Transmission Service）将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...
创建湖仓版集群
重要 如果您同时在使用阿里云上的其他云服务，例如云服务器ECS、云数据库RDS等，请确保AnalyticDB MySQL与其他云服务位于同一个VPC，否则它们无法通过内网互通，无法发挥最佳性能。计算预留资源 计算预留资源用于数据计算。增加计算资源...
Hive数据导入
前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建Job型资源组。具体操作，请参见 新建资源组。已创建数据库账号。如果您是通过阿里云账号访问，只需创建高权限账号。具体操作，请参见...
查看资源组监控
云原生数据仓库 AnalyticDB MySQL 版 湖仓版（3.0）的资源管理既可以展示集群级别的计算和存储资源用量，也展示资源组和作业级别的计算资源使用情况。本文介绍如何通过资源管理查看集群、资源组、作业的资源用量，包括预留资源用量和弹性...
- 产品推荐
- 这些文档可能帮助您