从RDS MySQL数据库获取数据进行数据富化
日志服务数据加工功能支持从阿里云...匹配成功后，返回RDS MySQL数据库表中的 name 字段和对应的三个字段值，多个字段值用逗号（,）分隔，生成一条新的日志。time:1563436326 data:123 city:nanjing province:jiangsu name:aliyun,Maki,vicky
导入MySQL数据
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
使用RDS内网地址访问RDS MySQL数据库
当您的数据分散存储在日志服务Logstore和RDS MySQL数据库中时，您可以通过日志服务数据加工功能从对应数据库获取数据，实现数据富化。本文介绍如何配置数据加工规则及高级参数，实现通过RDS内网地址访问RDS MySQL数据库获取数据。背景信息 ...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
RDS MySQL快照备份文件恢复到自建数据库
您可以使用RDS MySQL的备份下载功能，将云盘实例的快照备份数据转换成CSV文件或SQL文件导出，然后通过该文件将数据恢复到自建MySQL数据库中。前提条件 RDS实例需满足以下条件：MySQL数据库版本：8.0、5.7（支持Serverless实例）存储类型：...
数据库常见问题
为了有效排查和解决在使用云虚拟主机数据库时遇到的功能问题（例如支持哪些数据库、是否支持开启event_scheduler组件）和其他操作问题（例如，如何扩大数据库空间、数据库导入失败问题等）。本文为您汇总了使用云虚拟主机数据库时遇到的...
通过一键建仓同步至数仓版
已创建PolarDB MySQL数据库。更多信息，请参见 数据库管理。PolarDB MySQL数据库中已存在表数据。计费 一键创建PolarDB MySQL数据仓库时，系统自动通过DTS同步数据，DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例...
FineBI
配置外接MySQL数据库，导入数据失败 处理方法：检查版本号和编码方式。具体操作，请参见 配置外接数据库，目前FineBI支持MySQL 5.x版本。检查外接MySQL数据库是否使用utf8（– UTF-8 Unicode）编码为字符集排列规则，或新建一个utf8编码的...
名称解释
用户需要在开通HybridDB for MySQL数据库时指定，购买实例后不支持更改。在购买HybridDB for MySQL数据库时，需要搭配阿里云服务器ECS使用，目前HybridDB for MySQL只支持阿里云内网访问，在地域选择时需要与ECS相同。可用区 可用区（AZ）...
数据源常见问题
在MySQL数据库中显示为0或1的字段，为什么在数据集中显示为True或False？直连数据库时，每次刷新仪表板的图表都去查询数据库吗？是否支持数据缓存？是否支持跨数据源关联表？数据源上传文件方式更新数据时的字段顺序是否必须和原上传时的...
通过一键建仓同步至数仓版
您可以在 AnalyticDB MySQL版 控制台上通过一键建仓将一个或多个RDS MySQL实例中的数据同步到 AnalyticDB MySQL 集群中，快速创建RDS MySQL数据仓库。适用范围 一键创建数据仓库仅适用于 AnalyticDB MySQL版 数仓版（3.0）集群。前提条件 ...
管理敏感数据
说明 开通敏感数据管理功能后，即可查看当前实例中的数据库相关信息和数据库中敏感字段的扫描结果。根据扫描出来的信息，您可以单击 前往DMS使用敏感数据保护 前往DMS数据管理服务控制台对敏感数据执行管控操作。更多信息，请参见 管理敏感...
产品更新动态
本文为您介绍DataV-Card可视分析创作间的产品功能和对应的文档动态。2023年4月 发布时间 2023-04-25 功能名称 功能描述 相关文档 支持数据更新——实现卡片内容的动态数据呈现 通过数据库连接方式的数据源，可以设置数据更新频率，手动/...
使用Tapdata Cloud导入MySQL数据
单击MySQL数据库，根据下表说明在右侧面板配置参数。参数 描述 节点名称 默认为连接名称，请根据实际设置。DDL事件采集 暂不支持对表格存储执行DDL语句同步，无需配置此参数。选择表 选择要复制的表。取值范围如下：按表名选择：按照表名...
MySQL整库同步Kafka
在使用中，同一张MySQL表可能被多个作业依赖，当多个任务使用同一张MySQL表做处理时，MySQL数据库会启动多个连接，对MySQL服务器和网络造成很大的压力。为了缓解对上游MySQL数据库的压力，阿里云Flink实时计算已提供MySQL整库同步到Kafka的...
有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有、all 表示全部类型。主键（PRIMAEY KEY）约束下...
全局操作函数概览
e_csv 使用默认分隔符半角逗号（,）提取多个字段。e_tsv 使用默认分隔符tab \t 提取多个字段。e_psv 使用默认分隔符竖线（|）提取多个字段。e_syslogrfc 根据Syslog协议由已知priority值计算出facility和severity，并且匹配相应的level信息...
空间分析
您可以通过DAS的空间分析功能直观地查看某个数据库实例的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况、空间碎片、空间异常诊断等，本文以 RDS MySQL 数据库为例介绍如何使用空间分析功能。前提条件 支持如下数据库...
置顶管理
操作指导 置顶物品配置（控制台操作）置顶功能仅支持“猜你喜欢”场景，新建的“猜你喜欢”场景默认关闭置顶功能。您需要在“运营助手-单品运营-置顶管理Tab”页面先选择场景，点击“编辑”按钮，开启置顶功能才可以继续配置置顶物品。1....
读写MySQL数据（mysql_fdw）
例如MySQL数据库中的表有3个字段ID、NAME、AGE，您可以仅创建其中2个字段ID、NAME。postgres=>CREATE FOREIGN TABLE<表名>(<字段名><数据类型>,<字段名><数据类型>.)server名称>options(dbname '<MySQL数据库名>',table_name '<MySQL表名>'...
数据归档
说明 ODC V4.2.2 及之后的版本支持选择 MySQL 数据库，以将 OceanBase 中的数据归档到 MySQL 数据库中。变量配置 可选项。通过变量筛选表中符合条件的行进行归档。例如：create_time${bizdate}，其中 bizdate 默认为任务执行时间，可以通过...
将日志服务数据投递到AnalyticDB MySQL
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段长度的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有。主键（PRIMARY KEY）约束下字段长度的修改 ...
库表
AnalyticDB MySQL 是分布式数据库，数据需要根据分布字段均匀地分布在各个后台节点才能保证尽可能高的利用资源。分布字段选择不合理，会导致写入时存在热点，降低写入性能。分区字段合理性。AnalyticDB MySQL 后台以分区为粒度进行数据存储...
敏感数据保护概览
例如，对在DMS管理的 RDS MySQL 数据库数据进行脱敏，脱敏效果仅在DMS可见，不影响您的源数据库数据。功能特性 提供敏感数据资产大盘，解决企业敏感数据分布的统一纳管问题。数据自动化扫描。自定义数据扫描触发周期。自动识别企业敏感数据...
优化建议
选择拆分字段时需要综合考虑查询性能、分布式事务、热点、数据迁移等多个因素；掌握SQL的执行计划，尤其是核心SQL。对于不确定的SQL应在分布式数据库执行‘explain sql’命令，确定SQL有没有跨分区、有没有改写以及底层有没有合适的索引，...
功能特性
PolarDB MySQL数据导入 PolarDB-X数据导入 自建MySQL数据源 AnalyticDB for MySQL支持通过外表将ECS自建MySQL数据库中的数据导入至数仓版集群，同时也支持将数仓版集群中的数据导出至自建的MySQL数据库。自建MySQL数据导入 导出至自建MySQL...
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
使用kettle将本地数据导入AnalyticDB MySQL 2.0
在 表输出 的 数据库字段 选项卡中，单击 获取字段 和 输入字段映射，映射Excel文件的列与 云原生数据仓库AnalyticDB MySQL版 2.0集群中表的列名间的映射关系。单击白色三角箭头运行转换，观察运行日志和运行状态。待本地数据成功导入 云...
MySQL分库分表实践
开通RDS MySQL数据库，详情请参见 创建RDS MySQL实例。如果选择使用DataWorks同步，请开通DataWorks，详情请参见 开通DataWorks；同时购买DataWorks独享数据集成资源组，并完成资源配置，详情请参见 新增和使用独享数据集成资源组。如果...
如何使用MySQL连接模块
简介 魔笔平台提供MySQL连接模块，可提供快速访问MySQL数据库的能力，本文介绍如何使用MySQL连接模块。适用场景 在搭建应用时，如需访问外部MySQL数据库的能力，以及基本的增删改查和表的DDL操作能力，可以直接引用魔笔平台提供的 MySQL...
采集MySQL查询结果
功能 支持MySQL数据库的查询结果。支持分页设置。支持时区设置。支持超时设置。支持保存CheckPoint状态。支持SSL。支持限制每次最大采集数量。应用场景 根据数据中的自增ID或时间等标识采集增量数据。根据筛选条件自定义同步。操作步骤 ...
空间分析
您可以通过DAS的空间分析功能直观地查看某个数据库实例的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况、空间碎片、空间异常诊断等，本文以 RDS MySQL 数据库为例介绍如何使用空间分析功能。注意事项 空间分析功能最...
数据表管理
根据实际业务需求，填写数据表名称、更新时间列信息，选择数据源和物理表等：数据源：即在知识中心>数据问答>数据源管理中创建的数据源，当前数据源类型仅支持为MySQL数据库。物理表：即数据库下的具体表格。更新时间列：即数据库的物理表...
创建数据库账号
开放了更多权限，可满足个性化和精细化的权限管理需求，例如可按用户分配不同表的查询权限等。AnalyticDB MySQL版 中的高权限账号相当于MySQL中的root账号。普通账号 数仓版（3.0）集群只能通过SQL语句进行创建，创建方式，详情请参见 ...
创建索引或约束支持的字段类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于不同约束支持的字段类型不兼容的场景。主键（PRIMARY KEY）字段类型 通过 CREATE TABLE DDL 创建 PRIMARY KEY 时，MySQL 数据库和 OceanBase 数据库 MySQL 租户支持的字段类型...
方案选择
实时订单数据（例如近3个月的订单）：将实时订单存入MySQL数据库。实时订单的总量膨胀的速度得到了限制，同时保证了实时数据的多维查询和分析能力。历史订单数据（例如3个月以前的订单）：通过数据同步服务，将历史订单数据存入HBase，借助...
配置MySQL输出组件
MySQL输出组件用于向MySQL数据源写入数据。同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建...
配置MySQL输出组件
MySQL输出组件用于向MySQL数据源写入数据。同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建...
产品和业务限制
限制项 描述 例外申请方式 购买分析型数据库MySQL版的限制 账户余额大于等于500元现金 请联系技术支持 开通分析型数据库MySQL版的用户限制 用户需实名认证 无 可创建的最大分析型数据库MySQL版数 3个 联系技术支持申请更多 单个分析型数据...
- 产品推荐
- 这些文档可能帮助您