RDS/PolarDB 数据源配置分库分表
一般用户的分库分表分两种情况：单库多表：database1 table1、table2、table3、table4.多库多表：database1 database2 database3.table1、table2、table3、table4.table1、table2、table3、table4.table1、table2、table3、table4.这两种...
节点/数据库/表/分区/二级分区
数据库 在HybridDB for MySQL中，数据库是用户的逻辑概念，用户通过阿里云控制台购买实例后会自动建好指定名称的逻辑库（Database），该逻辑库在后端是会被切分成多个物理分库（Shard），这些物理分库对于用户是不可见的。这就是通常说的分...
PolarDB-X 1.0的分库分表是什么意思？
关于 PolarDB-X 1.0 的分库分表的相关说明，请参见 拆分函数概述。
RDS/PolarRDB 数据源配置分库分表
一般用户的分库分表分两种情况：单库多表：database1 table1、table2、table3、table4.多库多表：database1 database2 database3.table1、table2、table3、table4.table1、table2、table3、table4.table1、table2、table3、table4.这两种...
能否更换PolarDB-X 1.0分库分表的拆分键？
若您的 PolarDB-X 1.0 实例...若您的 PolarDB-X 1.0 实例版本低于V5.4.7-16000638，不支持变更已创建完成的分库分表的拆分键。如果确实有需要变更表的拆分键，可以采用以下的临时办法：选择新的分库键并重新建表；然后将原表的数据进行导入。
PolarDB-X 1.0的分表容量是否有大小限制？如何决定...
PolarDB-X 1.0 分表的大小是有限制的，建议单个分表的数据记录数不宜超过500万。关于 PolarDB-X 1.0 的分片数目选择，请参见 如何选择分片数。
PolarDB-X 1.0实例中每一个RDS的分库数，以及每个RDS...
单个RDS实例的默认分库数目是8个，不可更改。每个分库里的分表数目理论上是没有限制的，受限于 PolarDB-X 1.0 服务器本身的硬件资源。分表数目的选择需要依据对业务数据量的评估，详情请参见 如何选择分片数。
为什么在PolarDB-X 1.0中对分表键做UPDATE操作时会...
针对 PolarDB-X 1.0 实例从V5.4.7-16000638版本开始支持UPDATE...因此，若在对分表键做UPDATE操作时出现报错的情况，建议先 查看实例版本 是否大于或等于V5.4.7-16000638，否则建议 升级版本 至V5.4.7-16000638及以上后，再尝试UPDATE操作。
注意事项
如果数据库分片集群是分库分表模式，则所有数据库分表都需要配置分库分表规则，如果数据库分片中只有单表，分库分表规则可以直接配置 0 即可。在如下配置中，single_table 会路由到 group_00 分片：使用限制 仅支持 DML 语句（INSERT、...
场景：配置分库分表离线同步任务
DataWorks支持通过向导模式或脚本模式配置离线同步任务，您可以将分库分表数据同步至目标单表。本文以同步MySQL分库分表数据为例进行说明。前提条件 已准备好要同步的多个数据源，详情请参见 支持的数据源与读写插件。背景信息 分库分表...
MySQL分库分表实践
本文为您介绍如何通过DataWorks数据集成和Flink两种方式将MySQL分库分表的数据写入至Hologres同一个表中，通过本实践您可以根据业务场景选择合适的方式将MySQL分库分表数据写入Hologres。背景信息 实际业务场景下数据同步通常不能通过一个...
管理MySQL Catalog
例如，有一个分库分表的MySQL数据库，包括user01、user02和user99等多个表，分散在db01~db10等数据库中，且所有表的Schema都相互兼容，则可以通过如下正则表达式的库名表名来访问到所有user的分库分表。SELECT.FROM `db.*`.`user.*`/*+...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
MySQL分库分表同步至MaxCompute
本文以MySQL分库分表实时写入MaxCompute场景为例，为您介绍如何通过数据集成同步分库分表数据至MaxCompute。前提条件 已完成MaxCompute和MySQL数据源配置。您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来...
MySQL分库分表同步至Hologres（方案1.0）
需求分析 场景描述：MySQL实例有三个分库分表数据库 order_db01、order_db02、order_db03。业务上有两种逻辑表：订单表 t_order 和用户表 t_user，其中每张逻辑表分别对应三个数据库下的两张物理表。如下图所示总共3个物理库，12张分表，...
MySQL分库分表同步至Hologres（方案2.0）
需求分析 场景描述：MySQL实例有三个分库分表数据库 order_db01、order_db02、order_db03。业务上有两种逻辑表：订单表 t_order 和用户表 t_user，其中每张逻辑表分别对应三个数据库下的两张物理表。如下图所示总共3个物理库，12张分表，...
RDS MySQL是否支持分表
RDS MySQL暂不支持分表，但是云原生分布式数据库PolarDB-X高度兼容MySQL协议，若您有分布式需求，可以购买PolarDB-X数据库，详情请参见 PolarDB-X产品概述。
扫描全部/部分分库分表
使用 SCAN HINT，您可以一次将SQL下发到每一个分库执行,比如查看某个分库上的所有分表，或者查看某个逻辑表的每张物理表中的数据量等。通过 SCAN HINT，可以指定四种执行SQL的方式：在所有分库的所有分表上执行；在指定分库的所有分表上...
查看分库信息
您可以通过数据访问代理控制台查看数据库的分库分表信息以及后端各个物理分库名与所在的物理数据源（RDS 或 OceanBase）。操作步骤如下：进入数据访问代理控制台，单击左侧导航栏上的 数据库 后，可在右侧的数据库列表页面查看数据库相关...
RDS MySQL是否支持分表
RDS MySQL暂不支持分表，但是云原生分布式数据库PolarDB-X高度兼容MySQL协议，若您有分布式需求，可以购买PolarDB-X数据库，详情请参见 PolarDB-X产品概述。
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
扫描全部/部分分库分表
使用 SCAN HINT，您可以一次将SQL下发到每一个分库执行,比如查看某个分库上的所有分表，或者查看某个逻辑表的每张物理表中的数据量等。通过 SCAN HINT，可以指定四种执行SQL的方式：在所有分库的所有分表上执行；在指定分库的所有分表上...
数据传输作业：数据集成
实时同步 DataWorks提供的实时数据同步功能，使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至MaxCompute中，实现MaxCompute实时保持和源库的数据对应。一个实时同步任务支持多个转换插件进行数据清洗，并支持多个...
通过脚本模式配置离线同步任务
说明 支持同步源端分库分表数据至目标单表，详情请参见：场景：配置分库分表离线同步任务。若数据源与资源组网络不通，请参考界面提示或文档进行网络连通配置。详情请参见：配置资源组与网络连通。步骤三：转脚本模式并导入模板 单击工具栏...
通过向导模式配置离线同步任务
还支持同步源端分库分表数据至目标单表，详情请参见：场景：配置分库分表离线同步任务。若数据源与资源组网络不通，请参考界面提示或文档进行网络连通配置。详情请参见：网络连通方案。步骤三：配置数据来源与去向 在选择数据源区域，配置...
如何选择分片数
若您在 创建数据库 时，选择拆分模式为 水平拆分，则 PolarDB-X 1.0 为默认为每个 私有定制RDS 实例创建8个物理分库，每个物理分库上可以创建一个或多个物理分表，而分表数通常也被称为分片数。计算公式 一般情况下，建议单个物理分表的总...
如何使用全局二级索引
在DRDS模式数据库中，对主表中的每个局部索引，如果引用的所有列均包含在索引表中，默认添加该局部索引到索引表。对GSI的每个索引列，如果没有已经存在的索引，默认单独创建一个索引。对包含多个索引列的GSI，默认创建一个联合局部索引，...
MapReduce模型
} } 处理分库分表数据 class PageTask { private String tableName;private long startId;private long endId;public PageTask(String tableName,long startId,long endId){ this.tableName=tableName;this.startId=startId;this.endId=...
分库分表（Alias功能）
分库分表 业务大部分场景只访问最近一周的数据，可以每隔一周新建一张表来存储，这样可以确保高效的查询热数据。在这个场景中需要自己来维护表的创建和删除，带来一定的业务复杂性。适用场景 时间序列场景 业务数据具有明显的时间特性，...
分库分表
数据库访问代理在后端将数据量较大的数据表水平拆分到各个 RDS 数据库中，后端的这些 RDS 数据库被称为分库，分库中的表被称为分表。拆分后，每个分库负责一份数据的读写操作，从而有效的分散了整体访问压力。在系统扩容时，只需要水平增加...
分库分表（Alias功能）
分库分表 业务大部分场景只访问最近一周的数据，可以每隔一周新建一张表来存储，这样可以确保高效的查询热数据。在这个场景中需要自己来维护表的创建和删除，带来一定的业务复杂性。本文介绍的Alias（别名）将会完美的解决上面两个问题。...
数据同步模板
分库分表合并 当同一份业务数据分散在不同的数据库或者业务表时，我们往往需要用到分库分表合并的能力，将表结构相似的分库分表的数据同步到一张目标表中。Flink CDC可以自动同步源中所有分库分表的全量和增量数据（包括新增的符合正则表达...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库，并可以指定数据库的默认属性（如数据库默认字符集，校验规则等）。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...
Quick BI中元数据库中记录报表使用分析的数据
概述 本文描述Quick BI中元数据库中如何记录报表使用分析的数据。详细信息 报表使用分析的数据记录在表yunbi_report_view_day_stat中，每天凌晨4:30更新数据。适用于 Quick BI
自定义 HINT
HINT 作为一种 SQL 补充语法，在关系型数据库中扮演着非常重要的角色。它允许用户通过相关的语法影响 SQL 的执行方式，从对 SQL 进行特殊的优化。同样，数据访问代理也提供了自定义的 HINT 语法。HINT 使用基本语法：/*+DBP:hint 语句*/SQL...
应用场景
业务复杂度高是该类业务的典型特征 典型的应用场景如下：分库分表后的跨数据库分布式事务 例如支付宝的交易服务，随着业务规模的增大，单个交易流水表已经不能满足业务需求，需要通过分库分表实现数据水平拆分。但是水平拆分后，单表的数据...
拆分函数概述
PolarDB-X 1.0 是一个支持既分库又分表的数据库服务。本文将介绍 PolarDB-X 1.0 拆分函数的相关信息。拆分方式 在 PolarDB-X 1.0 中，一张逻辑表的拆分方式由拆分函数（包括分片数目与路由算法）与拆分键（包括拆分键的 MySQL 数据类型）...
应用场景
该场景可实现：在离线一体化 支持数据实时增删改、具备在线分析和ETL计算一体化，实现大数据与数据库的融合。通过资源组隔离让在离线计算任务不相互影响，保证业务稳定运行。计算存储资源弹性 采用计算存储分离架构，计算资源和存储资源按...
SQL 路由
在分库分表模式下，数据访问代理会根据拆分键（即拆分字段）以及 SQL 语义把 SQL 语句分发到底层中各个存储数据的分表进行执行。执行结束后，数据访问代理会将从各个分表获取的数据合并，然后返回给用户。本文介绍在分库分表场景中数据访问...
数据清理
清理范围 部分清理：通过清理条件清理数据库中部分表。可使用常量或者引用变量配置中定义的变量来配置过滤条件。例如：time '${create_time}'，其中 create_time 为变量配置中的变量名，time 为清理表中的字段。勾选 指定分区，支持根据...
- 产品推荐
- 这些文档可能帮助您