数据复制
spark-sql-jars/opt/apps/SPARK-EXTENSION/spark-extension-current/spark3-emrsdk/*,/opt/apps/HADOOP-COMMON/hadoop-common-current/share/hadoop/common/lib/commons-net-3.6.jar 步骤二：创建Spark表 以两张 表格存储 数据表source_pet...
使用JDBC Connector同步MySQL数据
在实例详情页面，单击 登录数据库 进入DMS数据管理服务平台，单击目标数据库，使用SQL语句创建表格。例如，创建一个列参数分别为 id 和 number 的表格，命令如下。更多信息，请参见 SQL Commands。CREATE TABLE sql_table(id INT,number ...
使用JDBC Connector同步MySQL数据
在实例详情页面，单击 登录数据库 进入DMS数据管理服务平台，单击目标数据库，使用SQL语句创建表格。例如，创建一个列参数分别为 id 和 number 的表格，命令如下。更多信息，请参见 SQL Commands。CREATE TABLE sql_table(id INT,number ...
日志报表
客户端（IP、城市、网络）SQL PolarDB-X 实例ID 数据库 表格 用户 大批量事务 大批量删除事件Top 50 表格 1小时（相对）大批量删除SQL的列表，包括：最早执行时间 最近执行时间 PolarDB-X 实例ID 数据库 表格 执行次数 平均删除行数 平均时...
使用Tapdata Cloud导入MySQL数据
通过Tapdata Cloud的可视化界面，您可以将自建MySQL、阿里云RDS MySQL、第三方云数据库的数据实时同步到表格存储。前提条件 使用Tapdata Cloud同步MySQL数据到表格存储前，需要完成如下准备工作。已注册 Tapdata Cloud账号。已创建表格存储...
UNI_HASH
适合于两张逻辑表需要根据同一个拆分键进行分库，两张表的分表数不同，又经常会按该拆分键进行JOIN的场景。使用示例 假设需要对id列按UNI_HASH函数进行分库分表，每库包含4张表，则您可以使用如下DDL语句进行建表：create table test_hash_...
UNI_HASH
两张逻辑表需要根据同一个拆分键进行分库，两张表的分表数不同，又经常会按该拆分键进行JOIN的场景。使用示例 假设需要对ID列按UNI_HASH函数进行分库分表，每库包含4张表，则您可以使用如下DDL语句进行建表：create table test_hash_tb(id ...
日志报表
说明 由于相同地区的 PolarDB-X 1.0 数据库的审计日志均写入日志服务同一个Logstore中，查看当前 PolarDB-X 1.0 数据库的报表数据时，默认为您添加基于_topic_:drds_audit_log_实例 ID_数据库名 的过滤条件，表示查看当前数据库的数据。...
使用Debezium将MySQL数据同步至云消息队列 Kafka 版
该字段用于组成数据库及表格的目标Topic的名称，数据库目标Topic的命名规则为 {database.server.name}，表格目标Topic的命名规则为 {database.server.name}.{databaseName}.{tableName}。请在运行Connector任务前按照命名规则提前创建对应...
使用Debezium将MySQL数据同步至云消息队列 Kafka 版
该字段用于组成数据库及表格的目标Topic的名称，数据库目标Topic的命名规则为 {database.server.name}，表格目标Topic的命名规则为 {database.server.name}.{databaseName}.{tableName}。请在运行Connector任务前按照命名规则提前创建对应...
空间管理
数据库自治服务DAS 为 RDS SQL Server 提供空间管理功能，可以分层监控与分析，从实例深入到数据库，再从数据库深入到表，帮助用户发现和定位数据库空间相关问题。空间管理提供您查看实例基本信息、空间总览、空间数据图表信息、空间变化...
空间管理
自治服务的空间管理功能提供分层的监控与分析，从实例深入到数据库，再从数据库深入到表，帮助用户发现和定位数据库空间相关问题。空间管理提供您查看实例基本信息、空间总览、空间数据图表信息、空间变化趋势等等，帮助您从各个维度了解...
概述
使用场景 数据架构变化 随着业务的变化，如果现有业务对数据库并发读写需求、扩展性和可用性需求较高，或需要复杂的检索，原有MySQL数据库的数据架构已经不能满足现在的业务需求，您可以选择将MySQL数据库中的数据迁移到表格存储中。表格...
准备工作
创建表格存储实例 实例 是您使用和管理表格存储服务的实体，每个实例相当于一个数据库。表格存储对应用程序的访问控制和资源计量都在实例级别完成。创建表格存储实例。具体操作，请参见 创建实例。下载SDK 选择以下语言的SDK包进行下载安装...
两表并集
用途 两表并集算子可以将两张数据表按照设置的合并条件求取并集。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 Spark 是 使用说明 来源节点 两表并集算子必须指定两个 来源节点（又称为...
ST_Collect
合并两个或多个sfmesh对象节点。语法 语法一：sfmesh ST_Collect(sfmesh sfmeshObject1,sfmesh sfmeshObject2);语法二：sfmesh ST_Collect(sfmesh[]sfmesh_array);语法三：sfmesh ST_Collect(setofsfmesh sfmesh_set);参数 参数 描述 ...
ST_Collect
合并两个或多个sfmesh对象节点。语法 语法一：sfmesh ST_Collect(sfmesh sfmeshObject1,sfmesh sfmeshObject2);语法二：sfmesh ST_Collect(sfmesh[]sfmesh_array);语法三：sfmesh ST_Collect(setofsfmesh sfmesh_set);参数 参数 描述 ...
合并列
合并列算法组件是将两张表的数据按列合并，需要表的行数保持一致，否则报错。如果两张表只有一张存在分区，则分区表需要连接第二个输入端口。组件配置 您可以使用以下任意一种方式，配置合并列组件参数。方式一：可视化方式 选取左表待合并...
合并行（UNION）
合并行（UNION）算法组件是将两张表的数据按行合并，左表及右表选择输出的字段个数以及类型应保持一致。整合了UNION和UNION ALL的功能。Designer 仅支持通过可视化方式进行数据合并。参数 描述 左表输出列 进行联合操作时，左右表选择的列...
使用Go语言驱动
本文介绍如何使用Go语言驱动连接表格存储。注意事项 目前支持使用SQL查询功能的地域有华东1（杭州）、华东2（上海）、华北2（北京）、华北3（张家口）、华南1（深圳）、中国香港、德国（法兰克福）、美国（弗吉尼亚）、印度（孟买）和...
概述
说明 Hologres 数据源默认不支持 删除列 操作，请先升级至 V2.0 版本，并变更相关数据库系统参数：在对应的数据库实例通过 alter database 数据库名称 set hg_experimental_enable_drop_column=on 命令来设置数据库级别的GUC参数，执行完成...
复杂表格填报
使用限制 仅支持MySQL、SQLServer、AnalyticDB for MySQL 3.0、polarDB for MySQL、达梦、PostgreSQL和StarRocks数据库，且连接数据源的账号在数据库中有操作表的权限。即，需要有数据库的 create、insert、update 和 delete 权限。效果...
数据集成服务
当您的现有业务对数据库的并发读写、扩展性和可用性的要求较高，且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到...
方案设计
数据存储方案 表格存储设计了两张表分别存储数据集的meta和data：meta表示这个数据集的元数据，例如GridDataSetId、各维度长度、自定义属性等。data表示这个数据集里实际的网格数据。data相比meta在数据大小上要大很多。将数据集的meta和...
测试环境
表格存储实例 本次测试使用了两个表格存储实例：高性能实例：位于华东1区域 容量型实例：位于华东1区域 说明 高性能实例与容量型实例的区别在于其磁盘类型不同，高性能实例使用了SSD磁盘，而容量型实例则混合使用了SSD磁盘和SATA磁盘。...
跨库查询
当需要查询分散在不同数据库中的数据时，您可以使用 云原生数据仓库 AnalyticDB PostgreSQL 版 的跨库查询功能方便地将数据聚合在一起，进行高效查询，提高数据访问效率。功能介绍 Database是PostgreSQL生态下数据库的最高级别，同一个实例...
Schema探索
SHOW DATABASES 示例 运行SHOW DATABASES查询>SHOW DATABASES name:databases name-NOAA_water_database_internal 该查询以表格的形式返回数据库的名称。当前账号有权限查看数据库 NOAA_water_database 和_internal。SHOW RETENTION ...
新建数据库
操作步骤 新建数据库 您可以使用以下两种方式来新建数据库：Hologres管控台新建数据库 Hologres管控台 支持以可视化的方式新建数据库，在Hologres管控台进入对应实例的详情页，选择 数据库管理，单击 新增数据库 进行创建。说明 当前版本的...
CREATE DATABASE
CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库，你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下，新数据库将通过克隆标准系统数据库 template1 被...
MongoDB 7.0新特性概览
速览 本文将从以下方面介绍 云数据库 MongoDB 版 7.0版本：新特性 可查询加密（Queryable Encryption）支持分片元数据一致性校验 支持采样查询与分析分片键（analyzeShardKey）自动合并（AutoMerger）优化项 其他优化 安全性 聚合...
缓存数据持久化
背景信息 与RDS相比，云数据库缓存产品有如下两个特性：响应速度快，云数据库Redis和云数据库Memcache请求的时延通常在几毫秒以内。缓存区能够提供比RDS更高的QPS（每秒处理请求数）。操作步骤 RDS MySQL与云数据库Redis搭配 前提条件 已...
ST_AsTable
将trajectory对象输出为数据库中的表格。语法 trajectory ST_AsTable(trajectory traj);参数 参数名称 描述 traj 原始轨迹。描述 将轨迹转换为表格的形式进行输出，表格的形式和 ST_makeTrajectory 的语法5一致。示例-输出元组 With traj ...
使用函数计算清洗数据
将数据写入到表格存储时，您可以通过函数计算对新增的数据做简单的清洗，将清洗后的数据写回到表格存储的另一种数据表中。同时，您也可以实时访问表格存储中的原始数据和结果数据。样例场景 假设写入表格存储的为日志数据，且日志数据包括...
方案分析
最佳的存储库应该是具有主键自增功能的分布式NoSQL数据库，但是在开源系统里没有完全符合特点的数据库，所以有两种存储方案：对比项 表格存储 关系型数据库（分库分表）可靠性 极高可靠性，11个9的SLA保障 可靠性低于非关系型数据库，关系...
SQL概述
基本概念 SQL的使用会涉及到很多传统数据库中的概念，此处介绍下相关概念以及与现有表格存储概念的映射关系。名词 描述 数据库 按照数据结构来组织、存储和管理数据的仓库。一个数据库中可以包含一个或者多个表，映射为表格存储的实例。表 ...
表格存储和传统关系型数据库（例如MySQL、SQL Server...
表格存储是阿里云自研的多模型结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务，与传统关系型数据库（RDBMS，例如MySQL、SQL Server）在数据模型和技术实现上都有较大的区别。表格存储和传统关系型数据库的主要区别如下：...
合并
示例 数据库 NOAA_water_database 中的measurement的 h2o_feet 是两个序列的一部分。第一个序列由measurement h2o_feet 和tag location=coyote_creek 组成。第二个序列由measurement h2o_feet 和tag location=santa_monica 组成。以下查询...
X-Engine简介
X-Engine是阿里云数据库产品事业部自研的联机事务处理OLTP（On-Line Transaction Processing）数据库存储引擎。目前已经广泛应用在阿里集团内部诸多业务系统中，包括交易历史库、钉钉历史库等核心应用，大幅缩减了业务成本，同时也作为双...
数据库管理
Database的概念 每个正在运行的Lindorm时序引擎实例都管理着一个或多个数据库（简称Database）。在各个Database之间，数据会被隔离。每个Database都有若干时序数据表，结合 名词解释 的描述，我们可以对时序引擎的数据层级归纳为下图所示：...
使用教程（宽表模型）
表格存储 支持作为实时计算Flink的源表和结果表使用，您可以将 表格存储 数据表中的数据经过Flink处理后得到的结果保存到 表格存储 的另一张数据表中。背景信息 实时计算Flink能将Tunnel Service的数据通道作为流式数据的输入，每条数据...
- 产品推荐
- 这些文档可能帮助您