云监控控制台查看监控
分布式表文件个数 向分布式表写数据时待插入数据的文件个数。失败Query个数 查询失败的语句个数。MaterializeMySQL同步个数 使用MaterializeMySQL引擎创建的同步数据库个数。失败Insert Query个数 插入失败的语句个数。Kafka外表个数 已...
批量或异步插入数据
批量插入数据 默认情况下，每个发送到云数据库ClickHouse的插入操作都会导致云数据库ClickHouse立即在存储中创建一个包含插入的数据以及其他需要存储的元数据信息。因此，相比较发送包含较少数据的大量插入操作，发送包含更多数据的较少...
数据操作
创建数据表后，您可以通过命令行工具在数据表中插入新数据、更新一行数据、读取数据、删除一行数据、扫描数据以及导入导出数据。插入新数据 在表中插入新数据。您也可以通过导入JSON格式的配置文件来插入新数据到表中。命令格式 put-pk '...
数据写入AnalyticDB
本文以在DLA中读取OSS中的数据（dla_table_1、dla_table_2表），并通过INSERT…SELECT将符合条件的数据写入AnalyticDB（shipping、order_table）为例，介绍如何通过DLA向AnalyticDB中写入数据。操作步骤 步骤一：创建OSS Schema CREATE ...
基于OSS外表的单表多文件查询
说明 拆分CSV格式的文件时，必须按照完整的一行数据进行拆分，不能从一行数据中间进行拆分，需要保证每一个OSS数据文件的完整性。文件命名规则如下：使用OSS外表的建表语句 CONNECTION 参数中配置的文件名称。如果该参数中没有配置文件名称...
配置HDFS输出组件
同步其他数据源的数据至HDFS数据源的场景中，完成源数据的信息配置后，需要配置HDFS输出组件的目标数据源。本文为您介绍如何配置HDFS输出组件。前提条件 已创建HDFS数据源，如何创建，请参见 创建HDFS数据源。进行HDFS输入组件属性配置的...
API概览
本产品（文件存储（NAS/CPFS）/2017-06-26）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...
配置FTP输出组件
任务级标记完成文件中将依次换行写入每个文件的信息。空值转换 非必选，表示null值的字符串。字段映射 输入字段 从上游输入组件读取的字段。输出字段 您需要配置输出字段。Dataphin支持通过 批量添加 和 新建输出字段 的方式配置输出字段：...
配置FTP输出组件
任务级标记完成文件中将依次换行写入每个文件的信息。空值转换 非必选，表示null值的字符串。字段映射 输入字段 从上游输入组件读取的字段。输出字段 您需要配置输出字段。Dataphin支持通过 批量添加 和 新建输出字段 的方式配置输出字段：...
COPY
COPY TO 把一个表的内容复制 到 一个文件，而 COPY FROM 则从一个文件复制数据到一个表（把数据追加到表中原有数据）。COPY TO 也能复制一个 SELECT 查询的结果。如果指定了一个列列表，COPY TO 将只把指定列的数据复制到文件。对于 COPY ...
选择使用低基数列作为分区键
本文介绍为什么建议在云数据库ClickHouse企业版中的表插入数据时选择一个低基数作为分区键。在云数据库ClickHouse企业版中，当您向没有使用分区键的表发送一个插入语句（插入许多行）时，插入该表所有的行数据将会在存储中写入一个新的Part...
常见问题
多个计算节点共享访问文件，需要创建几个文件系统实例？创建一个文件系统实例即可，单个文件系统同一时刻可以挂载1000个计算节点。更多文件系统使用限制信息，请参见 使用限制。不同地域的文件系统与云服务器ECS不能直接连通，建议文件系统...
Streaming Tunnel SDK示例（Python）
Streaming Tunnel是MaxCompute的流式数据通道，您可以通过Streaming Tunnel向MaxCompute中上传数据，本文为您介绍使用Python版Streaming Tunnel SDK上传数据的简单示例。注意事项 Streaming Tunnel仅支持上传数据，下文为您介绍一个简单的...
层级生成器功能介绍
单击层级树面板下方的 导出层级（DataV专有），导出该层级结构数据文件到本地，并将两个文件上传到自己的服务器或者OSS上，生成两个新的API。自制层级下钻数据在DataV产品组件使用示例 本案例描述将自制的京津翼地区的层级下钻数据，配置到...
UpdateDbfs-修改数据库文件系统
修改一个数据库文件系统的实例规格和使用场景。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...
DeleteDbfs-删除数据库文件系统
调用DeleteDbfs释放一个按量付费的数据库文件系统。接口说明 调用该接口时，您需要注意：释放数据库文件系统时，数据库文件系统的状态必须为：待挂载（Unattached）。如果指定 ID 的数据库文件系统不存在，请求将被忽略。调试 您可以在Open...
AttachDbfs-挂载数据库文件系统
调用AttachDbfs为一台ECS实例挂载一个按量付费的数据库文件系统。ECS实例和数据库文件系统必须在同一个可用区内。接口说明 调用该接口时，您需要注意：数据库文件系统的状态必须为待挂载（Unattached）。挂载数据库文件系统时，目标 ECS ...
概述
AnalyticDB MySQL Spark全密态计算引擎是首批通过信通院隐私计算可信执行环境《产品性能》和《安全功能》两项认证的产品，它可以加密敏感数据，避免数据泄露。您可以通过本文，了解Spark全密态计算引擎在安全合规等领域的应用场景、功能...
按量付费
本文为您介绍阿里云数据库文件存储服务DBFS按量付费的计算详情。结算周期 数据库文件存储每一个小时整点结算一次费用，并从账户余额中扣除实际消费金额，结算完毕后进入新的结算周期。例如，当前时间是 10:30:00，结算的是 9:00:00～10:00:...
DetachDbfs-卸载数据库文件系统
调用DetachDbfs从一台ECS实例上卸载一个按量付费的数据库文件系统。接口说明 调用该接口时，请注意：数据库文件系统必须已经挂载到实例上，状态为已挂载（Attached)。卸载数据库文件系统时，所挂载的 ECS 实例必须处于运行中（Running）...
CreateDbfs-创建数据库文件系统
调用CreateDbfs创建一个按量付费的数据库文件系统。接口说明 创建数据库文件系统需要通过实名认证。请前往会员信息中进行 实名认证。创建数据库文件系统会涉及到资源计费，建议您提前了解数据库文件系统的计费方式。更多详情请参见 按量...
mysqldump
该文件包含了创建数据库、表以及插入数据的SQL语句，从而确保数据的完整性和一致性。使用示例 导出 导出test_db数据库中的test_table表：mysqldump-h127.0.0.1-P9030-uroot-no-tablespaces-databases test_db-tables test_table 导出test_...
设置或取消自动快照策略
您可以对数据库文件系统设置自动快照策略。设置自动快照策略后，阿里云会自动按照预设的时间点和周期为文件系统创建快照。前提条件 您已经创建了至少一份自动快照策略。具体操作，详见 创建自动快照策略。计费说明 数据库文件系统快照功能...
VALUES
如果需要向表中插入少量数据，您可以通过 insert…values 或 values table 操作向数据量小的表中插入数据。执行 insert into 操作前需要具备目标表的修改权限（Alter）及源表的元信息读取权限（Describe）。授权操作请参见 权限列表。本文...
VALUES
如果需要向表中插入少量数据，您可以通过 insert…values 或 values table 操作向数据量小的表中插入数据。执行 insert into 操作前需要具备目标表的修改权限（Alter）及源表的元信息读取权限（Describe）。授权操作请参见 授权。本文中的...
插入数据
本文介绍了插入数据的相关内容。简介 当一个表被创建后，它不包含数据。在数据库可以有点用之前要做的第一件事就是向里面插入数据。数据在概念上是以每次一行地方式被插入的。你当然可以每次插入多行，但是却没有办法一次插入少于一行的...
CreateDataFlow-创建数据流动
如果多个 CPFS 的数据流动、或者同一个文件存储 CPFS 的多个数据流动的源端存储是同一个 OSS Bucket，为了防止多个文件存储 CPFS 向同一个源导出数据产生数据冲突，需要该 OSS Bucket 开启版本控制。不支持跨地域的 OSS 数据流动，OSS ...
PutRow
调用PutRow接口插入数据到指定的行。说明 如果指定行不存在，则新增一行；如果指定行存在，则覆盖原有行。返回结果中如果没有出现报错，则表示本次操作成功。请求消息结构 message PutRowRequest { required string table_name=1;required ...
黑名单监控告警
插入数据 分析型数据库MySQL版提供两种插入数据的方法。调用用户自定义函数 FACE_FEATURE_EXTRACT_V1()从图片中抽取人脸特征向量，然后将结果写入分析型数据库MySQL版。INSERT INTO black_list(id,name,image_url,gender,feature)VALUES(10...
PySpark任务快速入门
操作步骤 步骤一：准备测试文件 在EMR Serverless Spark中，不直接提供Python的开发环境，因此需要您在本地或独立的开发平台上完成Python文件的开发。本快速入门为了带您快速熟悉PySpark任务，为您提供了测试文件，您可以直接下载待后续...
快照链
快照链是一个数据库文件系统中所有快照组成的关系链。一个数据库文件系统（以下简称文件系统）对应一条快照链，快照链有以下信息：快照容量：快照链中所有快照占用的存储空间。快照个数：文件系统当前快照数量。每个文件系统最多只能创建...
如何支持超大事务
在分布式数据库中，超大事务一般满足以下条件中的一个或多个：事务修改的数据涉及多个分片；事务修改的数据量比较大；事务执行的SQL语句比较多。下面通过以下场景的测试，以这三个维度为切入点，介绍 PolarDB-X 对超大事务的支持情况。测试...
使用OpenAPI示例（SDK）
本文以Python语言为例，为您介绍如何使用OpenAPI查询数据库文件系统列表的完整示例。查看OpenAPI文档 通过阅读 API概览 得知，查询数据库文件系统列表的OpenAPI为 ListDbfs。请您根据文档，了解调用该接口需要准备的数据和权限。创建RAM...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
自动优化
query)print(f"Inserted {i+1} entries.")在OSS browser里刷新，可以看到在向表中插入数据时产生了大量的小文件，在我们的代码里执行单行插入，对每一行都会生成一个单独的小文件，同时产生了两个delta log文件。当插入了50条数据时，delta...
InsertList-插入多条数据
调用InsertList批量插入数据。接口说明 本接口当前仅支持华东 1（杭州）、华北 2（北京）地域的 Serverless 实例使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成...
什么是备份数据量
常见概念 在数据库备份DBS业务场景下，含有常见以下几个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量等。概念 说明 数据库磁盘空间 数据库磁盘空间由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲...
查看快照容量
根据快照链查看快照容量 快照链是一个数据库文件系统中所有快照组成的关系链，一个文件系统对应一条快照链。快照链的更多信息，请参见 快照链。说明 快照链的容量计算有几分钟延迟，因此该数据仅供参考，实际发生费用请以云盘快照账单为准...
如何将本地.rdb文件恢复到云数据库 Redis 版实例
您需要先将RDB文件恢复到自建Redis数据库再将自建Redis数据库的数据迁移到 云数据库 Redis 版 实例。操作步骤 创建 云数据库 Redis 版 实例，具体操作请参见 步骤1：创建实例。如果已有 云数据库 Redis 版 实例，可跳过本步骤。将本地RDB...
INSERT INTO
INSERT INTO 用于向表中插入数据，遇到主键重复时会自动忽略当前写入数据，不做更新，作用等同于 INSERT IGNORE INTO。语法 INSERT[IGNORE]INTO table_name[(column_name[,…])][VALUES][(value_list[,…])][query];参数 IGNORE：可选参数...
- 产品推荐
- 这些文档可能帮助您