表删除，更新和合并
通过合并的SQL语义，它将新数据与表中的现有数据进行匹配并删除重复数据，但是如果新数据集中存在重复数据，则将其插入。因此，在合并到表之前，对新数据进行重复数据删除。如果您知道几天之内可能会得到重复的记录，则可以通过按日期对表...
连接失败常见报错
解决方法：检查实例的连接地址，在连接串中填写正确的鉴权数据库。鉴权数据库用于存储数据库账号和密码。数据库账号必须在所属的数据库下进行鉴权，才能鉴权成功。xxx@dds-xxx.mongodb.rds.aliyuncs....
数据处理
单击 解析 以生成hex格式数据帧。解析结果可以查看特征列类型、最大值、最小值、均值等统计数据。单击 Convert to enum，将特征类型转化为枚举类型，进行后续的分类任务。单击特征名，可以查看特征取值分布的统计。数据切分。解析后的数据...
常见报错
可能原因：通讯链路故障，JDBC驱动程序数据包成功发送到源数据库服务器，但未收到来自源数据库的数据包。解决方法：排查数据库的连接数是否过多。参考 communications link failure 处理。请 通过钉钉（钉钉通讯客户端下载地址）进入到DTS...
模型训练
在 PARAMETERS（参数设置）区域，配置training_frame（训练数据帧）、response_column（训练目标列）、validation_frame（验证数据帧）、blending_frame（混合模式数据帧）和leaderboard_frame（计算模型评分排行榜所用数据帧）。...
产品功能
模型训练 运行自动机器学习 GDB Automl提供运行自动机器学习功能，您可以配置实验基本参数（包括训练数据帧、验证数据帧和目标特征列，用于排行榜对模型排序的第一指标等）和训练参数（例如K折交叉验证折数，指定训练权重列、排序指标、...
模型预测
您可以在模型排行榜中选择某个模型进行预测任务，本文为您详细介绍GDB Automl模型预测的方法。操作步骤 模型预测完成后，在...选择用于模型预测的数据帧，单击 预测。在模型预测结果中，可以查看预测集上的混淆矩阵和不同阈值下的指标情况。
通过DMS登录MySQL数据库提示“登录...用户名或密码错误...
解决方案 说明 如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，建议提前创建快照或开启RDS日志备份等功能。如果您在阿里云平台授权...
使用数据订阅SDK出现“client partition is empty,...
解决方案 确认数据订阅是否正在启动中。如果是正在启动中，则只需要耐心等待数据订阅正常启动。如果数据订阅已经正常启动，则需要排查是否有多个Client消费数据，如有多个，只有正在订阅数据的Client异常或是出现网络连接异常时后，Backup...
Link Visual SDK更新记录
修复直播伴随的语音对讲停止时立即调用播放器mute静音无效问题 确保语音对讲外部变声返回的PCM数据帧的完整性 2022-11-30 Link Visual视频Media SDK LinkVisual设备端 SDK Linux V2.3.3 可选点播高倍速时关闭对I帧的检查，用于支持虚拟I帧...
数据类型
目录 数据类型 描述 支持的最低版本 DingRtcAudioSource 音频订阅类型 3.0 DingRtcAudioFrame 音频裸数据 3.0 DingRtcVideoSample 视频裸数据 3.0 DingRtcVideoSourceType 视频源类型 3.0 DingRtcRawDataFrame 视频裸数据帧信息 3.0 ...
什么是云原生数据湖分析
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB\NoSQL）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统...
管理导入任务
如果表数据出现错误或延迟，需要从导入任务做排查，以看到任务是否正在在运行，是否存在延迟等情况。前提条件 已连接对应的实例，详情请参见 管理StarRocks Manager连接。使用限制 该功能仅支持2.5.8-1.7-1.1.3及之后版本使用。查看导入...
某网约车公司车辆轨迹数据
随着车辆数量的快速增长，每辆车每分钟上传轨迹、位置等信息到MySQL导致MySQL库数据量过大，将全量数据写到 云原生多模数据库 Lindorm 中可以解决数据量过多和成本问题。业务挑战 目前线下有7万+辆车，车辆数量在快速增长，每辆车每分钟...
离线人脸识别SDK
RGB可见光活体检测：针对视频流帧数据，通过采集人像的破绽（摩尔纹、成像畸形等）来判断目标对象是否为活体，可有效防止屏幕二次翻拍和复印二次翻拍等作弊攻击。NIR近红外活体检测：针对视频流帧数据，利用近红外成像原理，实现夜间或无...
配置GBase 8a输出组件
同步其他数据源的数据至GBase 8a数据源的场景中，完成源数据源的信息配置后，需要配置GBase 8a输出组件写入数据的目标数据源。本文为您介绍如何配置GBase 8a输出组件。前提条件 已创建GBase 8a数据源，如何创建，请参见 创建GBase 8a数据源...
配置GoldenDB输出组件
加载策略包括覆盖和追加，适用场景说明如下：追加数据 策略下，当指主键、约束冲突时，系统会提示脏数据错误。覆盖数据 策略下，当主键、约束冲突时，系统会先删除原数据，再插入整行新数据。解析方案 可选择输出数据前后的语句准备，详情...
配置GBase 8a输出组件
同步其他数据源的数据至GBase 8a数据源的场景中，完成源数据源的信息配置后，需要配置GBase 8a输出组件写入数据的目标数据源。本文为您介绍如何配置GBase 8a输出组件。前提条件 已创建GBase 8a数据源，如何创建，请参见 创建GBase 8a数据源...
配置Impala输出组件
加载策略包括覆盖和追加，适用场景说明如下：追加数据 策略下，当指主键、约束冲突时，系统会提示脏数据错误。覆盖数据 策略下，当主键、约束冲突时，系统会先删除原数据，再插入整行新数据。解析方案 可选择输出数据前后的语句准备，详情...
配置ArgoDB输出组件
配置ArgoDB输出组件，可以将外部数据库中读取的数据写入到ArgoDB，或从大数据平台对接的存储系统中将数据复制推送至ArgoDB，进行数据整合和再加工。本文为您介绍如何配置ArgoDB输出组件。使用限制 ArgoDB输出组件支持写入文件格式为orc、...
配置MySQL输出组件
同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建MySQL数据源。进行FTP输出组件属性配置的...
配置MySQL输出组件
同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建MySQL数据源。进行FTP输出组件属性配置的...
配置TDH Inceptor输出组件
同步其他数据源的数据至TDH Inceptor数据源的场景中，完成源数据源的信息配置后，需要配置TDH Inceptor输出组件写入数据的目标数据源。本文为您介绍如何配置TDH Inceptor输出组件。使用限制 TDH Inceptor输出组件支持写入文件格式为orc、...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
解决方案与客户案例
数据层：数据层解决数据库跨地域的部署与同步问题，并在灾难发生时对流量切换动作提供相应的数据质量保护策略。针对上层业务不同的服务类型提供UNIT和COPY两种数据同步策略：UNIT类型：每个单元部署独立的数据库系统，单元之间通过DTS进行...
数据类型
alirts_frame_t 发送的音视频帧数据。alirts_push_info_t 推流统计信息。alirts_event_handler_t SDK推流的回调事件通知。详情 alirts_handler_t：SDK句柄定义，用于SDK实例管理。typedef void alirts_handler_t;alirts_config_t：推流配置...
解决方案与客户案例
数据层 数据层解决数据库跨地域的部署与同步问题，并在灾难发生时对流量切换动作提供相应的数据质量保护策略。针对上层业务不同的服务类型提供UNIT和COPY两种数据同步策略：UNIT类型：每个单元部署独立的数据库系统，单元之间通过DTS进行...
常见术语
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统Hadoop方案...
错误信息列表
数据导入任务错误列表 数据导入 提供添加、查询和删除接口，查询接口除自身命令错误外还提供任务运行过程中产生的错误。请求 返回 描述 添加任务 Loader File Format don’t support 要求导入的文件格式不支持，当前只支持.csv格式。...
云数据库RDS简介
RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎，并且提供了容灾、备份、恢复、监控、迁移等方面的全套解决方案，帮助您解决数据库运维的烦恼。安全稳定可靠 历经考验：已支撑数十万用户的业务稳定运行，且经过双十一高并发、大数据量...
数据类型
通过阅读本文，你可以了解Native RTS SDK所涉及的数据类型。目录 数据类型 描述 rts_worker_demux_info 媒体信息。rts_frame 封装音频帧和视频帧的信息类型。rts_glue_funcs 函数指针。pusher_delay 推流延时信息。player_delay 拉流延时...
Insert Into
StarRocks中INSERT INTO语句的使用方式和MySQL等数据库中INSERT INTO语句的使用方式类似，但在StarRocks中，所有的数据写入都是一个独立的导入作业，所以StarRocks中将INSERT INTO作为一种导入方式介绍。本文为您介绍Insert Into导入的使用...
如何处理Tair集群数据倾斜
数据倾斜的临时方案 若实例已产生数据倾斜，您可以通过如下临时方案进行过渡，但以下临时方案无法解决数据倾斜的根源问题。同时，您也可以在短时间内可降低大Key、热Key的请求量，暂缓数据倾斜问题，但大Key、热Key问题只能通过业务上的...
如何处理Redis集群数据倾斜
数据倾斜的临时方案 若实例已产生数据倾斜，您可以通过如下临时方案进行过渡，但以下临时方案无法解决数据倾斜的根源问题。同时，您也可以在短时间内可降低大Key、热Key的请求量，暂缓数据倾斜问题，但大Key、热Key问题只能通过业务上的...
客户案例
DataWorks在多个行业中均有典型的案例落地，帮助多个行业的企业解决数据痛点，挖掘数据价值，本文为您介绍典型行业中已落地的客户案例。新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，...
Insert Into
StarRocks中INSERT INTO语句的使用方式和MySQL等数据库中INSERT INTO语句的使用方式类似，但在StarRocks中，所有的数据写入都是一个独立的导入作业，所以StarRocks中将INSERT INTO作为一种导入方式介绍。本文为您介绍Insert Into导入的使用...
什么是数据管理DMS
RDS：阿里云关系型数据库RDS（Relational Database Service）是一种稳定可靠、可弹性伸缩的在线数据库服务，提供容灾、备份、恢复、迁移等方面的全套解决方案，帮助您解决数据库运维的烦恼。PolarDB：PolarDB是阿里云自研的下一代关系型云...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
基本概念
基于阿里云分布式文件系统和SSD盘高性能存储，RDS支持MySQL、SQL Server、PostgreSQL和MariaDB引擎，并且提供了容灾、备份、恢复、监控、迁移等方面的全套解决方案，帮助用户解决数据库运维的烦恼。更多信息，请参见 云数据库RDS简介。...
- 产品推荐
- 这些文档可能帮助您