新功能发布记录
当存储即将出现溢出时，集群的存储空间可自动进行扩容，保障线上业务的稳定性，主要适用于业务数据量比较大，或者业务量波动较大且频繁的场景。设置存储自动扩容 访问地址优化 支持多机房部署方案添加两个访问地址。当访问地址为 2 个时，...
基本概念
以及若输入视频的压缩率已经很高，也不适合使用Two-Pass，会出现块效应。通用概念 地域（Region）地域（Region）指阿里云的服务节点。用户通过选择不同阿里云Region的服务，可就近使用阿里云的服务，获得更低的访问延时和更好的用户体验。...
Dataphin管道任务失败报...00],Des
问题原因 管道任务的目标表结构出现变更，比如删除了某个字段，所以会出现字段不存在的情况。解决方案 排查目标表的结构，确认是否有字段的删减，重新配置一下管道任务即可。需要关注输出配置中字段映射关系，将此界面重新配置并保存。适用...
使用配置巡检检查集群工作负载
RAM授权 请完成ACK容器服务配置巡检页面的RAM授权操作，确保当前RAM用户拥有操作当前集群配置巡检页面的权限，否则会出现权限不足无法操作配置巡检页面功能的问题。具体操作，请参见 自定义RAM授权策略。展开查看配置巡检授权代码 {...
Hive数据源
使用数据集成向Hive集群进行离线同步的过程中，会在服务端侧产生临时文件，在同步任务执行完成时，会自动删除。您需要留意服务端HDFS目录文件数限制，避免非预期的文件数达到上限导致HDFS文件系统不可用，DataWorks平台无法保障文件数在...
设备移植相关问题
运行问题 使用标准库函数 tolower()，需要对应引用头文件 ctype.h，否则运行会出现卡死情况。使用高通的串口打印函数，不能用%s 格式打印0长度的字符串。HTTP Client的代码中，如 src/utils/misc/utils_httpc.c，使用了C标准库函数 sscanf...
查询日志
注意 如果您的业务侧出现问题，建议优先查看主日志和 集群监控，排除集群自身的性能瓶颈或管道配置问题。慢日志 耗时比较久的管道事件日志。当管道运行耗时超过指定阈值时，将在慢查询日志中打印相关信息。注意 为了方便后续排查与定位阿里...
释放实例
注意事项 实例释放后数据无法恢复，实例中所包含的管道会被删除，请谨慎操作。操作步骤 登录 阿里云Elasticsearch控制台。在顶部菜单栏处，选择地域。在左侧导航栏，单击 Logstash实例。在实例列表中，选择待释放实例右侧 操作 列下的 释放...
logstash-input-sls插件使用说明
如果单个服务器中存在多个input sls管道，输出端可能会出现数据重复的异常情况。高性能：基于Java ConsumerGroup实现，单核消费速度可达20 MB/s。高可靠：消费进度会被保存到服务端，宕机恢复时，会从上一次checkpoint处自动恢复。自动负载...
使用ARMS监控异步任务
线程池在通过submit等方法提交Runnable对象时，如果您提交的Runnable对象是lambda表达式形式，可能会出现重复的TraceID，推荐您使用下面新建匿名对象的方法来使用本功能。4.0及以上版本的探针提交lambda表达式形式的Runnable对象不会出现此...
离线集成管道通道配置
配置了 容错配置 的任务运行过程中会出现如下两种情况：管道运行过程中，如果各节点累计的错误数超过容错范围，则当前管道任务会失败。管道运行过程中，如果各节点累计的错误数在容错范围内，则任务继续运行。说明 未配置时，默认为0。表示...
离线集成管道通道配置
配置了 容错配置 的任务运行过程中会出现如下两种情况：管道运行过程中，如果各节点累计的错误数超过容错范围，则当前管道任务会失败。管道运行过程中，如果各节点累计的错误数在容错范围内，则任务继续运行。说明 未配置时，默认为0。表示...
Dataphin管道任务抽取rdbms类数据库数据，切分键使用...
其次考虑切分键的数据类型是否为字符串，字符串不能准确划分范围，并发线程下可能会出现误判情况。rdbms类输入组件，建议表的主键为整型。更多信息 无 相关文档 管理SQL Server组件：https://help.aliyun.com/knowledge_detail/161509.html
Dataphin离线管道任务同步FTP数据报错...
另外，系统的默认连接时间120秒，如果远程终端连接数过多，则会出现超时连接，解决办法如下：修改/etc/ssh/sshd_config中LoginGraceTime 120,将其改为LoginGraceTime 0，其中0表示不限制连接时间。重启SSH服务/etc/init.d/ssh restart。...
UDT概述
如果您熟悉MapReduce原理即可知道，由于 Join 的存在需要做数据Reshuffle，所以会出现多个Stage。通常，不同的Stage是在不同的进程、不同的物理机器上运行的。M1只执行 new java.math.BigInteger(x)操作。J3在不同阶段执行了 java.math....
Logstash数据写入问题排查方案
在使用阿里云Logstash将数据写入阿里云Elasticsearch（output指定为阿里云Elasticsearch）时，您可能会遇到网络不通、管道配置错误、负载高、管道正常启动但无数据写入目标端以及服务正常但缺少数据等问题，此时您可以参考本文的排查方案...
手动搭建Magento电子商务网站
(Press y|Y for Yes,any other key for No):Y#是否删除匿名用户，输入Y Success.输入 Y 禁止root账号远程登录。Disallow root login remotely?(Press y|Y for Yes,any other key for No):Y#禁止root远程登录，输入Y Success.输入 Y 删除...
数据集成相关
用户在中国，但是使用海外的Grafana工作区，通常首次加载时会出现卡顿。使用的数据源本身数据查询返回慢，可以尝试优化查询语句。表格（Table）配置无Column Styles 可以通过Overrides实现自定义。具体操作，请参见 Grafana官方文档。企业...
数据集成相关
用户在中国，但是使用海外的Grafana工作区，通常首次加载时会出现卡顿。使用的数据源本身数据查询返回慢，可以尝试优化查询语句。表格（Table）配置无Column Styles 可以通过Overrides实现自定义。具体操作，请参见 Grafana官方文档。企业...
Docker登录、推送和拉取失败常见问题
说明 少数情况下会出现如下报错，下载的块文件检验失败。一般重试即可解决。报错提示：Error:filesystem layer verification failed for digest 为什么在企业版实例匿名拉取镜像会失败？您需要在 概览 页面右侧 实例设 置区域打开 公开匿名...
降低因账号密码泄露带来的未授权访问风险
如果因个人或者企业账号密码泄露引发了未经授权的访问，可能会出现非法用户对OSS资源进行违法操作，或者合法用户以未授权的方式对OSS资源进行各类操作，这将给数据安全带来极大的威胁。为此，OSS提供了在实施数据安全保护时需要考虑的多种...
使用ossftp工具上传文件到OSS失败的解决方法
问题原因 出现文件无法上传的原因如下：并发量比较高：并发量比较高的情况下，会出现ossftp上传失败的现象。存在跨境访问的问题：在跨境请求的场景下，由于跨境链路的限制，出现访问慢或无法访问等普遍现象。Bucket和Endpoint不匹配：OSS会...
图片处理常见问题
图片处理完后背景色多了一条分割线 问题分析：图片中出现的并非是分割线，而是图片处理后色彩构成出现问题。原图是RGB的真彩色（ImageHeight":{"value":"2560""ImageWidth":{"value":"1440"）。经过图片处理后，像素被裁剪到h_1920,w_1080...
配置Referer防盗链
为什么会出现空Referer，对于此类请求应该怎么处理？空Referer（也称为Referer头为空）是指在HTTP请求中缺失了Referer请求头部的情况。请求中的Referer头通常包含完整的URI，其中包括协议（如 http 或 https ）、主机名，可能还包括路径和...
Dataphin输出数据源为MySQL，为什么管道任务日志中...
若选择的加载策略为覆盖模式，主键冲突的数据会被删除，然后追加，显示的为总处理数据数量，所以会出现输出库中新增数量和管道日志数量不一致的情况。适用于 Dataphin 说明：本文适用于公共云v2.9.4-3版本数据集成模块。
配置Referer防盗链
为什么会出现空Referer，对于此类请求应该怎么处理？空Referer（也称为Referer头为空）是指在HTTP请求中缺失了Referer请求头部的情况。请求中的Referer头通常包含完整的URI，其中包括协议（如 http 或 https ）、主机名，可能还包括路径和...
使用Filebeat+Kafka+Logstash+Elasticsearch构建日志...
常见问题 Q：同步日志数据出现问题，管道一直在生效中，无法将数据导入Elasticsearch，如何解决？A：查看Logstash实例的主日志是否有报错，根据报错判断原因，具体操作请参见 查询日志。常见的原因及解决方法如下。原因 解决方法 Kafka的接...
配置Referer防盗链
为什么会出现空Referer，对于此类请求应该怎么处理？空Referer（也称为Referer头为空）是指在HTTP请求中缺失了Referer请求头部的情况。请求中的Referer头通常包含完整的URI，其中包括协议（如 http 或 https ）、主机名，可能还包括路径和...
通过配置文件管理管道
Logstash通过管道完成数据的采集与处理，管道配置中包含input、output和filter（可选）插件，input和output用来配置输入和输出数据源、filter用来对数据进行过滤或预处理。阿里云Logstash支持多管道并行运行，目前最多支持20个。本文介绍...
通过阿里云Logstash将自建Elasticsearch数据迁移至...
当您需要将自建Elasticsearch中的数据迁移到阿里云Elasticsearch中时，可以通过阿里云Logstash的管道配置功能实现。本文介绍具体的实现方法...Q：Logstash数据写入时出现问题，如何处理？A：参见 Logstash数据写入问题排查方案 进行排查处理。
Dataphin中管道任务从MaxCompute同步Emoj数据到MySQL8...
为什么要用utf8mb4 低版本的MySQL支持的UTF8编码，最大字符长度为3字节，如果遇到4字节的字符就会出现错误了。三个字节的UTF-8最大能编码的Unicode字符是 0xFFFF，也就是 Unicode 中的基本多文平面（BMP）。也就是说，任何不在基本多文平面...
Dataphin中基于自定义数据源创建的管道任务发布报错...
问题描述 基于离线自定义组件创建数据源如下：基于该自定义数据源创建管道任务，发布该任务的时候报错“子域发布预检失败”、“DPN.Pipeline.Object.NotExisted”：问题原因 管道任务发布的时候会同时校验如下信息：生产项目和开发项目中...
常见问题
用户在中国，但是使用海外的Grafana工作区，通常首次加载时会出现卡顿。使用的数据源本身数据查询返回慢，可以尝试优化查询语句。表格（Table）配置无Column Styles 可以通过Overrides实现自定义。具体操作，请参见 Grafana官方文档。企业...
常见问题
用户在中国，但是使用海外的Grafana工作区，通常首次加载时会出现卡顿。使用的数据源本身数据查询返回慢，可以尝试优化查询语句。表格（Table）配置无Column Styles 可以通过Overrides实现自定义。具体操作，请参见 Grafana官方文档。企业...
security-inspector
变更时间 变更内容 变更影响 v0.5.0.2-g5e33765-aliyun registry.cn-hangzhou.aliyuncs.com/acs/security-inspector:v0.5.0.2-g5e33765-aliyun 2021年06月24日 解决多个集群使用同一个SLS Project时会出现报表数据显示异常的问题。...
UDF（SQL自定义函数）
注意事项 请使用SQL 脚本模式创建SQL UDF，否则可能会出现创建SQL UDF失败的情况。SQL脚本模式的介绍及使用详情请参见 SQL脚本模式。命令格式 create sql function(@<parameter_in1><datatype>[,@<parameter_in2><datatype>.])[returns@...
AD办公网络常见问题
在 本地安全策略 页面右侧的 策略 面板中，找到 网络访问:可匿名访问的命名管道 并右键 网络访问:可匿名访问的命名管道，然后选择 属性。在 网络访问:可匿名访问的命名管道 属性 面板的 本地策略设置 页签下，在输入框中输入以下内容并按照...
媒体处理常见问题
目前媒体处理每个用户只能开一个管道，无法创建多管道，所以会出现Only one topic can be created！这个错误。开启管道或添加管道，请参见 创建管道。媒体处理服务中AliyunAudioCodec中Profile字段的说明。媒体处理中的音频编解码配置类型...
搭建FTP服务器（Linux）
部分使用应用镜像部署的轻量应用服务器已经预安装了vsftpd，如果再次安装可能会出现冲突。vsftpd-v 如果回显信息类似如下所示，表示当前轻量应用服务器已经安装了vsftpd，您无需再次安装，您可以参考应用镜像文档获取FTP的用户名和密码，...
通过image-syncer工具迁移容器镜像
除了使用重传机制规避同步过程中可能出现的偶发问题之外，image-syncer会在运行结束时统计最后同步失败的镜像个数，并且打印出详细的日志，帮助使用者定位同步过程中出现的问题。准备工作 使用image-syncer时，您只需要提供一个配置文件，...
- 产品推荐
- 这些文档可能帮助您