常见问题
spark.sql.hive.outputCommitterClass=org.apache.hadoop.mapreduce.lib.output.FileOutputCommitter spark.sql.sources.outputCommitterClass=org.apache.hadoop.mapreduce.lib.output....，来查找系统中使用最多线程的进程是什么...
JMeter多个线程组的使用说明
设置多线程组并行或串行 如果JMeter脚本中包含多个主线程组（Thread Group），您可以参照以下说明设置多线程组的并行和串行关系。PTS施压配置中的 循环次数 会覆盖所有的线程组，而 压测时长 如果到达，整个压测都会停止。多线程组并行 多...
JMeter多个线程组的使用说明
设置多线程组并行或串行 如果JMeter脚本中包含多个主线程组（Thread Group），您可以参照以下说明设置多线程组的并行和串行关系。PTS施压配置中的 循环次数 会覆盖所有的线程组，而 压测时长 如果到达，整个压测都会停止。多线程组并行 多...
什么是Deepytorch Training（训练加速）
scatter等算法，Hybrid+算法支持单机和多机的分层通信，充分利用单机内部高速带宽的同时降低了多机之间的通信量，通信算子编译优化方案相比NCCL原生在性能上提升了50%以上。通信多流优化：通常情况下，因网络带宽没有被充分利用，会导致...
什么是AI通信加速库Deepnccl
scatter等算法，Hybrid+算法支持单机和多机的分层通信，充分利用单机内部高速带宽的同时降低了多机之间的通信量，通信算子编译优化方案相比NCCL原生在性能上提升了50%以上。通信多流优化：通常情况下，因网络带宽没有被充分利用，会导致...
功能说明
直播推流SDK支持RTMP格式和RTS格式的推流地址，且RTS推流相对于RTMP推流稳定性和抗弱网有显著提升，建议用户优先使用RTS推流。RTMP和RTS推流效果对比及RTS推流方法，请参见 RTS推流。使用正确的推流地址开始推流后，可用播放器（阿里云播放...
岭回归预测
组件多线程线程个数 组件多线程的线程个数，默认为1。执行调优 节点个数 与 单个节点内存大小 参数配对使用。取值为[1,9999]的正整数。单个节点内存大小，单位M 取值范围为1024 MB~64*1024 MB。通过代码方式配置组件 您可以将以下代码复制...
局部异常因子异常检测
组件多线程线程个数 组件多线程的线程个数，默认为1。执行调优 节点个数 节点个数，与参数 单个节点内存大小 配对使用，正整数。范围[1,9999]。单个节点内存大小，单位M 单个节点内存大小，单位MB，正整数。范围[1024,64*1024]。方式二：...
在Linux系统内启动某个服务时提示task:Cannot ...
解决方案 您可以参考以下步骤，根据实际需要调高 kernel.pid_max 的值（即允许系统运行更多的进程数）。说明 64位系统允许设置的 kernel.pid_max 最大值为2 22，32位系统允许设置的 kernel.pid_max 最大值为32,768。远程连接ECS实例。具体...
启动ACCL容器
PyTorch多进程处理、多线程Dataloader等会大量使用共享内存通信，故而建议为容器分配足够的共享内存空间。其他可行选项包括：shm-size=8g-v/dev/shm:/dev/shm-device=dev/infiniband-ulimit memlock=-1:1 挂载RDMA网卡设备并移除内存页锁定...
Kafka Connect
Workers Workers是用于承载Connectors实例和Tasks线程运行的进程，支持两种运行模式：单机模式（Standalone mode）和分布式模式（Distributed mode），一个Worker进程中可以运行多个Connector实例线程和Task线程。Standalone mode：只有...
查询网络通信距离（NCD）
使用NCD的原因 存在的问题 在特定物理网络拓扑下，不同GPU节点之间的通信时延和可能产生的跨多跳交换机转发引发的哈希不均，都可能导致不同GPU节点之间的通信性能存在较大差异，进而进一步影响模型训练的吞吐差异。解决方法 如上图所示，...
Kafka Connect
Workers Workers是用于承载Connectors实例和Tasks线程运行的进程，支持两种运行模式：单机模式（Standalone mode）和分布式模式（Distributed mode），一个Worker进程中可以运行多个Connector实例线程和Task线程。Standalone mode：只有...
并发导出数据
示例 请根据实际选择单并发扫描数据和多线程并发扫描数据。单并发扫描数据 相对于多并发扫描数据，单并发扫描数据的代码更简单，单并发代码无需关心currentParallelId和maxParallel参数。单并发使用方式的整体吞吐比Search接口方式高，但是...
并发导出数据
示例 请根据实际选择单并发扫描数据和多线程并发扫描数据。单并发扫描数据 相对于多并发扫描数据，单并发扫描数据的代码更简单，单并发代码无需关心currentParallelId和maxParallel参数。单并发使用方式的整体吞吐比Search接口方式高，但是...
消费者（Consumer）
使用建议 不建议在单一进程内创建大量消费者 云消息队列 RocketMQ 版 的消费者在通信协议层面支持非阻塞传输模式，网络通信效率较高，并且支持多线程并发访问。因此，大部分场景下，单一进程内同一个消费分组只需要初始化唯一的一个消费者...
Link SDK运行相关问题
是否支持多线程？目前 IOT_*()的API都是进程级别，仅支持单进程单线程使用，不支持在同一进程的不同线程并发重入。数据传输的安全性怎么保证？设备和服务端之间的链路可以通过TLS加密，并且使用设备身份证书信息（productKey、deviceName、...
自适应扫描
由于自适应扫描线程与各个PX worker进程之间的通信数据很少，频率不高，所以重用了已有的QC进程与PX worker进程之间的libpq连接进行报文通信。自适应扫描线程通过poll的方式在需要时同步轮询PX Worker进程的请求和响应。扫描任务协调。PX ...
JT/T 808协议云网关概述
JT/T 808协议的连接和通信说明 设备使用JT/T 808协议接入物联网平台并进行通信，设备通信消息采用标准的JT/T 808协议的数据格式。设备与物联网平台建连时，默认180秒后为超时。超过180秒没有数据上报或者终端心跳，物联网平台会断开与设备...
GB/T 32960协议云网关概述
GB/T 32960协议云网关采用GB/T 32960协议（电动汽车远程服务与管理系统技术规范），支持通过TCP（安全性低，不推荐）和TLS两种方式接入相关车辆设备。采用TLS方式接入时，支持使用服务端单向认证、设备端OCSP、设备和服务端双向安全接入等...
错误码
E40 套接字路径不存在 Enclave CLI在管理Enclave时会根据Enclave ID生成和Enclave管理进程通信的套接字路径，该错误码表示此套接字路径不存在，可能原因是Enclave管理进程运行异常，请查看报错回溯信息以获取更多细节。E41 Enclave管理进程...
弹性并行查询（Elastic Parallel Query）常见问题
并行查询的执行分为1个leader线程和多个worker线程，worker线程负责并行计算，leader线程负责汇聚结果并返回。一个查询语句中并不是所有算子都能下推到worker上执行，部分算子会留在leader上执行，如果留在leader上执行的算子比较耗时，就...
告警规则指标说明
在多线程编程中，当队列大小过小时，可能会导致任务排队等待的时间过长，从而降低程序的性能；而当队列大小过大时，可能会导致系统资源的消耗过多，从而导致系统崩溃或者性能下降。当前线程数 是 正在运行或等待运行的线程数量。已执行任务...
使用HPL测试集群浮点性能
P和Q的取值一般遵循以下规律：P≤Q，一般情况下P的取值小于Q，因为列向通信量（通信次数和通信数据量）要远大于横向通信。P建议选择2的幂。HPL中水平方向通信采用二元交换法（Binary Exchange），当水平方向处理器个数P为2的幂时性能最优。...
使用AIACC-Training MXNet版
开源版本MXNet会默认占据系统所有的CPU资源，因此在最初的启动阶段，会占用较多的CPU时间，启动速度较慢。您可以通过设置以下环境变量解决该问题。export MXNET_USE_OPERATOR_TUNING=0 export MXNET_USE_NUM_CORES_OPERATOR_TUNING=1 ...
日志类别及字段说明
通过记录和分析进程启动日志，您可以了解系统中进程的启动情况和配置信息，检测异常进程活动、恶意软件入侵和安全威胁等问题。实时采集，进程启动立刻上报。暴力破解日志 aegis-log-crack 记录暴力破解行为的日志，包括尝试登录及破解系统...
Linux实例负载高问题排查和异常处理
sar是Linux系统中较为全面的性能分析工具，可以从多个方面对系统的活动进行监控和报告，包括文件读写情况、系统调用使用情况、串口、CPU效率、内存使用情况、进程活动及IPC（Inter-Process Communication，进程间通信）等。安装sar工具 ...
参数配置
本文为您介绍FE、BE、Broker以及系统参数的部分配置项以及修改方式。...bdbje_replica_ack_timeout_second 10 BDBJE Master等待足够多的FOLLOWER ACK的最长时间c master_sync_policy SYNC Master日志刷盘的方式，默认是SYNC。replica...
热修复支持多进程么？
支持多进程。主进程和子进程都会加载补丁，补丁的下载和预加载只会在主进程里处理。
参数配置
本文介绍了Serverless StarRocks FE和BE的参数配置。根据参数的生效方式，它们被划分为静态参数和动态参数两类。静态参数在修改后需要重新启动服务才能生效，而动态参数则允许立即生效，无需重新启动服务。FE动态参数 LOG相关配置 参数 ...
BE参数配置
本文介绍BE进程的相关配置项。背景信息 BE进程的配置文件be.conf通常存放在BE部署路径的 conf/目录下。而在0.14版本中会引入另一个配置文件be_custom.conf。该配置文件用于记录您在运行时动态配置并持久化的配置项。BE进程启动后，会先读取...
Java SDK
无 优化 Server端性能优化，和客户端通信同步改成异步，并优化了akka默认 dispatcher 的配置。使用1.1.0版本客户端，心跳性能优化提高3倍。前端任务管理列表重新设计，可以看到更多信息。修复分布式拉模型，全局子任务可能不起作用。修复...
历史记录
优化 Server端性能优化，和客户端通信同步改成异步，并优化了akka默认 dispatcher 的配置。使用1.1.0版本客户端，心跳性能优化提高3倍。前端任务管理列表重新设计，可以看到更多信息。1.0.9，2019-11-28 新特性 增加 BlockAppStart 配置。...
RDS MySQL 8.0开放参数一览表
您可以在这里了解到截止到发表日MySQL 8.0所有已开放的参数信息。说明 参数说明内容来自MySQL官方社区。参数名称 大版本 是否 动态参数 默认值 ...该变量限制每个线程的缓存树的大小（以字节为单位）。将其设置为0会禁用此优化。默认值为8MB。...
RDS MySQL开放参数一览表
您可以在这里了解到截止到发表日MySQL5.7、MySQL8.0所有已开放的参数信息。说明 参数说明内容来自MySQL官方社区。各版本参数说明目录如下：...该变量限制每个线程的缓存树的大小（以字节为单位）。将其设置为0会禁用此优化。默认值为8MB。...
使用Prometheus监控E-MapReduce
impala_impala_thrift_server_CatalogService_svc_thread_wait_time_99_9th Catalog Service的客户端对服务线程的等待时间，单位：ms。impala_impala_thrift_server_CatalogService_connection_setup_time_99_9th 99%的Catalog Service客户...
使用Prometheus监控E-MapReduce
impala_impala_thrift_server_CatalogService_svc_thread_wait_time_99_9th Catalog Service的客户端对服务线程的等待时间，单位：ms。impala_impala_thrift_server_CatalogService_connection_setup_time_99_9th 99%的Catalog Service客户...
NetACC使用说明
netacc_ss-p 12345-s mem,cnt 使用 NetACC监控 命令如下：netacc_ss-s sock-p<进程ID>说明 您可以通过 ps-ef|grep<进程名称>命令查询进程ID，本文示例的进程名称为 redis-server。在Server端和Client端均可以执行该命令进行监测。在 Server...
发布日志
优化多次快速离会和入会代码逻辑，修复快速离会和入会导致的报错和误报问题。修复远端数据回调个别参数没有设置问题。补充SDK错误回调埋点。删除信令心跳超时错误类型。V1.17.30@2020-11-14 新增伴奏音乐时长获取、播放进度查询、播放进度...
功能发布记录（2.0）
优化多次快速离会和入会代码逻辑，修复快速离会和入会导致的报错和误报问题。修复远端数据回调个别参数没有设置问题。补充SDK错误回调埋点。删除信令心跳超时错误类型。V1.17.30@2020-11-14 新增伴奏音乐时长获取、播放进度查询、播放进度...
- 产品推荐
- 这些文档可能帮助您