Hive作业调优
另外，有多少个Reduce，就会有多少个输出文件，如果生成了很多个小文件，并且这些小文件作为下一个任务的输入，则会出现小文件过多的问题。并行运行 并行运行表示同步执行Hive的多个阶段。Hive在执行过程中，将一个查询转化成一个或者多个...
Echarts 堆叠条形图
图表样式 Echarts 堆叠条形图是条形图的一种，支持自定义x轴区间、多系列数据配置以及堆叠式的数据展示，可以在较小的可视化应用空间内，智能地展示多维的数据差异。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 ...
图算法
图计算服务GraphCompute新增图算法分析功能，提供分析查询一体化解决方案，方便用户快速进行全图数据分析。功能介绍 图计算服务GraphCompute新增图算法功能，基于当前服务的数据进行算法执行，方便用户快速进行全图数据的分析。只需要开通...
弹性管理（含预留模式）
在预留模式下，您可以通过定时修改限制和根据指标修改限制两种方式解决预留实例利用不充分的问题。实例伸缩限制 配置按量模式实例的伸缩限制 在处理函数调用请求时，函数计算 会优先使用已有的可用实例。若当前实例已经满载，函数计算 会...
查看作业性能
您可以查看运行中作业的性能，包括Job Manager与运行Task Managers的CPU、内存和线程的使用情况，这可以协助您定位代码问题，例如作业代码是否存在问题、个别类是否初始化比较慢、个别类是否占用资源比较多等问题。本文为您介绍如何查看...
内建函数概述
每一行数据都会对应一个窗口函数的结果值，当前行是指在给哪一行数据计算窗口函数的结果。offset PRECEDING 指从当前行位置，向分区头部位置移动 offset 行的位置。例如 0 PRECEDING 指当前行，1 PRECEDING 指前一行。offset 必须为非负...
文章相似度
id col0 col1 output 1 北京 上海 北京 上海 深圳 0.6666666666666667 0 北京 上海 北京 上海 1.0 常见问题 相似度计算是基于分词的结果，即以空格分割的每个词作为相似度计算的一个单位。如果是以字符串整体输入，需要使用字符串相似度...
逻辑回归二分类
一、组件说明 逻辑回归通过将线性回归模型的输出通过Sigmoid函数进行映射，将连续的预测值转换为概率值。Sigmoid函数具有“S”形状，可以将任意实数值映射为0和1之间的概率值，表示样本属于正例的概率。逻辑回归的训练过程是利用最大似然...
实时推理场景
模型服务预热 为了解决模型上线后初次请求耗时较长的问题，函数计算为您提供了模型预热的功能。模型预热的目的是使模型上线后即可进入正常的服务状态。函数计算推荐您配置实例的 initialize 生命周期回调功能来实现模型预热，函数计算会在...
公告
升级前后对比如下：升级前 如果MaxCompute的项目默认计算资源选择的是包年包月计算资源，则项目的生命周期和这个包年包月计算资源的生命周期同步，项目设置默认计算资源请参见 计算资源使用。即当对应包年包月的计算资源到期时，项目会被停...
企业级状态后端存储配置
Boolean true 参数取值如下：true：系统将自动根据Managed Memory和task slot数计算每个Backend的内存。false：每个Backend的内存大小将设置为 state.backend.gemini.total.writebuffer.size 和 state.backend.gemini.offheap.size 参数...
作业状态集管理
但无法手动创建和删除系统检查点，作业会默认保留一个系统检查点作为作业恢复时可选择的状态集中的一部分。参数配置操作详情请参见 配置作业部署信息。作业快照（对应Apache Flink中的Savepoint）生命周期完全由用户管理，具体表现在以下...
聚合函数
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。聚合函数语法 聚合函数的语法声明如下。([,.])[within group(order by[,…])][filter(where)]([,.])：内建...
错误处理
错误类型 捕获异常 如果函数在执行过程中抛出异常，函数计算会捕获到错误，并生成一个包含错误信息、类型和堆栈信息的JSON格式的数据，示例如下所示。ES模块 说明 此示例仅支持运行在Node.js 18及以上版本的运行时环境。当前示例代码支持一...
QueryMinSlideWindow
在构建索引时，字段分词之后，OpenSearch会为每一个词组分配一个位置ID（每个字段都从0开始）。例如字段title的分词之后为：开放 搜索 用户 手册，位置ID分别为0、1、2、3。假设查询词分词之后为：搜索 手册，那么在计算...
什么是函数计算
视频介绍 什么是函数计算 函数计算 是Serverless架构的一种形态，面向函数编程，基于事件驱动提供阿里云云服务之间端到端的解决方案。借助 函数计算，您可以快速构建任何类型的应用和服务，并且只需为任务实际消耗的资源付费。什么是...
什么是函数计算
视频介绍 什么是函数计算 函数计算 是Serverless架构的一种形态，面向函数编程，基于事件驱动提供阿里云云服务之间端到端的解决方案。借助 函数计算，您可以快速构建任何类型的应用和函数，并且只需为任务实际消耗的资源付费。什么是...
基本概念
实例 实例是指用户创建的针对多个数据进行同一类型AI计算所创建的一个计算任务。设备 设备指IPC、NVR等能产生视频数据的相关设备，该设备同时符合GB/T28181-2016、GA/T1400协议，或者集成阿里云VCS SDK。设备接入 设备接入是指用户需要计算...
新用户免费试用额度
免费试用额度介绍 目前MaxCompute的免费试用套餐包括 计算抵扣包 和 存储抵扣包，仅支持抵扣MaxCompute按量付费标准版的计算和标准存储，对于其他下载或包年包月版本产生的相关费用无法抵扣。MaxCompute为您提供的免费额度如下：抵扣包类型...
售后服务
您可以在物联网边缘计算的售后服务页面反馈您购买的边缘一体机的售后问题。售后服务范围 边缘一体机自身的硬件、固件和配件问题。边缘一体机中部署的软件问题。边缘一体机与终端设备的连接、数据传输、数据加工相关问题。申请售后服务 登录...
Cromwell 工作流引擎支持
Call Caching Call Caching 是 Cromwell 提供的高级特性，如果检测到工作流中某个 task（对应一个批量计算的 job）和之前已经执行过的某个 task 具有相同的输入和运行时等条件，则不需要再执行，直接取之前的运行结果，这样可以为客户节省...
配置相邻消息计算
通过表达式或筛选器节点解析源节点数据后，可使用相邻消息计算节点，取当前消息的某个数值字段的值（仅支持BIGINT、DOUBLE类型）与前一条消息的相同数值字段的值，按照定义的表达式进行计算，将计算的结果输出到定义的输出字段上。...
函数
函数是用来在SQL语句中执行特定操作的编程构件，包括内建函数和用户自定义函数（User Defined Function，以下简称UDF）。MaxCompute为您提供了SQL计算功能，您可以在MaxCompute SQL中使用系统的 内建函数 完成一定的计算和计数功能。但当内...
API概览
CreateEaiEcs 创建EAIS实例并绑定至客户端实例 创建一个弹性加速计算实例和一个客户端ECS实例，并将弹性加速计算实例绑定到ECS实例上。CreateEaiEci 创建EAIS实例并绑定至客户端实例 创建一个弹性加速计算实例和一个客户端ECI实例，并将...
One-Hot编码
注意：One-Hot编码会增加数据集的维度，导致稀疏性问题和计算复杂度的增加，因此在实际应用中需要根据数据集大小和模型的性能需求进行权衡和选择。组件截图 二、参数说明 参数名称 参数说明 选择编码字段 选择需要进行One-Hot的字段。只可...
横向One-Hot编码
注意：横向One-Hot编码会增加数据集的维度，导致稀疏性问题和计算复杂度的增加，因此在实际应用中需要根据数据集大小和模型的性能需求进行权衡和选择。组件截图 二、参数说明 参数名称 参数说明 选择编码字段 选择需要进行横向One-Hot的...
ECS选型最佳实践
c：表示计算型（computational）处理器与内存配比为1:2，适用于数据库、Web服务器、高性能科学和工程应用、游戏服、数据分析、批量计算、视频编码、机器学习等场景。g：表示通用型（general）处理器与内存配比为1:4，适用于通用互联网应用...
XGBOOST回归
一、组件说明 XGBoost是一种基于梯度提升决策树（Gradient Boosting Decision Tree）的机器学习算法。它通过改进传统梯度提升决策树的方式，加入正则化项、特征子采样和并行化等优化技术。XGBoost的优点是能够自动处理缺失值、异常值和噪声...
电子表格支持函数说明
LCM 返回一个或多个整数的最小公倍数。LN 返回数值以 e（欧拉数）为底的对数。LOG 返回数值以指定数为底的对数。LOG10 返回数值以 10 为底的对数。MMULT 计算给定数组或范围所对应的两个矩阵的矩阵乘积。MOD 返回取模运算的结果，即除法...
CREATE CONTINUOUS QUERY
示例 以下示例创建了一个持续查询：每小时计算过去两个小时内原始时序表 sensor 中的每小时平均温度和每小时平均湿度，并将数据写入数据库 default 中的表 sensor 中。CREATE CONTINUOUS QUERY `default`.`my_cq` WITH(`INTERVAL`='1h',`...
XGBOOST多分类
一、组件说明 XGBoost是一种基于梯度提升决策树（Gradient Boosting Decision Tree）的机器学习算法。它通过改进传统梯度提升决策树的方式，加入正则化项、特征子采样和并行化等优化技术。XGBoost的优点是能够自动处理缺失值、异常值和噪声...
XGBOOST二分类
一、组件说明 XGBoost是一种基于梯度提升决策树（Gradient Boosting Decision Tree）的机器学习算法。它通过改进传统梯度提升决策树的方式，加入正则化项、特征子采样和并行化等优化技术。XGBoost的优点是能够自动处理缺失值、异常值和噪声...
GetAutoScaleConfig-获取自动伸缩配置信息
如果某一轮次需扩容节点数量小于所设置的最小计算节点数，自动伸缩为保证资源的正常交付，会将该轮次的最小计算节点数自动调整为当前轮次需要扩容节点数量。说明 该调整仅对当前轮次的最小计算节点数生效。5 AutoMinNodesPerCycle boolean ...
方差膨胀系数VIF
一、组件说明 方差膨胀系数（VIF）是用于检测多元回归模型中自变量之间多重共线性的指标。VIF是一个统计量，衡量自变量之间线性相关性的强度。如果一个自变量与其他自变量高度相关，则该自变量对响应变量的贡献将受到其他自变量的影响，这...
配置自动伸缩
自动伸缩可以根据您配置的伸缩策略动态分配计算节点，实现根据实时负载自动增加或减少计算节点，以提高集群可用性，降低使用成本。本文介绍如何配置自动伸缩。功能优势 根据实时负载，自动增加计算节点，提高集群的可用性。在保证集群可用...
管理SLS日志的监控指标
前提条件 请确保您已在日志服务SLS中创建日志项目（Project）和日志库（Logstore）。具体操作，请参见 快速入门。请确保您已创建指标仓库。具体操作，请参见 创建指标仓库。创建监控指标 登录 云监控控制台。在左侧导航栏，选择 企业云监控...
数据滤波
一阶滞后滤波：对输入信号做一阶滞后滤波操作，根据当前输入信号和前一时刻输出信号的加权平均来计算输出信号。最大值滤波：对输入信号做最大值滤波操作，取采样数据的最大值。最小值滤波：对输入信号做最小值滤波操作，取采样数据的最小值...
SetAutoScaleConfig-设置自动伸缩配置信息
如果某一轮次需扩容节点数量小于所设置的最小计算节点数，自动伸缩为保证资源的正常交付，会将该轮次的最小计算节点数自动调整为当前轮次需要扩容节点数量。说明 该调整仅对当前轮次的最小计算节点数生效。5 AutoMinNodesPerCycle boolean ...
滤波
一阶滞后滤波：对输入信号做一阶滞后滤波操作，根据当前输入信号和前一时刻输出信号的加权平均来计算输出信号。最大值滤波：对输入信号做最大值滤波操作，取采样数据的最大值。最小值滤波：对输入信号做最小值滤波操作，取采样数据的最小值...
Multi-Cluster弹性模型
Multi-Cluster弹性模型由一个或者多个Cluster组成，可根据业务负载自动对资源进行扩缩容，满足资源组内部的资源隔离和高并发场景。什么是Multi-Cluster资源组 未开启Multi-Cluster功能时，一个资源组仅有一个Cluster执行查询。当查询任务...
- 产品推荐
- 这些文档可能帮助您