请求处理程序（Handler）
对于C#语言的 FC 函数，其请求处理程序的格式为 程序集名称:命名空间.类名:方法名（Assembly:Namespace.ClassName:MethodName）。参数 说明 Assembly 创建的程序集的名称。Namespace 命名空间名称。ClassName 类名。MethodName 方法名。...
工作流
简介 工作流旨在将大部分媒体处理功能流程化、实例化，用户可提前构建自定义处理流程，并将指定视频按照特定工作流程进行处理，避免用户重复、繁琐的调用接口，提供一站式的媒体处理服务。同时，工作流提供了丰富的条件判断机制，可自定义...
请求处理程序（Handler）
对于C#语言的 FC 函数，其请求处理程序的格式为 程序集名称:命名空间.类名:方法名（Assembly:Namespace.ClassName:MethodName）。参数 说明 Assembly 创建的程序集的名称。Namespace 命名空间名称。ClassName 类名。MethodName 方法名。...
代码开发概述
请求处理程序（Handler）事件请求处理程序（Event Handler）HTTP请求处理程序（HTTP Handler）上下文 编译部署代码包 日志 错误处理 函数实例生命周期回调方法 链路追踪 C#环境说明 请求处理程序（Handler）事件请求处理程序（Event ...
LLM-MD5去重
LLM-MD5去重组件主要用于大语言模型（LLM）的文本数据预处理工作，可以计算文本的MD5哈希值，根据哈希值对文本进行去重。使用限制 仅支持MaxCompute计算引擎。算法简介 对所有输入的文本数据使用 hashlib.md5 哈希算法计算哈希值。哈希值...
LLM-文本标准化
LLM-文本标准化组件主要用于大语言模型（LLM）的文本数据预处理工作，可以将文本Unicode标准化以及繁体转简体。使用限制 仅支持MaxCompute计算引擎。算法简介 LLM-文本标准化组件支持以下功能：将Unicode文本标准化，使用NFKC的方式标准化...
LLM-删除LaTeX参考文献
LLM-删除LaTeX参考文献组件主要用于大语言模型（LLM）的文本数据预处理工作，适用于TEX文档格式数据。主要功能是删除LaTeX格式文本末尾的参考文献。支持的 计算资源 MaxCompute 算法说明 定义LaTeX格式文本参考文献的正则表达式为：r'(\\...
LLM-删除LaTeX注释行
LLM-删除LaTeX注释行组件主要用于大语言模型（LLM）的文本数据预处理工作，适用于TEX文档格式数据。主要功能是删除LaTeX格式文本中的注释行以及行内注释。支持的 计算资源 MaxCompute 算法说明 定义LaTeX格式文本注释行的正则表达式如下：...
任务配置
平台可支撑自动驾驶生产线的全流程工作，包括 数据导入、数据标准化、数据预处理、数据预标注、人工标注、数据输出 等。您可拖拽所需任务节点，为其设置属性后，通过连线来快速构建所需工作流，并为其配置调度方式。任务流配置说明 数据...
入门概述
数据准备与预处理 对原始数据进行预处理，生成模型训练集和模型预测集。数据可视化 对源数据或中间结果数据进行可视化处理，以获取数据分析结果。算法建模 使用符合业务场景的算法组件，加上预处理后的数据训练集进行算法建模。评估模型 ...
数据准备与预处理
本示例的数据预处理主要包括三个处理流程：将原始数据表中，取值为非数值类型的字段，通过SQL替换为数值类型的取值，以保证此预处理后，表中所有字段的取值都是数值类型。将表中字段转换为double类型，以保证此预处理后，表中字段均满足...
0040-00000373
问题描述 在使用新版本图片服务对图片添加图片水印时，设置的图片水印预处理相关参数格式无效。问题原因 image参数值经Base64解码后的图片水印预处理相关参数中（x-oss-process）出现了/watermark（水印嵌套）。问题示例 GET/example_image...
LLM大语言模型端到端链路：数据处理+模型训练+模型...
更详细的数据预处理流程，请参见 LLM数据处理。② 进行模型训练和离线推理。其中：LLM模型训练组件 该组件封装了 快速开始（QuickStart）提供的LLM模型，底层计算基于DLC容器任务。单击该组件，在右侧的 字段设置 页签可以选择 模型名称。...
I2C设备驱动程序开发指南
start_xfer 回调函数或中断处理程序可访问 i2c 指向的如下成员变量获取或修改传输信息：x.flags：uint32_t 类型，可包含如下字段，各字段使用按位或运算连接：AOS_I2C_XF_MSG_HEAD：表示当前transfer是message中的第一个transfer。...
数据集加速器概述
创建加速槽，系统会根据数据类型、数据大小、训练的框架及模型等因素，对关联的数据集数据进行数据预处理。在完成加速初始化工作后，数据集加速器会提供相关接口，供训练任务直接使用。在PAI平台使用数据集加速器 在 PAI 平台创建数据集时...
环境说明
使用限制 C#语言与Python、Node.js等脚本型语言不同。函数计算 仅支持通过 上传 ZIP 包、上传文件夹 或 通过 OSS 上传 方式上传编译打包后的代码，不提供C#语言在线编译的能力。C#运行时 函数计算 目前支持的C#运行时环境如下。NET版本 ...
代码开发概述
部署代码包 日志 错误处理 函数实例生命周期回调方法 Java 环境说明 请求处理程序（Handler）上下文 编译部署代码包 日志 错误处理 函数实例生命周期回调方法 C#环境说明 请求处理程序（Handler）上下文 编译部署代码包 日志 错误处理 函数...
产品功能相关
文档智能是文字识别技术的进一步升级，除了文字识别，文档智能还综合运用自然语言处理、图像处理、电子文档解析、文档预训练模型等多种技术，实现对PDF/Word/Excel/图片等各类非结构化和半结构化文档的智能自动化处理。相较于文字识别只能...
环境说明
使用限制 C#语言与Python、Node.js等脚本型语言不同。函数计算 仅支持通过 上传 ZIP 包、上传文件夹 或 通过 OSS 上传 方式上传编译打包后的代码，不提供C#语言在线编译的能力。C#运行时 函数计算 目前支持的C#运行时环境如下。NET版本 ...
基础信息
本文介绍使用 函数计算 编写代码相关的基础概念信息，包括请求处理程序、函数实例生命周期回调方法、日志记录和错误处理等。请求处理程序 在创建函数时，您需要指定请求处理程序。函数计算 的运行时会加载并调用您的请求处理程序处理请求。...
工作流概述
工作流指媒体处理中的云端自动化处理工作流，音视频上传完毕后自动执行处理流程。本文介绍工作流的基本概念及使用方式。功能概览 基本概念 基本概念 说明 媒体工作流（MediaWorkflow）工作流是预先编排好的一系列任务流程，可以实现在指定...
无侵入观测概述
采集原理 Logtail无侵入监控的采集程序工作空间包括Kernel Space与User Space。Kernel Space用于抓取和预处理数据。抓取：Kernel Hook模块会根据KProbe的定义，拦截网络数据。用于拦截的KProbe内核函数包括connect、accept、write等。预...
Prepared语句
接着通过EXECUTE语句执行指定的预处理语句，如果预处理语句包含参数占位符的话，必须用USING子句指定用户定义变量作为参数。EXECUTE stmt_name[USING@var_name[,@var_name].];最后通过DEALLOCATE PREPARE语句来释放清理预处理语句。...
心脏病预测
本工作流的输入数据包括14个特征列和1个目标列，在数据预处理过程中，需要根据每个字段的含义将字符类型转化为数值类型。其中：二值类数据：以 sex 字段为例，其取值为 female 或 male，可以使用 0 表示 female，1 表示 male。多值类数据：...
LLM数据处理
本文以开源项目RedPajama在GitHub中的少量数据为例，为您介绍如何使用PAI提供的LLM大语言模型数据处理组件，对GitHub代码数据进行数据清洗和处理。前提条件 已创建工作空间，详情请参见 创建工作空间。已将MaxCompute资源关联到工作空间，...
读配置文件
一、组件说明 用户建模完成之后，数据预处理、特征生成的结果可能会被用于不同任务中去。DataTrust支持数据预处理、特征生成的配置项在平台上的复用，用于不同训练、预测、评估类任务。组件截图 二、参数说明 参数名称 参数说明 选择配置...
实践教程
NLP自然语言处理 NLP自然语言处理-教程 NLP自学习平台 自学习平台使用流程 企业智能搜索 实践教程
什么是ECS备份基础版
本文介绍 云备份 ECS备份基础版的功能概览，包括简介、优势、工作原理、操作流程和费用等。简介 ECS备份基础版是阿里云 云备份 针对ECS数据保护场景全新推出的预付费商品，可以对ECS实例上的文件、自建数据库（MySQL/Oracle/SQL Server）、...
EMR Workbench
EMR Workflow 工作流设计：通过可视化界面设计和管理数据处理流程。任务调度：支持定时执行任务，自动化复杂的工作流程。依赖管理：自动处理工作流中任务间的依赖关系。监控与日志：实时监控工作流执行状态，记录详细的日志信息。快速入门 ...
使用流程
本文介绍了联邦模型开发总体流程和基于联邦建模控制台开发联邦模型的流程。联邦建模是蚂蚁隐私计算服务...创建联邦表 数据预处理 模型训练 预处理应用 模型评估 保存模型，请参见 保存模型。说明 关于联邦模型开发的更多信息请参见 联邦建模。
什么是文档智能
文档智能深度融合文字识别、自然语言处理、图像处理、电子文档解析、文档预训练模型等多项技术，对非结构化和半结构化文档进行智能自动化处理，从而简化业务操作流程、提升文档处理效率。选择文档智能，您可以高效完成以下文档处理任务：...
特征工程
节点 描述 1 物料表预处理：将Tag特征分隔符替换为 chr(29)供后续特征生成步骤（FG）使用。产出是否是新上架物料的特征。2 行为表预处理：产出day_h、week_day等行为时间的衍生特征。3 用户表预处理：产出是否是新注册用户的特征。将Tag...
基础信息
本文介绍使用 函数计算 编写代码相关的基础概念信息，包括请求处理程序、函数实例生命周期回调方法、日志记录和错误处理等。请求处理程序 在创建函数时，您需要指定请求处理程序。函数计算 的运行时会加载并调用您的请求处理程序处理请求。...
事件请求处理程序（Event Handler）
本文介绍Java事件请求处理程序的结构特点和示例。处理程序接口 您在使用Java编程时，必须要实现 函数计算 提供的接口类，fc-java-core 库为事件请求处理程序定义了以下两个接口。StreamRequestHandler 以流的方式接收输入的 event 事件并...
数据集成概述
数据集成是基于Dataphin构建的简单高效的数据同步平台，致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量...
请求处理程序（Handler）
什么是请求处理程序 FC 函数的请求处理程序，是函数代码中处理请求的方法。当您的 FC 函数被调用时，函数计算 会运行您提供的Handler方法处理请求。您可以通过 函数计算控制台 的 请求处理程序 配置Handler。对PHP语言的 FC 函数而言，您的...
常见问题
云工作流的工作原理是什么？云工作流的优势是什么？云工作流最长执行多长时间？怎么执行云工作流？云工作流使用什么语言编写流程？云工作流是集成了云监控？云工作流是否集成了事件源？什么是 云工作流？云工作流 是一个用来协调多个分布式...
请求处理程序（Handler）
您可以使用Java请求处理程序响应接收到的事件并执行相应的业务逻辑。本文介绍Java请求处理程序的相关概念、结构特点和示例。说明 如您需要通过HTTP触发器或自定义域名访问函数，请先获取请求结构体再自定义HTTP响应。更多信息，请参见 HTTP...
HaaS EDU场景式应用整体介绍
HaaS EDU K1中就包含了一个数字气压传感器，本案例中包括以下主要知识点：SPL06大气压传感器工作原理与使用 I2C通信实战 气压与海拔简单算法 OLED绘图 通过本案例的学习，能完整的学习到大气压传感器的原理和使用，AliOS Things中气压传感...
事件请求处理程序（Event Handler）
与 函数计算控制台 配置的 请求处理程序 相对应。例如，为 FC 函数配置的 请求处理程序 为 index.handler，那么 函数计算 会去加载 index.php 中定义的 handler 函数，并从 handler 函数开始执行。event：您调用函数时传入的参数，其数据...
- 产品推荐
- 这些文档可能帮助您