阿里云文档 2024-11-29

微调、部署并实现Llama-3.1模型的高效推理

阿里云PAI灵骏智算服务是面向大规模深度学习场景的智算产品,提供一站式的异构计算资源和AI工程化平台。本方案将为您介绍如何使用阿里云PAI灵骏智算服务,以及基于Meta-Llama-3.1-8B的开源模型和Megatron的训练流程,进行模型微调、离线推理验证,并实现在线服务部署。

阿里云文档 2024-11-15

大语言模型数据增强与模型蒸馏解决方案

大语言模型的训练和推理过程存在高能耗及长响应时间等问题,这些问题限制了其在资源有限场景中使用。为了解决这些问题,PAI提出了模型蒸馏功能。该功能支持将大模型知识迁移到较小模型,从而在保留大部分性能的同时,大幅降低模型的规模和对计算资源的需求,为更多的实际应用场景提供支持。本文将以通义千问2(Qwen2)大语言模型为基础,为您介绍大语言模型数据增强和蒸馏解决方案的完整开发流程。

阿里云文档 2024-11-15

大语言模型数据增强与模型蒸馏解决方案

大语言模型的训练和推理过程存在高能耗及长响应时间等问题,这些问题限制了其在资源有限场景中使用。为了解决这些问题,PAI提出了模型蒸馏功能。该功能支持将大模型知识迁移到较小模型,从而在保留大部分性能的同时,大幅降低模型的规模和对计算资源的需求,为更多的实际应用场景提供支持。本文将以通义千问2(Qwen2)大语言模型为基础,为您介绍大语言模型数据增强和蒸馏解决方案的完整开发流程。

阿里云文档 2024-10-22

大模型评测

大模型评测

阿里云文档 2024-10-18

EAS模型在线服务预标注

iTAG支持在线模型服务预标注,创建EAS模型在线服务后,您可以在模型服务中完成注册,然后在创建任务的时候利用模型服务进行预标注。

问答 2024-08-26 来自:开发者社区

在机器学习PAI中,模型 predict 有个报错,是什么原因?

在机器学习PAI中,模型 predict 有个报错,是什么原因?

问答 2024-07-25 来自:开发者社区

机器学习PAI训练模型的时候有个 tf 的报错,可以帮忙看下吗?

机器学习PAI训练模型的时候有个 tf 的报错,可以帮忙看下吗?https://logview.alibaba-inc.com/logview/?h=http://service.ali-sg-lazada.odps.aliyun-inc.com/api&p=aliexpress_ru_sg&i=20240718065351761g7w2p8tg7w6_9ab144da_61a4_...

问答 2024-06-10 来自:开发者社区

机器学习PAI eas部署 hugging face 模型,为什么一直报错 找不到模型文件呢?

机器学习PAI eas部署 hugging face 模型,为什么一直报错 找不到模型文件呢?但是 hf社区里 模型文件是有的

问答 2024-05-03 来自:开发者社区

请教一下机器学习PAI,向模型发送请求,单个item可以有打分,两个item报错,是如何修改吗?

请教一下机器学习PAI,向模型发送请求,单个item可以有打分,两个item报错,是如何修改吗?[2024-04-24 14:04:05] [[{{node input_layer_1/clk_ad_cate_seq_weighted_by_clk_ad_cate_seq_w_embedding/clk_ad_cate_seq_weighted_by_clk_ad_cate_seq_w_e...

文章 2024-03-25 来自:开发者社区

机器学习PAI常见问题之训练模型报错如何解决

问题一:机器学习PAI中feature-generate-mr里面,有处理序列特征时间差的部分吗? 机器学习PAI中feature-generate-mr里面,有处理序列特征时间差的部分吗?还是这个只能生成后再sql处理? 参考回答: 提前处理,生成序列特征的时候就计算好时间差; fg的mr任务里是不会做这种逻辑的 关于本问题的更多...

机器学习PAI常见问题之训练模型报错如何解决

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

人工智能平台PAI

人工智能平台 PAI(Platform for AI,原机器学习平台PAI)是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务,内置140+种优化算法,具备丰富的行业场景插件,为用户提供低门槛、高性能的云原生AI工程化能力。

+关注