阿里云文档 2025-08-13

基于ACK多机分布式部署DeepSeek满血版推理部署实战

本文深入解析基于阿里云容器服务ACK的DeepSeek-R1-671B大模型分布式推理实战方案。针对该千亿参数模型(671B)单卡显存不足的挑战,提出混合并行策略(Pipeline Parallelism=2 + Tensor Parallelism=8),结合阿里云Arena工具,实现在2台ecs.ebmgn8v.48xlarge(8*96GB)节点上的高效分布式部署。进一步演示如何将部署于AC...

文章 2024-04-23 来自:开发者社区

【AI大模型应用开发】2.1 Function Calling连接外部世界 - 入门与实战(1)

Function Calling是大模型连接外部世界的通道,目前出现的插件(Plugins )、OpenAI的Actions、各个大模型平台中出现的tools工具集,其实都是Function Calling的范畴。时下大火的OpenAI的GPTs,原理就是使用了Function Calling,例如联网检索、code interpreter。 本文带大家了解下Function calli...

【AI大模型应用开发】2.1 Function Calling连接外部世界 - 入门与实战(1)
文章 2024-01-24 来自:开发者社区

【利用AI让知识体系化】入门Egg框架(含实战)(三)

【利用AI让知识体系化】入门Egg框架(含实战)(二)https://developer.aliyun.com/article/1426069第四章:中级开发4.1 中间件和插件Egg.js 是一个基于 Node.js 和 Koa.js 的框架,它提供了丰富的插件和中间件,使开发者可以更加方便地构建 Web 应用程序。其中,插件和中间件的概念如下:中间件:在 Egg.js 中,中间件指的是一个函....

文章 2024-01-24 来自:开发者社区

【利用AI让知识体系化】入门Egg框架(含实战)(二)

【利用AI让知识体系化】入门Egg框架(含实战)(一)https://developer.aliyun.com/article/14260683.2 模板渲染和视图在 Egg.js 应用中,模板渲染和视图也是实现页面展示和用户交互的重要组成部分。模板渲染Egg.js 默认使用模板引擎 nunjucks,支持多种模板文件格式,如 .html、 .nunjucks 和 .nj 等。在 Egg.js ....

文章 2024-01-24 来自:开发者社区

【利用AI让知识体系化】入门Egg框架(含实战)(一)

思维导图第一章:概述1.1 Egg.js 简介Egg.js 是一个基于 Node.js 和 Koa 的企业级应用开发框架,它可以帮助开发者快速构建高品质的应用程序。Egg.js借鉴了 Ruby on Rails 和 Laravel 的一些概念,采用了简约的设计风格和约定优于配置的开发模式,为开发者提供了一种更加高效、可靠的开发方式。Egg.js 框架的主要特点包括:快速上手 - 提供了丰富的脚手....

【利用AI让知识体系化】入门Egg框架(含实战)(一)
文章 2022-09-05 来自:开发者社区

Serverless 架构下的 AI 应用开发:入门、实战与性能优化

作者:Serverless随着时间的推移,Serverless 架构变得越来越火热,凭借着极致弹性、按量付费、低成本运维等特性,在很多领域发挥着越来越重要的作用;机器学习领域在近些年也非常火热,并在越来越多的行业中得到应用。实际上,机器学习项目中一直存在两大难题:资源占用率高、利用率低,尤其在流量波峰和波谷差值较大的项目中,资源浪费更为显著;部署、更新、维护复杂度高;而 Serverless 具....

Serverless 架构下的 AI 应用开发:入门、实战与性能优化

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

{"cardStyle":"activityCardStyle","productCardInfo":{"productTitle":"","productDescription":"","productContentLink":"","isDisplayProductIcon":true,"isOfficialLogo":false},"activityCardInfo":{"activityTitle":"AI 编码","activityDescription":"百万 Qwen-coder 大模型 tokens 免费体验,灵码79元起,加速 AI 应用落地 ","cardContentBackgroundMode":"LightMode","activityContentBackgroundImageLink":"","activityCardBottomInfoSelect":"activityPromotionInfoBlock","activityButton1":{"activityButtonText":"查看详情","activityButtonLink":"https://www.aliyun.com/benefit/scene/coding"},"activityButton2":{"activityButtonText":"立即体验","activityButtonLink":"https://bailian.console.aliyun.com/?spm=5176.30202035.J_VanPN1KXIVRyCVhZMwQ6t.6.1b791e71pokqL0&tab=model#/efm/model_experience_center/text?currentTab=textChat&modelId=qwen3-coder-plus"},"activityButton3":{"activityButtonText":"立即购买","activityButtonLink":"https://www.aliyun.com/benefit/scene/coding#J_1"}}}
AI 编码
百万 Qwen-coder 大模型 tokens 免费体验,灵码79元起,加速 AI 应用落地

阿里云机器学习平台PAI

阿里云机器学习PAI(Platform of Artificial Intelligence)面向企业及开发者,提供轻量化、高性价比的云原生机器学习平台,涵盖PAI-iTAG智能标注平台、PAI-Designer(原Studio)可视化建模平台、PAI-DSW云原生交互式建模平台、PAI-DLC云原生AI基础平台、PAI-EAS云原生弹性推理服务平台,支持千亿特征、万亿样本规模加速训练,百余落地场景,全面提升工程效率。

+关注