阿里云文档 2025-04-27

在ACK中使用KTransformers部署DeepSeek-R1模型

KTransformers框架实现了多种LLM推理优化,进一步减少了推理阶段的显存占用,从而提高推理性能和降低GPU资源成本。本文介绍如何在阿里云容器服务 Kubernetes 版中通过KTransformers实现高效部署671B参数的DeepSeek-R1-Q4_K_M量化模型推理服务。

阿里云文档 2025-04-27

在ACK托管集群(智能托管模式)中部署工作负载并实现负载均衡

本文介绍如何在ACK托管集群(智能托管模式)中部署一个工作负载,并通过ALB Ingress实现公网访问。完成后,您可以通过设定的域名访问该应用,实现外部流量的高效管理和负载均衡。

阿里云文档 2025-03-19

使用ACK Edge与虚拟节点部署DeepSeek蒸馏模型推理服务

为解决DeepSeek推理服务对GPU规格需求越来越高的问题,您可以通过ACK Edge集群管理本地IDC的GPU机器,并借助集群的虚拟节点快速接入云上ACS Serverless GPU算力。该方案可以使推理任务优先在IDC GPU上运行,当本地IDC GPU资源不足时,任务将自动调度至云上的ACS Serverless GPU,满足业务扩展需求的同时降低成本。

阿里云文档 2025-03-14

使用ECI部署QwQ-32B

本文以部署QwQ-32B模型为例,演示如何使用数据缓存快速部署QwQ-32B模型。通过数据缓存提前拉取QwQ-32B模型数据,然后在部署QwQ-32B模型推理服务时直接挂载模型数据,可以免去在实例中拉取模型数据的等待时间,加速QwQ-32B部署。

文章 2024-02-20 来自:开发者社区

docker 部署springboot项目,连接mysql容器

入手docker部署springboot项目,记录一下学习过程,过程很简单,主要是部署过程中的收获,下面跟我一起来吧 创建一个springboot项目,pom引入maven-docker-plugin依赖 <plugin> ...

docker 部署springboot项目,连接mysql容器
问答 2023-06-05 来自:开发者社区

请问在ACR里,使用SAE部署node.js项目。一定要弄个容器镜像吗?

请问使用SAE部署node.js项目。一定要弄个容器镜像吗?

文章 2023-02-06 来自:开发者社区

Docker(三)实战:-Docker部署Golang项目并关联Mysql容器

前言友情提示本文学习需要了解一些Linux简单命令和Docker的一些命令使用的项目我已经上传到github:https://github.com/Gopherlinzy/gin-gorm-example个人博客:https://linzyblog.netlify.app/一、获取一个可执行的项目我自己写了一个简单的gin-gorm项目,github下载地址:https://github.com....

Docker(三)实战:-Docker部署Golang项目并关联Mysql容器
文章 2023-01-13 来自:开发者社区

Docker:第二章:部署项目,对镜像,容器的操作

服务器上的项目访问不了,所以我去看了看容器,果然那我就删除容器呗 :docker rm 容器iddocker rm f097e24a9a0f说明:从镜像到容器,同一个镜像构建多个运行的 Docker 实体——容器,镜像提供了容器运行时所需的程序、库、资源、配置等文件,还包含了一些为运行时准备的一些配置参数。镜像是一个静态的概念,镜像不包含任何动态数据,其内容在构建之后也不会被改变。可以去看看镜像....

Docker:第二章:部署项目,对镜像,容器的操作
文章 2023-01-13 来自:开发者社区

docker部署项目,对镜像,容器的操作

服务器上的项目访问不了,所以我去看了看容器,果然那我就删除容器呗 :docker rm 容器iddocker rm f097e24a9a0f说明:从镜像到容器,同一个镜像构建多个运行的 Docker 实体——容器,镜像提供了容器运行时所需的程序、库、资源、配置等文件,还包含了一些为运行时准备的一些配置参数。镜像是一个静态的概念,镜像不包含任何动态数据,其内容在构建之后也不会被改变。可以去看看镜像....

docker部署项目,对镜像,容器的操作

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云容器服务 ACK

云端最佳容器应用运行环境,安全、稳定、极致弹性

+关注