阿里云文档 2025-04-27

在ACK中使用KTransformers部署DeepSeek-R1模型

KTransformers框架实现了多种LLM推理优化,进一步减少了推理阶段的显存占用,从而提高推理性能和降低GPU资源成本。本文介绍如何在阿里云容器服务 Kubernetes 版中通过KTransformers实现高效部署671B参数的DeepSeek-R1-Q4_K_M量化模型推理服务。

阿里云文档 2025-04-27

在ACK托管集群(智能托管模式)中部署工作负载并实现负载均衡

本文介绍如何在ACK托管集群(智能托管模式)中部署一个工作负载,并通过ALB Ingress实现公网访问。完成后,您可以通过设定的域名访问该应用,实现外部流量的高效管理和负载均衡。

阿里云文档 2025-03-19

使用ACK Edge与虚拟节点部署DeepSeek蒸馏模型推理服务

为解决DeepSeek推理服务对GPU规格需求越来越高的问题,您可以通过ACK Edge集群管理本地IDC的GPU机器,并借助集群的虚拟节点快速接入云上ACS Serverless GPU算力。该方案可以使推理任务优先在IDC GPU上运行,当本地IDC GPU资源不足时,任务将自动调度至云上的ACS Serverless GPU,满足业务扩展需求的同时降低成本。

阿里云文档 2025-03-14

使用ECI部署QwQ-32B

本文以部署QwQ-32B模型为例,演示如何使用数据缓存快速部署QwQ-32B模型。通过数据缓存提前拉取QwQ-32B模型数据,然后在部署QwQ-32B模型推理服务时直接挂载模型数据,可以免去在实例中拉取模型数据的等待时间,加速QwQ-32B部署。

文章 2024-09-01 来自:开发者社区

WPF与容器技术的碰撞:手把手教你Docker化WPF应用,实现跨环境一致性的开发与部署

容器技术近年来在软件开发领域引起了广泛关注,它通过将应用程序及其依赖项打包在一起,提供了便携性和一致性,极大地简化了开发、测试和部署流程。对于Windows Presentation Foundation(WPF)应用程序而言,利用容器技术如Docker不仅可以解决跨环境兼容性问题,还能提高应用的可...

文章 2024-04-04 来自:开发者社区

使用 Docker 容器化 Java Web 应用:提高开发和部署效率

在当今的软件开发领域,效率和快速部署是至关重要的。为了满足这些需求,Docker 作为一种强大的容器技术,为 Java Web 应用的开发和部署带来了巨大的优势。 Docker 是一种轻量级的容器化技术,它允许开发者将应用程序及其依赖项打包在一个独立的可移植单元中。通过使用 Docker 容器化 Java Web 应用,开发团...

文章 2024-03-12 来自:开发者社区

Docker的常用命令:加速你的容器化开发与部署

Docker是一种流行的容器化平台,它允许开发人员将应用程序及其依赖项打包到一个称为容器的独立的运行环境中。通过使用Docker,开发人员可以更轻松地构建、交付和运行应用程序,实现快速部署和扩展。本篇博客将介绍一些常用的Docker命令,帮助您更好地管理和操作容器化应用。 Docker是一种流行的容器化平台,它允许开发人员将应用程序及其依赖项打包到一个称为容器的独立的运行环境中...

Docker的常用命令:加速你的容器化开发与部署
文章 2024-02-06 来自:开发者社区

深入浅出:使用Docker容器化改善Java应用的开发与部署流程

在现代软件开发领域,Docker已经成为一项不可或缺的技术,特别是对于需要在多个环境中保持一致性的Java应用开发而言。Docker提供了一个轻量级的容器化平台,可以打包应用及其全部依赖项,确保应用在任何地方都能以相同的方式运行。本文将详细介绍如何使用Docker来容器化Java应用,并探索其在开发和部署过程中的优势。 Doc...

文章 2023-08-25 来自:开发者社区

Docker文件传输丨如何挂载目录?实现容器和宿主机之间的数据共享,方便开发和部署

Docker中挂载目录在Docker中,可以通过挂载目录的方式将宿主机上的目录共享到容器中。这样可以实现容器和宿主机之间的数据共享,方便开发和部署。具体挂载目录的方式如下:docker run -v /宿主机目录:/容器目录 image_name其中,/宿主机目录是宿主机上的目录路径,/容器目录是容器中的目录路径,image_name是要启动的镜像名称。例如,如果要将宿主机上的/home/use....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云容器服务 ACK

云端最佳容器应用运行环境,安全、稳定、极致弹性

+关注