阿里云文档 2025-04-22

基于eRDMA部署3FS高性能分布式存储集群

3FS是深度求索(DeepSeek)公司自主研发的高性能分布式存储系统,专为AI大模型训练、大数据分析及高性能计算(HPC)场景优化设计。在3FS中,融合现代SSD存储与RDMA网络技术,突破传统网络的性能瓶颈。本文介绍如何基于阿里云自研的云上弹性RDMA网络部署3FS集群,实现低延迟与高吞吐数据传输,支撑AI训练和大规模数据分析的高性能需求。

阿里云文档 2025-04-08

基于ACK多机分布式部署DeepSeek满血版推理部署实战

本文深入解析基于阿里云容器服务ACK的DeepSeek-R1-671B大模型分布式推理实战方案。针对该千亿参数模型(671B)单卡显存不足的挑战,提出混合并行策略(Pipeline Parallelism=2 + Tensor Parallelism=8),结合阿里云Arena工具,实现在2台ecs.ebmgn8v.48xlarge(8*96GB)节点上的高效分布式部署。进一步演示如何将部署于AC...

文章 2024-09-03 来自:开发者社区

在YARN集群上运行部署MapReduce分布式计算框架

作者:尹正杰版权声明:原创作品,谢绝转载!否则将追究法律责任。   本篇博客主要讲解在YARN集群上配置Mapreduce分布式计算框架。与此同时,启动HistoryServer服务,便于在RM Web UI界面查看聚合日志内容。 一.本地运行一个MapReduce程序 1>.准备数据 [root@hadoop101.yinzhengjie.com ~]# vim hadoop...

在YARN集群上运行部署MapReduce分布式计算框架
文章 2024-08-15 来自:开发者社区

"揭秘!Docker部署Seata遇上Nacos,注册成功却报错?这些坑你不得不防!一网打尽解决秘籍,让你的分布式事务稳如老狗!"

nacos常见问题之docker部署的seata,成功注册到nacos运行报错如何解决在微服务架构中,Nacos作为服务发现和配置管理平台,常与Seata(一种分布式事务解决方案)结合使用,以确保数据的一致性和服务的稳定性。然而,在实际部署过程中,可能会遇到Seata在Docker环境中成功注册到N...

文章 2024-08-14 来自:开发者社区

多云网络部署存在挑战,F5分布式云应用简化方案解读

    伴随着人工智能与云计算领域的深度融合与集中爆发,企业在多云环境中面临着挑战,包括复杂性、成本和风险的增加等……对于高度敏捷企业中的开发团队而言,传统网络的沉重运维成本和低效率将会成为发展的障碍。作为一家提供多云应用安全和应用交付服务的公司,F5分布式云服务如何解决上述难题?本文为你详细解读。     目前绝大多数的多云网络解决方案都主要关注网络传输层。此外,网络主要是为南北向连接而设计.....

多云网络部署存在挑战,F5分布式云应用简化方案解读
问答 2024-06-18 来自:开发者社区

为什么环境创建、部署、重启这类任务被分布式调用时会导致问题?

为什么环境创建、部署、重启这类任务被分布式调用时会导致问题?

文章 2024-05-29 来自:开发者社区

使用Docker快速部署Flink分布式集群

前言 大家是否记得自己是怎么开始学习大数据的内容呢,估计关注我得同学会发现前面有点陆续有点关于Docker的小烂文,是因为使用Docker可以最快的速度让我们拥有一个学习的环境。大数据的东西都逃不过搭建环境测试跑通这么一个过程,我自己也是过来人,尤其是刚刚接触比较新的东西的时候受制于当前的网络,当前的配置一系列的问题,导致大量从入门到放弃的情况非常多,今天我通过一些实际的例子,让大家感受...

使用Docker快速部署Flink分布式集群
文章 2024-05-24 来自:开发者社区

测试部署PolarDB-X 分布式与集中式

在CentOS 7.9测试部署PolarDB-X 分布式与集中式 1. 前言 为什么要使用Polardb-x? 开源组件的稳定性和备选方案:CentOS已经改变了发行方式,MySQL被Oracle收购,以及MariaDB在某些情况下的稳定性问题确实引起了关注。PolarDB-X作为一个经过阿里云深度优化和验证的分布式数据库,...

测试部署PolarDB-X 分布式与集中式
文章 2024-04-28 来自:开发者社区

【一文看懂】使用hape部署分布式版Havenask

一、部署分布式版Havenask集群 部署分布式版的Havenask集群与单机版相同,都需要使用Hape工具(对于Hape工具,可以通过文章「Havenask入门系列【Havenask单机模式】」了解,这里不做赘述)。 部署分布式版的Havenask集群也需要四个步骤,即准备环境、创建集群、创建表以及使用SQL语句进行数据读写。与单机版唯一有较大差距的是,在部署分布式...

【一文看懂】使用hape部署分布式版Havenask
文章 2024-04-25 来自:开发者社区

Docker部署Xxl-Job分布式任务调度中心(超详细)

前言 XXL-Job是一个开源的分布式任务调度中心,它提供了一个可视化的任务管理界面,可以方便地创建、编辑和监控任务。XXL-Job支持多种任务类型,包括简单的Java任务、Shell任务、Cron任务等。它还提供了任务执行日志、报警机制、任务依赖等功能,可以满足各种任务调度的需求。XXL-Job还支持集群部署,可以实现高可用和负载均衡。 部署 1.拉取xxl-job镜像...

Docker部署Xxl-Job分布式任务调度中心(超详细)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云分布式应用服务

企业级分布式应用服务 EDAS(Enterprise Distributed Application Service)是应用全生命周期管理和监控的一站式PaaS平台,支持部署于 Kubernetes/ECS,无侵入支持Java/Go/Python/PHP/.NetCore 等多语言应用的发布运行和服务治理 ,Java支持Spring Cloud、Apache Dubbo近五年所有版本,多语言应用一键开启Service Mesh。

+关注