阿里云文档 2025-04-18

如何使用分布式训练框架StarServer进行分布式训练

分布式训练框架用于加速模型训练、处理海量数据并提高系统稳定性和资源利用率。它通过将模型分布在多个计算节点上实现并行计算,从而缩短训练时间,适应大数据集和大模型的训练需求。本文介绍如何使用分布式训练框架StarServer进行分布式训练。

文章 2024-09-10 来自:开发者社区

SpringBoot接入轻量级分布式日志框架GrayLog技术分享

在当今的软件开发环境中,日志管理扮演着至关重要的角色,尤其是在微服务架构下,分布式日志的统一收集、分析和展示成为了开发者和运维人员必须面对的问题。GrayLog作为一个轻量级的分布式日志框架,以其简洁、高效和易部署的特性,逐渐受到广大开发者的青睐。本文将详细介绍如何在SpringBoot项目中接入GrayLog,以实现日志的集中管理和分析。 一、GrayLog简介 GrayLog...

阿里云文档 2024-01-30

如何使用分布式通信框架gRPC++进行分布式训练

使用DLC进行深度学习训练时,您可以使用gRPC++分布式训练,从而加速模型训练。本文介绍如何开启分布式通信框架gRPC++。

阿里云文档 2023-12-26

如何在SpringBoot框架下使用消息队列收发消息

本文介绍如何在 SpringBoot 框架下用 SOFAStack 消息队列收发消息。

阿里云文档 2023-09-03

Spring框架存在远程命令执行漏洞攻击风险通告和解决方案_企业级分布式应用服务(EDAS)

本文介绍Spring框架存在远程命令执行漏洞攻击风险以及如何解决。

文章 2023-04-26 来自:开发者社区

SpringBoot接入轻量级分布式日志框架GrayLog

部署GraylogSpring Boot 集成GrayLog在微服务架构中,一个服务通常都会有多个实例,而这些服务实例可能会被部署到不同的机器或虚拟容器上。此时对于日志数据的查看和分析就会变得困难起来,因为这些服务的日志数据都散落在各自实例所在的机器或容器上。例如,我现在要在订单服务里查找一个订单id为1的日志,而订单服务有10个实例并且部署在10台不同的机器上,那么我就得一台台的去找这个日志数....

SpringBoot接入轻量级分布式日志框架GrayLog
阿里云文档 2023-04-17

如何在ECS中创建和部署Java微服务框架的应用

在EDAS的ECS集群中,可以创建和部署基于Java微服务框架开发的应用。

文章 2022-02-17 来自:开发者社区

分布式日志收集框架Flume下载安装与使用(四)

5 实战使用Flume的核心就在于配置文件配置Source配置Channel配置Sink组织在一起5.1 场景1 - 从指定网络端口收集数据输出到控制台看看官网的第一个案例# example.conf: A single-node Flume configuration # Name the components on this agent a1.sources = r1 a1.sinks = ....

分布式日志收集框架Flume下载安装与使用(四)
文章 2022-02-17 来自:开发者社区

分布式日志收集框架Flume下载安装与使用(三)

4 环境配置与部署4.1 系统需求系统macOS 10.14.14Java运行时环境Java 1.8或更高版本内存源通道或接收器使用的配置的足够内存磁盘空间通道或接收器使用的配置的足够磁盘空间目录权限代理使用的目录的读/写权限4.2 下载与安装4.3 配置查看安装路径系统配置文件export FLUME_VERSION=1.9.0 export FLUME_HOME=/usr/local/Cel....

分布式日志收集框架Flume下载安装与使用(三)
文章 2022-02-17 来自:开发者社区

分布式日志收集框架Flume下载安装与使用(二)

3 核心架构及其组件3.1 core架构3.2 核心的组件顺便来看看官方文档3.2.1 Source - 收集指定数据源(Avro, Thrift, Spooling, Kafka, Exec)3.2.2 Channel - 聚集把数据暂存(Memory, File, Kafka等用的比较多)3.2.3 Sink - 输出把数据写至某处(HDFS, Hive, Logger, Avro, Thr....

分布式日志收集框架Flume下载安装与使用(二)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云分布式应用服务

企业级分布式应用服务 EDAS(Enterprise Distributed Application Service)是应用全生命周期管理和监控的一站式PaaS平台,支持部署于 Kubernetes/ECS,无侵入支持Java/Go/Python/PHP/.NetCore 等多语言应用的发布运行和服务治理 ,Java支持Spring Cloud、Apache Dubbo近五年所有版本,多语言应用一键开启Service Mesh。

+关注