文章 2022-06-15 来自:开发者社区

快速部署Ceph分布式高可用集群

快速部署Ceph分布式高可用集群Ceph简介Ceph是一个PB,EB级别的分布式存储系统,可以提供文件存储,对象存储、和块存储,它可靠性高,易扩展,管理简便,其中对象存储和块存储可以和其他云平台集成。一个Ceph集群中有Monitor节点、MDS节点(用于文件存储)、OSD守护进程。Ceph基础概念ceph-deploy一个集群自动化部署工具,使用较久,成熟稳定,被很多自动化工具所集成,可用于生....

文章 2022-06-12 来自:开发者社区

Longhorn,企业级云原生容器分布式存储 - 高可用

数据局部性数据局部性设置(data locality setting)旨在在以下情况下启用:只要有可能,至少应在与使用该卷的 pod 相同的节点上调度 Longhorn 卷的一个副本。我们将拥有本地副本的特性称为具有 data locality。例如,当集群的网络不好时,数据局部性(data locality)会很有用,因为拥有本地副本会增加卷的可用性。数据局部性(data locality)对....

文章 2022-06-10 来自:开发者社区

【Flume】(一)Flume 高可用的、高可靠的、分布式日志收集系统2

五、Flume ChannelChannel主要是用来缓冲Agent以及接受,但尚未写出到另外一个Agent或者存储系统的数据。Channel的行为比较像队列,Source写入到他们,Sink从他们中读取数据。多个Source可以安全的写入到同一Channel中,并且多个Sink可以从同一个Channel中读取数据。可是一个Sink只能从一个Channel读取数据,如果多个Sink从相同的Cha....

【Flume】(一)Flume 高可用的、高可靠的、分布式日志收集系统2
文章 2022-06-10 来自:开发者社区

【Flume】(一)Flume 高可用的、高可靠的、分布式日志收集系统1

文章目录一、初识 Flume二、安装 Flume三、简单案例实现(单节点实现)四、Flume Source1、netcat 源2、avro 源3、exec 源4、JMS 源5、Spooling Directory 源6、Kafka 源五、Flume Channel六、Flume Sinks一、初识 FlumeFlume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传....

【Flume】(一)Flume 高可用的、高可靠的、分布式日志收集系统1
文章 2022-06-09 来自:开发者社区

超全面Redis分布式高可用方案:哨兵机制

开发工作中对于分布式缓存高可用方案(搭建 Redis 缓存高可用方案),Redis 主从架构下是如何保证高可用的呢?我们知道 Redis Sentinel 是一个分布式系统,为 Redis 提供高可用性解决方案。那 Redis 服务部署的哨兵模式主要原理是什么,又解决了什么问题呢,于是利用时间将相关问题做了整理,相信看完这篇文章,你也可以去给别人做技术分享了。O(∩_∩)O 哈哈~0. 问题铺垫....

超全面Redis分布式高可用方案:哨兵机制
文章 2022-06-07 来自:开发者社区

超全面分布式缓存高可用方案:哨兵机制

开发工作中对于分布式缓存高可用方案(搭建Redis缓存高可用方案),Redis主从架构下是如何保证高可用的呢?我们知道是应用了哨兵机制来实现。那Redis 服务部署的哨兵模式主要是什么,又解决了什么问题呢,于是利用周末时间整理了下,相信看完这篇文章,你也可以去给别人做技术分享了。O(∩_∩)O哈哈~问题铺垫在讨论哨兵模式之前,我们先来看一个应用问题:Redis服务主机宕机实际使用过程中,会出现m....

超全面分布式缓存高可用方案:哨兵机制
文章 2022-05-27 来自:开发者社区

SpringCloudAlibaba篇(三)整合Sentinel(限流、流量整形、熔断降级、系统负载保护、热点防护,分布式服务架构的高可用流量防护组件)

前言Sentinel是阿里开源的项目,提供了流量控制、熔断降级、系统负载保护等多个维度来保障服务之间的稳定性。 1.拉取并运行sentinel控制台我的SpringCloudAlibabaVersion是2021.0.1.0 ,推荐我用1.8.3的sentinel、 sentinel下载地址下载jar直接 java -jar sentinel-dashboard-1.8.3.jar 运行即可访问....

SpringCloudAlibaba篇(三)整合Sentinel(限流、流量整形、熔断降级、系统负载保护、热点防护,分布式服务架构的高可用流量防护组件)
文章 2022-05-07 来自:开发者社区

一举拿下高可用与分布式协调系统设计

前言在上文中我们了解到, canal 可以通过订阅 binlog 日志来提供增量数据订阅和消费,通过这种方式可以实现数据库的实时备份,实时索引构建等网络异常,图片无法展示|我们再来详细看看它的工作原理网络异常,图片无法展示|如图示,每个 server 会启动多个实例(instance),每个实例会订阅不同表的 binlog,实例主要负责将 binlog 日志解析成程序易读的结构化数据(解析后包含....

一举拿下高可用与分布式协调系统设计
文章 2022-05-01 来自:开发者社区

部署Ceph分布式高可用集群中篇(下)

查看集群中monitor的状态ceph mon dump至此,monitor扩容完毕,生产中一般部署3个或者5个节点的Monitor,确保集群高可用状态Ceph OSD 扩容随着集群资源的不断增长 Ceph集群的空间可能会存在不够用的情况 因此需要对集群进行扩容 扩容通常包含两种:横向扩容和纵向扩容 横向扩容即增加台机器 纵向扩容即在单个节点上添加更多的OSD存储 以满足数据增长的需求 添加OS....

部署Ceph分布式高可用集群中篇(下)
文章 2022-05-01 来自:开发者社区

部署Ceph分布式高可用集群中篇(中)

Ceph客户端向 monitor 请求集群的状态 并向 pool 中写入数据 根据 PGs 的数量 通过CRUSH 算法将其映射到不同的 OSD 节点上 实现数据的存储 可以把 pool 理解为存储object数据的逻辑单元创建一个 pool 资源池其名字为 z0ukun,PGs 数量设置为 64 设置 PGs 的同时还需要设置 PGP(通常PGs和PGP的值是相同的) cd ceph-admi....

部署Ceph分布式高可用集群中篇(中)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云分布式应用服务

企业级分布式应用服务 EDAS(Enterprise Distributed Application Service)是应用全生命周期管理和监控的一站式PaaS平台,支持部署于 Kubernetes/ECS,无侵入支持Java/Go/Python/PHP/.NetCore 等多语言应用的发布运行和服务治理 ,Java支持Spring Cloud、Apache Dubbo近五年所有版本,多语言应用一键开启Service Mesh。

+关注