文章 2024-11-14 来自:开发者社区

【赵渝强老师】Memcached集群的架构

Memcached是一个高性能的分布式的内存对象缓存系统。通过使用Memcached可以支持高负载的网站系统,以分担数据库的压力。Memcached通过在内存里维护一个统一的巨大的Hash表来存储各种格式的数据,包括图像、视频、文件以及数据库检索的结果等。但是Memcached不能将数据进行持久化,因此严格意义来说,Memcached只能叫做一个缓存技术,而不能叫做数据库。 M...

【赵渝强老师】Memcached集群的架构
文章 2024-11-14 来自:开发者社区

【赵渝强老师】大数据主从架构的单点故障

大数据体系架构中的核心组件都是主从架构,即:存在一个主节点和多个从节点,从而组成一个分布式环境。下图为展示了大数据体系中主从架构的相关组件。   从上图可以看出大数据的核心组件都是一种主从架构,而只要是主从架构就存在单点故障的问题。因为整个集群中只存在一个主节点,如...

【赵渝强老师】大数据主从架构的单点故障
文章 2024-11-14 来自:开发者社区

【赵渝强老师】Docker Swarm集群的体系架构

Docker从1.12.0 版本开始,便已经将DockerSwarm集成进了Docker的引擎中。因此,Docker Swarm不需要单独进行安装。由于Docker Swarm内置了服务发现的功能,因此也不再需要进行服务发现配置了。Docker Swarm与Docker Compose类似,都是Docker官方提供的服务编排工具。但是二者所不同的是,Docker Compose 是在单个宿主机上....

【赵渝强老师】Docker Swarm集群的体系架构
文章 2024-11-14 来自:开发者社区

【赵渝强老师】基于RBF的HDFS联邦架构

在最新的Hadoop版本中又实现了基于Router的联盟架构,并且在这个架构之上还实现了许多增强集群管理能力的特性。Router将挂载表从客户端中抽离了出来,解决了ViewFS存在的问题。     视频讲解如下: ...

【赵渝强老师】基于RBF的HDFS联邦架构
文章 2024-11-14 来自:开发者社区

【赵渝强老师】MongoDB复制集的体系架构

MongoDB的复制就是数据文档在多个MongoDB服务器节点直接进行数据同步的过程。因此MongoDB的复制集是一种集群技术。     视频讲解如下: ...

【赵渝强老师】MongoDB复制集的体系架构
文章 2024-11-14 来自:开发者社区

【赵渝强老师】基于ViewFS的HDFS联邦架构

在实际的生产环境中,一般都会搭建HDFS的集群来进行大数据文件的存储。而作为集群来说,应该提供基本负载均衡的功能。HDFS的联盟Federation便是负载均衡的一种具体实现方式。另一方面,通过使用HDFS的联盟Federation也可以对NameNode进行水平的扩展。     视频讲解如下: ...

【赵渝强老师】基于ViewFS的HDFS联邦架构
文章 2024-11-14 来自:开发者社区

【赵渝强老师】Hive的体系架构

在Hadoop体系中提供数据分析引擎Hive。它允许使用SQL语句来分析处理数据,而不需要编程复杂的Java程序。同时Hive提供了丰富的数据模型来创建各种表结构,帮助数据分析人员建立数据模型。视频讲解如下: ...

【赵渝强老师】Hive的体系架构
文章 2024-11-14 来自:开发者社区

【赵渝强老师】HBase的体系架构

在学习HBase的体系架构之前,需要先了解一下HBase中的一些术语。这些术语如下表所示。 从体系架构的角度看,HBase是一种主从架构,包含:HBase HMaster、Regionserver和ZooKeeper。视频讲解如下: ...

【赵渝强老师】HBase的体系架构
文章 2024-11-14 来自:开发者社区

【赵渝强老师】Kafka的体系架构

Kafka消息系统是一个典型的分布式系统,其组成部分包括:消息生产者(Producer)、消息消费者(Consumer)、消息服务器(Broker)以及分布式协调服务ZooKeeper。一个典型的Kafka消息系统的集群架构如下图所示。     视频讲解如...

【赵渝强老师】Kafka的体系架构
文章 2024-11-14 来自:开发者社区

【赵渝强老师】基于Flink的流批一体架构

    由于Flink集成了批计算和流计算,因此可以使用Flink构建流批一体的系统架构,主要包含数据集成的流批一体架构、数仓架构的流批一体架构和数据湖的流批一体。 一、数据集成的流批一体架构   视频讲解如下: ...

【赵渝强老师】基于Flink的流批一体架构

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

金融级分布式架构

SOFAStack™(Scalable Open Financial Architecture Stack)是一套用于快速构建金融级分布式架构的中间件,也是在金融场景里锤炼出来的最佳实践。

+关注