文章 2017-09-25 来自:开发者社区

理解Ceph:一个开源的分布式存储平台

本文讲的是理解Ceph:一个开源的分布式存储平台,【编者的话】Ceph是一个符合POSIX、开源的分布式存储系统。最初由Sage Weill于2007年开发,Ceph的主要目标是设计成基于POSIX的没有单点故障的分布式文件系统,使数据能容错和无缝的复制。本文详细介绍了Ceph的历史和架构。 Ceph是一个软件分布式存储平台,可运行在商用硬件上。为了了解Ceph的运行效率,我们首先要弄清什么...

文章 2017-08-01 来自:开发者社区

Storm、Spark和MapReduce 开源分布式计算系统框架比较

比较项 Storm Spark Streaming 分布式计算在许多领域都有广泛需求,目前流行的分布式计算框架主要有 Hadoop MapReduce, Spark Streaming, Storm; 这三个框架各有优势,现在都属于 Apache 基金会下的顶级项目,下文将对三个框架的特点与适用场景进行分析,以便开发者能快速选择适合自己的框架进行开发。 Hadoop MapReduce 是三者中....

文章 2017-08-01 来自:开发者社区

英特尔开源分布式深度学习库BigDL:支持高性能大数据分析

近日,英特尔开源了一个运行在 Apache Spark 上的分布式深度学习库 BigDL,其可以利用已有的 Spark 集群来运行深度学习计算,并且还能简化从 Hadoop 的大数据集的数据加载。 开源地址>>> 据介绍,在 Xeon 服务器上的测试表明,BigDL 相比于 Caffe、Torch 或 TensorFlow 等开源框架实现了显著的速度提升。其速度可与主流的 GP....

文章 2017-07-13 来自:开发者社区

Intel开源了基于Apache Spark的分布式深度学习框架BigDL

Intel开源了基于Apache Spark的分布式深度学习框架BigDL。BigDL借助现有的Spark集群来运行深度学习计算,并简化存储在Hadoop中的大数据集的数据加载。 在Xeon服务器上运行的测试结果表明,BigDL比其他开源框架Caffe、Torch和TensorFlow有显著的性能提升。BigDL速度可与主流GPU匹敌,而且能够扩展到数十个Xeon服务器。 BigDL库支持Spa....

文章 2017-07-03 来自:开发者社区

LinkedIn 开源其分布式对象存储系统 Ambry

日前,LinkedIn在Github上基于Apache 2许可证协议开源了其分布式对象存储系统Ambry。Ambry是一个是不可变对象的存储系统,非常易于扩展,它能够存储KB到GB大小的不可变对象,并且能够实现高吞吐和低延迟,该系统支持跨数据中心的双活部署,并且存储成本低廉。它特别适于存储各种媒体内容。 据Linkedin的前工程主管Sriram Subramanian介绍,媒体内容在Web中已....

文章 2017-07-03 来自:开发者社区

Twitter开源分布式高性能日志复制服务

Twitter在Github上基于Apache 2许可证协议开源了其日志服务DistributedLog(DL)。DL是一个高性能的日志复制服务,提供了持久化、复制以及强一致性的功能,这对于构建可靠的分布式系统都是至关重要的,如复制状态机(replicated-state-machines)、通用的发布/订阅系统、分布式数据库以及分布式队列。 DistributedLog会分类维护记录的序列(s....

文章 2017-06-08 来自:开发者社区

【开源】.net 分布式架构之监控平台

开源地址: http://git.oschina.net/chejiangyi/Dyd.BaseService.Monitor .net 简单监控平台,用于集群的性能监控,应用耗时监控管理,统一日志管理等多维度的性能监控分析。 集群的性能监控:(需要服务器部署监控节点) 目前仅支持windows服务器监控, 支持windows自带的性能分析器所有配置项监控,及预警的定制。 支持自定义的插件扩展.....

文章 2017-06-06 来自:开发者社区

微软开源 rDSN 分布式系统开发框架

微软亚洲研究院系统组开发的分布式系统开发框架——Robust Distributed System Nucleus(rDSN)通过GitHub平台开源。rDSN旨在为广大分布式系统的开发者,学生,和研究人员提供一个开放式的框架,用于快速搭建和运维高性能和高鲁棒的分布式系统,而后者对于当前很多技术的成功都至关重要,比如云计算,大数据和物联网等。 rDSN的思想来源于系统组过去在分布式系统开发和运维....

文章 2017-06-02 来自:开发者社区

开源分布式关系型数据库 PingCAP 完成 B 轮融资

今日,全球分布式关系型数据库厂商 PingCAP 宣布完成 1500 万美元的 B 轮融资。 做改变未来的开源数据库,解放后端程序员 PingCAP 成立于 2015 年,总部设在北京,致力于前沿基础设施领域的技术创新实现。核心技术团队囊括业内全球众多顶级程序员,Codis、SenseiDB 等知名开源软件的作者均在其中。其核心产品 TiDB 致力于解决数据库领域一直以来存在的关系型数据库水平扩....

开源分布式关系型数据库 PingCAP 完成 B 轮融资
文章 2017-05-15 来自:开发者社区

开源分布式任务调度平台Cuckoo-Schedule

1         概述 1.1      平台概述   Cuckoo-Schedule是基于Quartz-Schedule的轻量级任务调度框架,具有易学习、易上手、开发高效稳定的特点。Demo地址:http://cuckoo.hellosr.com...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云分布式应用服务

企业级分布式应用服务 EDAS(Enterprise Distributed Application Service)是应用全生命周期管理和监控的一站式PaaS平台,支持部署于 Kubernetes/ECS,无侵入支持Java/Go/Python/PHP/.NetCore 等多语言应用的发布运行和服务治理 ,Java支持Spring Cloud、Apache Dubbo近五年所有版本,多语言应用一键开启Service Mesh。

+关注