Spark框架深度理解三：运行架构、核心数据集RDD
前言由于Spark框架大多都搭建在Hadoop系统之上，要明白Spark核心运行原理还是得对Hadoop体系有个熟悉的认知。从Hadoop1.0到Hadoop2.0架构的优化和发展探索详解这篇博客大家可以先去温习一下Hadoop整个体系，然后再来了解Spark框架会更有效率。一、Spark集群架构S...
深度解析数据湖存储方案Lakehouse架构【Databricks 数据洞察公开课】
作者：张泊Databricks 软件工程师Lakehouse由lake和house两个词组合而成，其中lake代表Delta Lake（数据湖），house代表data warehouse（数据仓库）。因此，Lakehouse架构就是数据湖和数据仓库的结合。数据仓库和数据湖各自都存在着很多不足，而L...
深度解读：分布式系统韧性架构压舱石 OpenChaos
背景随着 Serverless、微服务（含服务网格）与越来越多的容器化架构应用的出现，我们构建、交付与运维系统的方式变得越发复杂。这种复杂性增加了系统状态可观测性的难度。在已有的生产环境中，我们有不同的方式来获取信息，增强系统的可观测性。最初可能是非常简单地给定一个特定的条件，产生一个特定的指标输出...
45 张图深度解析 Netty 架构与原理（五）
2.5. Netty 的 Handler 组件无论是服务端代码中自定义的 NettyServerHandler 还是客户端代码中自定义的 NettyClientHandler，都继承于 ChannelInboundHandlerAdapter，ChannelInboundHandlerAdapter...
45 张图深度解析 Netty 架构与原理（四）
2.3. Netty 的模样Netty 的设计主要基于主从 Reactor 多线程模式，并做了一定的改进。本节将使用一种渐进式的描述方式展示 Netty 的模样，即先给出 Netty 的简单版本，然后逐渐丰富其细节，直至展示出 Netty 的全貌。简单版本的 Netty 的模样如下：070关于这张图...
45 张图深度解析 Netty 架构与原理（三）
2. Netty 的架构与原理2.1. 为什么要制造 Netty既然 Java 提供了 NIO，为什么还要制造一个 Netty，主要原因是 Java NIO 有以下几个缺点：1）Java NIO 的类库和 API 庞大繁杂，使用起来很麻烦，开发工作量大。2）使用 Java NIO，程序...
45 张图深度解析 Netty 架构与原理（二）
1.4. Java NIO API 简单回顾BIO 以流的方式处理数据，而 NIO 以缓冲区（也被叫做块）的方式处理数据，块 IO 效率比流 IO 效率高很多。BIO 基于字符流或者字节流进行操作，而 NIO 基于 Channel 和 Buffer 进行操作，数据总是从通道读取到缓冲区或者从缓冲区写...
45 张图深度解析 Netty 架构与原理（一）
前言1. Netty 基础1.4.1. 缓冲区（Buffer）1.4.2. 通道（Channel）1.4.3. 选择器（Selector）1.1. Netty 是什么1.2. Netty 的应用场景1.3. Java 中的网络 IO 模型1.4. Java NIO API 简单回顾1.5. 零拷贝技...
Facebook推基于NetHack的深度强化学习利器，超轻量级架构性价比远超GPT-2和BERT
近日，Facebook 的研究人员表示，NetHack这款游戏是专门为训练、测试和评估人工智能模型而设计的。为此，他们今日发布了 NetHack 学习环境，这是用于对强化学习智能体的鲁棒性和泛化性进行基准测试的研究工具。 ...
深度解读畅捷通云原生架构转型实战历程
在信通院 2021 年云原生产业大会上，畅捷通获得 2021 年度云原生优秀案例。畅捷通公司是用友集团旗下的成员企业，专注于服务国内小微企业的财务和管理服务。一方面，畅捷通将自己的产品、业务、技术架构互联网化；另一方面，畅捷通推出了畅捷通一站式云服务平台，面向小微企业提供以数智财税、数智商业为核心的...
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
产品推荐
社区圈子
最佳实践
