深入理解 Apache Spark Delta Lake 的事务日志

Lake 处理多个并发读写时会发生什么?答案很简单,由于 Delta Lake 由 Apache Spark 提供支持,因此不仅可以让多个用户同时修改表 - 这是预期的。 为了处理这些情况,Delta Lake 采用了乐观的并发控制。 什么是乐观并发控制 ...
来自: 云栖社区 > 博客 作者: 明惠 浏览:159 回复:0

hive并发调用遇到的问题及解决方案

问题导读 1.hive什么情况下会遇到并发问题? 2.遇到并发问题,该如何解决? 3.hive除了本文提到的访问方式,还有没有其他访问方式? 前言 使用hive,我们很多情况下会并发调用hive程序,将sql任务转换成mapreuce提交到hadoop集 ...
来自: 云栖社区 > 论坛 作者: zhangrui5445 浏览:251 回复:2

hive并发调用的运行方式

问题导读 1.你对hive并发了解多少? 2.hive并发问题,本文是如何解决的? 前言 使用hive,我们很多情况下会并发调用hive程序,将sql任务转换成mapreuce提交到hadoop集群中,而在本人使用hive的过程中,发现并发调用hive有 ...
来自: 云栖社区 > 论坛 作者: 黒銫~覹笑~ 浏览:229 回复:2

nginx单机1w并发优化

nginx单机1w并发优化目录ab工具整体优化思路具体的优化思路编写脚本完成并发优化配置性能统计工具tips总结 ab工具ab -c 10000 -n 200000 http://localhost/index. nginx单机1w并发优化目录ab工具 ...
来自: 云栖社区 > 博客 作者: 优惠券活动 浏览:49 回复:0

tomcat6高并发配置与优化

性能,默认值为10。 maxProcessors    最大连接线程数,即:并发处理的最大请求数,默认值为75 提高Tomcat的并发能力一些方法 1、Apache + Tomcat 结合起来用Apache 负责静态页面 ...
来自: 云栖社区 > 论坛 作者: emptyswing 浏览:258 回复:0

用PTS测试APACHE两种工作模式性能

apache2.2.X主要支持两种工作模式:prefork模式和worker模式     prefork模式:     这个多路处理模块(MPM)实现了一个非线程型的、预派生 ...
来自: 云栖社区 > 论坛 作者: bendchen 浏览:5957 回复:2

大型高并发高负载网站的系统架构

;  大型网站,比如门户网站。在面对大量用户访问、高并发请求方面,基本的解决方案集中在这样几个环节:使用高性能的服务器、高性能的数据库、高效率的编程语言、还有高性能的Web容器。但是除了这几个方面,还没法根本解决大型网站面临的高负载和高并发问题 ...
来自: 云栖社区 > 论坛 作者: mylover1972ch 浏览:282 回复:0

Apache Ignite 初探

许可进入Apache的孵化器进行孵化,很快就于8月25日毕业并且成为Apache的顶级项目,9月28日即发布了1.4.0版,应该说发展、迭代速度非常之快。该技术相关资料较少,但确是一个很有潜力的技术,解决了大规模、大数据量、高并发企业级或者互联网应用面临的 ...
来自: 云栖社区 > 论坛 作者: happyqiqi 浏览:211 回复:0

Apache Ignite介绍及与各种大数据技术【spark,redis,hadoop】的关系和对比

.0许可进入Apache的孵化器进行孵化,很快就于8月25日毕业并且成为Apache的顶级项目,9月28日即发布了1.4.0版,应该说发展、迭代速度非常之快。该技术相关资料较少,但确是一个很有潜力的技术,解决了大规模、大数据量、高并发企业级或者互联网应用 ...
来自: 云栖社区 > 论坛 作者: 公主的蔷薇rain 浏览:150 回复:0

并发数负载均衡服务器

Nginx:Ngnix有”单点故障“的问题,如果挂了,会带来很多的麻烦。到了后期Web服务器继续增加,它本身可能会成为系统的瓶颈nginx最高支持50000个并发连接数,工作在网路七层上Apache:web服务器第一,但不是最好的负载均衡 ...
来自: 云栖社区 > 论坛 作者: 锐讯网络1 浏览:1741 回复:1

Apache Flink 进阶(六):Flink 作业执行深度解析

本文根据 Apache Flink 系列直播课程整理而成,由 Apache Flink Contributor、网易云音乐实时计算平台研发工程师岳猛分享。主要分享内容为 Flink Job 执行作业的流程,文章将从两个方面进行分享:一是如何从 ...
来自: 云栖社区 > 博客 作者: 巴蜀真人 浏览:133 回复:0

16 个线程并发操作informix ,infomix jdbc driver 里就会狂出错 请教

数据库级的配置? 环境:AIX  ibm590 , IBM Informix Dynamic Server Version 10.00.FC5 , j2ee 项目. 出错情境: 并发开启16个thread . 操作数据库,按一定条件,对一张表先删 ...
来自: 云栖社区 > 论坛 作者: 我叫秦西西 浏览:251 回复:1

Apache Flink 零基础入门(三):DataStream API 编程

,采用系统自动优化或人为指定的方式将计算工作分布到不同的实例中。只有当算子实例分布到不同进程上时,才需要通过网络进行数据传输,而同一进程中的多个实例之间的数据传输通常是不需要通过网络的。 表1. Apache Storm 构造 DAG 计算图。Apache ...
来自: 云栖社区 > 博客 作者: 巴蜀真人 浏览:37 回复:0

Apache Flink中的广播状态实用指南

代码,以便在今后的实践中能实现此类的应用。 什么是广播状态? 广播状态可以用于通过一个特定的方式来组合并共同处理两个事件流。第一个流的事件被广播到另一个operator的所有并发实例,这些事件将被保存为状态。另一个流的事件不会被广播,而是发送给同一个 ...
来自: 云栖社区 > 博客 作者: 王柯凝 浏览:95 回复:0

Apache Hudi 设计与架构最强解读

Apache Hudi 设计与架构最强解读 感谢 Apache Hudi contributor:王祥虎 翻译&供稿。 欢迎关注微信公众号:ApacheHudi 本文将介绍Apache Hudi的基本概念、设计以及总体基础架构 ...
来自: 云栖社区 > 博客 作者: 优惠码优惠 浏览:27 回复:0

apache prefork worker两种工作模式详解

大,则必须编译apache,此前都是无需重新编译Apache。 生效前提:必须放在其他指令的前面 StartServers   5 //指定服务器启动时建立的子进程数量,prefork默认为5。 MinSpareServers  ...
来自: 云栖社区 > 论坛 作者: 任涛欧巴欧 浏览:134 回复:0

优化Linux的内核参数来提高服务器并发处理能力

在服务器硬件资源额定有限的情况下,最大的压榨服务器的性能,提高服务器的并发处理能力,是很多运维技术人员思考的问题。要提高Linux系统下的负载能力,可以使用nginx等原生并发处理能力就很强的web服务器,如果使用Apache的可以启用其Worker模式 ...
来自: 云栖社区 > 论坛 作者: 下雨啦! 浏览:297 回复:0

Apache HBase常用命令

Apache Hadoop是一个高容错、高延时的分布式文件系统和高并发的批处理系统,不适用于提供实时计算,而 HBase 是可以提供实时计算的分布式数据库,数据被保存在 HDFS (分布式文件系统)上,由 HDFS 保证其高容错性。 HBase与 ...
来自: 云栖社区 > 博客 作者: 北斗云 浏览:31 回复:0

Apache iceberg:Netflix 数据仓库的基石

Apache Iceberg 是一种用于跟踪超大规模表的新格式,是专门为对象存储(如S3)而设计的。 本文将介绍为什么 Netflix 需要构建 Iceberg,Apache Iceberg 的高层次设计,并会介绍那些能够更好地解决查询性能问题的细节 ...
来自: 云栖社区 > 博客 作者: 曹龙 浏览:60 回复:0

带你读《Java并发编程的艺术》之一:并发编程的挑战

本书采用循序渐进的讲解方式,从并发编程的底层实现机制入手,逐步介绍了在设计Java并发程序时各种重要的技术、设计模式与应用,同时辅以丰富的示例代码,使得开发人员能够更快地领悟Java并发编程的要领,围绕着Java平台的基础并发功能快速地构建大规模的并发 ...
来自: 云栖社区 > 博客 作者: 1760861456352085 浏览:204 回复:0
< 1 2 3 4 5 7 >
共有532页 跳转至:GO
对搜索结果不满意?试试论坛 高级搜索>