双倍提升Apache Spark排序性能

集加速17%。 下面还有什么? SPARK-2926是Spark shuffle的几个改进计划的成果之一,在这个版本中很多方面上shuffle可以更好地管理内存: SPARK-4550 用内存缓冲中的map输出数据作为原始数据,取代Java对象。map输出 ...
来自: 云栖社区 > 论坛 作者: heyuan1011 浏览:295 回复:1

Spark大师之路:使用maven编译Spark

-incubating 复制代码 引言 如今JVM系的开源项目均引入了使用maven进行版本管理,Spark也不例外,今天就使用maven来对Spark进行构建。 Spark建议使用Maven3系列进行编译,并且要求Java版本最低为1.6。 编译 Maven内存 ...
来自: 云栖社区 > 论坛 作者: lsorws 浏览:180 回复:0

Apache Spark源码走读之2 -- Job的提交与运行

task真正运行在哪个worker上面是由TaskScheduler来管理,也就是上面的submitMissingTasks会调用TaskScheduler::submitTasks TaskSchedulerImpl中会根据Spark的当前运行模式来创建相应 ...
来自: 云栖社区 > 论坛 作者: 乔蒂 浏览:134 回复:0

Spark SQL Catalyst源码分析之UDF

, builder)//向SQLContext的functionRegistry(维护了一个hashMap来管理udf映射)注册   复制代码 2.2 注册Function: 注意:这里FunctionBuilder是一个type ...
来自: 云栖社区 > 论坛 作者: 泪珠与珍珠 浏览:254 回复:0

使用RDO 安装OpenStack Icehouse

: 192.168.48.214 eth1: 10.0.48.214 复制代码 eth0作为管理网卡和外部网络连接网卡;eth1作为gre 通道的连接网卡,也是两个节点间数据沟通的网卡。 2.配置本地软件源 使用192.168.86.37 上的本地yum 源,根据 ...
来自: 云栖社区 > 论坛 作者: 猪猪木亢 浏览:459 回复:1

CentOS6.4安装OpenStack Icehouse controller(一

,300G,2网卡              管理节点/计算节点 node01          ...
来自: 云栖社区 > 论坛 作者: 廖师奶 浏览:217 回复:0

linux(CentOS 6)下如何调整eth网卡顺序

/modprobe.d [root@localhost modprobe.d]# grep eth0 * [root@localhost modprobe.d]# 复制代码 经过分析发现,CentOS 6.0开始通过udev来管理网卡,具体网卡序号的配置文件在 ...
来自: 云栖社区 > 论坛 作者: 嗨爆全 浏览:365 回复:0

联想启动“个人云”战略 布局互联终端市场

榜眼位置的联想开始转型,通过硬件、软件、云端的全面布局,力求从个人电脑转向个人互联终端。 联想目前推出的“云空间”存储容量达200G,以促进个人信息管理,同时全面支持多种文件格式的存取、联系人数据实时备份,各类终端数据同步更新等 ...
来自: 云栖社区 > 论坛 作者: 绚烂的塑料花 浏览:132 回复:0

行业云不容忽视 发展不能一蹴而就

,第一种是像中医药集团的医药云,在这个平台上进行扩展形成医药云,第二种模式是包括行业协会、企业政府联合起来,建立一个行业云。       云不能一蹴而就。雷万云还指出,云化是一个渐进的过程。第一,商业模式、管理、投资等都要基于企业本身的特征和IT基础设施来使用云的服务。第二,应用问题,在原有的基础上完善自己的商业模式、交付模式等。 ...
来自: 云栖社区 > 论坛 作者: tubaobao2012 浏览:190 回复:0

IT峰会三诺“行业云平台”首度曝光

第一款Android 2.2 的“双模”车载增值平板Tele-pad 2,就是引领汽车物联网(telematics)与智慧终端(Pad)一体化车载智慧终端产品。车主可以通过它实现智能车控、汽车通讯、燃料节能管理、娱乐等服务,另外 ...
来自: 云栖社区 > 论坛 作者: 德芙基莎 浏览:175 回复:0

云计算遭遇带宽瓶颈 企业网面临新挑战

 “发送应用与界外存储可能导致无法预料的问题。”InterContinental 酒店集团(IHG)CIO Tom Conophy在提及云计算的时候谈到。这家酒店业巨头管理着分布于全球100个国家的酒店,可将存储和内部应用移至云中 ...
来自: 云栖社区 > 论坛 作者: 星期五惬意 浏览:99 回复:0

云计算物联网也可用作企业名 苏州工商出台6条新规

的意见》(以下简称《意见》),要求全系统在大力支持新兴产业发展、扶持企业做大做强、转型升级、健康规范发展以及扩大内需消费等方面,加强对苏州经济发展提供支撑。其中,6条为新推出。     根据《商业特许经营管理办法》第2章第7条第四款规定 ...
来自: 云栖社区 > 论坛 作者: eaglezhong 浏览:147 回复:0

壳牌统一携手微软,提升业务效能与核心竞争力

现有的IT投资,减少企业在协作平台建设项目上的额外成本花费。在新的平台搭设完毕后,壳牌公司信息技术部IT基础架构经理表示,使用微软 SharePoint 建立企业内部协作门户之后,员工可以更具效率的协作,企业可以更好地掌控和管理各项业务流程及资源,这种全新的数字化工作模式让我们充分感受到IT为传统企业所带来的价值。在未来,他们也将继续和微软合作,加快后续二、三期工程的建设。 ...
来自: 云栖社区 > 论坛 作者: maggie_cuijia 浏览:129 回复:0

电商云平台

,品种齐全。所以,价格就基本是我们吸引消费者的唯一途径,基本上我们的利润是相当微薄的。 但是,对于我们这些中小型的电商来说,抗风险能力也是很弱的,各种货物运输,管理都需要成本,所以,我们就很难抽出资金来帮自己的网店做宣传。消费者不了解,我们就更加失去了和那些 ...
来自: 云栖社区 > 论坛 作者: 瑾鸳 浏览:295 回复:0

深入浅出讨论“云&rdquo

云计算技术同样遵从虚拟化技术的基本准则,包括通过服务器托管软件提供外部储存器的托管服务。这套系统允许计算机系统通过访问远程服务器来访问、管理、操作数据。 一个典型的例子是,一家英国公司想要减少在IT方面的开销,于是将其IT业务外包给一家在布拉格的信息寄存 ...
来自: 云栖社区 > 论坛 作者: 我叫糖果 浏览:125 回复:1

传统服务器与云服务器的对比详情

类似独立服务器的部分,每个部分都可以做单独的操作系统,管理方法同服务器一样。云服务器是,是一种基于WEB服务,提供可调整云主机配置的弹性云技术,整合了计算、存储与网络资源的Iaas服务,具备按需使用和按需即时付费能力的云主机租用服务。在灵活性、可控性、扩展性 ...
来自: 云栖社区 > 论坛 作者: oomaomao 浏览:203 回复:0

云主机的价值

主机软件升级由供应商提供。价值三:如果突然发现硬件故障和灾难恢复措施执行,这些供应商有7*24小时的服务价值四:使用云主机,我们不需要管理我们的计算机,打印机,扫描仪等等价值五:云主机硬件的老化都是有供应商负责价值六:如何应对IT基础设施的扩建,传统模式 ...
来自: 云栖社区 > 论坛 作者: snowpixy 浏览:130 回复:0

云端云主机与VPS的区别

管理服务器无忧。2.真正的弹性使用,根据客户自身定制解决方案。3.配合云硬盘、云存储使用,数据更安全稳定。4.安装客户端,登录远程控制操作,安全、简便。5.丰富的机型和OS配置6.安全的网络,提供内网支持,独享IP7.网络加速 云主机已经全面超越了VPS,而且在同级别的云主机中也处在领先地位。编辑:云端www.idcloud.com.cn ...
来自: 云栖社区 > 论坛 作者: 晓易 浏览:195 回复:0

我心中的云计算

,怎么理解呢,还拿品高云计算www.bingocc.com举例,现在提供云主机、云存储、云监控、云服务器负载均衡、安全组网络隔离、密钥管理,云主机灵活并且可靠,不用担心自建机房时会遇到宕机;同时云存储提供安全、可靠、快速的存储,用起来成本很低;配合7*24的 ...
来自: 云栖社区 > 论坛 作者: 失宠丫头 浏览:110 回复:2

  云端云主机的部署模型

操作系统,管理方法同主机一样。 而云服务器是在一组集群主机上虚拟出多个类似独立服务器的部分,集群中每个服务器上都有云服务器的一个镜像,从而大大提高了云服务器的安全稳定性,除非所有的集群内主机全部出现问题,云服务器才会无法访问。   即需即购,即购即用,不用则 ...
来自: 云栖社区 > 论坛 作者: futeywqw 浏览:121 回复:0
共有2975页 跳转至:GO