借助 Redis ,让 Spark 提速 45 倍!

一些内存数据结构比其他数据结构来得更高效;如果充分利用 RedisSpark运行起来速度更快。Apache Spark已逐渐俨然成为下一代大数据处理工具的典范。通过借鉴开源算法,并将处理任务分布到计算节点集群上,无论在它们在单一平台上所能执行的数据 ...
来自: 开发者社区 > 博客 作者: 知与谁同 浏览:124 回复:0

广告点击数实时统计(Redis + Spark) - 云数据库 Redis

本文将介绍使用 Spark StructuredStreaming与 Redis Stream实现实时广告点击数统计 ...

Spark对接Redis快速入门 - 云数据库 HBase

工作台”使用 Spark对接 Redis数据库的使用方法。前置条件 Spark集群和 Redis在同一个VPC下。进入 Spark分析集群页面,选择“数据库连接”“连接信息”,查看 Spark集群的VPC ...
推荐

阿里云高校特惠,助力学生创业梦!0元体验,快速入门云计算!

建个炫酷的简历网页,制作一个浪漫的表白网页,打造个人专属网盘,多种动手场景应用免费学!!!
广告

【Spark Summit EU 2016】使用Redis模型为Spark-ML加速

本讲义出自Shay Nativ与Dvir Volk在 Spark Summit EU上的演讲,主要介绍了支持网络、可基于内存也可持久化的日志型、开源的Key-Value数据库 Redis,并介绍了 SparkRedis的集成方式,还介绍了为了使 Redis能够 ...
来自: 开发者社区 > 博客 作者: 小猫吃鱼569 浏览:949 回复:0

使用spark-redis组件访问云数据库Redis

本文演示了在 Spark Shell中通过 spark- redis组件读写 Redis数据的场景。所有场景在阿里云E-MapReduce集群内完成, Redis使用阿里云数据库 Redis。作者:无谓 阿里巴巴高级技术专家,2008年加入阿里巴巴集团,先后在B2 ...
来自: 开发者社区 > 博客 作者: 雷飙 浏览:102 回复:0

Kafka+Spark Streaming+Redis实时计算整合实践

经过 Spark Streaming实时计算程序分析,将结果写入 Redis,可以实时获取用户的行为数据,并可以导出进行离线综合统计分析 Spark Streaming介绍 Spark Streaming提供了一个叫做DStream(Discretized ...
来自: 开发者社区 > 博客 作者: shiyanjuncn 浏览:3749 回复:0

Apache Ignite介绍及与各种大数据技术【spark,redis,hadoop】的关系和对比

问题导读 1.Apache Ignite 是什么? 2.Ignite和Hadoop以及 Spark是什么关系? 3.Ignite与其它类似技术相比有哪些特点? Apache Ignite 内存数组组织框架是一个高性能、集成和分布式的内存计算和事务平台,用于 ...
来自: 开发者社区 > 论坛 作者: 公主的蔷薇rain 浏览:150 回复:0

大数据相关22文档(spark、pig、Cassandra、Redis、Shark、hive、hbase)等英文资料

Spark and Shark 1.png (176.28 KB, 下载次数: 0) 下载附件  保存到相册 2015-1-5 23:50 上传 链接:http://pan.baidu.com/s/1pJ1DbUr 密码:t0fg Redis ...
来自: 开发者社区 > 论坛 作者: 笔芯娇儿 浏览:416 回复:9

spark streaming redis 报异常

spark streaming程序中,使用 redis做缓存处理。程序运行几天后 redis报错如下, redis是使用pool获取连接。 [Java] 纯文本查看 复制代码 val pool = new JedisPool(new ...
来自: 开发者社区 > 论坛 作者: 高级新新小宝宝 浏览:395 回复:3

Kafka+Spark Streaming+Redis实时计算整合实践

问题导读 1.本文的应用场景是什么? 2. Spark Streaming中什么是DStream? 3. Spark Streaming提供了哪两种操作类型? 4.本文如何模拟向Kafka实时写入用户行为的事件数据? streaming-dstream.png (26.19 KB, 下载次数: 0) 下载附件  保存到相册 2015-5-27 18:27 上传 ...
来自: 开发者社区 > 论坛 作者: 败给你 浏览:156 回复:0

Spark 如何写入HBase/Redis/MySQL/Kafka

这篇文章是给 Spark初学者写的,老手就不要看了。文章谈及如何和HBase/ Redis/MySQL/Kafka等进行交互的方法,主要是为了让大家明白其内部机制。一些概念一个partition 对应一个task,一个task 必定存在于一个 ...
来自: 开发者社区 > 博客 作者: 祝威廉 浏览:1438 回复:0

Hadoop、Spark、HBase与Redis的适用性见解

问题导读: 1.你认为Hadoop适用什么场景? 2. Spark适用于什么场景? 3.HBase与 Redis各有什么特点? 最近在网上又看到有关于Hadoop适用性的讨论[1]。想想今年大数据技术开始由互联网巨头走向中小互联网和传统行业,估计不少人都在 ...
来自: 开发者社区 > 论坛 作者: singyork 浏览:109 回复:3

通过Redis-shake实现Redis实例间的数据迁移 - 云数据库 Redis

Redis-shake的sync(同步)模式支持全量数据迁移和增量数据迁移,可实现同一或不同阿里云账号下 Redis实例间的数据迁移 ...

Codis/Redis集群版通过redis-shake迁移上云 - 云数据库 Redis

使用 redis-shake的sync模式,将自建Codis/ Redis集群迁移到云数据库 Redis版实例 ...

使用redis-shake备份Redis实例 - 云数据库 Redis

您可以使用 redis-shake的dump模式将云数据库 Redis版实例中的数据备份到RDB文件中 ...

从自建Redis集群同步至Redis集群实例 - 云数据库 Redis

Transmission Service)支持 Redis集群间的单向同步,适用于数据迁移、异地多活、数据异地容灾等多种应用场景。本文以自建 Redis集群同步至阿里云 Redis集群实例为例,介绍数据同步作业的配置流程 ...

使用DBS将自建Redis恢复到云数据库Redis版 - 云数据库 Redis

(Database Backup Service)对自建的 Redis数据库进行备份,然后将备份数据恢复到一个云数据库 Redis版实例中,实现 Redis数据的安全备份或者便捷上云 ...

云数据库Redis版支持Jedis等通用的Redis客户端吗? - 云数据库 Redis

支持。任何兼容 Redis协议的客户端都可以访问云数据库 Redis版,您可以根据应用特点选用 Redis客户端 ...

云数据库Redis版兼容哪些Redis命令和操作? - 云数据库 Redis

云数据库 Redis版兼容支持绝大部分开源 Redis的命令和操作,仅禁用了个别命令。 详情请参见 Redis命令支持。 ...

云数据库Redis版兼容哪些Redis命令和操作? - 云数据库 Redis

云数据库 Redis版兼容支持绝大部分开源 Redis的命令和操作,仅禁用了个别命令。 详情请参见 Redis命令支持。 ...

从ECS上的Twemproxy Redis集群同步至Redis实例 - 云数据库 Redis

阿里云数据库 Redis版是兼容开源 Redis协议标准、提供内存加硬盘混合存储的数据库服务,基于高可靠双机热备架构及可平滑扩展的集群架构 ...

从ECS上的Twemproxy Redis集群同步至Redis实例 - 云数据库 Redis

阿里云数据库 Redis版是兼容开源 Redis协议标准、提供内存加硬盘混合存储的数据库服务,基于高可靠双机热备架构及可平滑扩展的集群架构 ...

通过Redis-shake将自建Redis迁移至阿里云 - 云数据库 Redis

通过 Redis-shake的sync(同步)模式,可以将自建 Redis数据库的数据实时迁移至 Redis实例,可帮助您平滑地完成自建 ...

从自建Redis迁移至阿里云Redis - 云数据库 Redis

Transmission Service),将自建 Redis迁移至阿里云 Redis实例。DTS支持全量数据迁移以及增量数据迁移,同时使用这两种迁移类型可以实现在自建应用不停服的情况下,平滑地完成自建 Redis数据库的迁移上云 ...

从ECS上的自建Redis同步至Redis实例 - 云数据库 Redis

Transmission Service)支持 Redis数据库的单向同步,适用于异地多活、数据异地容灾等多种应用场景。本文以ECS上的自建 Redis同步至 Redis实例为例,介绍数据同步作业的配置流程 ...

从通过专线、VPN网关或智能接入网关接入的自建Redis同步至ECS上的自建Redis - 云数据库 Redis

Transmission Service)支持 Redis数据库的单向同步,适用于异地多活、数据异地容灾等多种应用场景。本文以通过专线、VPN网关或智能接入网关接入的自建 Redis同步至ECS上的自建 Redis为例,介绍数据同步作业的配置流程 ...

云数据库Redis与自建Redis的对比 - 云数据库 Redis

相比自购服务器搭建 Redis数据库,云数据库 Redis在数据安全、运维投入、内核优化等方面都有一定的优势 ...

云数据库Redis版与Redis是什么关系? - 云数据库 Redis

云数据库 Redis版是兼容 Redis协议的Key-Value型云存储服务。 云数据库 Redis版支持 ...

连接Redis实例需要在ECS上安装Redis吗? - 云数据库 Redis

不需要,只要有相应的 Redis客户端即可从ECS上连接 Redis实例。 连接方式请参见连接 Redis实例。 ...

通过redis-cli连接Redis - 云数据库 Redis

redis-cli是原生 Redis自带的命令行工具,您可以在ECS实例或本地设备上通过 redis-cli连接云数据库 Redis,进行 ...

从自建Redis迁移至专属集群MyBase for Redis - 云数据库专属集群 MyBase

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将自建 Redis迁移至MyBase for ...

从ECS上的自建Redis同步至Redis实例 - 数据传输服务 DTS

Transmission Service)支持 Redis数据库的单向同步,适用于异地多活、数据异地容灾等多种应用场景。本文以ECS上的自建 Redis同步至 Redis实例为例,介绍数据同步作业的配置流程 ...

从自建Redis集群同步至Redis集群实例 - 数据传输服务 DTS

Transmission Service)支持 Redis集群间的单向同步,适用于数据迁移、异地多活、数据异地容灾等多种应用场景。本文以自建 Redis集群同步至阿里云 Redis集群实例为例,介绍数据同步作业的配置流程 ...

从ECS上的Twemproxy Redis集群同步至Redis实例 - 数据传输服务 DTS

阿里云数据库 Redis版是兼容开源 Redis协议标准、提供内存加硬盘混合存储的数据库服务,基于高可靠双机热备架构及可平滑扩展的集群架构 ...

从自建Redis迁移至阿里云Redis - 数据传输服务 DTS

Transmission Service),将自建 Redis迁移至阿里云 Redis实例。DTS支持全量数据迁移以及增量数据迁移,同时使用这两种迁移类型可以实现在自建应用不停服的情况下,平滑地完成自建 Redis数据库的迁移上云 ...

从通过专线、VPN网关或智能接入网关接入的自建Redis同步至ECS上的自建Redis - 数据传输服务 DTS

Transmission Service)支持 Redis数据库的单向同步,适用于异地多活、数据异地容灾等多种应用场景。本文以通过专线、VPN网关或智能接入网关接入的自建 Redis同步至ECS上的自建 Redis为例,介绍数据同步作业的配置流程 ...
< 1 2 3 4 ... 225 >
共有225页 跳转至: GO

新品推荐

你可能感兴趣

热门推荐

企典文档内容 商标申请信息 商标注册信息 云计算服务器排行榜 大数据产品榜单