文章 2017-11-20 来自:开发者社区

Kafka实战-入门

1.概述   经过一个多月的时间观察,业务上在集成Kafka后,各方面还算稳定,这里打算抽时间给大家分享一下Kafka在实际场景中的一些使用心得。本篇博客打算先给大家入个门,让大家对Kafka有个初步的了解,知道Kafka是做什么的,下面是本篇博客的目录内容: Kafka背景 Kafka应用场景 Kafka架构原理   下面开始今天的博客分享内容。 2.Kafka背景   Kafka它本质上...

Kafka实战-入门
文章 2017-11-13 来自:开发者社区

Kafka 入门 and kafka+logstash 实战应用

一、基础理论 这块是整个kafka的核心无论你是先操作在来看还是先看在操作都需要多看几遍。 首先来了解一下Kafka所使用的基本术语 Topic Kafka将消息种子(Feed)分门别类 每一类的消息称之为话题(Topic).Producer 发布消息的对象称之为话题生产者(Kafka topic producer)Consumer 订阅消息并处理发布的消息的种子的对象称之为话题消费者(con.....

Kafka 入门 and kafka+logstash 实战应用
文章 2017-09-01 来自:开发者社区

kafka入门介绍(转载)

Kafka作为一个分布式的流平台,这到底意味着什么? 我们认为,一个流处理平台具有三个关键能力: 发布和订阅消息(流),在这方面,它类似于一个消息队列或企业消息系统。 以容错的方式存储消息(流)。 在消息流发生时处理它们。 什么是kakfa的优势? 它应用于2大类应用: 构建实时的流数据管道,可靠地获取系统和应用程序之间的数据。 构建实时流的应用程序,对数据流进行转换或反应。 要了解kafka是....

文章 2017-02-10 来自:开发者社区

Kafka概念入门(一)

序:如何保证kafka全局消息有序?   比如,有100条有序数据,生产者发送到kafka集群,kafka的分片有4个,可能的情况就是一个分片保存0-25,一个保存25-50......这样消息在kafka中存储是局部有序了。严格说,kafka是无法保证全局消息有序的,没有这个机制,只能局部有序。 1、Kafka是什么   在流式计算中,Kafka一般用来缓存数据,Storm通过消费Kafka.....

文章 2016-10-15 来自:开发者社区

kafka-0.10.0官网翻译(一)入门指南

1.1 IntroductionKafka is a distributed streaming platform. What exactly does that mean?kafka是一个分布式的流式平台,它到底是什么意思? We think of a streaming platform as having three key capabilities:我们认为流式平台有以下三个主要的功能:....

文章 2016-09-07 来自:开发者社区

kafka入门:简介、使用场景、设计原理、主要配置及集群搭建

问题导读: 1.zookeeper在kafka的作用是什么? 2.kafka中几乎不允许对消息进行“随机读写”的原因是什么? 3.kafka集群consumer和producer状态信息是如何保存的? 4.partitions设计的目的的根本原因是什么? 一、入门     1、简介     Kafka is a distributed,partitioned...

kafka入门:简介、使用场景、设计原理、主要配置及集群搭建
文章 2016-06-08 来自:开发者社区

Kafka入门(一)

一,消息队列的分类     1,点对点               消息生产者生产消息发送到queue中,然后消息消费者从queue中取出并且消费消息。        &...

Kafka入门(一)
文章 2016-06-04 来自:开发者社区

kafka入门(二)——kafka的逻辑结构

一,组成部分概要            Producer:消息生产者           Consumer:消息消费者        &nb...

kafka入门(二)——kafka的逻辑结构
文章 2015-12-09 来自:开发者社区

跟我学Kafka源码使用入门(三)

这一节咱们主要是讨论单机版的Kafka的简单使用,关于集群方面的东西其实也非常简单,具体可以参考Kafka官网进行配置既可。 1、准备Zookeeper环境我们使用的是zookeeper-3.5.0版本。 使用./zkServer.sh start命令启动Zookeeper 使用ps -ax | grep zookeeper命令,出现下图所示: 2、准备Kafka环境我们使用的...

文章 2015-12-03 来自:开发者社区

Spark修炼之道(进阶篇)——Spark入门到精通:第十六节 Spark Streaming与Kafka

作者:周志湖 主要内容 Spark Streaming与Kafka版的WordCount示例(一) Spark Streaming与Kafka版的WordCount示例(二) 1. Spark Streaming与Kafka版本的WordCount示例 (一) 启动kafka集群 root@sparkslave02:/hadoopLearning/kafka_2.10-0.8.2....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

消息队列

消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。

+关注