Apache Kafka

来自开放百科 - 灰狐
(版本间的差异)
跳转到: 导航, 搜索
(接口驱动)
(指南)
第14行: 第14行:
 
  tar -xzf kafka_2.11-0.9.0.0.tgz  
 
  tar -xzf kafka_2.11-0.9.0.0.tgz  
 
  cd kafka_2.11-0.9.0.0
 
  cd kafka_2.11-0.9.0.0
 +
server.properties
 +
port = 9092
 +
advertised.host.name = localhost
 
  bin/zookeeper-server-start.sh config/zookeeper.properties
 
  bin/zookeeper-server-start.sh config/zookeeper.properties
 
  bin/kafka-server-start.sh config/server.properties
 
  bin/kafka-server-start.sh config/server.properties
第24行: 第27行:
 
  This is another message
 
  This is another message
 
启动一个消费者consumer
 
启动一个消费者consumer
  bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning
+
  bin/kafka-console-consumer.sh --zookeeper localhost:9092 --topic test --from-beginning
 
[https://kafka.apache.org/documentation.html#quickstart 更多细节>>>]
 
[https://kafka.apache.org/documentation.html#quickstart 更多细节>>>]
  

2018年1月7日 (日) 15:47的版本

Kafka 是一个高吞吐量的分布式消息系统,使用 Scala 开发,被用于 LinkedIn

Kafka 类似且堪比 Facebook Scribe 和 Cloudera Flume 系统。

淘宝开源了分布式消息中间件Memorphosis项目,它是Kafka的Java版本,针对淘宝内部应用做了定制和优化。

目录

简介

Kafka不只是个消息系统

新闻

指南

tar -xzf kafka_2.11-0.9.0.0.tgz 
cd kafka_2.11-0.9.0.0
server.properties
port = 9092
advertised.host.name = localhost 
bin/zookeeper-server-start.sh config/zookeeper.properties
bin/kafka-server-start.sh config/server.properties

创建一个topic

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
bin/kafka-topics.sh --list --zookeeper localhost:2181

发送一些消息

bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test
This is a message
This is another message

启动一个消费者consumer

bin/kafka-console-consumer.sh --zookeeper localhost:9092 --topic test --from-beginning

更多细节>>>

分发版

项目

Kafka ecosystem

管理控制台

git clone https://github.com/claudemamo/kafka-web-console
cd kafka-web-console
sbt
> run
http://localhost:9000 

流处理

集成Hodoop

搜索与查询

日志与监控

Connect

Kafka Connect

存储

  • Kafka Streams 使用 RocksDB 做 Local 存储。

文档

更多文档>>>

书籍

服务商

用户

图集

链接

分享您的观点
个人工具
名字空间

变换
操作
导航
工具箱