Linux下Kafka怎么用
更新:HHH   时间:2023-1-7


小编给大家分享一下Linux下Kafka怎么用,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

Kafka 是由 Linkedin 公司开发的,它是一个分布式的,支持多分区、多副本,基于 Zookeeper 的分布式消息流平台,它同时也是一款开源的基于发布订阅模式的消息引擎系统。

1 下载并安装kafka

 # wget http://apache.fayea.com/kafka/0.10.0.1/kafka-0.10.0.1-src.tgz # tar zxvf kafka-0.10.0.1-src.tgz # mv kafka-0.10.0.1-src /usr/local/kafka # cd !$

2 启动服务

运行kafka需要使用Zookeeper,所以需要先启动一个Zookeeper服务器,如果没有Zookeeper,可以使用kafka自带打包和配置好的Zookeeper

 # bin/zookeeper-server-start.sh config/zookeeper.properties

然后启动kafka服务

 # bin/kafka-server-start.sh config/server.properties &

3 新建一个topic

创建一个名为“test”的Topic,只有一个分区和一个备份:

 # bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

创建好之后,可以通过以下命令查看已创建的topic信息:

 # bin/kafka-topics.sh --list --zookeeper localhost:2181test

除手工创建topic外,也可以配置broker,当发布一个不存在的topic时自动创建topic。

4 发送消息

Kafka提供了一个命令行工具,可以从输入文件或者命令行中读取消息并发送给Kafka集群,每一行是一条消息。运行producer,然后在控制台输入几条消息到服务器

 # bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test This is a message This is another message

5 消费消息

Kafka也提供了一个消费消息的命令行工具

 # bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning This is a message This is another message

以上是“Linux下Kafka怎么用”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注天达云行业资讯频道!

返回开发技术教程...