Windows如何安装运行Apache Kafka

这篇文章主要介绍了Windows如何安装运行Apache Kafka，具有一定借鉴价值，感兴趣的朋友可以参考下，希望大家阅读完这篇文章之后大有收获，下面让小编带着大家一起了解一下。

下载所需文件

• 根据系统OS和CPU架构，在这里下载Server JRE http://www.oracle.com/technetwork/java/javase/downloads/jre8-downloads-2133155.html

• 在这里下载并安装7-zip http://www.7-zip.org/download.html

• 在这里下载Zookeeper，并用7-zip解压 http://zookeeper.apache.org/releases.html

• 在这里下载Kafka并用7-zip解压 http://kafka.apache.org/downloads.html

针对此教程，我们将Zookeeper与Kafka解压到C盘，不过也可以选择其他位置。这里我们要使用完全的zookeeper，而不是用Kafka打包的那个，因为这是一个单节点的Zookeeper实例。也可以运行打包了zookeeper的Kafka，位置在\kafka\bin\windows库中。

安装

A. JDK安装

1.启动JRE安装，选中复选框“修改目标路径”，然后点击安装。

2.修改安装目录，文件夹名称中不能有空格，例如：C:\Java\jre1.8.0_xx\（默认情况下是C:\Program Files\Java\jre1.8.0_xx），然后点击下一步。 
3.现在点击控制面板->系统->高级系统设置->环境变量，打开系统环境变量对话框。 
4.点击用户变量中的新用户变量按钮，然后在变量名称那里输入JAVA_HOME，并将自定义的jre路径填入变量值。如下图所示：

8.确认Java安装打开cmd，输入类型“java –version”，应该能够看到刚刚安装的java版本。

恭喜，Zookeeper已经完成并在端口2181运行。

C. 安装Kafka

1. 进入Kafka配置目录，例如C:\kafka_2.11-0.9.0.0\config 
2. 编辑文件“server.properties” 
3. 找到并编辑“log.dirs=/tmp/kafka-logs” to “log.dir= C:\kafka_2.11-0.9.0.0\kafka-logs” 
4. 如果Zookeeper在某些其他的机器或集群上运行，可以将“zookeeper.connect:2181”修改为自定义IP与端口。在这个演示中我们使用了同一个机器，因此没必要做修改。文件中的Kafka端口和broker.id也是可以配置的。其他设置不变。 
5. Kafka会按照默认，在9092端口上运行，并连接zookeeper的默认端口：2181。

D. 运行Kafka服务器

重要：请确保在启动Kafka服务器前，Zookeeper实例已经准备好并开始运行。

1.进入Kafka安装目录C:\kafka_2.11-0.9.0.0\ 
2.按下Shift+右键，选择“打开命令窗口”选项，打开命令行。 
3.现在输入.\bin\windows\kafka-server-start.bat .\config\server.properties 并回车。

.\bin\windows\kafka-server-start.bat .\config\server.properties

5.现在Kafka已经准备好并开始运行，可以创建主题来存储消息了。我们也能从Java/Scala代码中，或直接从命令行中生成或使用数据。

E. 创建主题

1. 现在创建主题，命名为“test”，replication factor=1（因为只有1个Kafka服务器在运行）。如果集群中所运行的Kafka服务器不止1个，可以相应增加replication-factor，从而提高数据可用性和系统容错性。 
2. 在C:\kafka_2.11-0.9.0.0\bin\windows打开新的命令行。 
3. 输入下面的命令，回车：

kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

6.在producer命令行中任意输入内容，回车；在其他consumer命令行中能看到相应消息。

7.如果能够将消息推送到consumer端并显示出来的话，Kafka安装就完成了。

一些有用的命令：

cd /home/work/soft/kafka_2.8.0-0.8.1.1/bin

./kafka-topics.sh --create --zookeeper 10.48.170.26:2181 --replication-factor 1 --partitions 3 --topic test          
./kafka-console-producer.sh --broker-list 10.48.170.26:9092 --topic test
./kafka-console-consumer.sh --zookeeper 10.48.170.26:2181 --topic test

1.列出主题：./kafka-topics.sh --list --zookeeper 10.48.170.26:2181 
2.描述主题：./kafka-topics.sh --describe --zookeeper 10.48.170.26:2181 --topic [Topic Name] 
3.从头读取消息：./kafka-console-consumer.sh --zookeeper 10.48.170.26:2181 --topic [Topic Name] --from-beginning 
4.删除主题：./kafka-run-class.sh kafka.admin.TopicCommand --delete --topic [topic_to_delete] --zookeeper 10.48.170.26:2181

感谢你能够认真阅读完这篇文章，希望小编分享的“Windows如何安装运行Apache Kafka”这篇文章对大家有帮助，同时也希望大家多多支持亿速云，关注亿速云行业资讯频道，更多相关知识等着你来学习!