centos6 搭建单机版卡夫卡

子台
157 阅读2分钟

​ 本文已参与「新人创作礼」活动，一起开启掘金创作之路。  

1.安装好jdk

该步骤省略，没有配过的小伙伴可以自行百度一下，资料很多

2.安装好zookeeper

  1.  下载zookeeper 下载地址为zookeeper.apache.org/releases.ht…

  2. 将下载好的压缩包上传到linux上 本人的放置地址为 /software/

  3. 将压缩包解压，解压命令：tar -vxzf  包名 -C 解压地址

  4. 进入bin同级目录 创建data文件夹 创建命令：mkdir data

  5. 进入conf目类 将zoo_sample.cfg复制 并重命名为zoo.cfg 命令：cp zoo_sample.cfg  zoo.cfg

  6. 修改zoo.cfg文件中的 dataDir地址， 修改问刚才创建的data文件夹路径

    ​

  7. asd

  8. 进入bin目类下 启动zookeeper 命令：./zkServer.sh start

  9. 执行./zkServer.sh status 查看是否开启成功，若成功如下图

​

3.设置zookeeper为开机启动并关闭防火墙

1.关闭防火墙
service iptables stop
2.关闭防火墙开机自启
chkconfig iptables off

4.安装kafka

  1. 下载kafka 并传到linux上 下载地址：Apache Kafka
  2. 解压到指定文件内 我的安装路径为 /opt/kafka

5.修改配置文件

进入kafka安装路径中的config文件夹，修改server.properties文件，将下图中红框线内的部分解除注释，并修改为自己的ip或localhost​

6.启动kafka，创建topic 以及生产者 消费者

  1. 启动命令：bin/kafka-server-start.sh config/server2.properties （需要在kfk根目录下执行 在bin下执行需要对应更改对应的config目类）

  2. 创建topic：./bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 2 --topic topic名称  

    --partition 2表示分区

    --replication-factor 1表示副本因子，之前说过broker无主副之分但是partition有主副之分，所以此参数的值不能大于broker数就是kafka服务节点数，我的例子中只有一个shb01节点所以如果指定2会报错的。

  3. 查看topic列表：./bin/kafka-topics.sh --list --zookeeper localhost:2181

  4. 查看某个topic的详细信息：./kafka-topics.sh --describe  --zookeeper 192.168.200.128:2181 --topic  topic名称

  5. 创建生产者（发送方）：./bin/kafka-console-producer.sh --broker-list localhost:9092 --topic topic名称

  6. 创建消费者（接收方）：./bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic topic名称

  7. 注意：消费者和生产者需要在一个topic内才可以接收到数据，且启动kafka时要确认zookeeper已经启动

7测试队列

在生产者输入数据，查看消费者是否能够接收到数据

​

avatar
文章
阅读
粉丝