> 文章列表 > kafka安装

kafka安装

kafka安装

kafka安装

  • 前置
    • 将压缩包拷贝到虚拟机中
    • 解压
    • 改名
  • 更改server.properties
  • 启动
    • 先启动zookeeper
    • 非静默启动。会占用一个黑窗口
      • 再启动一个窗口,用jps查看
    • 静默启动 加一个-daemon
    • 另一种静默启动
  • 操作命令
    • 创建消息队列
    • 查看消息队列
    • 创建副本(备份)单机版只能备份一个(同一台机器备份多个,没有意义)
    • 查看队列详情
      • 再查看3个分区的队列
    • 生产消费消息
      • 生产消息
      • 消费消息
      • 生产消息输入啥,消费消息就显示啥
    • 查看队列中的消息数量
  • 关闭
    • 先关kafka
    • 再关zookeeper

前置

将压缩包拷贝到虚拟机中

kafka安装
kafka安装

解压

[root@cp145 install]# tar -zxf ./kafka_2.12-2.8.0.tgz -C ../soft/

kafka安装

改名

[root@cp145 soft]# mv kafka_2.12-2.8.0/ kafka212

kafka安装

更改server.properties

[root@cp145 config]# vim ./server.properties 

kafka安装
当前虚拟机地址
kafka安装
消息存放的目录(没有就新建)
kafka安装
kafka安装
日志保存时间(小时)
kafka安装
zookeeper的地址
kafka安装
增加一行,不然保护机制不让删除
可以对topic删除

delete.topic.enable=true

kafka安装
退出后将0输出到消息目录下的myid

[root@cp145 config]# echo "0" > /opt/soft/kafka212/data/myid

kafka安装
添加全局变量

#KAFKA_HOME
export KAFKA_HOME=/opt/soft/kafka212
export PATH=$PATH:$KAFKA_HOME/bin

启动

先启动zookeeper

zkServer.sh start

kafka安装

非静默启动。会占用一个黑窗口

[root@cp145 data]# kafka-server-start.sh /opt/soft/kafka212/config/server.properties 

kafka安装

再启动一个窗口,用jps查看

kafka安装

静默启动 加一个-daemon

[root@cp145 data]# kafka-server-start.sh -daemon /opt/soft/kafka212/config/server.properties

kafka安装

另一种静默启动

[root@cp145 data]# nohup kafka-server-start.sh /opt/soft/kafka212/config/server.properties &

kafka安装

操作命令

创建消息队列

[root@cp145 data]# kafka-topics.sh --create --zookeeper 192.168.153.145:2181 --topic cp --partitions 1 --replication-factor 1
//  --topic cp 起名cp partitions 1 分区数为1 replication-factor 1 副本数为1(备份一次)

kafka安装

查看消息队列

[root@cp145 data]# kafka-topics.sh --zookeeper 192.168.153.145:2181 --list

kafka安装

创建副本(备份)单机版只能备份一个(同一台机器备份多个,没有意义)

–replication-factor 1(有几台机器就写几)

[root@cp145 data]# kafka-topics.sh --create --zookeeper 192.168.153.145:2181 --topic bigdata --partitions 3 --replication-factor 1

kafka安装

查看队列详情

[root@cp145 data]# kafka-topics.sh --describe --zookeeper 192.168.153.145:2181 --topic cp

kafka安装

再查看3个分区的队列

[root@cp145 data]# kafka-topics.sh --describe --zookeeper 192.168.153.145:2181 --topic bigdata

kafka安装

生产消费消息

生产消息

[root@cp145 data]# kafka-console-producer.sh --topic bigdata --broker-list 192.168.153.145:9092

消费消息

[root@cp145 data]# kafka-console-consumer.sh --bootstrap-server 192.168.153.145:9092 --topic bigdata

最后加上–from-beginning,就是从头开始取消息

生产消息输入啥,消费消息就显示啥

kafka安装

查看队列中的消息数量

kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list 192.168.153.145:9092 --topic bigdata

kafka安装

关闭

先关kafka

直接kill -9
kafka安装

再关zookeeper

zkServer.sh stop

kafka安装