kafka集群安装
Kafka是一个分布式的基于发布/订阅模式的消息队列(MessageQueue),主要应用于大数据实时处理领域。
安装步骤很简单,下载-》解压缩-》配置环境变量-》启动。kafka依赖于zookeeper,需要准备安装好zookeeper环境。
1、安装包的下载:http://kafka.apache.org/downloads.html。
2、解压安装包,解压到/usr/local下面:tar -zxvf kafka_2.11-0.11.0.0.tgz -C /usr/local
解压之后修改名称:mv kafka_2.11-0.11.0.0.tgz kafka
3、在kafka目录下创建logs文件,此文件用来存放运行日志信息。mkdir logs
4、修改配置文件:在config目录下:vim server.properties
5、配置环境变量 vim /etc/profile
export KAFKA_HOME=/opt/module/kafka kafka目录地址
export PATH=$PATH:$KAFKA_HOME/bin
export PATH=$PATH:$KAFKA_HOME/bin
6、再其余两台服务器也是做同样的配置,注意broker.id不得重复。7、启动集群,依次再三台服务器上启动:bin/kafka-server-start.sh -daemon config/server.properties -daemon的功能是后台启动。通过jps查看是否成功:
8、关闭集群,依次关闭:bin/kafka-server-stop.sh stop