ICode9

精准搜索请尝试: 精确搜索
首页 > 系统相关> 文章详细

centos7安装kafka

2022-08-31 00:05:23  阅读:267  来源: 互联网

标签:config zookeeper server centos7 2.12 kafka 安装 properties


参考:https://blog.csdn.net/yang1393214887/article/details/123425715

1. 官网下载https://kafka.apache.org/downloads

 

 


https://dlcdn.apache.org/kafka/3.1.0/kafka_2.12-3.1.0.tgz

 

2. 上传到centos7 /usr/目录,解压到此目录
tar -zxvf kafka_2.12-3.2.1.tgz 
4. 配置kafka单节点
4.1 配置zookeeper单节点(kafka自带,不需要重新下载)
进入kafka安装目录:cd /usr/kafka_2.12-3.2.1/

创建zookeeper数据存放目录:mkdir -p zookeeper/data

创建zookeeper日志存放目录:mkdir -p zookeeper/logs

进入配置文件目录:cd config/

备份原来的配置文件:mv zookeeper.properties zookeeper.properties.bak20220830

重写配置文件:(路径根据自己情况改)

[root@xxxxpcV7-03 config]# pwd
/usr/kafka_2.12-3.2.1/config
[root@xxxxpcV7-03 config]#vi zookeeper.properties 

添加:

tickTime=2000
dataDir=/usr/kafka_2.12-3.2.1/zookeeper/data/
dataLogDir=/usr/kafka_2.12-3.2.1/zookeeper/logs/
clientPort=2181

4.2 配置kafka单节点
进入kafka安装目录:cd /usr/kafka_2.12-3.2.1/

创建日志存放目录:mkdir logs

进入配置文件目录:cd config/

备份原来的配置文件:mv server.properties server.properties.bak20220830

重新写配置文件(也可以在上一步用复制命令,再修改配置文件对应内容)

[root@xxxxpcV7-03 config]#vi zookeeper.properties 

添加:

broker.id=1
listeners=PLAINTEXT://192.168.78.203:9092
num.network.threads=3
num.io.threads=8
socket.send.buffer.bytes=102400
socket.receive.buffer.bytes=102400
socket.request.max.bytes=104857600
log.dirs=/usr/kafka_2.12-3.2.1/logs
num.partitions=1
num.recovery.threads.per.data.dir=1
offsets.topic.replication.factor=1
transaction.state.log.replication.factor=1
transaction.state.log.min.isr=1
log.retention.hours=168
log.segment.bytes=1073741824
log.retention.check.interval.ms=300000
zookeeper.connect=192.168.78.203:2181
zookeeper.connection.timeout.ms=6000

 

上边配置的server.properties的内容基本都是原server.properties的默认配置,到自己安装时主要修改:

broker.id broker的id修改为任意自己想要的数值(和zookeeper中的id类似的)

listeners 监听址址;修改为kafka要监听的地址

num.partitions 修改每个topic的默认分区参数,默认是1,具体合适的取值需要根据服务器配置进程确定

log.dirs 日志文件存放目录(修改为自己要存放日志的目录)

zookeeper.connect zookeeper监听地址。修改为自己的zookeeper的监听地址,如果是集群所有地址全写上用逗号(半角)隔开即可

5、启动

kafka的bin目录:

"-daemon" 参数代表以守护进程的方式启动kafka server-dae
./zookeeper-server-start.sh -daemon ../config/zookeeper.properties #启动zookeeper
./kafka-server-start.sh -daemon ../config/server.properties #启动kafka
注意:如果启动后查不到进程,可以看JAVA_HOME是否配置

查看是否有进程:

jps
6、停止

./zookeeper-server-stop.sh #停止zookeeper
./kafka-server-stop.sh #停止kafka,centos7上可能关不了用kill -9直接杀掉

 

标签:config,zookeeper,server,centos7,2.12,kafka,安装,properties
来源: https://www.cnblogs.com/qsds/p/16641388.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有