标签：offsets topics zookeeper Kafka 集群 迁移 kafka

zookeeper和kafka安装在同3台机器上，组成一个集群，对外提供服务

因为种种原因，需要将kafka和zookeeper 做整体迁移

首先 申请3台机器部署好zookeeper服务，加到原来的集群中，方法见上篇Zookeeper迁移(扩容/缩容)

将kafka也加入到现有的集群中，将数据迁移到新的broker中

将老的3台zookeeper 和kafka下线，发现kafka的就无法消费数据，logstash启动报错

解决方法

进入zookeeper 运行zkCli.sh 

运行ls /brokers/topics 查看主题

然后运行 rmr /brokers/topics/__consumer_offsets 

然后重启kafka集群就好了

nohup bin/kafka-server-start.sh config/server.properties > /dev/null 2>&1 &

__consumer_offsets数据没有迁移，所有偏移量还是连接老的borker，所以才会出现客户端无法消费的现象

标签：offsets,topics,zookeeper,Kafka,集群,迁移,kafka
来源： https://blog.51cto.com/536410/2407568

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。