标签：消费者 HW 笔记 kafka topic 消息 Kafka

Kafka是一个分布式的基于发布/订阅模式的消息队列，主要应用于大数据实时处理领域 消息队列好处： 解耦，可扩展性，缓冲，削峰

生产者生产消息 消费者消费消息 Kafka集群管理消息 Zookeeper注册消息 同一个分区的数据，同时只能被同一个组里面的某一个消费者所消费 Zookeeper作用：帮助kafka群组存储一些信息，帮助消费者存储消费到的位置信息 推和拉（消费者）两种模式

群起kafka [atguigu@hadoop102 kafka]$ bin/kafka-server-start.sh config/server.properties

Kafka中消息是以topic进行分类的，生产者生产消息，消费者消费消息，都是面向topic的 topic是逻辑上的概念，而partition是物理上的概念，每个partition对应一个log文件

通过二分查找法定位offset的message

HW只能保证副本之间的数据的一致性，并不能保证数据不丢失或者不重复

ack 0,1,-1 ISR :HW ,LEO

P19

陆续更新中。。

标签：消费者,HW,笔记,kafka,topic,消息,Kafka
来源： https://www.cnblogs.com/dreamzj/p/14332640.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。