kafka入门(二)

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/wumei12345/article/details/87279623

一、单播消费  多播消费

一个分区只能由一个消费组下面的某个消费者消费,可以理解成点对点,即单播消费

一个分区可以由多个消费组中的某个消费者消费,可以理解成发布订阅模式。即多播消费

在同一个消费群租里的消费者数量不能大于分区数,不同的消费群租可以理解成不同的程序

                           

在配置kafka集群的时候,可以不用把所有的服务地址都写上,因为kafka可以通过zookeeper找到真正的主节点,如果在发送消息时,没有指定发送到哪个分区,则kafka会轮询发送到每个分区,如果调用的方法参数指定了key,则会计算出key的hash值然后对总分区数取模,最终计算出发送到哪个分区,如果调用的方法即指定了分区也设置了key,则按照指定的分区发送。

二、同步、异步发送消息

1、同步:发送消息后,代码一直处于阻塞状态知道发送消息返回结果。

2、异步:发送消息后,会通过callBack回调,返回消息发送成功还是失败,但是这个回调不影响下面的代码,下面的代码可以继续执行。

三、消费者

   kafka消费者是一个长轮询方法poll()方法

四、kafak为什么效率高?

1、服务端无状态(offset不用自己维护,交给zookeeper维护)

2、kafka采用磁盘顺序写,省去了碎片空间的消耗

五、kafka选举

 kafka在每个broker启动时,会在zookeeer给每个服务创建一个临时节点,并且选出一个主节点,当主节点挂到之后,会通过监听通知其他服务器,其他机器收到通知后,后进入选举状态,所有节点就会同时调用zookeeper的creater path命令创建相同的目录(这就是zookeeper的分布式锁),因为这个节点是唯一的,所以谁最先创建了谁就是新的主节点,

.

猜你喜欢

转载自blog.csdn.net/wumei12345/article/details/87279623
今日推荐