RabbitMQ从入门到进阶(Work Queues)

一起养成写作习惯!这是我参与「掘金日新计划 · 4 月更文挑战」的第11天,点击查看活动详情

三、Work Queues

3.1 轮训分发消息

多个工作线程其实就是多个消息消费者,也可称为处理者

exclusive:独有的

轮训:队列中的消息会被平均分摊给多个消费者进行处理

image-20220312220707370

**工作队列(又称任务队列)的主要思想是避免立即执行资源密集型任务,而不得不等待它完成。**相反我们安排任务在之后执行。我们把任务封装为消息并将其发送到队列。在后台运行的工作进程将弹出任务并最终执行作业。当有多个工作线程时,这些工作线程将一起处理这些任务。

image-20220312175447616

3.1.1 抽取工具类

package com.caq.rabbitmq.utils;

import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.ConnectionFactory;

public class RabbitMqUtils {
    //得到一个连接的 channel
    public static Channel getChannel() throws Exception {
//创建一个连接工厂 
        ConnectionFactory factory = new ConnectionFactory();
        factory.setHost("192.168.42.96");
        factory.setUsername("admin");
        factory.setPassword("123");
        Connection connection = factory.newConnection();
        Channel channel = connection.createChannel();
        return channel;
    }
} 
复制代码

3.1.2 启动两个工作线程

package com.caq.rabbitmq.two;

import com.caq.rabbitmq.utils.RabbitMqUtils;
import com.rabbitmq.client.CancelCallback;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;

/**
 * 这是一个工作线程(相当于消费者)
 */
public class Worker01 {

    public static final String QUEUE_NAME = "hello";

    public static void main(String[] args) throws Exception {
        Channel channel = RabbitMqUtils.getChannel();

        DeliverCallback deliverCallback = (consumerTag, message) -> {
            System.out.println("接受到的消息" + new String(message.getBody()));
        };

        //取消消息时的回调
        CancelCallback cancelCallback = consumerTag -> {
            System.out.println(consumerTag + "消费者取消消费接口回调逻辑");
        };

        System.out.println("C2等待接受消息........");
        channel.basicConsume(QUEUE_NAME, true, deliverCallback, cancelCallback);


    }
}
复制代码

image-20220312182318339

image-20220312182326149

3.1.3 启动一个发送线程

package com.caq.rabbitmq.two;import com.caq.rabbitmq.utils.RabbitMqUtils;import com.rabbitmq.client.Channel;import java.util.Scanner;public class Task01 {    public static final String QUEUE_NAME = "hello";    public static void main(String[] args) throws Exception {        Channel channel = RabbitMqUtils.getChannel();        channel.queueDeclare(QUEUE_NAME, false, false, false, null);//        从控制台当中接受信息        Scanner scanner = new Scanner(System.in);        while (scanner.hasNext()) {            String message = scanner.next();            channel.basicPublish("", QUEUE_NAME, null, message.getBytes());            System.out.println("发送完成" + message);        }    }}
复制代码

image-20220312182347495

可以看到结果是轮训处理的

image-20220312182354745

image-20220312182359447

3.2 消息应答

3.2.1 概念

消费者处理完业务逻辑,手动返回ack(通知)告诉队列处理完了,队列进而删除消息。

消费者完成一个任务可能需要一段时间,如果其中一个消费者处理一个长的任务并仅只完成了部分突然它挂掉了,会发生什么情况。RabbitMQ 一旦向消费者传递了一条消息,便立即将该消息标记为删除。在这种情况下,突然有个消费者挂掉了,我们将丢失正在处理的消息。以及后续发送给该消费这的消息,因为它无法接收到。

为了保证消息在发送过程中不丢失,rabbitmq 引入消息应答机制,消息应答就是:消费者在接收到消息并且处理该消息之后,告诉 rabbitmq 它已经处理了,rabbitmq 可以把该消息删除了。

3.2.2 自动应答

消息发送后立即被认为已经传送成功,这种模式需要在高吞吐量和数据传输安全性方面做权衡,因为这种模式如果消息在接收到之前,消费者那边出现连接或者 channel 关闭,那么消息就丢失了,当然另一方面这种模式消费者那边可以传递过载的消息,没有对传递的消息数量进行限制, 当然这样有可能使得消费者这边由于接收太多还来不及处理的消息,导致这些消息的积压,最终使得内存耗尽,最终这些消费者线程被操作系统杀死,所以这种模式仅适用在消费者可以高效并以某种速率能够处理这些消息的情况下

3.2.3 消息应答的方法

手动应答:

A.Channel.basicAck(用于肯定确认)

​ RabbitMQ 已知道该消息并且成功的处理消息,可以将其丢弃了

B.Channel.basicNack(用于否定确认)

C.Channel.basicReject(用于否定确认)

与 Channel.basicNack 相比少一个参数

​ 不处理该消息了直接拒绝,可以将其丢弃了

3.2.4 Multiple的解释

手动应答的两个否定确认方法相差的参数就是Multiple

image-20220312203847247

multiple 的 true 和 false 代表不同意思

true 代表批量应答 channel 上未应答的消息

​ 比如说 channel 上有传送 tag 的消息 5,6,7,8 当前 tag 是 8 那么此时5-8 的这些还未应答的消息都会被确认收到消息应答

false 同上面相比

​ 只会应答 tag=8 的消息 5,6,7 这三个消息依然不会被确认收到消息应答

image-20220312204052872

3.2.5 消息自动重新入队

**如果消费者由于某些原因失去连接(其通道已关闭,连接已关闭或 TCP 连接丢失),导致消息未发送 ACK 确认,RabbitMQ 将了解到消息未完全处理,并将对其重新排队。如果此时其他消费者可以处理,它将很快将其重新分发给另一个消费者。**这样,即使某个消费者偶尔死亡,也可以确保不会丢失任何消息。

image-20220312205135125

3.2.6 消息手动应答

消费者,还是跟之前一样

package com.caq.rabbitmq.three;import com.caq.rabbitmq.utils.RabbitMqUtils;import com.rabbitmq.client.Channel;import java.util.Scanner;public class Task2 {    //    队列名称    public static final String TASK_QUEUE_NAME = "ack_queue";    //发送消息    public static void main(String[] args) throws Exception {        Channel channel = RabbitMqUtils.getChannel();        channel.queueDeclare(TASK_QUEUE_NAME,false,false,false,null);        Scanner scanner = new Scanner(System.in);        while (scanner.hasNext()) {            String message = scanner.next();            channel.basicPublish("", TASK_QUEUE_NAME, null, message.getBytes("UTF-8"));            System.out.println("生产者发出消息" + message);        }    }}
复制代码

消费者01

delivery.getEnvelope().getDeliveryTag()表示消息标记

package com.caq.rabbitmq.three;import com.caq.rabbitmq.utils.RabbitMqUtils;import com.caq.rabbitmq.utils.SleepUtils;import com.rabbitmq.client.CancelCallback;import com.rabbitmq.client.Channel;import com.rabbitmq.client.DeliverCallback;public class Work03 {    public static final String TASK_QUEUE_NAME = "ack_queue";    public static void main(String[] args) throws Exception {        Channel channel = RabbitMqUtils.getChannel();        System.out.println("C1 等待接收消息处理时间较短");        DeliverCallback deliverCallback = (consumerTag, delivery) -> {            String message = new String(delivery.getBody());            SleepUtils.sleep(1);            System.out.println("接收到消息:" + message);            /**             * 1.消息标记 tag             * 2.是否批量应答未应答消息             */            channel.basicAck(delivery.getEnvelope().getDeliveryTag(), false);        };        CancelCallback cancelCallback = (s) -> {            System.out.println(s + "消费者取消消费接口回调逻辑");        };        //采用手动应答        boolean autoAck = false;        channel.basicConsume(TASK_QUEUE_NAME, autoAck, deliverCallback, cancelCallback);    }}
复制代码

消费者02

这个消费者我们让它休眠时间长一点,那么它处理消息的请求也会很慢,之后给它断开连接

看未处理的消息是否会被正常的消费者处理

package com.caq.rabbitmq.three;import com.caq.rabbitmq.utils.RabbitMqUtils;import com.caq.rabbitmq.utils.SleepUtils;import com.rabbitmq.client.CancelCallback;import com.rabbitmq.client.Channel;import com.rabbitmq.client.DeliverCallback;public class Work04 {    public static final String TASK_QUEUE_NAME = "ack_queue";    public static void main(String[] args) throws Exception {        Channel channel = RabbitMqUtils.getChannel();        System.out.println("C2 等待接收消息处理时间较长");        DeliverCallback deliverCallback = (consumerTag, delivery) -> {            String message = new String(delivery.getBody());            SleepUtils.sleep(30);            System.out.println("接收到消息:" + message);            /**             * 1.消息标记 tag             * 2.是否批量应答未应答消息             */            channel.basicAck(delivery.getEnvelope().getDeliveryTag(), false);        };        CancelCallback cancelCallback = (s) -> {            System.out.println(s + "消费者取消消费接口回调逻辑");        };        //采用手动应答        boolean autoAck = false;        channel.basicConsume(TASK_QUEUE_NAME, autoAck, deliverCallback, cancelCallback);    }}
复制代码

3.2.7 图片演示

image-20220312215308063

这一部分一定要跟着做一遍,不然只能理解字面意思

image-20220312215349902

image-20220312215358676

worker04(消费者)处理的慢,关掉后。消息会被worker03(消费者)处理。这就是手动应答中的消息自动重新入队机制

猜你喜欢

转载自juejin.im/post/7085143185814454279