rabbitmq - 多交换队列模型的 RabbitMQ 消费者设计

Question

我有一个具有以下配置的 RabbitMQ 设置。

• 每个交易所都是FANOUT类型
• 多个队列附加到每个 Exchange。
• BlockingConnection由消费者制造。
• 单个消费者处理所有回调。

问题 -

一些有效负载比其他有效负载需要更长的时间来处理，这导致消费者即使在其他队列中有有效负载时也保持空闲状态。

问题 -

1. 我应该如何实施消费者以避免长时间等待？我应该为每个模块运行单独的消费者吗？任何用户体验？
2. 我可以配置 RabbitMQ 来处理这些情况吗？如果是这样怎么办。？

Answer 1

首先，您使用的是什么编程语言？大多数常用语言，如 python、java、c#，都支持为并行进程创建额外的线程。

假设您使用下面的队列（伪代码）：

def callback(ch, method, properties, body) ...
def threaded_function(ch, method, properties, body) ...

channel.basic_qos(prefetch_count=3)
channel.basic_consume(callback, queue='task_queue')
channel.start_consuming()

首先，设置“prefetch_count=3”允许您的消费者同时拥有最多 3 条处于未确认状态的消息。

在回调方法中，您应该使用 threaded_function 启动一个线程来执行每条消息。在 threaded_function 方法体的末尾，执行以下操作：

ch.basic_ack(delivery_tag = method.delivery_tag)

这样，最多可以同时处理3条消息，即使其中一个或两个线程需要更长的时间运行，其他线程仍然可以处理下一条消息。

Answer 2

首先，很高兴知道为什么您有多个扇出交换？你真的需要这个吗？扇出交换将消息发送到所有队列...

1. 只要有更多的消费者。从 rabbitmq 教程中查看这个例子。
2. 你真的不需要显式地配置rabbitmq，一切都可以通过客户端（发布者和订阅者）来完成，你只需要弄清楚你需要多少交换以及它们应该是哪种类型等。