热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

『假如我是面试官』RabbitMQ我会这样问!

大家好,我是大尧。1.为什么你们公司选择RabbitMQ作为消息中间件在消息队列选型时,我们调研了市场上比较常用ActiveMQ,Rabb

大家好,我是大尧。

1. 为什么你们公司选择RabbitMQ作为消息中间件

在消息队列选型时,我们调研了市场上比较常用ActiveMQ,RabbitMQ,RocketMQ,Kafka。

  1. RabbitMQ相对成熟稳定,这是我们选择它最主要的原因。

  2. 社区比较活跃,有完善的资料可以参考。

  3. Rabbitmq的吞吐量可以达到万级,完全满足我们系统的要求。

  4. RabbitMQ是Erlang语言开发的,性能比较好。

  5. 有完善的可视化界面,方便查看。

2. 消息队列的优点和缺点有哪些

优点有:

  • 异步处理 - 相比于传统的串行、并行方式,提高了系统吞吐量。

  • 应用解耦 - 系统间通过消息通信,不用关心其他系统的处理。

  • 流量削锋 - 可以通过消息队列长度控制请求量;可以缓解短时间内的高并发请求。

缺点有:

  • 系统可用性降低

  • 系统复杂度提高

3. RabbitMQ常用的工作模式有哪些

3.1 简单模型

  • p:生成者

  • C:消费者

  • 红色部分:quene,消息队列

3.2 工作模型

这种模式下一条消息只能由一个消费者进行消费,默认情况下,每个消费者是轮询消费的。

  • p:生成者

  • C1、C2:消费者

  • 红色部分:quene,消息队列

3.3 发布订阅模型(fanout)

这种模型中生产者发送的消息所有消费者都可以消费。

  • p:生成者

  • X:交换机

  • C1、C2:消费者

  • 红色部分:quene,消息队列

3.4 路由模型(routing)

这种模型消费者发送的消息,不同类型的消息可以由不同的消费者去消费。

  • p:生成者

  • X:交换机,接收到生产者的消息后将消息投递给与routing key完全匹配的队列

  • C1、C2:消费者

  • 红色部分:quene,消息队列

3.5 主题模型(topic)

这种模型和direct模型一样,都是可以根据routing key将消息路由到不同的队列,只不过这种模型可以让队列绑定routing key 的时候使用通配符。这种类型的routing key都是由一个或多个单词组成,多个单词之间用.分割。

通配符介绍:

*:只匹配一个单词

#:匹配一个或多个单词

4. 如何保证消息不丢失(如何保证消息的可靠性)

一条消息从生产到消费经历了三个阶段,分别是生产者,MQ和消费者,对于RabbitMQ来说,消息的传递还涉及到交换机。因此RabbitMQ出现消息丢失的情况有四个

分别是

  1. 消息生产者没有成功将消息发送到MQ导致消息丢失

  2. 交换机未路由到消息队列导致消息丢失

  3. 消息在MQ中时,MQ发生宕机导致消息丢失

  4. 消费者消费消息时出现异常导致消息丢失

针对上面提到的四种情况,分别进行处理

  1. amqp协议提供了事务机制,在投递消息时开启事务,如果消息投递失败,则回滚事务,很少有人去使用事务。除了事务之外,RabbitMQ还提供了生产者确认机制(publisher confirm)。生产者将信道设置成confirm(确认)模式,一旦信道进入confirm模式,所有在该信道上面发布的消息都会被指派一个唯一的ID(从1开始),一旦消息被投递到所有匹配的队列之后,RabbitMQ就会发送一个确认(Basic.Ack)给生产者(包含消息的唯一ID),这就使得生产者知晓消息已经正确到达了目的地了。

# 开启生产者确认机制,
# 注意这里确认的是是否到达交换机
spring.rabbitmq.publisher-confirm-type=correlated

@RestController
public class Producer {@Autowiredprivate RabbitTemplate rabbitTemplate;@GetMapping("send")public void sendMessage(){/*** 生产者确认消息*/rabbitTemplate.setConfirmCallback(new RabbitTemplate.ConfirmCallback() {@Overridepublic void confirm(CorrelationData correlationData, boolean ack, String cause) {System.out.println(correlationData);System.out.println(ack);System.out.println(cause);}});rabbitTemplate.convertAndSend("s","error","这是一条错误日志!!!");}
}

  1. 消息从交换机未能匹配到队列时将此条消息返回给生产者

spring.rabbitmq.publisher-returns=true

@RestController
public class Producer {@Autowiredprivate RabbitTemplate rabbitTemplate;@GetMapping("send")public void sendMessage(){/*** 消息未达队列时返回该条消息*/rabbitTemplate.setReturnsCallback(new RabbitTemplate.ReturnsCallback() {@Overridepublic void returnedMessage(ReturnedMessage returnedMessage) {System.out.println(returnedMessage);}});rabbitTemplate.convertAndSend("s","error","这是一条错误日志!!!");}
}

  1. 消息在交换机或队列中发生丢失,我们只需要将交换机和队列进行持久化。

/*** 定义一个持久化的topic交换机* durable 持久化* @return*/
@Bean
public Exchange exchangeJavatrip(){return ExchangeBuilder.topicExchange(EXCHANGE).durable(true).build();
}/*** 定义一个持久化的队列* durable 持久化* @return*/
@Bean
public Queue queueJavatrip(){return QueueBuilder.durable(QUEUE).build();
}

  1. 消费者开启手动签收模式,消费完成后进行ack确认。

spring.rabbitmq.listener.simple.acknowledge-mode=manual

@RabbitListener(queues = MqConfig.QUEUE)
public void receive(String body, Message message, Channel channel) throws Exception{long deliveryTag = message.getMessageProperties().getDeliveryTag();System.out.println(deliveryTag);// 系统业务逻辑判断是否签收if(deliveryTag % 2 == 0){channel.basicAck(deliveryTag,false);}else{// 第二个参数是否批量确认,第三个参数是否重新回队列channel.basicNack(deliveryTag,false,true);}
}

5. 如何保证消息不重复消费(如何保证消息的幂等性)

消息重复的原因有两个:

  1. 生产时消息重复

    由于生产者发送消息给MQ,在MQ确认的时候出现了网络波动,生产者没有收到确认,实际上MQ已经接收到了消息。这时候生产者就会重新发送一遍这条消息。

  2. 消费时消息重复。

    消费者消费成功后,在给MQ确认的时候出现了网络波动,MQ没有接收到确认,为了保证消息被消费,MQ就会继续给消费者投递之前的消息。这时候消费者就接收到了两条一样的消息。

由于消息重复是网络波动等原因造成的,无法避免,我们能做的的就是保证消息的幂等性,以防业务重复处理。具体处理方案为:

让每个消息携带一个全局的唯一ID,即可保证消息的幂等性,具体消费过程为:

  1. 消费者获取到消息后先根据id去查询redis/db是否存在该消息。

  2. 如果不存在,则正常消费,消费完毕后写入redis/db。

  3. 如果存在,则证明消息被消费过,直接丢弃。

@RabbitListener(queues = MqConfig.QUEUE)
public void receive(Message message, Channel channel){String messageId = message.getMessageProperties().getMessageId();String body = new String(message.getBody());String redisId = redisTemplate.opsForValue().get(messageId)+"";// 如果redis中存有当前消息的消息id// 则证明消费过if(messageId.equals(redisId)){return;}redisTemplate.opsForValue().set(messageId, UUID.randomUUID());
}

6. 消息大量堆积应该怎么处理

消息堆积的原因有两个

  1. 网络故障,消费者无法正常消费

  2. 消费方消费后未进行ack确认

解决方案如下:

  1. 检查并修复消费者故障,使其正常消费

  2. 编写临时程序将堆积的消息发送到容量更大的MQ集群,增加消费者快速消费

  3. 堆积消息消费完毕后,停止临时程序,恢复正常消费

7. 死信是什么?死信如何处理

当一条消息在队列中出现以下三种情况的时候,该消息就会变成一条死信。

  • 消息被拒绝(basic.reject / basic.nack),并且requeue = false

  • 消息TTL过期

  • 队列达到最大长度

当消息在一个队列中变成一个死信之后,如果配置了死信队列,它将被重新publish到死信交换机,死信交换机将死信投递到一个队列上,这个队列就是死信队列。

一条消息成为死信后,一般会通过死信队列进行存库,然后定时将库中的死信进行重新投递到消息队列上。

8. 如果我有一笔订单,30分钟未支付则关闭订单,使用RabbitMQ如何来实现

RabbitMQ可以使用死信队列来实现延时消费,用户下单之后,将订单信息投递到消息队列中,并且设置消息过期时常为30分钟。如果用户支付则正常关闭订单,如果用户未支付,消息达到过期时间,消息会进入死信交换,由消费者进行消费死信队列来关闭订单。

9. RabbitMQ如何保证高可用

RabbitMQ有两种集群模式,分别是普通集群和镜像集群,普通模式无法保证RabbitMQ的高可用。

普通集群

假如有三个节点,rabbitmq1、rabbitmq2、rabbitmq3,消息实际上只存在于其中一个节点,三个节点仅有相同的元数据,即队列的结构,当消息进入rabbitmq2节点的queue后,consumer从rabbitmq1的节点进行消费,rabbitmq1和rabbitmq2会进行临时通信,从rabbitmq2中获取消息然后返回给consumer。

这种模式存在以下两个问题:

  1. 当rabbitmq2宕机后,消息无法正常消费,没有做到真正的高可用

  2. 实际数据还是在单个实例上,存在瓶颈问题

镜像集群

假如有三个节点,rabbitmq1、rabbitmq2、rabbitmq3,每个实例之间都可以相互通信,每次生产者写消息到queue的时候,每个rabbitmq节点上都有queue的消息数据和元数据。这种模式适用于可靠性要求较高的场景。



推荐阅读
  • 本文提供了 RabbitMQ 3.7 的快速上手指南,详细介绍了环境搭建、生产者和消费者的配置与使用。通过官方教程的指引,读者可以轻松完成初步测试和实践,快速掌握 RabbitMQ 的核心功能和基本操作。 ... [详细]
  • RocketMQ在秒杀时的应用
    目录一、RocketMQ是什么二、broker和nameserver2.1Broker2.2NameServer三、MQ在秒杀场景下的应用3.1利用MQ进行异步操作3. ... [详细]
  • 修复一个 Bug 竟耗时两天?真的有那么复杂吗?
    修复一个 Bug 竟然耗费了两天时间?这背后究竟隐藏着怎样的复杂性?本文将深入探讨这个看似简单的 Bug 为何会如此棘手,从代码层面剖析问题根源,并分享解决过程中遇到的技术挑战和心得。 ... [详细]
  • 一文了解消息中间件RabbitMQ
    消息中间件---RabbitMQ1消息中间件的作用2.常用的消息中间件3消息中间件RabbitMQ3.1RabbitMQ介绍3.3RabbitMQ的队列模式3.3RabbitMQ的 ... [详细]
  • 本文详细介绍了Java代码分层的基本概念和常见分层模式,特别是MVC模式。同时探讨了不同项目需求下的分层策略,帮助读者更好地理解和应用Java分层思想。 ... [详细]
  • 作为140字符的开创者,Twitter看似简单却异常复杂。其简洁之处在于仅用140个字符就能实现信息的高效传播,甚至在多次全球性事件中超越传统媒体的速度。然而,为了支持2亿用户的高效使用,其背后的技术架构和系统设计则极为复杂,涉及高并发处理、数据存储和实时传输等多个技术挑战。 ... [详细]
  • 本文详细介绍了HDFS的基础知识及其数据读写机制。首先,文章阐述了HDFS的架构,包括其核心组件及其角色和功能。特别地,对NameNode进行了深入解析,指出其主要负责在内存中存储元数据、目录结构以及文件块的映射关系,并通过持久化方案确保数据的可靠性和高可用性。此外,还探讨了DataNode的角色及其在数据存储和读取过程中的关键作用。 ... [详细]
  • 本文深入解析了 Golang 中的异步 API,并通过具体的应用实例展示了其强大功能。文章不仅探讨了 Golang 和 Erlang 在并行处理方面的核心理念,还详细介绍了如何利用通道(channel)和 goroutine 实现高效的并发编程。例如,通过 `ch := make(chan int)` 创建通道,并使用 `go func(ch chan int)` 启动 goroutine 来处理异步任务。此外,文章还提供了多个实际案例,帮助读者更好地理解和应用这些概念。 ... [详细]
  • 在 CentOS 7 上部署和配置 RabbitMQ 消息队列系统时,首先需要安装 Erlang,因为 RabbitMQ 是基于 Erlang 语言开发的。具体步骤包括:安装必要的依赖项,下载 Erlang 源码包(可能需要一些时间,请耐心等待),解压源码包,解决可能出现的错误,验证安装是否成功,并将 Erlang 添加到环境变量中。接下来,下载 RabbitMQ 的 tar.xz 压缩包,并进行解压和安装。确保每一步都按顺序执行,以保证系统的稳定性和可靠性。 ... [详细]
  • 背景最近面试面得心力交瘁,由于没有高并发架构的实际项目经验,经常是在场景设计的面试题目上面栽跟头。上次就被问到了关于秒杀系统的设计,竟无 ... [详细]
  • Spring cloud微服务架构前后端分离博客系统,Vue+boot源码分享 ... [详细]
  • .Net下RabbitMQ发布订阅模式实践
    一、概念AMQP,即AdvancedMessageQueuingProtocol,高级消息队列协议,是应用层协议的一个开放标准,为面向消息的中间件设计。消息中间件主要用于组件之间的 ... [详细]
  • MiriamPena在可伸缩,高性能,高并发性和高可用性系统方面拥有10多年的经验。她是旧金山AdRoll的一名工程师,负责设计其实时出价 ... [详细]
  • 启动activemq_「Java」SpringBoot amp; ActiveMQ
    一、消息队列消息队列中间件是分布式系统中重要的组件,主要解决应用耦合、异步消息、流量削锋等问题,实现高性能、高可用、可伸缩和最终一致性架构, ... [详细]
  • RabbitMQ是使用Erlang编写的一个开源的消息队列,本身支持很多的协议:AMQP,XMPP,SMTP,STOMP,也 ... [详细]
author-avatar
通贯戬_461
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有