消息队列任务丢失的原因

有时&＃xff1a;一个异步处理的操作正常的放到了异步队列里&＃xff0c;但是并没有被处理&＃xff0c;或者数据库用改动&＃xff0c;但是消费的binlog日志并没有改动信息&＃xff0c;造成这种的原因是什么&＃xff1f;对此进行一定猜测&＃xff0c;消息队列是不安全的&＃xff0c;会丢失任务&＃xff08;如kafka&＃xff09;&＃xff1f;
相比之下&＃xff0c;写定时任务&＃xff0c;去数据库里扫表&＃xff0c;拿出处理中的订单&＃xff0c;去挨个轮询状态。这样比较准确&＃xff0c;但是对性能有损耗&＃xff0c;对数据库造成额外压力&＃xff0c;并且非实时。

任务丢失的一些猜想&＃xff1a;
reids 的list可以作为消息队列来使用。当消费者从list中取出消息时redis就已经将消息删除&＃xff0c;此时如果消费者消费失败&＃xff0c;或者因为异常、不可抗拒因素&＃xff08;宕机等&＃xff09;时&＃xff0c;可能会导致消息丢失的情况。

但是也可以使用RPOPLPUSH这些命令去弥补&＃xff0c;当消费完成后再去进行删除&＃xff0c;保证消息的可靠性。

当然有很多队列都是有可靠消费的保证&＃xff0c;当你消费完成后&＃xff0c;再次向队列发送完成的确认&＃xff0c;队列才会删除消息。