热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

9、rabbitmq

主要说rabbitmq,kafka简单看一下,rocketmq对.net没有官方的支持,所以暂不介绍,如果在业务中有用到,用java封装一下然后对外开放api吧,其实rocketm

主要说rabbitmq,kafka简单看一下,rocketmq对.net 没有官方的支持,所以暂不介绍,如果在业务中有用到,用java封装一下然后对外开放api吧,其实rocketmq还是更好一些,因为没有依赖项,而rocketmq需要erlang和socat

队列概念,转自简书

https://www.jianshu.com/p/9a0e9ffa17dd

1、rabbitmq

官网

https://www.rabbitmq.com/

.net 支持

https://www.rabbitmq.com/dotnet.html

2、安装

安装erlang

yum install erlang

安装 socat

yun install socat

安装rabbitmq

rpm -Uvh https://github.com/rabbitmq/rabbitmq-server/releases/download/v3.8.4/rabbitmq-server-3.8.4-1.el8.noarch.rpm

3、启动

service rabbitmq-server start #启动

service rabbitmq-server stop #停止

service rabbitmq-server restart #重启

chkconfig rabbitmq-server on #开机自启

rabbitmq-plugins enable rabbitmq_management #开启web管理界面 需要重启

rabbitmqctl  change_password  admin admin #创建用户admin,密码admin

rabbitmqctl set_user_tags admin administrator # 给admin用户设置权限

这里注意需要处理一下端口权限,web管理界面的端口是15672

安装启动部分不多说了

4、做什么,怎么做

队列可以做很多事情,比如用来处理并发,电商的秒杀,简单的理解就是减库存操作,比如库存是10,秒杀活动在1ms产生了10000个请求,如果用往常的减库存的操作,那么肯定会出各种各样的错误,当然可以用redis锁或者其他办法来解决,但是队列确实是一种方案。还有就是做解耦,用队列的发布订阅模式,一个消息,谁想用谁就订阅。

这个模式有两个角色,发布者和消费者

发布者:创建一条消息

订阅者:接收并执行发布者发布的消息,也就是消费者(杠精滚)

发布者发布了一条命令【去给我买瓶水】,如果有人订阅了,那么订阅的人就叫做消费者(手下办事儿的),消费者收到命令,就去买水了,买完了会给发布者一个眼神,告诉发布者水买回来了

有多个订阅者怎么办?发布者也是恃强凌弱的,虽然多个订阅者,但是他也只发送给其中一个订阅者

没有订阅者怎么办?那买水的指令就一直挂在那了,直到有订阅者订阅,才会被消费掉

下面开始实现发布订阅模式

apollo里把需要用到的参数定义好

技术分享图片

 

 

 

rabbmitmq中把topic加上

技术分享图片

 

 

 

先定义一些基础类

mq的上下文实体,说白了就是发布、消费消息时候用到的参数


public class RabbitMQContext
{
// 获取或设置交换机名称。
public string ExchangeName { get; set; }
// 获取或设置 RoutingKey 。
public string RoutingKey { get; set; }
// 获取或设置队列名称。
public string QueueName { get; set; }
// 获取或设置 .
public string ExchangeType { get; set; }
// 获取或设置发布消息的属性。
public IDictionary Headers { get; set; }
// 获取或设置定义 Exchange 时的参数。
public IDictionary ExchangeArgs { get; set; }
public bool IsDelayMessage { get; set; }
}
public class RabbitMQConsumerContext : RabbitMQContext
{
}
public class RabbitMQProducerContext : RabbitMQContext
{
public RabbitMQMessage Body { get; set; }
}
public class RabbitMQMessage
{
private object _message;
[JsonProperty(PropertyName = "message")]
public object Message
{
get
{
return this._message;
}
set
{
this._message = value;
this.MessageType = value == null
? string.Empty
: value.GetType().FullName;
}
}
[JsonProperty("messageType")]
public string MessageType { get; set; }
}

  

实现发布者功能

定义发布者接口


public interface IRabbitMQPublisher
{
// 发布消息到消息队列。
bool Publish(RabbitMQProducerContext context);
}

实现发布者接口


public class RabbitMQPublisher : IRabbitMQPublisher
{
private readonly IConfiguration _configProvider;
private readonly RabbitMQOptions _options;
public RabbitMQPublisher(IConfiguration configProvider, IOptions options)
{
this._cOnfigProvider= configProvider;
this._optiOns= options.Value;
}
public bool Publish(RabbitMQProducerContext context)
{
if (string.IsNullOrWhiteSpace(context.ExchangeName))
{
context.ExchangeName = _configProvider["RabbitMQ:Default:Exchange"];
}
var factory = new ConnectionFactory
{
HostName = this._options.Host,
Port = this._options.Port,
UserName = this._options.UserName,
Password = this._options.Password
};
using (var cOnnection= factory.CreateConnection())
using (var channel = connection.CreateModel())
{
var body = Encoding.UTF8.GetBytes(JsonConvert.SerializeObject(context.Body));
channel.ExchangeDeclare(context.ExchangeName, context.ExchangeType, durable: true, autoDelete: false, arguments: context.ExchangeArgs);
if (!string.IsNullOrWhiteSpace(context.QueueName))
{
channel.QueueDeclare(context.QueueName, durable: true, exclusive: false, autoDelete: false, arguments: context.ExchangeArgs);
channel.QueueBind(context.QueueName, context.ExchangeName, context.RoutingKey);
}
IBasicProperties basicProperties = null;
if (context.Headers != null && context.Headers.Any())
{
basicProperties = channel.CreateBasicProperties();
basicProperties.Headers = context.Headers;
}
channel.BasicPublish(context.ExchangeName, context.RoutingKey, basicProperties: basicProperties, body: body);
}
return true;
}
}

 

发布一个消息


[HttpGet]
public JsonResult RabbitMqPublish([FromQuery] string paramStr)
{
var cOntext= new RabbitMQProducerContext
{
Body = new RabbitMQMessage
{
Message = JsonConvert.SerializeObject(new { paramStr })
},
QueueName = "new_born",
RoutingKey = "new_born",
ExchangeType = ExchangeType.Topic
};
var optiOnValue= this._configuration.GetSection("RabbitMQ").Get();
var optiOns= (IOptions)Options.Create(optionValue);
var publisher = new RabbitMQPublisher(this._configuration, options);
publisher.Publish(context);
return Json(new { code = 1, message = "发布成功" });
}

 

执行结束后,可以看到队列里面已经有待消费的数据了

技术分享图片

 

 

 

下面实现订阅、消费功能

订阅

需要在系统启动的时候,就去订阅,所以依然实现 IHostedService 接口

定义消费者/订阅者接口


public interface IMessageQueueConsumer
{
// 订阅消息。
void Subscribe();
// 取消订阅消息。
void Unsubscribe();
// 通知生产者此消息已被消费
void BasicAck(ulong deliveryTag, bool multiple);
}

  

 定义消费者/订阅者抽象类


///


/// 定义 RabbitMQ 订阅者的抽象类。
///

public abstract class RabbitMQConsumer : IMessageQueueConsumer
{
private IConnection _connection;
private IModel _channel;
private string _consumerTag;
protected readonly IServiceProvider ServiceProvider;
protected readonly ILogger Logger;
protected RabbitMQConsumer(IServiceProvider serviceProvider)
{
this.ServiceProvider = serviceProvider ?? throw new ArgumentNullException(nameof(serviceProvider));
this.Logger = this.ServiceProvider.GetRequiredService().CreateLogger(this.GetType());
this.Initialize();
}
protected RabbitMQConsumerContext Context { get; set; }
///
/// 初始化
///

protected abstract void Initialize();
public void Subscribe()
{
try
{
using (var scope = this.ServiceProvider.CreateScope())
{
var cOnfigProvider= scope.ServiceProvider.GetRequiredService();
var optiOns= scope.ServiceProvider.GetService>().Value;
var factory = new ConnectionFactory
{
HostName = options.Host,
Port = options.Port,
UserName = options.UserName,
Password = options.Password
};
this._cOnnection= factory.CreateConnection();
this._channel = this._connection.CreateModel();
// 定义 Exchange ,持久化,不自动删除此 Exchange
this._channel.ExchangeDeclare(this.Context.ExchangeName, this.Context.ExchangeType, durable: true, autoDelete: false, arguments: this.Context.ExchangeArgs);
// 如果队列名为空,则队列默认不持久化,非独占,自动删除
if (string.IsNullOrWhiteSpace( this.Context.QueueName))
{
this.Context.QueueName = this._channel.QueueDeclare(durable: false, exclusive: false, autoDelete: true).QueueName;
}
else
{
this._channel.QueueDeclare(this.Context.QueueName, durable: true, exclusive: false, autoDelete: false);
}
this._channel.QueueBind(this.Context.QueueName, this.Context.ExchangeName, this.Context.RoutingKey);
if (options.Qos > 0)
{
this._channel.BasicQos(0, (ushort)options.Qos, true);
}
var cOnsumer= new EventingBasicConsumer(this._channel);
consumer.Received += this.OnConsumerReceived;
this._cOnsumerTag= this._channel.BasicConsume(this.Context.QueueName, false, consumer);
}
}
catch (Exception e)
{
this.Logger.LogError(e, $"订阅消息异常:{ JsonConvert.SerializeObject( this.Context)}");
}
}
public void Unsubscribe()
{
try
{
this._channel.BasicCancel(this._consumerTag);
this._channel.Close();
this._channel.Dispose();
this._connection.Close(TimeSpan.FromSeconds(5));
this._connection.Dispose();
}
catch (Exception e)
{
this.Logger.LogError(e, $"取消订阅异常:{this.GetType().FullName}");
}
}
public void BasicAck(ulong deliveryTag, bool multiple)
{
this._channel.BasicAck(deliveryTag, multiple);
}
protected void OnConsumerReceived(object sender, BasicDeliverEventArgs e)
{
if (!(sender is EventingBasicConsumer consumer)) return;
try
{
var deliverEventArgs = new DeliverEventArgs
{
Body = e.Body,
COnsumerTag= e.ConsumerTag,
DeliveryTag = e.DeliveryTag,
Exchange = e.Exchange,
Redelivered = e.Redelivered,
RoutingKey = e.RoutingKey
};
if (e.BasicProperties?.IsHeadersPresent() ?? false)
{
deliverEventArgs.Headers = e.BasicProperties.Headers;
}
this.OnConsumerReceivedAsync(sender, deliverEventArgs).ConfigureAwait(false).GetAwaiter().GetResult();
}
catch (Exception ex)
{
this.Logger.LogError(ex, "处理 RabbitMQ 消息异常。");
}
}
protected abstract Task OnConsumerReceivedAsync(object sender, DeliverEventArgs e);
}
public class DeliverEventArgs : EventArgs
{
public IDictionary Headers { get; set; }
public ReadOnlyMemory Body { get; set; }
public string ConsumerTag { get; set; }
public ulong DeliveryTag { get; set; }
public string Exchange { get; set; }
public bool Redelivered { get; set; }
public string RoutingKey { get; set; }
}
public static class ExchangeType
{
public const string Direct = "direct";
public const string Fanout = "fanout";
public const string Headers = "headers";
public const string Topic = "topic";
}

  

实现IHostedService 实现系统启动时,自动执行系统内实现了IMessageQueueConsumer 接口服务的订阅方法

 


public class MessageQueueHostedService : IHostedService
{
private readonly IServiceProvider _serviceProvider;
private readonly RabbitMQOptions _options;
public MessageQueueHostedService(IServiceProvider serviceProvider, IOptions options)
{
this._serviceProvider = serviceProvider;
this._optiOns= options.Value;
}
public Task StartAsync(CancellationToken cancellationToken)
{
if (!this._options.Enable) return Task.CompletedTask;
var cOnsumers= this._serviceProvider.GetServices();
if (consumers.Any())
{
foreach (var consumer in consumers)
{
consumer.Subscribe();
}
}
return Task.CompletedTask;
}
public Task StopAsync(CancellationToken cancellationToken)
{
if (!this._options.Enable) return Task.CompletedTask;
return Task.CompletedTask;
}
}

 

注入到ServiceCollection

services.AddSingleton();

 

增加一个订阅,也就是实现RabbitMQConsumer抽象类

 


public class NewBornConsumer : RabbitMQConsumer
{
private IServiceProvider _serviceProvider;
public NewBornConsumer(IServiceProvider serviceProvider) : base(serviceProvider)
{
_serviceProvider = serviceProvider;
}
protected override void Initialize()
{
this.COntext= new RabbitMQConsumerContext
{
ExchangeType = ExchangeType.Topic,
ExchangeName = "new_born",
QueueName = "new_born",
RoutingKey = "new_born",
};
}
protected async override Task OnConsumerReceivedAsync(object sender, DeliverEventArgs e)
{
await Task.CompletedTask;
var message = Encoding.UTF8.GetString(e.Body.ToArray());
var data = JToken.Parse(message)["message"].ToString();
var paramStr = JToken.Parse(data)["paramStr"];
Logger.LogInformation($"我被消费拉 ~~~~参数是:{paramStr}");
this.BasicAck(e.DeliveryTag, false);
}
}

 

 

此时我们F5启动系统,可以看到已经有一个消费者了

技术分享图片

 

 

通过api增加一条消息,可以看到消费信息

技术分享图片

 

技术分享图片

 

 

其他的队列,像kafka,ActiveMQ,rocketmq,大同小异,应用的场景也不同,多翻翻博客吧

队列在实际的生产环境中用到的地方还挺多,比如我们做的预约挂号、到诊、进销存出库这些操作,理论上都应该用队列来处理,或者日志收集这种的,具体问题具体分析吧

 

ab.exe 并发测试工具

使用方法:.\ab.exe -n 50 -c 50 http://localhost:8862/GameApi/RabbitMqPublish?paramStr=33333

参数说明: -n 请求多少次  -c 每次并发量多少

下载地址:

 

 

http://files.cnblogs.com/files/gossip/ab.zip

 


推荐阅读
  • Java EE 平台集成了多种服务、API 和协议,旨在支持基于 Web 的多层应用程序开发。本文将详细介绍 Java EE 中的 13 种关键技术规范,帮助开发者更好地理解和应用这些技术。 ... [详细]
  • 阿里云 Aliplayer高级功能介绍(八):安全播放
    如何保障视频内容的安全,不被盗链、非法下载和传播,阿里云视频点播已经有一套完善的机 ... [详细]
  • RocketMQ在秒杀时的应用
    目录一、RocketMQ是什么二、broker和nameserver2.1Broker2.2NameServer三、MQ在秒杀场景下的应用3.1利用MQ进行异步操作3. ... [详细]
  • 本文详细介绍了Java代码分层的基本概念和常见分层模式,特别是MVC模式。同时探讨了不同项目需求下的分层策略,帮助读者更好地理解和应用Java分层思想。 ... [详细]
  • 秒建一个后台管理系统?用这5个开源免费的Java项目就够了
    秒建一个后台管理系统?用这5个开源免费的Java项目就够了 ... [详细]
  • C++ 异步编程中获取线程执行结果的方法与技巧及其在前端开发中的应用探讨
    本文探讨了C++异步编程中获取线程执行结果的方法与技巧,并深入分析了这些技术在前端开发中的应用。通过对比不同的异步编程模型,本文详细介绍了如何高效地处理多线程任务,确保程序的稳定性和性能。同时,文章还结合实际案例,展示了这些方法在前端异步编程中的具体实现和优化策略。 ... [详细]
  • 从零开始编译Linux系统:第16章 全新起点
    本章将详细介绍如何从零开始编译一套完整的Linux系统,涵盖关键组件如glibc库的介绍及其重要性。通过本文,读者将了解从源代码构建Linux系统的全过程。 ... [详细]
  • Bootstrap 插件使用指南
    本文详细介绍了如何在 Web 前端开发中使用 Bootstrap 插件,包括自动触发插件的方法、插件的引用方式以及具体的实例。 ... [详细]
  • 小程序的授权和登陆
    小程序的授权和登陆 ... [详细]
  • 本文介绍了Java编程语言的基础知识,包括其历史背景、主要特性以及如何安装和配置JDK。此外,还详细讲解了如何编写和运行第一个Java程序,并简要介绍了Eclipse集成开发环境的安装和使用。 ... [详细]
  • 本文将介绍如何在混合开发(Hybrid)应用中实现Native与HTML5的交互,包括基本概念、学习目标以及具体的实现步骤。 ... [详细]
  • 本文详细介绍了Linux系统中用于管理IPC(Inter-Process Communication)资源的两个重要命令:ipcs和ipcrm。通过这些命令,用户可以查看和删除系统中的消息队列、共享内存和信号量。 ... [详细]
  • 本文深入解析了通过JDBC实现ActiveMQ消息持久化的机制。JDBC能够将消息可靠地存储在多种关系型数据库中,如MySQL、SQL Server、Oracle和DB2等。采用JDBC持久化方式时,数据库会自动生成三个关键表:`activemq_msgs`、`activemq_lock`和`activemq_ACKS`,分别用于存储消息数据、锁定信息和确认状态。这种机制不仅提高了消息的可靠性,还增强了系统的可扩展性和容错能力。 ... [详细]
  • 在当今的软件开发领域,分布式技术已成为程序员不可或缺的核心技能之一,尤其在面试中更是考察的重点。无论是小微企业还是大型企业,掌握分布式技术对于提升工作效率和解决实际问题都至关重要。本周的Java架构师实战训练营中,我们深入探讨了Kafka这一高效的分布式消息系统,它不仅支持发布订阅模式,还能在高并发场景下保持高性能和高可靠性。通过实际案例和代码演练,学员们对Kafka的应用有了更加深刻的理解。 ... [详细]
  • HTML 页面中调用 JavaScript 函数生成随机数值并自动展示
    在HTML页面中,通过调用JavaScript函数生成随机数值,并将其自动展示在页面上。具体实现包括构建HTML页面结构,定义JavaScript函数以生成随机数,以及在页面加载时自动调用该函数并将结果呈现给用户。 ... [详细]
author-avatar
优美rosner_704
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有