最近一个外部的项目,使用到了消息队列,原本是用rabbitmq实现的,可是因为是部署到别人家的服务器上,想尽可能简化一些,项目中原本也要接入了redis缓存,就尝试使用redis来实现简单的消息队列。git
使用redis作消息队列有两种方法,一种是使用pub/sub,另外一种是使用list结构,配合brpop来消费。这两种方式各有特色,这里简述一下:github
#第一步push消息到队列 lpush listA msg #第二步,一个专门的分发客户端取出消息,push到各个子队列 var msg=brpop listA lpush listA1 msg lpush listA2 msg ...... #第三步,多个客户端从对应的队列消费消息 var client1_msg= brpop listA1 var client2_msg= brpop listA2 ......
消息丢失不太可取,因此我选择了list ,下一步须要选择一个合适的客户端。
Stackexchange.redis 算是一个老牌的客户端了,可是因为其采用多路复用的模式,无法支持Redis的blocking pops特性。因此我采用了国人写的CSRedisCore。redis
首先须要在appsettings.json中添加redis的链接字符串:json
{ "ConnectionStrings": { "redis": "{ip}:{port},password=123456,prefix=my_" } }
具体配置请参考github上的文档:https://github.com/2881099/csredis缓存
而后在startup.cs的ConfigureServices中配置redis:服务器
public void ConfigureServices(IServiceCollection services) { //redis配置 RedisHelper.Initialization(new CSRedis.CSRedisClient(Configuration.GetConnectionString("redis"))); }
固然也能够采用依赖注入的方式添加CSRedisClient实例,这个不纠结。网络
在项目中有好几处使用到了队列,因此先封装一个消费服务:并发
public abstract class RedisMQConsumer : BackgroundService { protected abstract string CacheKey { get; } protected ILogger<RedisMQConsumer> logger; public RedisMQConsumer(ILogger<RedisMQConsumer> logger) { this.logger = logger; } protected override Task ExecuteAsync(CancellationToken stoppingToken) { return Task.Run( async() => { while (!stoppingToken.IsCancellationRequested) { try { var msg = RedisHelper.BRPop(5, CacheKey); try { if (string.IsNullOrEmpty(msg)) continue; if (!Process(msg)) { //加入错误处理队列,能够在后台写功能手动处理 RedisHelper.LPush(CacheKey + "_err", msg); } } catch (Exception exp) { //加入错误处理队列,能够在后台写功能手动处理 RedisHelper.LPush(CacheKey + "_err", msg); logger.LogError(exp, "RedisMQConsumer Execute error"); } } catch { //网络可能中断 await Task.Delay(TimeSpan.FromSeconds(5), stoppingToken); } } }, stoppingToken); } protected abstract bool Process(string message); }
而后就能够继承RedisMQConsumer,编写实际逻辑:app
public class AddOrderMQConsumer : RedisMQConsumer { public AddOrderMQConsumer(ILogger<RedisMQConsumer> logger) : base(logger) { } protected override string CacheKey => "addOrder"; protected override bool Process(string message) { var order = JsonSerializer.Deserialize<Order>(message); //处理逻辑 return true; } }
发布消息只是往队列中添加项:async
RedisHelper.LPush("addOrder", order);
最后把消费服务添加到startup.cs中:
public void ConfigureServices(IServiceCollection services) { //redis配置 RedisHelper.Initialization(new CSRedis.CSRedisClient(Configuration.GetConnectionString("redis"))); //redis消息队列消费服务,放在redis配置下方 services.AddHostedService<AddOrderListener>(); }
经测试,还算稳定,小并发项目可使用。