核心原理:利用Redis的List列表实现,发布事件对应rpush,订阅事件对应lpopredis
问题一:Redis不是自带Pub/Sub吗?缓存
redis自带的pub/sub有两个问题:app
1.若是发布消息期间订阅方没有连到redis,那么这条消息就收不到了,即便从新链接上来也收不到ide
2.redis内部是用一个线程给全部订阅链接推数据的,V生产> V消费 的状况下还会主动断开链接,有性能隐患。感兴趣的能够多了解一下它的原理。工具
问题二:要实现怎样一个工具,或者说想要什么样的效果?性能
效果就是获得一个service对象,这个对象有如下两个重要功能:优化
1.有个publish方法能够调用,用来灵活地发布消息。想发布什么就发布什么,想给哪一个topic发送就给哪一个topic发送。this
2.能够预约义一些订阅者,定义好当收到某个topic的消息后,该作什么处理。编码
(一)接口定义spa
第一步要作的就是定义接口,一个是发布接口,咱们须要这样一个接口来发布消息,消息内容能够是任何形式的对象
public interface MessagePublisher { /** * 发布消息 * @param topic 主题 * @param msg 消息内容 */ void publish(String topic, Object msg); }
第二个是订阅接口,咱们须要依此实现观察者模式
public interface MessageConsumer { /** * 获取此消费者订阅的topic * @return 订阅topic */ String getTopic(); /** * 回调方法,收到消息后,此方法被触发 * @param topic topic * @param msg 消息内容 */ void onMessage(String topic, Object msg); }
第三个就是转换接口,已知Redis不能直接存储Java对象,因此必须进行转换,这里咱们选择用String形式进行存储。因此咱们须要一个类型转换工具
public interface Translator { /** * 将对象序列化为字符串 * @param obj 对象 * @return 字符串 */ String serialize(Object obj); /** * 将字符串反序列化为对象 * @param str 字符串 * @return 对象 */ Object deserialize(String str); }
(二)转换器实现——JsonTranslator
问题一:取出数据后如何转换成正确的对象?
在写入redis的时候同时也写入该对象的类型信息,而后取出的时候利用该类型信息进行转换便可。
public class JsonTranslator implements Translator { private static ObjectMapper MAPPER = new ObjectMapper(); /** * 缓存类信息,优化速度 */ private Map<String, Class> classCache = new HashMap<>(); @Override public String serialize(Object obj) { Message message = new Message(); message.setClazz(obj.getClass().getName()); message.setData(encode(obj)); return encode(message); } @Override public Object deserialize(String str) { Message message = decode(str, Message.class); String className = message.getClazz(); Class clazz = classCache.get(className); if(clazz != null) return decode(message.getData(), clazz); try { clazz = Class.forName(className); classCache.put(className, clazz); return decode(message.getData(), clazz); } catch (ClassNotFoundException e) { throw new RuntimeException(e); } } private String encode(Object obj) { try { return MAPPER.writeValueAsString(obj); } catch (JsonProcessingException e) { throw new RuntimeException(e); } } private <T> T decode(String str, Class<T> clazz) { try { return (T) MAPPER.readValue(str, Message.class); } catch (IOException e) { throw new RuntimeException(e); } } @Data class Message { //保存类信息,是为了反序列化可以获得正确类型的对象 /** * 类名(含路径) */ private String clazz; /** * 序列化后的对象 */ private String data; } }
(三)核心实现——RedisPubSub
问题一:Redis配置如何处理?
咱们将Redis的配置与这个MQ解耦,让用户配置链接池后再注入进来便可。
问题二:如何知道要监听哪些topic?
咱们把容器中的Consumer实现类都注入进来,就能够经过getTopic方法获得总共须要监听哪些topic。
问题三:如何进行监听?
每一个须要监听的topic开一个线程进行监听,监听方法就是循环调用blpop。
问题四:监听到消息后如何进行通知?
当获得topic的消息的时候,就回调订阅此topic的consumer的onMessage方法。
问题五:如何启动和关闭监听?
咱们给MQ类提供两个方法start和stop。在注入容器的时候指明这两个分别是init和destroy方法,这样它就能随着容器启动和中止了。
public class RedisPubSub implements MessagePublisher{ //外部注入信息 private JedisPool jedisPool; private List<MessageConsumer> consumerList; /** * 对象和字符串的转换器,默认使用JsonTranslator */ private Translator translator = new JsonTranslator(); //内部信息 /** * key:topic * value:此topic的订阅者 */ private Map<String, List<MessageConsumer>> subcribeInfo; private List<MessageListener> listeners; public void setJedisPool(JedisPool jedisPool) { this.jedisPool = jedisPool; } public void setConsumerList(List<MessageConsumer> consumerList) { this.consumerList = consumerList; subcribeInfo = new HashMap<>(); String topic; List<MessageConsumer> topicConsumers; //注入消费者后,整理好订阅状况 for(MessageConsumer consumer : consumerList) { topic = consumer.getTopic(); topicConsumers = subcribeInfo.get(topic); if(topicConsumers == null) { topicConsumers = new ArrayList<>(); subcribeInfo.put(topic, topicConsumers); } topicConsumers.add(consumer); } } public void setTranslator(Translator translator) { this.translator = translator; } public void publish(String topic, Object msg) { Jedis jedis = jedisPool.getResource(); jedis.rpush(topic,translator.serialize(msg)); jedis.close(); } public void start() { MessageListener listener; //每一个topic开一个监听线程进行监听 for(String topic : subcribeInfo.keySet()) { listener = new MessageListener(topic, subcribeInfo.get(topic)); listener.start(); listeners.add(listener); } } public void stop() { //关闭全部监听器 for(MessageListener listener: listeners) { listener.stop(); } } public class MessageListener implements Runnable { /** * 此监听器监听的topic */ private String topic; /** * 此topic的消费者 */ private List<MessageConsumer> consumers; /** * 绑定线程 */ private Thread t; public MessageListener(String topic, List<MessageConsumer> consumers) { this.topic = topic; this.consumers = consumers; } /** * 将数据反序列化 * @param msg 字符串消息 * @return 消息对象 */ public Object deserialize(String msg) { return translator.deserialize(msg); } public void run() { String msg; Object obj; //从池中抓取一个链接用来监听redis队列 Jedis jedis = jedisPool.getResource(); while(!Thread.interrupted()) { msg = jedis.blpop(1, topic).get(1); obj = deserialize(msg); //收到消息后告知全部消费者 for(MessageConsumer consumer:consumers) { consumer.onMessage(topic, obj); } } jedis.close(); //订阅结束后释放资源 } public void start() { t = new Thread(this); t.start(); } public void stop() { //利用中断打断线程的运行 t.interrupt(); } } }
(一)定义好Consumer,注入为容器bean
@Component public class TestConsumer implements MessageConsumer { @Override public void onMessage(String topic, Object message) { System.out.println((SomeObject)message); } @Override public String getTopic() { return "test"; } }
因为Ttranslator会将对象转换好,因此只要将Object强制转换成指定类型便可使用。
(二)全局配置
@Configuration public class TestConfig { @Bean public JedisPool jedisPool() { JedisPoolConfig jedisPoolConfig = new JedisPoolConfig(); jedisPoolConfig.setMaxTotal(20); jedisPoolConfig.setMaxIdle(5); jedisPoolConfig.setMinIdle(1); return new JedisPool(jedisPoolConfig, "127.0.0.1", 6379, 2000, "123456"); } @Bean(value = "rediMQ", initMethod = "start", destroyMethod = "stop") @Autowired public RedisPubSub redisPubSub(List<MessageConsumer> consumers, JedisPool jedisPool) { RedisPubSub redisPubSub = new RedisPubSub(); redisPubSub.setJedisPool(jedisPool); redisPubSub.setConsumerList(consumers); return redisPubSub; } }
@Autowired 配合方法参数的List<MessageConsumer> 就能够获得容器中全部的Consumer。
(三)引入使用
@Service public class SomeService { @Autowired private MessagePublisher publisher; public void someOperation() { publisher.publish("test", new SomeObject()); } }
只须要以MessagePublisher接口的身份引入就能够了。