zoukankan      html  css  js  c++  java
  • ActiveMQ的queue以及topic两种消息处理机制分析

     

           

    1    queue与topic的技术特点对比

         对比项

    Topic

    Queue

    概要

    Publish Subscribe messaging 发布订阅消息

    Point-to-Point 点对点

    有无状态

    topic数据默认不落地,是无状态的。

    Queue数据默认会在mq服务器上以文件形式保存,比如Active MQ一般保存在$AMQ_HOMEdatakr-storedata下面。也可以配置成DB存储。

    完整性保障

    并不保证publisher发布的每条数据,Subscriber都能接受到。

    Queue保证每条数据都能被receiver接收。

    消息是否会丢失

    一般来说publisher发布消息到某一个topic时,只有正在监听该topic地址的sub能够接收到消息;如果没有sub在监听,该topic就丢失了。

    Sender发送消息到目标Queue,receiver可以异步接收这个Queue上的消息。Queue上的消息如果暂时没有receiver来取,也不会丢失。

    消息发布接收策略

    一对多的消息发布接收策略,监听同一个topic地址的多个sub都能收到publisher发送的消息。Sub接收完通知mq服务器

    一对一的消息发布接收策略,一个sender发送的消息,只能有一个receiver接收。receiver接收完后,通知mq服务器已接收,mq服务器对queue里的消息采取删除或其他操作。

              Topic和queue的最大区别在于topic是以广播的形式,通知所有在线监听的客户端有新的消息,没有监听的客户端将收不到消息;而queue则是以点对点的形式通知多个处于监听状态的客户端中的一个。

    2    topic和queue方式的消息处理效率比较

            通过增加监听客户端的并发数来验证,topic的消息推送,是否会因为监听客户端的并发上升而出现明显的下降,测试环境的服务器为ci环境的ActiveMQ,客户端为我的本机。

            从实测的结果来看,topic方式发送的消息,发送和接收的效率,在一个订阅者和100个订阅者的前提下没有明显差异,但在500个订阅者(线程)并发的前提下,效率差异很明显(由于500线程并发的情况下,我本机的cpu占用率已高达70-90%,所以无法确认是我本机测试造成的性能瓶颈还是topic消息发送方式存在性能瓶颈,造成效率下降如此明显)。

            Topic方式发送的消息与queue方式发送的消息,发送和接收的效率,在一个订阅者和100个订阅者的前提下没有明显差异,但在500个订阅者并发的前提下,topic方式的效率明显低于queue。

            Queue方式发送的消息,在一个订阅者、100个订阅者和500个订阅者的前提下,发送和接收的效率没有明显变化。

    Topic实测数据:

     

    发送者发送的消息总数

    所有订阅者接收到消息的总数

    消息发送和接收平均耗时

    单订阅者

    100

    100

    101ms

    100订阅者

    100

    10000

    103ms

    500订阅者

    100

    50000

    14162ms

    Queue实测数据:

     

    发送者发送的消息总数

    所有订阅者接收到消息的总数

    消息发送和接收平均耗时

    单订阅者

    100

    100

    96ms

    100订阅者

    100

    100

    96ms

    500订阅者

    100

    100

    100ms

    3     topic方式的消息处理示例
    3.1     通过客户端代码调用来发送一个topic的消息:

    import javax.jms.Connection;

    import javax.jms.ConnectionFactory;

    import javax.jms.DeliveryMode;

    import javax.jms.Destination;

    import javax.jms.MessageProducer;

    import javax.jms.Session;

    import javax.jms.TextMessage;

    import org.apache.activemq.ActiveMQConnection;

    import org.apache.activemq.ActiveMQConnectionFactory;

    publicclass SendTopic {

        privatestaticfinalintSEND_NUMBER = 5;

        publicstaticvoid sendMessage(Session session, MessageProducer producer)

                throws Exception {

            for (int i = 1; i <=SEND_NUMBER; i++) {

                TextMessage message = session

                        .createTextMessage("ActiveMq发送的消息" + i);

                //发送消息到目的地方

                System.out.println("发送消息:" + "ActiveMq 发送的消息" + i);

                producer.send(message);

            }

        }

       

        publicstaticvoid main(String[] args) {

            // ConnectionFactory:连接工厂,JMS用它创建连接

            ConnectionFactory connectionFactory;

            // Connection:JMS客户端到JMS Provider的连接

            Connection connection = null;

            // Session:一个发送或接收消息的线程

            Session session;

            // Destination:消息的目的地;消息发送给谁.

            Destination destination;

            // MessageProducer:消息发送者

            MessageProducer producer;

            // TextMessage message;

            //构造ConnectionFactory实例对象,此处采用ActiveMq的实现jar

            connectionFactory = new ActiveMQConnectionFactory(

                    ActiveMQConnection.DEFAULT_USER,

                    ActiveMQConnection.DEFAULT_PASSWORD,

                    "tcp://10.20.8.198:61616");

            try {

                //构造从工厂得到连接对象

                connection = connectionFactory.createConnection();

                //启动

                connection.start();

                //获取操作连接

                session = connection.createSession(true, Session.AUTO_ACKNOWLEDGE);

                //获取session注意参数值FirstTopic是一个服务器的topic(与queue消息的发送相比,这里是唯一的不同)

                destination = session.createTopic("FirstTopic");

                //得到消息生成者【发送者】

                producer = session.createProducer(destination);

                //设置不持久化,此处学习,实际根据项目决定

                producer.setDeliveryMode(DeliveryMode.PERSISTENT);

                //构造消息,此处写死,项目就是参数,或者方法获取

                sendMessage(session, producer);

                session.commit();

            } catch (Exception e) {

                e.printStackTrace();

            } finally {

                try {

                    if (null != connection)

                        connection.close();

                } catch (Throwable ignore) {

                }

            }

        }

    }

    3.2     启动多个客户端监听来接收topic的消息:

    publicclass ReceiveTopicimplements Runnable {

          private StringthreadName;

          ReceiveTopic(String threadName) {

               this.threadName = threadName;

          }

          publicvoid run() {

               // ConnectionFactory:连接工厂,JMS用它创建连接

               ConnectionFactory connectionFactory;

               // Connection:JMS客户端到JMS Provider的连接

               Connection connection =null;

               // Session:一个发送或接收消息的线程

               Session session;

               // Destination:消息的目的地;消息发送给谁.

               Destination destination;

               //消费者,消息接收者

               MessageConsumer consumer;

               connectionFactory = new ActiveMQConnectionFactory(

                          ActiveMQConnection.DEFAULT_USER,

                          ActiveMQConnection.DEFAULT_PASSWORD,"tcp://10.20.8.198:61616");

               try {

                     //构造从工厂得到连接对象

                     connection = connectionFactory.createConnection();

                     //启动

                     connection.start();

                     //获取操作连接,默认自动向服务器发送接收成功的响应

                     session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);

                     //获取session注意参数值FirstTopic是一个服务器的topic

                     destination = session.createTopic("FirstTopic");

                     consumer = session.createConsumer(destination);

                     while (true) {

                          //设置接收者接收消息的时间,为了便于测试,这里设定为100s

                          TextMessage message = (TextMessage) consumer

                                      .receive(100 * 1000);

                          if (null != message) {

                                System.out.println("线程"+threadName+"收到消息:" + message.getText());

                          } else {

                                continue;

                          }

                     }

               } catch (Exception e) {

                     e.printStackTrace();

               } finally {

                     try {

                          if (null != connection)

                                connection.close();

                     } catch (Throwable ignore) {

                     }

               }

          }

          publicstaticvoid main(String[] args) {

                //这里启动3个线程来监听FirstTopic的消息,与queue的方式不一样三个线程都能收到同样的消息

               ReceiveTopic receive1=new ReceiveTopic("thread1");

               ReceiveTopic receive2=new ReceiveTopic("thread2");

               ReceiveTopic receive3=new ReceiveTopic("thread3");

               Thread thread1=new Thread(receive1);

               Thread thread2=new Thread(receive2);

               Thread thread3=new Thread(receive3);

               thread1.start();

               thread2.start();

               thread3.start();

          }

    }

    4     queue方式的消息处理示例
  • 相关阅读:
    declare handler 声明异常处理的语法
    mysql存储过程获取sqlstate message_text
    mongoTemplate操作内嵌文档
    mysql索引之七:组合索引中选择合适的索引列顺序
    mongoDB的操作总结
    explain之三:MYSQL EXPLAIN语句的extended 选项学习体会,分析诊断工具之二
    状态模式
    代码重构----使用java有限状态机来消除太多的if else判断
    断路器(CircuitBreaker)设计模式
    断路器之一:Hystrix 使用与分析
  • 原文地址:https://www.cnblogs.com/Jeely/p/10784792.html
Copyright © 2011-2022 走看看