摘自:码友18年(www.mayou18.com)
what is rocketMQ?
RocketMQ作为一款分布式的消息中间件(阿里的说法是不遵循任何规范的,所以不能完全用JMS的那一套东西来看它),经历了Metaq1.x、Metaq2.x的发展和淘宝双十一的洗礼,在功能和性能上远超ActiveMQ。RocketMQ 是一款分布式、队列模型的消息中间件,具有以下特点:
专业&验证
1、MQ是消息领域业内专业的消息中间件,多次在国内外获奖
2、经过双11阿里交易、商品、营销等核心链路真实场景验证
3、阿里集团内部1000+核心应用使用,每天流转几千亿条消息,稳定可靠
技术体系
1、产品历史超过7年,消息保证不丢,技术体系丰富成熟
2、阿里内部产品名:MetaQ、Notify
3、开源社区产品名:RocketMQ,无技术绑定风险
4、应用灵活,无任何强制绑定其他产品
独立部署
1、支持专有云独立输出,支持物理机和虚拟机,最小部署仅几台机器
2、专有云配套运维系统,方便运维人员实时监控系统状态
3、专有云配套mqadmin命令集和管理类open API,方便集成及统一运维
4、支持混合云架构,包括VPC用户
高可靠
1、一份消息多份落盘存储,经过严格断电测试,消息依然保证不丢失
2、支持消息轨迹,消息从生产到消费轨迹,可清晰排查
3、海量消息堆积,单个Topic可堆积100亿+条消息,防止系统高流量崩溃
4、默认情况下消息落盘保留3天
高性能
1、同一网络内,消息传输RT在10毫秒之内,性能测试下,网卡可被打满
2、公有云默认单Topic 发送消息为每秒5000条,最高可申请扩展至10W以上支持大量消息并发发送,超过5万个队列,性能依然卓越
3、支持消息海量堆积,单Topic可堆积100+亿条消息
多协议
1、HTTP接入:支持跨网络调用,HTTP公网接入支持跨网络调用,HTTP Restful接口公网接入
2、MQTT接入:支持主动推送模,多级Topic模型支持一次触达1000万+终端可广泛应用于物联网和社交即时通信场景,可跟JStorm等实时计算完美结合
3、TCP接入(专业) :区别于HTTP简单的接入方式,同时提供更为专业、可靠、稳定的TCP协议的SDK接入
RocketMQ 代码实现
pom.xml
<dependency> <groupId>com.alibaba.rocketmq</groupId> <artifactId>rocketmq-client</artifactId> <version>3.2.6</version> </dependency> <dependency> <groupId>org.slf4j</groupId> <artifactId>slf4j-log4j12</artifactId> <version>1.7.7</version> </dependency>
Producer.java
import com.alibaba.rocketmq.client.exception.MQClientException; import com.alibaba.rocketmq.client.producer.DefaultMQProducer; import com.alibaba.rocketmq.client.producer.SendResult; import com.alibaba.rocketmq.common.message.Message; public class Producer { public static void main(String[] args) throws MQClientException, InterruptedException { /** * 一个应用创建一个Producer,由应用来维护此对象,可以设置为全局对象或者单例<br> * 注意:ProducerGroupName需要由应用来保证唯一<br> * ProducerGroup这个概念发送普通的消息时,作用不大,但是发送分布式事务消息时,比较关键, * 因为服务器会回查这个Group下的任意一个Producer */ DefaultMQProducer producer = new DefaultMQProducer("ProducerGroupName"); producer.setNamesrvAddr("192.168.0.123:9876"); /** *默认情况下,一台服务器只能启动一个Producer或Consumer实例,所以如果需要在一台服务器启 *动多个实例,需要设置实例的名称 */ producer.setInstanceName("Producer"); producer.setSendMsgTimeout(3000);//发送消息超时 producer.setRetryTimesWhenSendFailed(2);//发送失败后,重试几次 /** * Producer对象在使用之前必须要调用start初始化,初始化一次即可<br> * 注意:切记不可以在每次发送消息时,都调用start方法 */ producer.start(); /** * 下面这段代码表明一个Producer对象可以发送多个topic,多个tag的消息。 * 注意:send方法是同步调用,只要不抛异常就标识成功。但是发送成功也可会有多种状态,<br> * 例如消息写入Master成功,但是Slave不成功,这种情况消息属于成功,但是对于个别应用如果对消息可靠性要求极高,<br> * 需要对这种情况做处理。另外,消息可能会存在发送失败的情况,失败重试由应用来处理。 */ for (int i = 0; i < 100; i++) { try { { Message msg = new Message("TopicTest1",// topic "TagA",// tag "OrderID001",// key ("Hello MetaQ").getBytes());// body SendResult sendResult = producer.send(msg); System.out.println(sendResult); } { Message msg = new Message("TopicTest2",// topic "TagB",// tag "OrderID0034",// key ("Hello MetaQ").getBytes());// body SendResult sendResult = producer.send(msg); System.out.println(sendResult); } { Message msg = new Message("TopicTest3",// topic "TagC",// tag "OrderID061",// key ("Hello MetaQ").getBytes());// body SendResult sendResult = producer.send(msg); System.out.println(sendResult); } } catch (Exception e) { e.printStackTrace(); } TimeUnit.MILLISECONDS.sleep(1000); } /** * 应用退出时,要调用shutdown来清理资源,关闭网络连接,从服务器上注销自己 * 注意:我们建议应用在JBOSS、Tomcat等容器的退出钩子里调用shutdown方法 */ producer.shutdown(); } }
PushConsumer.java
import java.util.List; import com.alibaba.rocketmq.client.consumer.DefaultMQPushConsumer; import com.alibaba.rocketmq.client.consumer.listener.ConsumeConcurrentlyContext; import com.alibaba.rocketmq.client.consumer.listener.ConsumeConcurrentlyStatus; import com.alibaba.rocketmq.client.consumer.listener.MessageListenerConcurrently; import com.alibaba.rocketmq.client.exception.MQClientException; import com.alibaba.rocketmq.common.message.MessageExt; public class PushConsumer { /** * 内部是使用长轮询Pull方式从MetaQ服务器拉消息,然后再回调用户Listener方法<br> */ public static void main(String[] args) throws InterruptedException, MQClientException { /** * 一个应用创建一个Consumer,由应用来维护此对象,可以设置为全局对象或者单例<br> * 注意:ConsumerGroupName需要由应用来保证唯一。 *不同consumer group里的consumer即便是消费同一个topic下的同一个queue, *那消费进度也是分开存储的。也就是说,不同的consumer group内的consumer的消费 *完全隔离,彼此不受影响。 */ DefaultMQPushConsumer consumer = new DefaultMQPushConsumer( "ConsumerGroupName"); consumer.setNamesrvAddr("192.168.0.123:9876"); consumer.setInstanceName("Consumber"); //广播消费是指一个consumer只要订阅了某个topic的消息,那它就会收到该topic下的所有queue里的消息, //而不管这个consumer的group是什么。所以对于广播消费来说,consumer group没什么实际意义。consumer可以在实例化时,我们可以指定是集群消费还是广播消费。 //consumer.setMessageModel(MessageModel.BROADCASTING); /** * 订阅指定topic下tags分别等于TagA或TagC或TagD */ consumer.subscribe("TopicTest1", "TagA || TagC || TagD"); /** * 订阅指定topic下所有消息<br> * 注意:一个consumer对象可以订阅多个topic */ consumer.subscribe("TopicTest2", "*"); consumer.registerMessageListener(new MessageListenerConcurrently() { /** * 默认msgs里只有一条消息,可以通过设置consumeMessageBatchMaxSize参数来批量接收消息 */ @Override public ConsumeConcurrentlyStatus consumeMessage( List<MessageExt> msgs, ConsumeConcurrentlyContext context) { System.out.println(Thread.currentThread().getName() + " Receive New Messages: " + msgs.size()); MessageExt msg = msgs.get(0); if (msg.getTopic().equals("TopicTest1")) { // 执行TopicTest1的消费逻辑 if (msg.getTags() != null && msg.getTags().equals("TagA")) { // 执行TagA的消费 System.out.println(new String(msg.getBody())); } else if (msg.getTags() != null && msg.getTags().equals("TagC")) { // 执行TagC的消费 } else if (msg.getTags() != null && msg.getTags().equals("TagD")) { // 执行TagD的消费 } } else if (msg.getTopic().equals("TopicTest2")) { System.out.println(new String(msg.getBody())); } return ConsumeConcurrentlyStatus.CONSUME_SUCCESS; } }); /** * Consumer对象在使用之前必须要调用start初始化,初始化一次即可<br> */ consumer.start(); System.out.println("Consumer Started."); } }