概念
RabbitMQ是一个在AMQP基础上实现的企业级消息系统。何谓消息系统,就是消息队列系统,消息队列是“”消费-生产者模型“”的一个典型的代表,一端往消息队列中不断写入消息,而另一端则可以读取或者订阅队列中的消息。
在项目中,将一些无需即时返回且耗时的操作提取出来,进行了异步操作,而这种异步处理的方式大大的节省了服务器的请求时间,从而提高了系统的吞吐量。而且不影响服务器做其他相应,不独占服务器资源。
如:注册用户这种服务,它可能解耦成好几种独立的服务(账号验证,邮箱验证码,手机短信码等)。它们作为消费者,等待用户输入数据,在前台数据提交之后会经过分解并发送到各个服务所在的url,分发的那个角色就相当于生产者。消费者在获取数据时候有可能一次不能处理完,那么它们各自有一个请求队列,那就是内存缓冲区了。做这项工作的框架叫做消息队列。
又比如:电商系统中的订单处理系统,传统处理模式是:下订单的时候,订单系统可能会调用库存系统的接口,这样两个系统之间存在一个严重依赖关系,如果库存系统宕机,那么整个流程都会受到影响。现在大多公司的处理方法是:引入消息队列,下完订单,订单系统完成持久化处理,将消息写入消息队列,返回用户订单下单成功。
对库存系统来说,采用拉/推的方式,获取下单信息,库存系统根据下单信息,进行库存操作。这样实现了两个系统间的解耦。
即使在下单时库存系统不能正常使用。也不影响正常下单,因为下单后,订单系统写入消息队列就不再关心其他的后续操作了。
给一张结构图:
几个概念说明:
Broker:简单来说就是消息队列服务器实体。
Exchange:消息交换机,它指定消息按什么规则,路由到哪个队列。
Queue:消息队列载体,每个消息都会被投入到一个或多个队列。
Binding:绑定,它的作用就是把exchange和queue按照路由规则绑定起来。
Routing Key:路由关键字,exchange根据这个关键字进行消息投递。
vhost:虚拟主机,一个broker里可以开设多个vhost,用作不同用户的权限分离。
producer:消息生产者,就是投递消息的程序。
consumer:消息消费者,就是接受消息的程序。
channel:消息通道,在客户端的每个连接里,可建立多个channel,每个channel代表一个会话任务。可以理解为一个连接中的子通道,想象一条高速公路,可能是 4车道的,也可能是 8 车道的,这些车道就是 Channel。
消息队列的使用过程大概如下:
(1)客户端连接到消息队列服务器,打开一个channel。
(2)客户端声明一个exchange,并设置相关属性。
(3)客户端声明一个queue,并设置相关属性。
(4)客户端使用routing key,在exchange和queue之间建立好绑定关系。
(5)客户端投递消息到exchange。
exchange接收到消息后,就根据消息的key和已经设置的binding,进行消息路由,将消息投递到一个或多个队列里。
exchange也有几个类型,完全根据key进行投递的叫做Direct交换机,例如,绑定时设置了routing key为”abc”,那么客户端提交的消息,只有设置了key为”abc”的才会投递到队列。对key进行模式匹配后进行投递的叫做Topic交换机,符号”#”匹配一个或多个词,符号””匹配正好一个词。例如”abc.#”匹配”abc.def.ghi”,”abc.”只匹配”abc.def”。还有一种不需要key的,叫做Fanout交换机,它采取广播模式,一个消息进来时,投递到与该交换机绑定的所有队列。
RabbitMQ支持消息的持久化,也就是数据写在磁盘上,为了数据安全考虑,我想大多数用户都会选择持久化。
消息队列持久化包括3个部分:
(1)exchange持久化,在声明时指定durable => 1
(2)queue持久化,在声明时指定durable => 1
(3)消息持久化,在投递时指定delivery_mode => 2(1是非持久化)
如果exchange和queue都是持久化的,那么它们之间的binding也是持久化的。如果exchange和queue两者之间有一个持久化,一个非持久化,就不允许建立绑定。
PHP+RabbitMQ实现消息队列
先安装PHP对应的RabbitMQ,这里用的是 php_amqp 不同的扩展实现方式会有细微的差异. php扩展地址: http://pecl.php.net/package/amqp 具体以官网为准 http://www.rabbitmq.com/getstarted.html
介绍
config.php 配置信息 BaseMQ.php MQ基类 ProductMQ.php 生产者类 ConsumerMQ.php 消费者类 Consumer2MQ.php 消费者2(可有多个)
config.php
<?php
return [
//配置
'host' => [
'host' => '127.0.0.1',
'port' => '5672',
'login' => 'guest',
'password' => 'guest',
'vhost'=>'/',
],
//交换机
'exchange'=>'word',
//路由
'routes' => [],
];
BaseMQ.php
<?php
/**
* Created by PhpStorm.
* Time: 14:28
*/
namespace MyObjSummary
abbitMQ;
/** Member
* AMQPChannel
* AMQPConnection
* AMQPEnvelope
* AMQPExchange
* AMQPQueue
* Class BaseMQ
* @package MyObjSummary
abbitMQ
*/
class BaseMQ
{
/** MQ Channel
* @var AMQPChannel
*/
public $AMQPChannel ;
/** MQ Link
* @var AMQPConnection
*/
public $AMQPConnection ;
/** MQ Envelope
* @var AMQPEnvelope
*/
public $AMQPEnvelope ;
/** MQ Exchange
* @var AMQPExchange
*/
public $AMQPExchange ;
/** MQ Queue
* @var AMQPQueue
*/
public $AMQPQueue ;
/** conf
* @var
*/
public $conf ;
/** exchange
* @var
*/
public $exchange ;
/** link
* BaseMQ constructor.
* @throws AMQPConnectionException
*/
public function __construct()
{
$conf = require 'config.php' ;
if(!$conf)
throw new AMQPConnectionException('config error!');
$this->conf = $conf['host'] ;
$this->exchange = $conf['exchange'] ;
$this->AMQPConnection = new AMQPConnection($this->conf);
if (!$this->AMQPConnection->connect())
throw new AMQPConnectionException("Cannot connect to the broker!
");
}
/**
* close link
*/
public function close()
{
$this->AMQPConnection->disconnect();
}
/** Channel
* @return AMQPChannel
* @throws AMQPConnectionException
*/
public function channel()
{
if(!$this->AMQPChannel) {
$this->AMQPChannel = new AMQPChannel($this->AMQPConnection);
}
return $this->AMQPChannel;
}
/** Exchange
* @return AMQPExchange
* @throws AMQPConnectionException
* @throws AMQPExchangeException
*/
public function exchange()
{
if(!$this->AMQPExchange) {
$this->AMQPExchange = new AMQPExchange($this->channel());
$this->AMQPExchange->setName($this->exchange);
}
return $this->AMQPExchange ;
}
/** queue
* @return AMQPQueue
* @throws AMQPConnectionException
* @throws AMQPQueueException
*/
public function queue()
{
if(!$this->AMQPQueue) {
$this->AMQPQueue = new AMQPQueue($this->channel());
}
return $this->AMQPQueue ;
}
/** Envelope
* @return AMQPEnvelope
*/
public function envelope()
{
if(!$this->AMQPEnvelope) {
$this->AMQPEnvelope = new AMQPEnvelope();
}
return $this->AMQPEnvelope;
}
}
ProductMQ.php
<?php
//生产者 P
namespace MyObjSummary
abbitMQ;
require 'BaseMQ.php';
class ProductMQ extends BaseMQ
{
private $routes = ['hello','word']; //路由key
/**
* ProductMQ constructor.
* @throws AMQPConnectionException
*/
public function __construct()
{
parent::__construct();
}
/** 只控制发送成功 不接受消费者是否收到
* @throws AMQPChannelException
* @throws AMQPConnectionException
* @throws AMQPExchangeException
*/
public function run()
{
//频道
$channel = $this->channel();
//创建交换机对象
$ex = $this->exchange();
//消息内容
$message = 'product message '.rand(1,99999);
//开始事务
$channel->startTransaction();
$sendEd = true ;
foreach ($this->routes as $route) {
$sendEd = $ex->publish($message, $route) ;
echo "Send Message:".$sendEd."
";
}
if(!$sendEd) {
$channel->rollbackTransaction();
}
$channel->commitTransaction(); //提交事务
$this->close();
die ;
}
}
try{
(new ProductMQ())->run();
}catch (Exception $exception){
var_dump($exception->getMessage()) ;
}
ConsumerMQ.php
<?php
//消费者 C
namespace MyObjSummary
abbitMQ;
require 'BaseMQ.php';
class ConsumerMQ extends BaseMQ
{
private $q_name = 'hello'; //队列名
private $route = 'hello'; //路由key
/**
* ConsumerMQ constructor.
* @throws AMQPConnectionException
*/
public function __construct()
{
parent::__construct();
}
/** 接受消息 如果终止 重连时会有消息
* @throws AMQPChannelException
* @throws AMQPConnectionException
* @throws AMQPExchangeException
* @throws AMQPQueueException
*/
public function run()
{
//创建交换机
$ex = $this->exchange();
$ex->setType(AMQP_EX_TYPE_DIRECT); //direct类型
$ex->setFlags(AMQP_DURABLE); //持久化
//echo "Exchange Status:".$ex->declare()."
";
//创建队列
$q = $this->queue();
//var_dump($q->declare());exit();
$q->setName($this->q_name);
$q->setFlags(AMQP_DURABLE); //持久化
//echo "Message Total:".$q->declareQueue()."
";
//绑定交换机与队列,并指定路由键
echo 'Queue Bind: '.$q->bind($this->exchange, $this->route)."
";
//阻塞模式接收消息
echo "Message:
";
while(True){
$q->consume(function ($envelope,$queue){
$msg = $envelope->getBody();
echo $msg."
"; //处理消息
$queue->ack($envelope->getDeliveryTag()); //手动发送ACK应答
});
//$q->consume('processMessage', AMQP_AUTOACK); //自动ACK应答
}
$this->close();
}
}
try{
(new ConsumerMQ)->run();
}catch (Exception $exception){
var_dump($exception->getMessage()) ;
}
一开始队列是不存在的,我们需要先启动 ConsumerMQ.php 来初始化队列