• rabbitmq


    介绍

    MQ全称为Message Queue, 是一种分布式应用程序的的通信方法,它是消费-生产者模型的一个典型的代表,producer往消息队列中不断写入消息,而另一端consumer则可以读取或者订阅队列中的消息。RabbitMQ是MQ产品的典型代表,是一款基于AMQP协议可复用的企业消息系统

    系统架构

    Rabbitmq系统最核心的组件是Exchange和Queue,Exchange和Queue是在rabbitmq server(又叫做broker)端,producer和consumer在应用端。

    原理大致图(MQ:Message Queue):

    Queue

    消息队列,提供了FIFO的处理机制,具有缓存消息的能力。rabbitmq中,队列消息可以设置为持久化,临时或者自动删除。

    1. 设置为持久化的队列,queue中的消息会在server本地硬盘存储一份,防止系统crash,数据丢失
    2. 设置为临时队列,queue中的数据在系统重启之后就会丢失
    3. 设置为自动删除的队列,当不存在用户连接到server,队列中的数据会被自动删除

    Exchange

    Exchange类似于数据通信网络中的交换机,提供消息路由策略。rabbitmq中,producer不是通过信道直接将消息发送给queue,而是先发送给Exchange。一个Exchange可以和多个Queue进行绑定,producer在传递消息的时候,会传递一个ROUTING_KEY,Exchange会根据这个ROUTING_KEY按照特定的路由算法,将消息路由给指定的queue。和Queue一样,Exchange也可设置为持久化,临时或者自动删除。

    Exchange有4种类型:direct(默认),fanout, topic, 和headers,不同类型的Exchange转发消息的策略有所区别:

    1. Direct直接交换器,工作方式类似于单播,Exchange会将消息发送完全匹配ROUTING_KEY的Queue
    2. fanout广播是式交换器,不管消息的ROUTING_KEY设置为什么,Exchange都会将消息转发给所有绑定的Queue
    3. topic主题交换器,工作方式类似于组播,Exchange会将消息转发和ROUTING_KEY匹配模式相同的所有队列,比如,ROUTING_KEY为user.stock的Message会转发给绑定匹配模式为 * .stock,user.stock, * . * 和#.user.stock.#的队列。( * 表是匹配一个任意词组,#表示匹配0个或多个词组)
    4. headers消息体的header匹配(ignore)

    Binding

    所谓绑定就是将一个特定的 Exchange 和一个特定的 Queue 绑定起来。Exchange 和Queue的绑定可以是多对多的关系

    通信过程

    假设P1和C1注册了相同的Broker,Exchange和Queue。P1发送的消息最终会被C1消费。基本的通信流程大概如下所示:

    1. P1生产消息,发送给服务器端的Exchange
    2. Exchange收到消息,根据ROUTINKEY,将消息转发给匹配的Queue1
    3. Queue1收到消息,将消息发送给订阅者C1
    4. C1收到消息,发送ACK给队列确认收到消息
    5. Queue1收到ACK,删除队列中缓存的此条消息

    Consumer收到消息时需要显式的向rabbit broker发送basic.ack消息或者consumer订阅消息时设置auto_ack参数为true。在通信过程中,队列对ACK的处理有以下几种情况:

    1. 如果consumer接收了消息,发送ack,rabbitmq会删除队列中这个消息,发送另一条消息给consumer。
    2. 如果cosumer接受了消息, 但在发送ack之前断开连接,rabbitmq会认为这条消息没有被deliver,在consumer在次连接的时候,这条消息会被redeliver。
    3. 如果consumer接受了消息,但是程序中有bug,忘记了ack,rabbitmq不会重复发送消息。
    4. rabbitmq2.0.0和之后的版本支持consumer reject某条(类)消息,可以通过设置requeue参数中的reject为true达到目地,那么rabbitmq将会把消息发送给下一个注册的consumer。

    php 生产者、消费者示例

    先用 composer 加载 mq 拓展文件

    { 
      "require": { 
        "php-amqplib/php-amqplib": "2.7.*" //增加这行 
      } 
    }
    
    
    class RabbitMq extends Command
    {
    protected $config = [
    'host' => '192.168.1.18',
    'port' => '5672',
    'user' => 'admin',
    'pwd' => '123456',
    'vhost'=> '/',
    ];

    protected $exchangeName = 'kd_sms_send_ex'; //交换机名
    protected $queueName = 'kd_sms_send_q'; //队列名称
    protected $routingKey = 'sms_send'; //路由关键字(也可以省略)

    protected function configure()
    {
    $this->setName('mq')
    ->addOption('type', null, Option::VALUE_REQUIRED, 'date yyyymmdd', 'con') // pro
    ->setDescription('Mq test');
    }

    protected function execute(Input $input, Output $output)
    {
    $type = $input->getOption('type');

    if ($type=='con') {
    // 消费
    $this->consumption();
    }elseif ($type=='pro'){
    // 生产
    $this->production();
    }

    echo 'mq test end' .PHP_EOL;
    }


    // 消费
    protected function consumption()
    {
    //连接RabbitMQ
    $conn = new AMQPStreamConnection(
    $this->config['host'],
    $this->config['port'],
    $this->config['user'],
    $this->config['pwd']
    );
    // 开启一个通道
    $channel = $conn->channel();

    // 对于正在繁忙的客户端,没得到回应之前,不向其发送新消息
    $channel->basic_qos(null,1,null);

    // 声明一个队列 第三个参数为声明队列持久性
    $channel->queue_declare($this->queueName, false, true, false, false);
    echo ' [*] Waiting for messages. To exit press CTRL+C', " ";
    $callback = function ($msg){
    echo date('Y-m-d H:i:s') . ' body is '. $msg->body ." ";
    };
    // 开始队列消费 第四个参数表示通知服务端消费情况
    $channel->basic_consume($this->queueName, '', false, true, false, false, $callback);

    while (count($channel->callbacks)) {
    $channel->wait();
    }

    // 关闭通道
    $channel->close();
    // 关闭连接
    $conn->close();
    }

    // 生产
    protected function production()
    {
    //建立生产者与mq之间的连接
    $conn = new AMQPStreamConnection(
    $this->config['host'],
    $this->config['port'],
    $this->config['user'],
    $this->config['pwd']
    );
    //在已连接基础上建立生产者与mq之间的通道
    $channel = $conn->channel();

    //声明初始化交换机
    $channel->exchange_declare($this->exchangeName, 'direct', false, true, false);
    //声明初始化一条队列 第三个参数为声明队列持久性
    $channel->queue_declare($this->queueName, false, true, false, false);
    //将队列与某个交换机进行绑定,并使用路由关键字
    $channel->queue_bind($this->queueName, $this->exchangeName, $this->routingKey);

    //生成消息
    $msgBody = serialize(["name" => "dxx", "age" => 18]);
    $param = [
    'delivery_mode' => AMQPMessage::DELIVERY_MODE_PERSISTENT, // 消息设为持久化
    ];
    $msg = new AMQPMessage($msgBody, $param);
    //推送消息到某个交换机
    $channel->basic_publish($msg, $this->exchangeName, $this->routingKey);

        // 关闭通道
        $channel->close();
        // 关闭连接
        $conn->close();
      }

    }
    转自:https://www.cnblogs.com/jun-ma/p/4840869.html
  • 相关阅读:
    异步编程与scrapy
    统计学 李航读书笔记
    算法模型手写
    《剑指offer》面试题的Python实现
    numpy 中文手册
    django部署
    Django ORM中使用update_or_create功能再解
    RabbitMQ(七)心跳控制 -- heartbeat
    重写__eq__函数——对象list中使用in index()——获得list中不同属性对象个数
    Python机器学习及分析工具:Scikit-learn篇
  • 原文地址:https://www.cnblogs.com/xdtx/p/10147402.html
Copyright © 2020-2023  润新知