• Alibaba(阿里) RocketMQ入门实例


    摘自:码友18年(www.mayou18.com)

    what is rocketMQ?

    RocketMQ作为一款分布式的消息中间件(阿里的说法是不遵循任何规范的,所以不能完全用JMS的那一套东西来看它),经历了Metaq1.x、Metaq2.x的发展和淘宝双十一的洗礼,在功能和性能上远超ActiveMQ。RocketMQ 是一款分布式、队列模型的消息中间件,具有以下特点:

    专业&验证

    1、MQ是消息领域业内专业的消息中间件,多次在国内外获奖

    2、经过双11阿里交易、商品、营销等核心链路真实场景验证

    3、阿里集团内部1000+核心应用使用,每天流转几千亿条消息,稳定可靠

    技术体系

    1、产品历史超过7年,消息保证不丢,技术体系丰富成熟

    2、阿里内部产品名:MetaQ、Notify

    3、开源社区产品名:RocketMQ,无技术绑定风险

    4、应用灵活,无任何强制绑定其他产品

    独立部署

    1、支持专有云独立输出,支持物理机和虚拟机,最小部署仅几台机器

    2、专有云配套运维系统,方便运维人员实时监控系统状态

    3、专有云配套mqadmin命令集和管理类open API,方便集成及统一运维

    4、支持混合云架构,包括VPC用户

    高可靠

    1、一份消息多份落盘存储,经过严格断电测试,消息依然保证不丢失

    2、支持消息轨迹,消息从生产到消费轨迹,可清晰排查

    3、海量消息堆积,单个Topic可堆积100亿+条消息,防止系统高流量崩溃

    4、默认情况下消息落盘保留3天

    高性能

    1、同一网络内,消息传输RT在10毫秒之内,性能测试下,网卡可被打满

    2、公有云默认单Topic 发送消息为每秒5000条,最高可申请扩展至10W以上支持大量消息并发发送,超过5万个队列,性能依然卓越

    3、支持消息海量堆积,单Topic可堆积100+亿条消息

    多协议

    1、HTTP接入:支持跨网络调用,HTTP公网接入支持跨网络调用,HTTP Restful接口公网接入

    2、MQTT接入:支持主动推送模,多级Topic模型支持一次触达1000万+终端可广泛应用于物联网和社交即时通信场景,可跟JStorm等实时计算完美结合

    3、TCP接入(专业) :区别于HTTP简单的接入方式,同时提供更为专业、可靠、稳定的TCP协议的SDK接入

    RocketMQ 代码实现

    pom.xml

    <dependency>
      <groupId>com.alibaba.rocketmq</groupId>
        <artifactId>rocketmq-client</artifactId>
        <version>3.2.6</version>
    </dependency>
    <dependency>
        <groupId>org.slf4j</groupId>
        <artifactId>slf4j-log4j12</artifactId>
        <version>1.7.7</version>
    </dependency>

    Producer.java

    import com.alibaba.rocketmq.client.exception.MQClientException;
    import com.alibaba.rocketmq.client.producer.DefaultMQProducer;
    import com.alibaba.rocketmq.client.producer.SendResult;
    import com.alibaba.rocketmq.common.message.Message;
    public class Producer {
      public static void main(String[] args) throws MQClientException,
          InterruptedException {
        /**
         * 一个应用创建一个Producer,由应用来维护此对象,可以设置为全局对象或者单例<br>
         * 注意:ProducerGroupName需要由应用来保证唯一<br>
         * ProducerGroup这个概念发送普通的消息时,作用不大,但是发送分布式事务消息时,比较关键,
         * 因为服务器会回查这个Group下的任意一个Producer
         */
        DefaultMQProducer producer = new DefaultMQProducer("ProducerGroupName");
        producer.setNamesrvAddr("192.168.0.123:9876");
        /**
         *默认情况下,一台服务器只能启动一个Producer或Consumer实例,所以如果需要在一台服务器启
         *动多个实例,需要设置实例的名称
         */
        producer.setInstanceName("Producer");
        producer.setSendMsgTimeout(3000);//发送消息超时
        producer.setRetryTimesWhenSendFailed(2);//发送失败后,重试几次
        /**
         * Producer对象在使用之前必须要调用start初始化,初始化一次即可<br>
         * 注意:切记不可以在每次发送消息时,都调用start方法
         */
        producer.start();
        /**
         * 下面这段代码表明一个Producer对象可以发送多个topic,多个tag的消息。
         * 注意:send方法是同步调用,只要不抛异常就标识成功。但是发送成功也可会有多种状态,<br>
         * 例如消息写入Master成功,但是Slave不成功,这种情况消息属于成功,但是对于个别应用如果对消息可靠性要求极高,<br>
         * 需要对这种情况做处理。另外,消息可能会存在发送失败的情况,失败重试由应用来处理。
         */
        for (int i = 0; i < 100; i++) {
          try {
            {
              Message msg = new Message("TopicTest1",// topic
                  "TagA",// tag
                  "OrderID001",// key
                  ("Hello MetaQ").getBytes());// body
              SendResult sendResult = producer.send(msg);
              System.out.println(sendResult);
            }
            {
              Message msg = new Message("TopicTest2",// topic
                  "TagB",// tag
                  "OrderID0034",// key
                  ("Hello MetaQ").getBytes());// body
              SendResult sendResult = producer.send(msg);
              System.out.println(sendResult);
            }
            {
              Message msg = new Message("TopicTest3",// topic
                  "TagC",// tag
                  "OrderID061",// key
                  ("Hello MetaQ").getBytes());// body
              SendResult sendResult = producer.send(msg);
              System.out.println(sendResult);
            }
          } catch (Exception e) {
            e.printStackTrace();
          }
          TimeUnit.MILLISECONDS.sleep(1000);
        }
        /**
         * 应用退出时,要调用shutdown来清理资源,关闭网络连接,从服务器上注销自己
         * 注意:我们建议应用在JBOSS、Tomcat等容器的退出钩子里调用shutdown方法
         */
        producer.shutdown();
      }
    }

    PushConsumer.java

    import java.util.List;
    import com.alibaba.rocketmq.client.consumer.DefaultMQPushConsumer;
    import com.alibaba.rocketmq.client.consumer.listener.ConsumeConcurrentlyContext;
    import com.alibaba.rocketmq.client.consumer.listener.ConsumeConcurrentlyStatus;
    import com.alibaba.rocketmq.client.consumer.listener.MessageListenerConcurrently;
    import com.alibaba.rocketmq.client.exception.MQClientException;
    import com.alibaba.rocketmq.common.message.MessageExt;
    public class PushConsumer {
      /**
       * 内部是使用长轮询Pull方式从MetaQ服务器拉消息,然后再回调用户Listener方法<br>
       */
      public static void main(String[] args) throws InterruptedException,
          MQClientException {
        /**
         * 一个应用创建一个Consumer,由应用来维护此对象,可以设置为全局对象或者单例<br>
         * 注意:ConsumerGroupName需要由应用来保证唯一。
         *不同consumer group里的consumer即便是消费同一个topic下的同一个queue,
         *那消费进度也是分开存储的。也就是说,不同的consumer group内的consumer的消费
         *完全隔离,彼此不受影响。
         */
        DefaultMQPushConsumer consumer = new DefaultMQPushConsumer(
            "ConsumerGroupName");
        consumer.setNamesrvAddr("192.168.0.123:9876");
        consumer.setInstanceName("Consumber");
        //广播消费是指一个consumer只要订阅了某个topic的消息,那它就会收到该topic下的所有queue里的消息,
        //而不管这个consumer的group是什么。所以对于广播消费来说,consumer group没什么实际意义。consumer可以在实例化时,我们可以指定是集群消费还是广播消费。
        //consumer.setMessageModel(MessageModel.BROADCASTING);
        /**
         * 订阅指定topic下tags分别等于TagA或TagC或TagD
         */
        consumer.subscribe("TopicTest1", "TagA || TagC || TagD");
        /**
         * 订阅指定topic下所有消息<br>
         * 注意:一个consumer对象可以订阅多个topic
         */
        consumer.subscribe("TopicTest2", "*");
        consumer.registerMessageListener(new MessageListenerConcurrently() {
          /**
           * 默认msgs里只有一条消息,可以通过设置consumeMessageBatchMaxSize参数来批量接收消息
           */
          @Override
          public ConsumeConcurrentlyStatus consumeMessage(
              List<MessageExt> msgs, ConsumeConcurrentlyContext context) {
            System.out.println(Thread.currentThread().getName()
                + " Receive New Messages: " + msgs.size());
            MessageExt msg = msgs.get(0);
            if (msg.getTopic().equals("TopicTest1")) {
              // 执行TopicTest1的消费逻辑
              if (msg.getTags() != null && msg.getTags().equals("TagA")) {
                // 执行TagA的消费
                System.out.println(new String(msg.getBody()));
              } else if (msg.getTags() != null
                  && msg.getTags().equals("TagC")) {
                // 执行TagC的消费
              } else if (msg.getTags() != null
                  && msg.getTags().equals("TagD")) {
                // 执行TagD的消费
              }
            } else if (msg.getTopic().equals("TopicTest2")) {
              System.out.println(new String(msg.getBody()));
            }
            return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;
          }
        });
        /**
         * Consumer对象在使用之前必须要调用start初始化,初始化一次即可<br>
         */
        consumer.start();
        System.out.println("Consumer Started.");
      }
    }
  • 相关阅读:
    NoSQL、memcached介绍、安装memcached、查看memcached状态
    报警系统配置文件
    shell中的函数、数组、报警系统脚本
    for循环、while循环、break、continue、exit
    Shell脚本中的逻辑判断、文件目录属性判断、if的特殊用法、case判断
    Shell脚本、Shell脚本结构、date命令的用法、变量
    zabbix的自动发现、自定义添加监控项目、配置邮件告警
    rabbitMQ中的Vhost理解、创建和使用
    charset编码问题:YAMLException: java.nio.charset.MalformedInputException
    java jna 报错:Unable to load library
  • 原文地址:https://www.cnblogs.com/mayou18/p/9051716.html
Copyright © 2020-2023  润新知