• 【4】JMicro微服务开发及使用


    JMicro是一个用Java语言实现的开源微服务全家桶,

    源码地址:https://github.com/mynewworldyyl/jmicro

    Demo地址:http://jmicro.cn/

    摘要

    假设你已经按照前面分享的文章下载JMicro源码并编译成功。现在开始开发一个JMicro微服务,并通过Java客户端及JS调用此微服务,Java支持同步和异步调用,JS目前只支持异步调用。

    服务提供者和消费者模式

     上图是最基本的服务提供者和消费者关系图,服务方实现服务接口,消费方通过接口使用服务,面向接口编程,服务方与消费方没有直接依赖。另一方面,JMicro为了给消费方提供异步调用支持,在消费方与服务接口之间自动加入一个异步接口,以提供异步调用支持,如下图:

     在ISimpleRpc$JMAsyncClient接口中,每个方法都与ISimpleRpc中的方法一一对应,ISimpleRpc$JMAsyncClient完全由JMicro代码生成工具自动生成,不需要服务实现方及消息方做任何额外工作,非常便。异步接口后缀$JMAsyncClient及异步方法名后缀JMAsync是框架固定后缀,所以写代码时尽量避免使用,以免混淆。

    开发服务提供者

    1)建立接口项目

    因为ISimpleRpc接口同时被服务实现方及服务消费方依赖,所以需要单独建立一个项目存放此接口

    新建接口对应的Maven项目,并在POM加主如下依赖

     <dependency>
        <groupId>cn.jmicro</groupId>
        <artifactId>api</artifactId>
        <version>0.0.1-SNAPSHOT</version>
    </dependency>    

    新建接口类如下所示

    package cn.jmicro.example.api.rpc;
    
    import cn.jmicro.api.test.Person;
    import cn.jmicro.codegenerator.AsyncClientProxy;
    
    @AsyncClientProxy
    public interface ISimpleRpc {
        
        String hello(String name);
        
        String hi(Person p);
        
        String linkRpc(String msg);
        
    }

    @AsyncClientProxy注解指示JMicro为此接口生成异步接口,即ISimpleRpc$JMAsyncClient,在此项目根目录执行mvn clean install,成功后将可在src/main/gen目录下找到cn/jmicro/example/api/rpc/genclient/ISimpleRpc$JMAsyncClient.java接口,及此接口实现类cn/jmicro/example/api/rpc/genclient/SimpleRpc$JMAsyncClientImpl.java,此实现类只用于服务提供方,消费方用不到。

    2)新建服务提供者项目

    新建一个Maven项目,并在POM文件加入如下依赖

    <dependency>
        <groupId>cn.jmicro</groupId>
        <artifactId>all</artifactId>
        <version>0.0.1-SNAPSHOT</version>
    </dependency>
            
    <dependency>
           <groupId>cn.jmicro</groupId>
           <artifactId>example.api</artifactId>
        <version>0.0.1-SNAPSHOT</version>
    </dependency>

    基中example.api即为上面建立的接口项目

    新建服务接口实现类,如下:

      1 package cn.jmicro.example.rpc.impl;
      2 
      3 import java.util.Random;
      4 
      5 import cn.jmicro.api.JMicroContext;
      6 import cn.jmicro.api.annotation.Component;
      7 import cn.jmicro.api.annotation.Reference;
      8 import cn.jmicro.api.annotation.SBreakingRule;
      9 import cn.jmicro.api.annotation.SMethod;
     10 import cn.jmicro.api.annotation.Service;
     11 import cn.jmicro.api.async.IPromise;
     12 import cn.jmicro.api.monitor.MC;
     13 import cn.jmicro.api.monitor.SF;
     14 import cn.jmicro.api.service.IServiceAsyncResponse;
     15 import cn.jmicro.api.test.Person;
     16 import cn.jmicro.common.Constants;
     17 import cn.jmicro.example.api.rpc.ISimpleRpc;
     18 import cn.jmicro.example.api.rpc.genclient.IRpcA$JMAsyncClient;
     19 
     20 @Service(namespace="simpleRpc", version="0.0.1", monitorEnable=1, maxSpeed=-1,debugMode=1,
     21 baseTimeUnit=Constants.TIME_SECONDS, clientId=1000,external=true)
     22 @Component
     23 public class SimpleRpcImpl implements ISimpleRpc {
     24 
     25     @Reference(namespace="rpca", version="0.0.1")
     26     private IRpcA$JMAsyncClient rpca;
     27     
     28     private Random r = new Random(100);
     29     
     30     @Override
     31     @SMethod(
     32             //breakingRule="1S 50% 500MS",
     33             //1秒钟内异常超50%,熔断服务,熔断后每80毫秒做一次测试
     34             breakingRule = @SBreakingRule(enable=true,percent=50,checkInterval=5000),
     35             logLevel=MC.LOG_DEBUG,    
     36             testingArgs="["test args"]",//测试参数
     37             monitorEnable=1,
     38             timeWindow=5*60000,//统计时间窗口5分钟
     39             slotInterval=100,
     40             checkInterval=5000,//采样周期2S
     41             timeout=5000,
     42             retryInterval=1000,
     43             debugMode=1,
     44             maxSpeed=1000,
     45             baseTimeUnit=Constants.TIME_MILLISECONDS
     46     )
     47     public String hello(String name) {
     48         if(SF.isLoggable(MC.LOG_DEBUG)) {
     49             SF.eventLog(MC.MT_PLATFORM_LOG,MC.LOG_DEBUG,SimpleRpcImpl.class, name);
     50         }
     51         /*int rv = r.nextInt();
     52         if(rv < 50) {
     53             throw new CommonException("test breaker exception");
     54         }*/
     55         System.out.println("Server hello: " +name);
     56         return "Server say hello to: "+name;
     57     }
     58     
     59     @Override
     60     @SMethod(
     61             //breakingRule="1S 50% 500MS",
     62             //1秒钟内异常超50%,熔断服务,熔断后每80毫秒做一次测试
     63             breakingRule = @SBreakingRule(enable=true,percent=50,checkInterval=5000),
     64             logLevel=MC.LOG_DEBUG,
     65             testingArgs="[{"username":"Zhangsan","id":"1"}]",//测试参数
     66             monitorEnable=1,
     67             timeWindow=5*60000,//统计时间窗口5分钟
     68             slotInterval=100,
     69             checkInterval=5000,//采样周期2S
     70             timeout=5000,
     71             retryInterval=1000,
     72             debugMode=0,
     73             maxSpeed=1000,
     74             baseTimeUnit=Constants.TIME_MILLISECONDS
     75     )
     76     public String hi(Person person) {
     77         if(SF.isLoggable(MC.LOG_DEBUG)) {
     78             SF.eventLog(MC.MT_PLATFORM_LOG,MC.LOG_DEBUG,SimpleRpcImpl.class, person.getUsername());
     79         }
     80         return "Server say hello to: " + person.toString();
     81     }
     82 
     83     @Override
     84     public String linkRpc(String msg) {
     85         if(SF.isLoggable(MC.LOG_DEBUG)) {
     86             SF.eventLog(MC.MT_APP_LOG,MC.LOG_DEBUG,SimpleRpcImpl.class, "linkRpc call IRpcA with: " + msg);
     87         }
     88         
     89         System.out.println("linkRpc: " + msg);
     90         //return this.rpca.invokeRpcA(msg+" linkRpc => invokeRpcA");
     91         
     92         //IPromise<String> p = PromiseUtils.callService(this.rpca, "invokeRpcA","linkRpc call IRpcA with: " + msg);
     93         
     94         IPromise<String> p = this.rpca.invokeRpcAJMAsync("invokeRpcA");
     95         JMicroContext cxt = JMicroContext.get();
     96         if(cxt.isAsync()) {
     97             IServiceAsyncResponse cb = cxt.getParam(Constants.CONTEXT_SERVICE_RESPONSE,null);
     98             p.then((rst,fail) -> {
     99                 cb.result(rst);
    100             });
    101             return null;
    102         } else {
    103             return p.getResult();
    104         }
    105         
    106     }   
    109 }

    此服务实现类包含微服务相关的很多细节,如限流,超时,重试,监听,日志,熔断,异步。 另外服务路由和负载均衡保持默认没有额外配置。下面对每行代码做概要解释

    从第5到18行是jmicro框架相关类导入,你可以看到,JMicro实现微服务核心应用没有任何第三方依赖。

    第20行Service注解提示此类是一个服务实现类,其属性说明如下:

    namespace和version分别是服务命名空间和版本号,服务名称不需要指定,固定是服务接口名全称,3个值有值构成服务的唯一标识,使用服务时需要通过此3个值。

    monitorable:此服务是否可监控,启用监控后,可以在后台管理页面看到服务调用的实时细节,比如QPS,失败数,成功数,超时数,及各指标占比等等;

    maxSpeed:服务最大qps,用于服务限流;

    debugMode:是否开启调试模式,在调试模式下,RPC会输出更多日志,铺助问题排查。

    baseTimeUnit:此服务与时间相关的属性的基本时间单位,可以是微秒,毫秒,秒,分,小时等;

    external:是否可通过Api网关供外部调用,如果false则只能内部调用,外部不能访问;

    clientId:原本是用于服务隔离,但现在使用过程中觉得不尽如人间,所以后面大概率做调整或去除。

    第21行Component注解告诉JMicro容器,这个类是一个组件,在JMicro容器启动时自动做实例化,以供其他组件使用,功能和Spring的Component注解类似。

    23行为类声明,实现ISimpleRpc服务接口

    25行和26行,Reference声明26行这个成员变量是一个服务引用,引用服务名称空间和版本分别为rpca及0.0.1,IRpcA$JMAsyncClient是另外一个服务接口的异步接口引用,JMicro内部使用另外一个服务时,只要这两行代码就能完成,相当方便。

    第31到45行为服务方法注解,其很多属性和Service注解相同,JMicro优先使用SMethod注解的属性,如果SMethod属性为-1,则使用Service注解的同名属性,如果SMthod对应属性值为0表示禁用,1表示启用。

    breakingRule : 服务方法的熔断规则,enable=true表示启用熔断规则;percent=50表示服务失败百分比超过50%时,开启服务熔断器,从而禁用服务;checkInterval=5000表示当服务熔断后,间隔多长时间做一次自动调用服务,其单位由baseTimeUnit确定。业界大部份微服务实现中,都定义一个半熔断状态,在半熔断状态中,开启部份RPC请求,以测试服务是否可以使用,这样会导致部份请求失败。在JMicro中,服务迷熔断后,JMicro自动开启服务调用,从而使熔断器断继收到服务RPC成功率数据,当失败率小于percent时,熔断器自动关闭,服务进入正常使用状态,这样完全不影响正常服务使用。

    logLevel:此方法日志级别,debug,info,warn,error,nolog;

    testArgs:熔断器做自动测试时使用的参数,其值可以是JSON格式,也可以是JMIcro编码密文,一般当需要通过Api网关调用时,需要人工查看时使用JSON,如果只是内部服务调用,则使用JMicro编码比较高率。

    timeWindow:JMicro监控为每个服务方法启动一个环形“旋转时钟”,这个环被分为N个Slot,每个Slot所占时间长度为slotInterval,即时钟的一个“滴答”,则timeWindow=slotInterval*N,在每个“滴答”时间片内产生的统计数据归类到这个时间Slot里,当数据所属时间片超出timeWindow时,Slot所代表的数据超时丢弃。这样在timeWindow内的统计数据就能够”平滑“过度而不出现”跳跃“现像。源代码实现核心类路径为:https://github.com/mynewworldyyl/jmicro/blob/master/api/src/main/java/cn/jmicro/api/monitor/ServiceCounter.java

    checkInterval: 当需要周其性地采集数据时,此值表示采集周期,如熔断器多久采集一次成功或失败率,限速器多久统计一次服务QPS等

    timeout: 服务超时时间,消费者等待服务提供者返回结果等待时间,一般针对同步RPC调用,对异步RPC调用无效,注意,JMicro中,同步和异步是指客户端调用RPC服务方法的方式,不针对服务方法,因为服务方法可以同时支持同步调用和异步调用,没有同步方法和异步方法这一说。

    retryInterval:发生超时时,间隔多久做一次重试;

    retryCnt:发生超时间,需要连续重试多少次,但不包括第一次,如retryCnt=2,则最多重试两次,加上第一次,最多调用3次;

    其他和Service相同属性不再重复

    第48,49行向监控服务器发一条日志信息,eventLog方法第1个参数表示事件类型,JMicro监控服务根据事件类型做统计和分发,

    第76行即上一章测试使用的RPC方法,Person是一个自定义的实体类,其定义(省略getter setter等代码)如下所示

    @SO
    public final class Person {
        private String username ="Yeu";
        private int id = 222;
    }

    其被@SO注解,JMicro序列化工具会对全部类路径下的@SO注解的类做序列化增强,以提高序列化类实例性能,这就是为什么每个服务启动时需要加-javaagent:/home/ubuntu0/jmicro/resp/jmicro-agent-0.0.1-SNAPSHOT.jar参数的原因。

    具体方式是通过javassist注入encode和decode两个方法,但是运行过程中发现javassist占用大量内存,如下图,按理说只是在JVM启动时类加载过程中使用javassist,生成目标class后javassist应该释放这些内存,但是现在即使JVM因内存不足而退出,这部份内存都没能释放!有知道原因的大神吗?

    JMIcro RPC方法支持的参数类型定义如下:

         a.Java支持的8种基本数据类型极其封装类型;

         b.  String类型,Date类型,ByteBuffer类型

         c.  由a,b构成的数组类型,及由a,b为元素构成的List,Set,Map类型

         d.  由a,b,c作为成员变量构成的自定义类类型,必须要SO注解;

         e.  由a,b,c,d作为元素构成的数组,List,Set,Map类型;

    第94到104行在一个服务方法里面调用另一个RPC服务方法,并且根据上下文的异步配置以决定使用同步或异步调用。

    到此简单的服务提供者开发完成,对使用到的一些重点细节做简单解释。

    部署服务提供者

    编译

     cd ${base_dir}/example/example.provider
     mvn clean install -Dmaven.test.skip=true

    在${base_dir}exampleexample.provider arget找到jmicro-example.provider-0.0.1-SNAPSHOT-jar-with-dependencies.jar文件待用

    上传Jar包

    http://jmicro.cn/环境为例,在浏览器中打开此页面,右上角点LOGIN,输入用户名:jmicro,密码:jmicro123 登陆系统,只有登陆后,才可以上传Jar包及部署操作。

    登陆后除了自己建立的数据外,请不要做删除和停止类的操作,特别是配置信息,以免影响系统正常运行。

    选 择菜单 deployment -> resposotory  --> ADD,如下图

    弹出如下对话框,选择要上传的Jar文件,一定要选对如图路径下的可执行Jar文件

     输入名称,默认名称和所选文件同名。如果仓库中已经存在同名文件,上传会失败,所以一定要输入一个不重名的名称,下一步部署配置时需要用到此名称。

    按确定开始上传,如下图

     上传成功后,在资源列表中查看如下

    配置部署描述

    选择deployment --> deploy desc -->  ADD ,如下图所示

     

    弹出对话框,输入如下图所示配置信息,JAR文件即为刚才上传成功的jar包文件名,勾选Enable表示启用此部署,最后加-Xmx32m -Xms8m限制一下内存,否则会因内存申请失败而部署失败。其他的选项先不用填或保持默认即可,如下图

    按确定后,等待10秒左右,如下图打开进程列表页面,可以看到启动了新的JVM进程

     服务调用

    我们现在开始从Web前端调用这个服务方法,选择Monitor --》 Service菜单,如下图

    弹出侧栏服务列表,如下图,右上角选择Refresh刷新一下列表,刚刚部署的服务才显示出来

     点选hi结点后,在编辑区打开此方法的配置,如下图。这些服务配置和上面源代码中Service及SMethod注解的属性基本上一一对应,并且可以动态修改,实时生效。

    比如启用和禁用监控,debugMode等。

     在打开的服务方法配置页面并往下拖到最后,看到Testing选项卡,如下图,在Testing Args框输入 [{"username":"Zhangsan","id":"1"}],点击选项卡右上角Start按钮,方法返回值输出在Testing Result框中,如图:

     

     可以按相同的操作步聚调用别的远程方法,注意方法参数要输正确,正确的参数请查看上面接口定义,也可以通过Github查看其他的接口源码。

    通过Java API调用远程服务

     以Maven为例,首先在POM文件中引入如下依赖,example.api为服务接口所在项目

     <dependency>
             <groupId>cn.jmicro</groupId>
             <artifactId>gateway.client</artifactId>
            <version>0.0.1-SNAPSHOT</version>
      </dependency>
    <dependency>
        <groupId>cn.jmicro</groupId>
        <artifactId>example.api</artifactId>
        <version>0.0.1-SNAPSHOT</version>
    </dependency>

    写Java main函数直接调用RPC源始同步方法

    public static void main(String[] args) {
            ApiGatewayClient socketClient = new ApiGatewayClient(new ApiGatewayConfig(Constants.TYPE_HTTP,"jmicro.cn",80));
            ISimpleRpc srv = socketClient.getService(ISimpleRpc.class,"simpleRpc", "0.0.1");
            System.out.println(srv.hi(new Person()));
        }

     ApiGatewayConfig为Api网关客户端配置类,支持3个参数,分别为连接类型,支持Http和Socket,另外两个为Api网关IP和端口。ISimpleRpc为服务接口(接口,不是实现类),通过Api网关客户端取得此远程接口代理实现类,然后就可以像本地调用一样调用远程方法,完全不用关注HTTP协议细节,更不用关注Socket底层细节,完全面向Java接口及自定义参数的方法调用,当然,原生的Java 8种基本数据类型及封装类型也是无差别支持的。

    异步方式调用

     1 public static void main(String[] args) {
     2         ApiGatewayClient socketClient = new ApiGatewayClient(new ApiGatewayConfig(Constants.TYPE_HTTP,"jmicro.cn",80));
     6         ISimpleRpc$JMAsyncClient srv = socketClient.getService(ISimpleRpc$JMAsyncClient.class,"simpleRpc", "0.0.1");
     7         srv.hiJMAsync(new Person()).then((val,fail) -> {
     8             System.out.println("Hi: " +val);
     9             //System.out.println(fail);
    10         });
    11         
    12         JMicro.waitForShutdown();
    13     }

    这次直接通过ISimpleRpc$JMAsyncClient.class调用getService方法获取异步代理实例。第7行调用异步方法hiJMAsync并得到IPromise实例,调用IPromise的then方法,并传入方法引用接收异步结果。异步响应式编程相关内容请自行网上查看相关资源。

    第12行让线程等待,不然JVM在RPC结果没返回前就退出了,正常的服务进程不需要这行代码。

    JS前端调用

     在HTML头部引入JS文件

    <script type="text/javascript" src="js/utils.js"></script>
    <script type="text/javascript" src="js/ws.js"></script>
    <script type="text/javascript" src="js/rpc.js"></script>

    这几个JS文件可以在源码路径下的mng.web/public/js下找到,需要在rpc.js文件中修改API网关IP和端口,如下

    JS调用ISimpleRpc的hi方法

    function hi(person) {
        let req = {};
        req.serviceName ="cn.jmicro.example.api.rpc.ISimpleRpc"; //服务接口全名
        req.namespace = "simpleRpc";//服务名称空间
        req.version = "0.0.1";//服务版本
        req.method = "hi"; //服务方法名称
        req.args = [person]; //服务参数,一定要包装在一个数组里面
       //jm.mng.callRpc返回一个Promise实例,异步返回结果 
      jm.mng.callRpc(req,jm.rpc.Constants.PROTOCOL_JSON, jm.rpc.Constants.PROTOCOL_JSON) .then((msg)=>{
          //异步返回结果 console.log(msg); alert(msg); }).catch(err =>{ throw err; }); }

    //调用hi方法
    hi({"username":"Zhangsan","id":"1"});

    通过上面代码可以看出,JS这种异步调用风格和Java异步调用风格非常相像。

    nodejs中可以使用同样的代码实现调用JMicro服务的方法。

    如非授权,禁止用于商业用途,转载请注明出处
    作者:mynewworldyyl
    邮箱:mynewworldyyl@gmail.com
  • 相关阅读:
    Python requests乱码的五种解决办法
    apache安装
    Python 跨文件调用函数 + 在一个文件中执行另一个文件
    配置IIS使用Python
    gradle编译
    字符串UTF8转JIS
    cannot be loaded because running scripts is disabled on this system的对策
    您知道eval中的和括号的含义吗
    Python 学习笔记
    windows装mysql一定要装vs和python吗
  • 原文地址:https://www.cnblogs.com/jmicro/p/13401218.html
Copyright © 2020-2023  润新知