• (转)dubbo design


    框架设计

    整体设计

    图例说明:

    • 图中左边淡蓝背景的为服务消费方使用的接口,右边淡绿色背景的为服务提供方使用的接口, 位于中轴线上的为双方都用到的接口。
    • 图中从下至上分为十层,各层均为单向依赖,右边的黑色箭头代表层之间的依赖关系,每一层都可以剥离上层被复用,其中,Service和Config层为API,其它各层均为SPI。
    • 图中绿色小块的为扩展接口,蓝色小块为实现类,图中只显示用于关联各层的实现类。
    • 图中蓝色虚线为初始化过程,即启动时组装链,红色实线为方法调用过程,即运行时调时链,紫色三角箭头为继承,可以把子类看作父类的同一个节点,线上的文字为调用的方法。

    各层说明:

    • config,配置层,对外配置接口,以ServiceConfig, ReferenceConfig为中心,可以直接new配置类,也可以通过spring解析配置生成配置类
    • proxy,服务代理层,服务接口透明代理,生成服务的客户端Stub和服务器端Skeleton,以ServiceProxy为中心,扩展接口为ProxyFactory
    • registry,注册中心层,封装服务地址的注册与发现,以服务URL为中心,扩展接口为RegistryFactory, Registry, RegistryService
    • cluster,路由层,封装多个提供者的路由及负载均衡,并桥接注册中心,以Invoker为中心,扩展接口为Cluster, Directory, Router, LoadBalance
    • monitor,监控层,RPC调用次数和调用时间监控,以Statistics为中心,扩展接口为MonitorFactory, Monitor, MonitorService
    • protocol,远程调用层,封将RPC调用,以Invocation, Result为中心,扩展接口为Protocol, Invoker, Exporter
    • exchange,信息交换层,封装请求响应模式,同步转异步,以Request, Response为中心,扩展接口为Exchanger, ExchangeChannel, ExchangeClient, ExchangeServer
    • transport,网络传输层,抽象mina和netty为统一接口,以Message为中心,扩展接口为Channel, Transporter, Client, Server, Codec
    • serialize,数据序列化层,可复用的一些工具,扩展接口为Serialization, ObjectInput, ObjectOutput, ThreadPool

    关系说明:

    • 在RPC中,Protocol是核心层,也就是只要有Protocol + Invoker + Exporter就可以完成非透明的RPC调用,然后在Invoker的主过程上Filter拦截点。
    • 图中的Consumer和Provider是抽象概念,只是想让看图者更直观的了解哪些类分属于客户端与服务器端,不用Client和Server的原因是Dubbo在很多场景下都使用Provider, Consumer, Registry, Monitor划分逻辑拓普节点,保持统一概念。
    • 而Cluster是外围概念,所以Cluster的目的是将多个Invoker伪装成一个Invoker,这样其它人只要关注Protocol层Invoker即可,加上Cluster或者去掉Cluster对其它层都不会造成影响,因为只有一个提供者时,是不需要Cluster的。
    • Proxy层封装了所有接口的透明化代理,而在其它层都以Invoker为中心,只有到了暴露给用户使用时,才用Proxy将Invoker转成接口,或将接口实现转成Invoker,也就是去掉Proxy层RPC是可以Run的,只是不那么透明,不那么看起来像调本地服务一样调远程服务
    • 而Remoting实现是Dubbo协议的实现,如果你选择RMI协议,整个Remoting都不会用上,Remoting内部再划为Transport传输层和Exchange信息交换层,Transport层只负责单向消息传输,是对Mina,Netty,Grizzly的抽象,它也可以扩展UDP传输,而Exchange层是在传输层之上封装了Request-Response语义。
    • Registry和Monitor实际上不算一层,而是一个独立的节点,只是为了全局概览,用层的方式画在一起。

    模块分包

    模块说明:

    • dubbo-common 公共逻辑模块,包括Util类和通用模型。
    • dubbo-remoting 远程通讯模块,相当于Dubbo协议的实现,如果RPC用RMI协议则不需要使用此包。
    • dubbo-rpc 远程调用模块,抽象各种协议,以及动态代理,只包含一对一的调用,不关心集群的管理。
    • dubbo-cluster 集群模块,将多个服务提供方伪装为一个提供方,包括:负载均衡, 容错,路由等,集群的地址列表可以是静态配置的,也可以是由注册中心下发。
    • dubbo-registry 注册中心模块,基于注册中心下发地址的集群方式,以及对各种注册中心的抽象。
    • dubbo-monitor 监控模块,统计服务调用次数,调用时间的,调用链跟踪的服务。
    • dubbo-config 配置模块,是Dubbo对外的API,用户通过Config使用Dubbo,隐藏Dubbo所有细节。
    • dubbo-container 容器模块,是一个Standlone的容器,以简单的Main加载Spring启动,因为服务通常不需要Tomcat/JBoss等Web容器的特性,没必要用Web容器去加载服务。

    整体上按照分层结构进行分包,与分层的不同点在于:

    • container为服务容器,用于部署运行服务,没有在层中画出。
    • protocol层和proxy层都放在rpc模块中,这两层是rpc的核心,在不需要集群时(只有一个提供者),可以只使用这两层完成rpc调用
    • transport层和exchange层都放在remoting模块中,为rpc调用的通讯基础
    • serialize层放在common模块中,以便更大程度复用

    依赖关系

    图例说明:

    • 图中小方块Protocol, Cluster, Proxy, Service, Container, Registry, Monitor代表层或模块,蓝色的表示与业务有交互,绿色的表示只对Dubbo内部交互
    • 图中背景方块Consumer, Provider, Registry, Monitor代表部署逻辑拓普节点。
    • 图中蓝色虚线为初始化时调用,红色虚线为运行时异步调用,红色实线为运行时同步调用。
    • 图中只包含RPC的层,不包含Remoting的层,Remoting整体都隐含在Protocol中。

    调用链

    展开总设计图的红色调用链,如下:

    暴露服务时序

    展开总设计图左边服务提供方暴露服务的蓝色初始化链,时序图如下:

    引用服务时序

    展开总设计图右边服务消费方引用服务的蓝色初始化链,时序图如下:

    领域模型

    在Dubbo的核心领域模型中:

    • Protocol是服务域,它是Invoker暴露和引用的主功能入口,它负责Invoker的生命周期管理。
    • Invoker是实体域,它是Dubbo的核心模型,其它模型都向它靠扰,或转换成它,它代表一个可执行体,可向它发起invoke调用,它有可能是一个本地的实现,也可能是一个远程的实现,也可能一个集群实现
    • Invocation是会话域,它持有调用过程中的变量,比如方法名,参数等。

    基本原则

    • 采用Microkernel + Plugin模式,Microkernel只负责组将Plugin,Dubbo自身的功能也是通过扩展点实现的,也就是Dubbo的所有功能点都可被用户自定义扩展所替换。
    • 采用URL作为配置信息的统一格式,所有扩展点都通过传递URL携带配置信息。

    更多设计原则参见:《框架设计原则》

    扩展点加载

    (+) (#)

    扩展点配置

    来源:

    Dubbo的扩展点加载从JDK标准的SPI(Service Provider Interface)扩展点发现机制加强而来。

    Dubbo改进了JDK标准的SPI的以下问题:

    • JDK标准的SPI会一次性实例化扩展点所有实现,如果有扩展实现初始化很耗时,但如果没用上也加载,会很浪费资源。
    • 如果扩展点加载失败,连扩展点的名称都拿不到了。比如:JDK标准的ScriptEngine,通过getName();获取脚本类型的名称,但如果RubyScriptEngine因为所依赖的jruby.jar不存在,导致RubyScriptEngine类加载失败,这个失败原因被吃掉了,和ruby对应不起来,当用户执行ruby脚本时,会报不支持ruby,而不是真正失败的原因。
    • 增加了对扩展点IoC和AOP的支持,一个扩展点可以直接setter注入其它扩展点。

    约定:

    在扩展类的jar包内,放置扩展点配置文件:META-INF/dubbo/接口全限定名,内容为:配置名=扩展实现类全限定名,多个实现类用换行符分隔。

    (注意:这里的配置文件是放在你自己的jar包内,不是dubbo本身的jar包内,Dubbo会全ClassPath扫描所有jar包内同名的这个文件,然后进行合并)

    扩展Dubbo的协议示例:

    在协议的实现jar包内放置文本文件:META-INF/dubbo/com.alibaba.dubbo.rpc.Protocol,内容为:

    xxx=com.alibaba.xxx.XxxProtocol

    实现类内容:

    package com.alibaba.xxx;
     
    import com.alibaba.dubbo.rpc.Protocol;
     
    public class XxxProtocol implemenets Protocol {
     
        // ...
     
    }

    注意: 扩展点使用单一实例加载(请确保扩展实现的线程安全性),Cache在ExtensionLoader中

    扩展点自动包装

    自动Wrap扩展点的Wrapper类

    ExtensionLoader会把加载扩展点时(通过扩展点配置文件中内容),如果该实现有拷贝构造函数,则判定为扩展点Wrapper类。

    Wrapper类同样实现了扩展点接口。

    Wrapper类内容:

    package com.alibaba.xxx;
     
    import com.alibaba.dubbo.rpc.Protocol;
     
    public class XxxProtocolWrapper implemenets Protocol {
        Protocol impl;
     
        public XxxProtocol(Protocol protocol) { impl = protocol; }
     
        // 接口方法做一个操作后,再调用extension的方法
        public void refer() {
            //... 一些操作
            impl .refer();
            // ... 一些操作
        }
     
        // ...
    }

    Wrapper不是扩展点实现,用于从ExtensionLoader返回扩展点时,Wrap在扩展点实现外。即从ExtensionLoader中返回的实际上是Wrapper类的实例,Wrapper持有了实际的扩展点实现类。

    扩展点的Wrapper类可以有多个,也可以根据需要新增。

    通过Wrapper类可以把所有扩展点公共逻辑移至Wrapper中。新加的Wrapper在所有的扩展点上添加了逻辑,有些类似AOP(Wraper代理了扩展点)。

    扩展点自动装配

    加载扩展点时,自动注入依赖的扩展点

    加载扩展点时,扩展点实现类的成员如果为其它扩展点类型,ExtensionLoader在会自动注入依赖的扩展点。

    ExtensionLoader通过扫描扩展点实现类的所有set方法来判定其成员。

    即ExtensionLoader会执行扩展点的拼装操作。

    示例:有两个为扩展点CarMaker(造车者)、wheelMaker(造轮者)

    接口类如下:

    public interface CarMaker {
        Car makeCar();
    }
     
    public interface WheelMaker {
        Wheel makeWheel();
    }

    CarMaker的一个实现类:

     
    public class RaceCarMaker implemenets CarMaker {
        WheelMaker wheelMaker;
     
        public setWheelMaker(WheelMaker wheelMaker) {
            this.wheelMaker = wheelMaker;
        }
     
        public Car makeCar() {
            // ...
            Wheel wheel = wheelMaker.makeWheel();
            // ...
            return new RaceCar(wheel, ...);
        }
    }

    ExtensionLoader加载CarMaker的扩展点实现RaceCar时,setWheelMaker方法的WheelMaker也是扩展点则会注入WheelMaker的实现。

    这里带来另一个问题,ExtensionLoader要注入依赖扩展点时,如何决定要注入依赖扩展点的哪个实现。在这个示例中,即是在多个WheelMaker的实现中要注入哪个。

    这个问题在下面一点“Adaptive实例”中说明。

    扩展点自适应

    扩展点的Adaptive实例

    ExtensionLoader注入的依赖扩展点是一个Adaptive实例,直到扩展点方法执行时才决定调用是一个扩展点实现。

    Dubbo使用URL对象(包含了Key-Value)传递配置信息。

    扩展点方法调用会有URL参数(或是参数有URL成员)

    这样依赖的扩展点也可以从URL拿到配置信息,所有的扩展点自己定好配置的Key后,配置信息从URL上从最外层传入。URL在配置传递上即是一条总线

    示例:有两个为扩展点CarMaker(造车者)、wheelMaker(造轮者)

    接口类如下:

    public interface CarMaker {
        Car makeCar(URL url);
    }
     
    public interface WheelMaker {
        Wheel makeWheel(URL url);
    }

    CarMaker的一个实现类:

    public class RaceCarMaker implemenets CarMaker {
        WheelMaker wheelMaker;
     
        public setWheelMaker(WheelMaker wheelMaker) {
            this.wheelMaker = wheelMaker;
        }
     
        public Car makeCar(URL url) {
            // ...
            Wheel wheel = wheelMaker.makeWheel(url);
            // ...
            return new RaceCar(wheel, ...);
        }
    }

    当上面执行

    // ...
    Wheel wheel = wheelMaker.makeWheel(url);
    // ...

    时,注入的Adaptive实例可以提取约定Key来决定使用哪个WheelMaker实现来调用对应实现的真正的makeWheel方法。

    如提取wheel.type key即url.get("wheel.type")来决定WheelMake实现。

    Adaptive实例的逻辑是固定,指定提取的URL的Key,即可以代理真正的实现类上,可以动态生成。

    在Dubbo的ExtensionLoader的扩展点类开对应的Adaptive实现是在加载扩展点里动态生成。指定提取的URL的Key通过@Adaptive注解在接口方法上提供

    下面是Dubbo的Transporter扩展点的代码:

    public interface Transporter {
        @Adaptive({"server", "transport"})
        Server bind(URL url, ChannelHandler handler) throws RemotingException;
     
        @Adaptive({"client", "transport"})
        Client connect(URL url, ChannelHandler handler) throws RemotingException;
     
    }

    对于bind方法表示,Adaptive实现先查找"server"key,如果该Key没有值则找"transport"key值,来决定代理到哪个实际扩展点。

    3. Dubbo配置模块中扩展点的配置

    Dubbo配置模块中,扩展点均有对应配置属性或标签,通过配置指定使用哪个扩展实现

    比如:<dubbo:protocol name="xxx" />

    扩展点自动激活

    对于集合类扩展点,比如:Filter, InvokerListener, ExportListener, TelnetHandler, StatusChecker等,
    可以同时加载多个实现,此时,可以用自动激活来简化配置,如:

    import com.alibaba.dubbo.common.extension.Activate;
    import com.alibaba.dubbo.rpc.Filter;
     
    @Activate // 无条件自动激活
    public class XxxFilter implements Filter {
        // ...
    }

    或:

    import com.alibaba.dubbo.common.extension.Activate;
    import com.alibaba.dubbo.rpc.Filter;
     
    @Activate("xxx") // 当配置了xxx参数,并且参数为有效值时激活,比如配了cache="lru",自动激活CacheFilter。
    public class XxxFilter implements Filter {
        // ...
    }

    或:

    import com.alibaba.dubbo.common.extension.Activate;
    import com.alibaba.dubbo.rpc.Filter;
     
    @Activate(group = "provider", value = "xxx") // 只对提供方激活,group可选"provider"或"consumer"
    public class XxxFilter implements Filter {
        // ...
    }
  • 相关阅读:
    Go语言之函数基础
    Go语言之内置函数与包函数
    【LeetCode】1668.最大重复子字符串(三)
    [Python]编码规范性(四)——注释(属性、格式)
    【LeetCode】1929. 数组串联(2)
    [Python]编码规范性(三)——注释(类、接口、函数)
    [Python]编码规范性(五)——命名(包和模块、类、函数)
    [Python]序列为空的判定
    【LeetCode】27. 移除元素
    [Python]编码规范性(一)——排版(缩进、语句、空格)
  • 原文地址:https://www.cnblogs.com/guazi/p/6929249.html
Copyright © 2020-2023  润新知