• JAVA RPC (五) 之thrift序列化RPC消息体


    让大家久等了。继续更新thrift序列化的消息体,下面我们一步一步的看一看thrift的rpc是怎么实例化消息体的。

    首先我们先准备一个request文件

    1 namespace java bky
    2 struct TestRequest{
    3     1:i32 code;
    4     2:string name;
    5     3:string data;
    6 }

    一个respone文件

    1 namespace java bky
    2 struct TestRespone{
    3     1:i32 code;
    4     2:string message;
    5 }

    一个service文件

    1 namespace java bky
    2 include 'TestRequest.thrift'
    3 include 'TestRespone.thrift'
    4 service TestService{
    5     TestRespone.TestRespone testRPC(1:TestRequest.TestRequest request);
    6 }

    编译文件

    生成的文件如下

    自己写一个简单的RPC的例子

    client

    package com.thrift.test;
    
    import bky.TestRequest;
    import bky.TestRespone;
    import bky.TestService;
    import com.thrift.WmCreateAccountRequest;
    import com.thrift.WmCreateAccountRespone;
    import com.thrift.WmCreateAccountService;
    import org.apache.thrift.TException;
    import org.apache.thrift.protocol.TBinaryProtocol;
    import org.apache.thrift.protocol.TProtocol;
    import org.apache.thrift.transport.TFramedTransport;
    import org.apache.thrift.transport.TSocket;
    import org.apache.thrift.transport.TTransport;
    import org.apache.thrift.transport.TTransportException;
    
    import java.util.Random;
    
    public class RpcClient {
    
        public static final String SERVER_IP = "localhost";
        public static final int SERVER_PORT = 8090;
        public static final int TIMEOUT = 1000000;
    
    
        public static void main(String[] args) throws TException {
    
            TSocket t = new TSocket ( SERVER_IP, SERVER_PORT, TIMEOUT );
            t.open ();
            TTransport transport = new TFramedTransport ( t );
            TProtocol protocol = new TBinaryProtocol ( transport );
            TestRequest request = new TestRequest ();
            request.setCode ( 123 );
            request.setName ( "博客园" );
            request.setData ( "这是我的RPC测试程序" );
            TestService.Client client = new TestService.Client ( protocol );
            TestRespone result = client.testRPC (  request);
            System.out.println ( "Thrify client result =: " + result );
    
        }
    }

    server

    package com.thrift.test;
    
    import bky.TestService;
    import bky.TestServiceImpl;
    import org.apache.thrift.TProcessor;
    import org.apache.thrift.protocol.TBinaryProtocol;
    import org.apache.thrift.server.TServer;
    import org.apache.thrift.server.TServer.Args;
    import org.apache.thrift.server.TSimpleServer;
    import org.apache.thrift.transport.TFramedTransport;
    import org.apache.thrift.transport.TServerSocket;
    import org.apache.thrift.transport.TTransportException;
    
    public class RpcServer {
    
        public static final int SERVER_PORT = 8090;
    
        public static void main(String[] a) throws TTransportException {
    
            System.out.println("HelloWorld THsHaServer start ....");
    
            TProcessor tprocessor = new TestService.Processor<TestService.Iface> (
                    new TestServiceImpl ());
            TServerSocket serverTransport = new TServerSocket(SERVER_PORT);
    
            Args args = new Args (serverTransport);
            args.processor(tprocessor);
            args.transportFactory(new TFramedTransport.Factory());
            args.protocolFactory(new TBinaryProtocol.Factory());
            TServer server = new TSimpleServer (args);
            server.serve();
        }
    }

    自己的实现类

    package bky;
    
    import org.apache.thrift.TException;
    
    public class TestServiceImpl implements TestService.Iface {
        @Override
        public TestRespone testRPC(TestRequest request) throws TException {
            TestRespone respone = new TestRespone();
            respone.setCode ( 456 );
            respone.setMessage ( "这是服务端的返回示例" );
            return respone;
        }
    }

    跟踪thrift的发送源码

     public TestRespone testRPC(TestRequest request) throws org.apache.thrift.TException
        {
          send_testRPC(request);
          return recv_testRPC();
        }
    protected void sendBase(String methodName, TBase args) throws TException {
        oprot_.writeMessageBegin(new TMessage(methodName, TMessageType.CALL, ++seqid_));
        args.write(oprot_);
        oprot_.writeMessageEnd();
        oprot_.getTransport().flush();
      }

    跟到这里发现其实thrift的发送是分成了4个部分。

    1:封装方法信息message,由TProtocol也就是我们上面的TBinaryProtocol发送到TTransport,这里我们的实现是TFrameTransport。

    2:将request通过TProtocol序列化,也就是我们上一篇https://www.cnblogs.com/zyl2016/p/10044234.html讲到的东西。

    3:把message的结束信息通过TProtocol序列化其实这部是空实现,有特殊需求可以自定义TProtocol重写。

    4:通过TTransport将service消息体发送出去

    首先我们看writeMessageBegin都干了些什么

    public void writeMessageBegin(TMessage message) throws TException {
        if (strictWrite_) {
          int version = VERSION_1 | message.type;
          writeI32(version);
          writeString(message.name);
          writeI32(message.seqid);
        } else {
          writeString(message.name);
          writeByte(message.type);
          writeI32(message.seqid);
        }
      }

    1:默认先写入一个四个字节版本号,区分不同thrift版本,防止thrift8的client和thrift9的server引起的不兼容的问题,然后在写入message.name 也就是方法名称,最后写入seq唯一id,是为了防止client并发引起的问题,所以thrift的client是不支持并发的,因为是一个tcp链路上的传输,所以想允许并发调用接口可以采用apache pool client连接池就可以了。

    2:第二步写入request,参照上一篇文章。

    3:写入消息结束,这里的TBinaryProtocol实现为空,需要特性化信息的可以进行方法重写。

    4:oprot_.getTransport().flush(); 这里通过transport将消息体flush出去,将字节流发送到server。

    我们 再看看TTransport发送做了些什么操作,这里我们的实现是TFrameTransport。

    private final TByteArrayOutputStream writeBuffer_ =new TByteArrayOutputStream(1024);
    public void write(byte[] buf, int off, int len) throws TTransportException {
        writeBuffer_.write(buf, off, len);
      }
    
      @Override
      public void flush() throws TTransportException {
        byte[] buf = writeBuffer_.get();
        int len = writeBuffer_.len();
        writeBuffer_.reset();
    
        encodeFrameSize(len, i32buf);
        transport_.write(i32buf, 0, 4);
        transport_.write(buf, 0, len);
        transport_.flush();
      }

    write方法我们发现其实每次TProtocol write的时候都是将数据流扔到writeBuffer中缓存,等待所有二进制流发送完毕之后统一flush,然后transport先获取到缓存的二进制流,然后通过encodeFrameSize方法获取流的长度转换成4个字节的int数据,然后首先write四个字节长度,然后在wirte后面对应长度的消息体,所以知道长度之后server就可以做对应的拆包操作去调用本地的实现了。咱们本地debug测试一下他发送的字节流数据

    首先write一个四个字节的数组,转换成int是81,然后在write消息体,非常清晰简单的消息体,server反解析我会在下一篇文章中去讲解

    这里聪明的读者一定会发现,我想自定义协议只需要在transport 的write和read的时候去做一些手脚就可以啦。

    在我git上已经https://gitee.com/a1234567891/koalas-rpc 写好了一个完整的RPC例子,客户端采用thrift协议,服务端支持netty和thrift的TThreadedSelectorServer半同步半异步线程模型,支持动态扩容,服务上下线,(权重动态,可用性配置,页面流量统计等),喜欢的小伙伴给个star吧。

    更多学习内容请加高级java QQ群:825199617

  • 相关阅读:
    asp.net将图片转成二进制存入数据库
    ionic2打包生成APK报错 Error: Could not find gradle wrapper within Android SDK. Might need to update your Android SDK. Looked here: D:AndroidSDK ools emplatesgradlewrapper
    'ionic' 不是内部或外部命令,也不是可运行的程序或批处理文件。
    ABP-vs2017执行Add-Migration出现的问题
    关闭页面时,弹出JS提示框提示是否关闭
    C#生成Bar Code Image
    MemoryStream转imageSource
    RadControls RadGridView 显示加载数据时间
    RadGridView 分页控件
    CRM2011弹出asp.net模态窗口关闭的问题
  • 原文地址:https://www.cnblogs.com/zyl2016/p/10044872.html
Copyright © 2020-2023  润新知