zoukankan      html  css  js  c++  java
  • Java实现简单的RPC框架

    一、RPC简介

    RPC,全称为Remote Procedure Call,即远程过程调用,它是一个计算机通信协议。它允许像调用本地服务一样调用远程服务。它可以有不同的实现方式。如RMI(远程方法调用)、Hessian、Http invoker等。另外,RPC是与语言无关的。

        RPC示意图

    如上图所示,假设Computer1在调用sayHi()方法,对于Computer1而言调用sayHi()方法就像调用本地方法一样,调用 –>返回。但从后续调用可以看出Computer1调用的是Computer2中的sayHi()方法,RPC屏蔽了底层的实现细节,让调用者无需关注网络通信,数据传输等细节。

    二、RPC框架的实现

        上面介绍了RPC的核心原理:RPC能够让本地应用简单、高效地调用服务器中的过程(服务)。它主要应用在分布式系统。如Hadoop中的IPC组件。但怎样实现一个RPC框架呢?

    从下面几个方面思考,仅供参考:

    1.通信模型:假设通信的为A机器与B机器,A与B之间有通信模型,在Java中一般基于BIO或NIO;。

    2.过程(服务)定位:使用给定的通信方式,与确定IP与端口及方法名称确定具体的过程或方法;

    3.远程代理对象:本地调用的方法(服务)其实是远程方法的本地代理,因此可能需要一个远程代理对象,对于Java而言,远程代理对象可以使用Java的动态对象实现,封装了调用远程方法调用;

    4.序列化,将对象名称、方法名称、参数等对象信息进行网络传输需要转换成二进制传输,这里可能需要不同的序列化技术方案。如:protobuf,Arvo等。

    三、Java实现RPC框架

    1、实现技术方案

         下面使用比较原始的方案实现RPC框架,采用Socket通信、动态代理与反射与Java原生的序列化。

    2、RPC框架架构

    RPC架构分为三部分:

    1)服务提供者,运行在服务器端,提供服务接口定义与服务实现类。

    2)服务中心,运行在服务器端,负责将本地服务发布成远程服务,管理远程服务,提供给服务消费者使用。

    3)服务消费者,运行在客户端,通过远程代理对象调用远程服务。

    3、 具体实现

    服务提供者接口定义与实现,代码如下:

    1
    2
    3
    4
    5
    public interface HelloService {
     
        String sayHi(String name);
     
    }

    HelloServices接口实现类:

    1
    2
    3
    4
    5
    6
    7
    public class HelloServiceImpl implements HelloService {
     
        public String sayHi(String name) {
            return "Hi, " + name;
        }
     
    }

    服务中心代码实现,代码如下:

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    public interface Server {
        public void stop();
     
        public void start() throws IOException;
     
        public void register(Class serviceInterface, Class impl);
     
        public boolean isRunning();
     
        public int getPort();
    }

    服务中心实现类:

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    48
    49
    50
    51
    52
    53
    54
    55
    56
    57
    58
    59
    60
    61
    62
    63
    64
    65
    66
    67
    68
    69
    70
    71
    72
    73
    74
    75
    76
    77
    78
    79
    80
    81
    82
    83
    84
    85
    86
    87
    88
    89
    90
    91
    92
    93
    94
    95
    96
    97
    98
    99
    100
    public class ServiceCenter implements Server {
        private static ExecutorService executor = Executors.newFixedThreadPool(Runtime.getRuntime().availableProcessors());
     
        private static final HashMap<String, Class> serviceRegistry = new HashMap<String, Class>();
     
        private static boolean isRunning = false;
     
        private static int port;
     
        public ServiceCenter(int port) {
            this.port = port;
        }
     
        public void stop() {
            isRunning = false;
            executor.shutdown();
        }
     
        public void start() throws IOException {
            ServerSocket server = new ServerSocket();
            server.bind(new InetSocketAddress(port));
            System.out.println("start server");
            try {
                while (true) {
                    // 1.监听客户端的TCP连接,接到TCP连接后将其封装成task,由线程池执行
                    executor.execute(new ServiceTask(server.accept()));
                }
            finally {
                server.close();
            }
        }
     
        public void register(Class serviceInterface, Class impl) {
            serviceRegistry.put(serviceInterface.getName(), impl);
        }
     
        public boolean isRunning() {
            return isRunning;
        }
     
        public int getPort() {
            return port;
        }
     
        private static class ServiceTask implements Runnable {
            Socket clent = null;
     
            public ServiceTask(Socket client) {
                this.clent = client;
            }
     
            public void run() {
                ObjectInputStream input = null;
                ObjectOutputStream output = null;
                try {
                    // 2.将客户端发送的码流反序列化成对象,反射调用服务实现者,获取执行结果
                    input = new ObjectInputStream(clent.getInputStream());
                    String serviceName = input.readUTF();
                    String methodName = input.readUTF();
                    Class<?>[] parameterTypes = (Class<?>[]) input.readObject();
                    Object[] arguments = (Object[]) input.readObject();
                    Class serviceClass = serviceRegistry.get(serviceName);
                    if (serviceClass == null) {
                        throw new ClassNotFoundException(serviceName + " not found");
                    }
                    Method method = serviceClass.getMethod(methodName, parameterTypes);
                    Object result = method.invoke(serviceClass.newInstance(), arguments);
     
                    // 3.将执行结果反序列化,通过socket发送给客户端
                    output = new ObjectOutputStream(clent.getOutputStream());
                    output.writeObject(result);
                catch (Exception e) {
                    e.printStackTrace();
                finally {
                    if (output != null) {
                        try {
                            output.close();
                        catch (IOException e) {
                            e.printStackTrace();
                        }
                    }
                    if (input != null) {
                        try {
                            input.close();
                        catch (IOException e) {
                            e.printStackTrace();
                        }
                    }
                    if (clent != null) {
                        try {
                            clent.close();
                        catch (IOException e) {
                            e.printStackTrace();
                        }
                    }
                }
     
            }
        }
    }

     客户端的远程代理对象:

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    public class RPCClient<T> {
        public static <T> T getRemoteProxyObj(final Class<?> serviceInterface, final InetSocketAddress addr) {
            // 1.将本地的接口调用转换成JDK的动态代理,在动态代理中实现接口的远程调用
            return (T) Proxy.newProxyInstance(serviceInterface.getClassLoader(), new Class<?>[]{serviceInterface},
                    new InvocationHandler() {
                        public Object invoke(Object proxy, Method method, Object[] args) throws Throwable {
                            Socket socket = null;
                            ObjectOutputStream output = null;
                            ObjectInputStream input = null;
                            try {
                                // 2.创建Socket客户端,根据指定地址连接远程服务提供者
                                socket = new Socket();
                                socket.connect(addr);
     
                                // 3.将远程服务调用所需的接口类、方法名、参数列表等编码后发送给服务提供者
                                output = new ObjectOutputStream(socket.getOutputStream());
                                output.writeUTF(serviceInterface.getName());
                                output.writeUTF(method.getName());
                                output.writeObject(method.getParameterTypes());
                                output.writeObject(args);
     
                                // 4.同步阻塞等待服务器返回应答,获取应答后返回
                                input = new ObjectInputStream(socket.getInputStream());
                                return input.readObject();
                            } finally {
                                if (socket != null) socket.close();
                                if (output != null) output.close();
                                if (input != null) input.close();
                            }
                        }
                    });
        }
    }

    最后为测试类:

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    public class RPCTest {
     
        public static void main(String[] args) throws IOException {
            new Thread(new Runnable() {
                public void run() {
                    try {
                        Server serviceServer = new ServiceCenter(8088);
                        serviceServer.register(HelloService.class, HelloServiceImpl.class);
                        serviceServer.start();
                    } catch (IOException e) {
                        e.printStackTrace();
                    }
                }
            }).start();
            HelloService service = RPCClient.getRemoteProxyObj(HelloService.class, new InetSocketAddress("localhost", 8088));
            System.out.println(service.sayHi("test"));
        }
    }

    运行结果:

    1
    2
    3
    regeist service HelloService
    start server
    Hi, test

    四、总结

          RPC本质为消息处理模型,RPC屏蔽了底层不同主机间的通信细节,让进程调用远程的服务就像是本地的服务一样。

    五、可以改进的地方

         这里实现的简单RPC框架是使用Java语言开发,与Java语言高度耦合,并且通信方式采用的Socket是基于BIO实现的,IO效率不高,还有Java原生的序列化机制占内存太多,运行效率也不高。可以考虑从下面几种方法改进。

    1. 可以采用基于JSON数据传输的RPC框架;
    2. 可以使用NIO或直接使用Netty替代BIO实现;
    3. 使用开源的序列化机制,如Hadoop Avro与Google protobuf等;
    4. 服务注册可以使用Zookeeper进行管理,能够让应用更加稳定。
  • 相关阅读:
    在禅道中实现WORD等OFFICE文档转换为PDF进行在线浏览
    慎用 supportedRuntime
    定时开关机方案
    谨慎使用Sql server data tool 架构比对排除
    生成数据字典
    Cordova开发速记
    SQLSERVER 2012 收缩日志
    QService 服务容器
    使用用户自定义类型 CLR UDT
    使用DOTNETZIP过滤并压缩相对目录
  • 原文地址:https://www.cnblogs.com/huangwentian/p/7160473.html
Copyright © 2011-2022 走看看