一、Hadoop的RPC通信机制
1.什么是RPC
l RPC(Remote Procedure Call)远程过程调用协议,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在OSI网络通信模型中,RPC跨越了传输层和应用层。RPC使得开发包括网络分布式多程序在内的应用程序更加容易。
l RPC采用客户机/服务器模式。请求程序就是一个客户机,而服务提供程序就是一个服务器。首先,客户机调用进程发送一个有进程参数的调用信息到服务进程,然后等待应答信息。在服务器端,进程保持睡眠状态直到调用信息的到达为止。当一个调用信息到达,服务器获得进程参数,计算结果,发送答复信息,然后等待下一个调用信息,最后,客户端调用进程接收答复信息,获得进程结果,然后调用执行继续进行。
l hadoop的整个通信体系结构就是构建在RPC之上的
2.RPC通信实例
Class ; RPCService
package lime.pri.hadoop.server; public interface RPCService { // 版本号 long versionID = 10010; String sayHi(String name); }
Class : RPCServer
package lime.pri.hadoop.server; import java.io.IOException; import org.apache.hadoop.HadoopIllegalArgumentException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.ipc.RPC; import org.apache.hadoop.ipc.RPC.Server; public class RPCServer implements RPCService { public static void main(String[] args) throws HadoopIllegalArgumentException, IOException { // 1.实例化Configuration 设置配置参数 Configuration configuration = new Configuration(); // 2.实例化RPC内部类Builder Server server = new RPC.Builder(configuration)// // 3.设置 Service/Client 同时实现的接口 Class 以实现代理模式 .setProtocol(RPCService.class)// // 4.设置 服务端 绑定接口 .setBindAddress("localhost")// // 5.设置 服务端 监听端口 .setPort(5927) // 6.设置 目标服务 .setInstance(new RPCServer()).build(); // 7.启动服务 server.start(); } @Override public String sayHi(String name) { return "Hello " + name; } }
Class : Client
package lime.pri.hadoop.client; import java.io.IOException; import java.net.InetSocketAddress; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.ipc.RPC; import lime.pri.hadoop.server.RPCService; public class RPCClient { public static void main(String[] args) throws IOException { // 1.实例化Configuration 设置配置参数 Configuration configuration = new Configuration(); // 2.实例化代理对象 代理接口、版本号、服务端地址、configuration RPCService proxy = RPC.getProxy(RPCService.class, 10010, new InetSocketAddress("localhost", 5927), configuration); // 3.调用 代理对象的方法,即通过远程方法调用 调用目标对象的方法。 String sayHi = proxy.sayHi("tom"); System.out.println(sayHi); // 4.停止 代理对象 RPC.stopProxy(proxy); } }
啦啦啦