当前位置: 首页> 房产> 家装 > Hadoop3:RPC通信原理及简单案例实现

Hadoop3:RPC通信原理及简单案例实现

时间:2025/7/9 12:12:28来源:https://blog.csdn.net/Brave_heart4pzj/article/details/140495728 浏览次数:0次

一、场景介绍

我们知道,Hadoop中存在多种服务,那么,服务之间是如何通信的了?
比如,DN和NN之间如何通信?
这里,实际上是通过RPC实现进程间通信的了。

RPC属于Java网络编程范畴
需要编写客户端和服务端
底层实现是NIO
一般RPC框架的使用,需要配合服务注册中心组件使用。比如zookeeper,nacos
客户端通过zookeeper,拿到服务端的IP、PORT、method等参数
然后,本地实现远程服务调用,就类似调用本地方法一样简洁。
比较成功的RPC框架有:Dubbo、WebSocket、gRPC、OpenFeign

二、案例

1、需求

模拟RPC的客户端、服务端、通信协议三者如何工作的
在这里插入图片描述

2、代码

接口RPCProtocol

package com.atguigu.rpc;public interface RPCProtocol {long versionID = 666;void mkdirs(String path);
}

服务端NNServer

package com.atguigu.rpc;import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.ipc.RPC;
import org.apache.hadoop.ipc.Server;import java.io.IOException;public class NNServer implements RPCProtocol {@Overridepublic void mkdirs(String path) {System.out.println("服务端,创建路径" + path);}public static void main(String[] args) throws IOException {Server server = new RPC.Builder(new Configuration()).setBindAddress("localhost").setPort(8888).setProtocol(RPCProtocol.class).setInstance(new NNServer()).build();System.out.println("服务器开始工作");server.start();}
}

客户端HDFSClient

package com.atguigu.rpc;import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.ipc.RPC;import java.io.IOException;
import java.net.InetSocketAddress;public class HDFSClient {public static void main(String[] args) throws IOException {RPCProtocol client = RPC.getProxy(RPCProtocol.class,RPCProtocol.versionID,new InetSocketAddress("localhost", 8888),new Configuration());System.out.println("我是客户端");client.mkdirs("/input");}
}

3、测试

启动服务端
在这里插入图片描述
查看进程
在这里插入图片描述
运行客户端
在这里插入图片描述
服务端方法被执行
在这里插入图片描述

关键字:Hadoop3:RPC通信原理及简单案例实现

版权声明:

本网仅为发布的内容提供存储空间,不对发表、转载的内容提供任何形式的保证。凡本网注明“来源:XXX网络”的作品,均转载自其它媒体,著作权归作者所有,商业转载请联系作者获得授权,非商业转载请注明出处。

我们尊重并感谢每一位作者,均已注明文章来源和作者。如因作品内容、版权或其它问题,请及时与我们联系,联系邮箱:809451989@qq.com,投稿邮箱:809451989@qq.com

责任编辑: