手写RPC框架(六)整合Netty

Netty简介:

Netty是一个基于NIO的,提供异步,事件驱动的网络应用工具,具有高性能高可靠性等特点。

使用传统的Socket来进行网络通信,服务端每一个连接都要新建一个线程,清楚处理完成后通过输出流返回给客户端。而Netty通过NIO的方式,服务端实现为一个请求一个线程,客户端发送的连接请求会注册到多路复用器上,多路复用器轮询到连接有I/O请求时才会启动一个线程进行处理。

这次我们通过Netty来实现网络通信,替代Socket,提高框架性能。

  1. 引入Netty

    <!-- https://mvnrepository.com/artifact/io.netty/netty-all -->
    <dependency>
    <groupId>io.netty</groupId>
    <artifactId>netty-all</artifactId>
    <version>4.1.73.Final</version>
    </dependency>
  2. netty服务端

    public class NettyServer{
    private static final Logger logger = LoggerFactory.getLogger(NettyServer.class);
    private String serverAddress; //启动地址
    private int serverPort; //启动端口 private EventLoopGroup boss = null;
    private EventLoopGroup worker = null; public NettyServer(String serverAddress, int serverPort) {
    this.serverAddress = serverAddress;
    this.serverPort = serverPort;
    } public void startNettyServer() throws Exception {
    //netty调度模块,负责接收请求
    NioEventLoopGroup bossGroup = new NioEventLoopGroup();
    //netty调度模块,负责处理请求
    NioEventLoopGroup workGroup = new NioEventLoopGroup();
    //启动类
    ServerBootstrap bootstrap = new ServerBootstrap();
    bootstrap.group(bossGroup,workGroup);
    bootstrap.channel(NioServerSocketChannel.class);
    bootstrap.childHandler(new ChannelInitializer<SocketChannel>() {
    @Override
    protected void initChannel(SocketChannel ch) throws Exception {
    //传输数据的channel
    ChannelPipeline pipeline = ch.pipeline();
    //解码器
    pipeline.addLast(new StringDecoder());
    //编码器
    pipeline.addLast(new StringEncoder());
    //业务逻辑
    pipeline.addLast(new RpcServerHandler());
    }
    }); try {
    //端口绑定
    ChannelFuture sync = bootstrap.bind(serverAddress, serverPort).sync();
    sync.channel().closeFuture().sync();
    } catch (InterruptedException e) {
    e.printStackTrace();
    }finally {
    bossGroup.shutdownGracefully();
    workGroup.shutdownGracefully();
    }
    } @PreDestroy
    public void destory() throws InterruptedException {
    boss.shutdownGracefully().sync();
    worker.shutdownGracefully().sync();
    logger.info("关闭Netty");
    }
    }

    在这里通过startServer方法会启动netty服务端,当有请求时,会进入RpcServerHandler()方法中进行处理。

    @ChannelHandler.Sharable
    public class RpcServerHandler extends SimpleChannelInboundHandler<String> { @Override
    protected void channelRead0(ChannelHandlerContext ctx, String msg) {
    //msg为接收到的请求信息
    RpcResponse response = new RpcResponse();
    //将请求信息解码
    RpcRegisterEntity rpcRegisterEntity=JSON.parseObject(msg,RpcRegisterEntity.class);
    //通过反射得到远程调用的类并执行该方法
    Object result = invoke(rpcRegisterEntity);
    try {
    //返回体
    response.setResult(result);
    } catch (Exception exception) {
    exception.printStackTrace();
    response.setException(exception);
    }
    //写入返回数据
    ctx.writeAndFlush(JSON.toJSONString(response));
    } private Object invoke(RpcRegisterEntity entity) {
    try {
    //接口名
    String interfaceName = entity.getServiceImplClassFullName();
    // String implClassName = RegisterCenter.getProviderData(interfaceName);
    //类名
    String implClassName = entity.getServiceImplClassFullName();
    Class<?> clazz = Class.forName(implClassName);
    String methodName = entity.getMethodName();
    Class<?>[] parameterTypes = entity.getParameterTypes();
    Object[] parameters = entity.getParameters();
    Method method = clazz.getMethod(methodName, parameterTypes);
    //通过反射得到结果
    return method.invoke(clazz.newInstance(), parameters);
    } catch (ClassNotFoundException | NoSuchMethodException | InvocationTargetException | IllegalAccessException | InstantiationException e) {
    e.printStackTrace();
    return e;
    }
    }
    //当Channel处理于活动状态时被调用
    @Override
    public void channelActive(ChannelHandlerContext ctx) throws Exception {
    // System.out.println(ctx.channel().remoteAddress().toString());
    super.channelActive(ctx);
    } @Override
    public void exceptionCaught(ChannelHandlerContext ctx, Throwable cause) throws Exception {
    // System.out.println(JSON.toJSONString(cause));
    super.exceptionCaught(ctx, cause);
    }
    }
  3. netty消费端

    public class RpcClient{
    private static final Logger logger = LoggerFactory.getLogger(RpcClient.class);
    private EventLoopGroup group; private Channel channel; private String ip; private int port; private RpcConsumerHandler rpcConsumerHandler=new RpcConsumerHandler(); private ExecutorService executorService = Executors.newCachedThreadPool(); public RpcClient(String ip, int port) {
    this.ip = ip;
    this.port = port;
    initClient();
    } public void initClient() {
    try {
    //1.创建线程组
    group = new NioEventLoopGroup();
    //2.创建启动助手
    Bootstrap bootstrap = new Bootstrap();
    //3.设置参数
    bootstrap.group(group)
    //传输数据用的channel
    .channel(NioSocketChannel.class)
    .option(ChannelOption.SO_KEEPALIVE, Boolean.TRUE)
    .option(ChannelOption.CONNECT_TIMEOUT_MILLIS, 3000)
    .handler(new ChannelInitializer<SocketChannel>() {
    @Override
    protected void initChannel(SocketChannel channel) throws Exception {
    ChannelPipeline pipeline = channel.pipeline();
    pipeline.addLast(new StringEncoder());
    pipeline.addLast(new StringDecoder());
    //添加客户端处理类
    pipeline.addLast(rpcConsumerHandler);
    }
    });
    //4.连接Netty服务端
    connect(bootstrap, ip, port, 5);
    } catch (Exception exception) {
    exception.printStackTrace();
    if (channel != null) {
    channel.close();
    }
    if (group != null) {
    group.shutdownGracefully();
    }
    }
    } private void connect(Bootstrap bootstrap, String host, int port, int retry) {
    ChannelFuture channelFuture = bootstrap.connect(host, port).addListener(future -> {
    if (future.isSuccess()) {
    logger.info("连接服务端成功");
    } else if (retry == 0) {
    logger.error("重试次数已用完,放弃连接");
    } else {
    //第几次重连:
    int order = (5 - retry) + 1;
    //本次重连的间隔
    int delay = 1 << order;
    logger.error("{} : 连接失败,第 {} 重连....", new Date(), order);
    bootstrap.config().group().schedule(() -> connect(bootstrap, host, port, retry - 1), delay, TimeUnit.SECONDS);
    }
    });
    channel = channelFuture.channel();
    }
    /**
    * 提供给调用者主动关闭资源的方法
    */
    public void close() {
    if (channel != null) {
    channel.close();
    }
    if (group != null) {
    group.shutdownGracefully();
    }
    } /**
    * 提供消息发送的方法
    */
    public Object send(String msg) throws ExecutionException, InterruptedException {
    rpcConsumerHandler.setRequestMsg(msg);
    Future submit = executorService.submit(rpcConsumerHandler);
    return submit.get();
    } public void destroy() throws Exception {
    if (channel != null) {
    channel.close();
    }
    if (group != null) {
    group.shutdownGracefully();
    }
    } public String getIp() {
    return ip;
    } public void setIp(String ip) {
    this.ip = ip;
    } public int getPort() {
    return port;
    } public void setPort(int port) {
    this.port = port;
    }
    }

    当创建好客户端时,发送请求时数据会交由rpcConsumerHandler处理,

    public class RpcConsumerHandler extends SimpleChannelInboundHandler<String> implements Callable {
    ChannelHandlerContext context;
    //发送的消息
    String requestMsg; //服务端返回的消息
    String responseMsg; public void setRequestMsg(String requestMsg) {
    this.requestMsg = requestMsg;
    }
    @Override
    public void channelActive(ChannelHandlerContext ctx) throws Exception {
    context = ctx;
    }
    //接收由服务端返回的数据
    @Override
    protected synchronized void channelRead0(ChannelHandlerContext channelHandlerContext, String msg) throws Exception {
    System.out.println("客户端结果:"+msg);
    responseMsg = msg;
    //唤醒等待的线程
    notify();
    }
    //发送数据
    @Override
    public synchronized Object call() throws Exception {
    //消息发送
    context.writeAndFlush(requestMsg);
    //线程等待
    wait();
    return responseMsg;
    }
    }
  4. 调用

    //新建连接
    RpcClient rpcClient = getClient(rpcRegisterEntity.getHost(), rpcRegisterEntity.getPort());
    //发送数据
    Object responseMsg = rpcClient.send(JSON.toJSONString(rpcRegisterEntity));
    //解析返回的数据
    RpcResponse rpcResponse = JSON.parseObject(responseMsg.toString(), RpcResponse.class);

手写RPC框架(六)整合Netty的更多相关文章

  1. 手写RPC框架指北另送贴心注释代码一套

    Angular8正式发布了,Java13再过几个月也要发布了,技术迭代这么快,框架的复杂度越来越大,但是原理是基本不变的.所以沉下心看清代码本质很重要,这次给大家带来的是手写RPC框架. 完整代码以及 ...

  2. 看了这篇你就会手写RPC框架了

    一.学习本文你能学到什么? RPC的概念及运作流程 RPC协议及RPC框架的概念 Netty的基本使用 Java序列化及反序列化技术 Zookeeper的基本使用(注册中心) 自定义注解实现特殊业务逻 ...

  3. 基于netty手写RPC框架

    代码目录结构 rpc-common存放公共类 rpc-interface为rpc调用方需要调用的接口 rpc-register提供服务的注册与发现 rpc-client为rpc调用方底层实现 rpc- ...

  4. 手写RPC框架(netty+zookeeper)

    RPC是什么?远程过程调用,过程就是业务处理.计算任务,像调用本地方法一样调用远程的过程. RMI和RPC的区别是什么?RMI是远程方法调用,是oop领域中RPC的一种实现,我们熟悉的restfull ...

  5. 手写RPC框架

    https://www.bilibili.com/video/av23508597?from=search&seid=6870947260580707913 https://github.co ...

  6. 手写MQ框架(四)-使用netty改造梳理

    一.背景 书接上文手写MQ框架(三)-客户端实现,前面通过web的形式实现了mq的服务端和客户端,现在计划使用netty来改造一下.前段时间学习了一下netty的使用(https://www.w3cs ...

  7. java 从零开始手写 RPC (04) -序列化

    序列化 java 从零开始手写 RPC (01) 基于 socket 实现 java 从零开始手写 RPC (02)-netty4 实现客户端和服务端 java 从零开始手写 RPC (03) 如何实 ...

  8. java 从零开始手写 RPC (05) reflect 反射实现通用调用之服务端

    通用调用 java 从零开始手写 RPC (01) 基于 socket 实现 java 从零开始手写 RPC (02)-netty4 实现客户端和服务端 java 从零开始手写 RPC (03) 如何 ...

  9. 手写MQ框架(一)-准备启程

    一.背景 很久以前写了DAO框架和MVC框架,前段时间又重写了DAO框架-GDAO(手写DAO框架(一)-从“1”开始,源码:https://github.com/shuimutong/gdao.gi ...

随机推荐

  1. ajax 异步 提交 含文件的表单

    1.前言 需求是使用 jquery 的 ajax 异步提交表单,当然,不是简单的数据,而是包含文件数据的表单.于是我想到了 new FormData() 的用法, 可是仍然提交失败,原来是ajax的属 ...

  2. 通过暗码去打开/关闭usb debug开关

    通过暗码去打开/关闭usb debug开关 通过暗码去打开/关闭usb debug开关1. Description2. Analysis3. Solution4. Summary 1. Descrip ...

  3. 使用 Json Schema 定义 API

    本文地址:使用 Json Schema 定义 API 前面我们介绍了 Json Schema 的基本内容,这篇文章我们结合 jsonschema2pojo 工具深入分析如何使用 Json Schema ...

  4. Android WebView优化

    1.展示webview的activity可以另开一个进程,这样就能和我们app的主进程分开了,即使webview产生了oom崩溃等问题也不会影响到主程序,如何实现呢,其实很简单,在androidman ...

  5. Rancher Fleet使用教程

    官方文档: https://fleet.rancher.io/ https://github.com/rancher/fleet 博客截止日期为:20201204 当前官网版本为v0.3.0,但在实践 ...

  6. EF中使用事务

    using (var db = new dbEntities()) { //第一个坑,需要手动open db.Database.Connection.Open(); using (var tran = ...

  7. MongDB日志分析

    Result文件数据说明: Ip:106.39.41.166,(城市) Date:10/Nov/2016:00:01:02 +0800,(日期) Day:10,(天数) Traffic: 54 ,(流 ...

  8. 一文读懂mysql权限系统

    前言: MySQL权限系统的主要功能是证实连接到一台给定主机的用户,并且赋予该用户在数据库上的SELECT.INSERT.UPDATE和DELETE权限.附加的功能包括有匿名的用户并对于MySQL特定 ...

  9. redis实现简易在线聊天室

    redis_flask简易聊天室 项目构建 这时一个基于Redis数据库的简单小项目,使用redis缓存数据,并通过flask部署到浏览器,运行截图如下: 输入名字后,就可以登陆到聊天室,主要包括三个 ...

  10. Linux深入探索01-stty与键盘信号

    ----- 最近更新[2021-12-20]----- 一.简介 最初的 Unix 设定假定人们使用终端连接主机计算机.30多年过去后,情况依然如此,即便是在自己的PC机上运行Unix.多年以来,终端 ...