手写RPC框架(六)整合Netty

Netty简介:

Netty是一个基于NIO的,提供异步,事件驱动的网络应用工具,具有高性能高可靠性等特点。

使用传统的Socket来进行网络通信,服务端每一个连接都要新建一个线程,清楚处理完成后通过输出流返回给客户端。而Netty通过NIO的方式,服务端实现为一个请求一个线程,客户端发送的连接请求会注册到多路复用器上,多路复用器轮询到连接有I/O请求时才会启动一个线程进行处理。

这次我们通过Netty来实现网络通信,替代Socket,提高框架性能。

  1. 引入Netty

    <!-- https://mvnrepository.com/artifact/io.netty/netty-all -->
    <dependency>
    <groupId>io.netty</groupId>
    <artifactId>netty-all</artifactId>
    <version>4.1.73.Final</version>
    </dependency>
  2. netty服务端

    public class NettyServer{
    private static final Logger logger = LoggerFactory.getLogger(NettyServer.class);
    private String serverAddress; //启动地址
    private int serverPort; //启动端口 private EventLoopGroup boss = null;
    private EventLoopGroup worker = null; public NettyServer(String serverAddress, int serverPort) {
    this.serverAddress = serverAddress;
    this.serverPort = serverPort;
    } public void startNettyServer() throws Exception {
    //netty调度模块,负责接收请求
    NioEventLoopGroup bossGroup = new NioEventLoopGroup();
    //netty调度模块,负责处理请求
    NioEventLoopGroup workGroup = new NioEventLoopGroup();
    //启动类
    ServerBootstrap bootstrap = new ServerBootstrap();
    bootstrap.group(bossGroup,workGroup);
    bootstrap.channel(NioServerSocketChannel.class);
    bootstrap.childHandler(new ChannelInitializer<SocketChannel>() {
    @Override
    protected void initChannel(SocketChannel ch) throws Exception {
    //传输数据的channel
    ChannelPipeline pipeline = ch.pipeline();
    //解码器
    pipeline.addLast(new StringDecoder());
    //编码器
    pipeline.addLast(new StringEncoder());
    //业务逻辑
    pipeline.addLast(new RpcServerHandler());
    }
    }); try {
    //端口绑定
    ChannelFuture sync = bootstrap.bind(serverAddress, serverPort).sync();
    sync.channel().closeFuture().sync();
    } catch (InterruptedException e) {
    e.printStackTrace();
    }finally {
    bossGroup.shutdownGracefully();
    workGroup.shutdownGracefully();
    }
    } @PreDestroy
    public void destory() throws InterruptedException {
    boss.shutdownGracefully().sync();
    worker.shutdownGracefully().sync();
    logger.info("关闭Netty");
    }
    }

    在这里通过startServer方法会启动netty服务端,当有请求时,会进入RpcServerHandler()方法中进行处理。

    @ChannelHandler.Sharable
    public class RpcServerHandler extends SimpleChannelInboundHandler<String> { @Override
    protected void channelRead0(ChannelHandlerContext ctx, String msg) {
    //msg为接收到的请求信息
    RpcResponse response = new RpcResponse();
    //将请求信息解码
    RpcRegisterEntity rpcRegisterEntity=JSON.parseObject(msg,RpcRegisterEntity.class);
    //通过反射得到远程调用的类并执行该方法
    Object result = invoke(rpcRegisterEntity);
    try {
    //返回体
    response.setResult(result);
    } catch (Exception exception) {
    exception.printStackTrace();
    response.setException(exception);
    }
    //写入返回数据
    ctx.writeAndFlush(JSON.toJSONString(response));
    } private Object invoke(RpcRegisterEntity entity) {
    try {
    //接口名
    String interfaceName = entity.getServiceImplClassFullName();
    // String implClassName = RegisterCenter.getProviderData(interfaceName);
    //类名
    String implClassName = entity.getServiceImplClassFullName();
    Class<?> clazz = Class.forName(implClassName);
    String methodName = entity.getMethodName();
    Class<?>[] parameterTypes = entity.getParameterTypes();
    Object[] parameters = entity.getParameters();
    Method method = clazz.getMethod(methodName, parameterTypes);
    //通过反射得到结果
    return method.invoke(clazz.newInstance(), parameters);
    } catch (ClassNotFoundException | NoSuchMethodException | InvocationTargetException | IllegalAccessException | InstantiationException e) {
    e.printStackTrace();
    return e;
    }
    }
    //当Channel处理于活动状态时被调用
    @Override
    public void channelActive(ChannelHandlerContext ctx) throws Exception {
    // System.out.println(ctx.channel().remoteAddress().toString());
    super.channelActive(ctx);
    } @Override
    public void exceptionCaught(ChannelHandlerContext ctx, Throwable cause) throws Exception {
    // System.out.println(JSON.toJSONString(cause));
    super.exceptionCaught(ctx, cause);
    }
    }
  3. netty消费端

    public class RpcClient{
    private static final Logger logger = LoggerFactory.getLogger(RpcClient.class);
    private EventLoopGroup group; private Channel channel; private String ip; private int port; private RpcConsumerHandler rpcConsumerHandler=new RpcConsumerHandler(); private ExecutorService executorService = Executors.newCachedThreadPool(); public RpcClient(String ip, int port) {
    this.ip = ip;
    this.port = port;
    initClient();
    } public void initClient() {
    try {
    //1.创建线程组
    group = new NioEventLoopGroup();
    //2.创建启动助手
    Bootstrap bootstrap = new Bootstrap();
    //3.设置参数
    bootstrap.group(group)
    //传输数据用的channel
    .channel(NioSocketChannel.class)
    .option(ChannelOption.SO_KEEPALIVE, Boolean.TRUE)
    .option(ChannelOption.CONNECT_TIMEOUT_MILLIS, 3000)
    .handler(new ChannelInitializer<SocketChannel>() {
    @Override
    protected void initChannel(SocketChannel channel) throws Exception {
    ChannelPipeline pipeline = channel.pipeline();
    pipeline.addLast(new StringEncoder());
    pipeline.addLast(new StringDecoder());
    //添加客户端处理类
    pipeline.addLast(rpcConsumerHandler);
    }
    });
    //4.连接Netty服务端
    connect(bootstrap, ip, port, 5);
    } catch (Exception exception) {
    exception.printStackTrace();
    if (channel != null) {
    channel.close();
    }
    if (group != null) {
    group.shutdownGracefully();
    }
    }
    } private void connect(Bootstrap bootstrap, String host, int port, int retry) {
    ChannelFuture channelFuture = bootstrap.connect(host, port).addListener(future -> {
    if (future.isSuccess()) {
    logger.info("连接服务端成功");
    } else if (retry == 0) {
    logger.error("重试次数已用完,放弃连接");
    } else {
    //第几次重连:
    int order = (5 - retry) + 1;
    //本次重连的间隔
    int delay = 1 << order;
    logger.error("{} : 连接失败,第 {} 重连....", new Date(), order);
    bootstrap.config().group().schedule(() -> connect(bootstrap, host, port, retry - 1), delay, TimeUnit.SECONDS);
    }
    });
    channel = channelFuture.channel();
    }
    /**
    * 提供给调用者主动关闭资源的方法
    */
    public void close() {
    if (channel != null) {
    channel.close();
    }
    if (group != null) {
    group.shutdownGracefully();
    }
    } /**
    * 提供消息发送的方法
    */
    public Object send(String msg) throws ExecutionException, InterruptedException {
    rpcConsumerHandler.setRequestMsg(msg);
    Future submit = executorService.submit(rpcConsumerHandler);
    return submit.get();
    } public void destroy() throws Exception {
    if (channel != null) {
    channel.close();
    }
    if (group != null) {
    group.shutdownGracefully();
    }
    } public String getIp() {
    return ip;
    } public void setIp(String ip) {
    this.ip = ip;
    } public int getPort() {
    return port;
    } public void setPort(int port) {
    this.port = port;
    }
    }

    当创建好客户端时,发送请求时数据会交由rpcConsumerHandler处理,

    public class RpcConsumerHandler extends SimpleChannelInboundHandler<String> implements Callable {
    ChannelHandlerContext context;
    //发送的消息
    String requestMsg; //服务端返回的消息
    String responseMsg; public void setRequestMsg(String requestMsg) {
    this.requestMsg = requestMsg;
    }
    @Override
    public void channelActive(ChannelHandlerContext ctx) throws Exception {
    context = ctx;
    }
    //接收由服务端返回的数据
    @Override
    protected synchronized void channelRead0(ChannelHandlerContext channelHandlerContext, String msg) throws Exception {
    System.out.println("客户端结果:"+msg);
    responseMsg = msg;
    //唤醒等待的线程
    notify();
    }
    //发送数据
    @Override
    public synchronized Object call() throws Exception {
    //消息发送
    context.writeAndFlush(requestMsg);
    //线程等待
    wait();
    return responseMsg;
    }
    }
  4. 调用

    //新建连接
    RpcClient rpcClient = getClient(rpcRegisterEntity.getHost(), rpcRegisterEntity.getPort());
    //发送数据
    Object responseMsg = rpcClient.send(JSON.toJSONString(rpcRegisterEntity));
    //解析返回的数据
    RpcResponse rpcResponse = JSON.parseObject(responseMsg.toString(), RpcResponse.class);

手写RPC框架(六)整合Netty的更多相关文章

  1. 手写RPC框架指北另送贴心注释代码一套

    Angular8正式发布了,Java13再过几个月也要发布了,技术迭代这么快,框架的复杂度越来越大,但是原理是基本不变的.所以沉下心看清代码本质很重要,这次给大家带来的是手写RPC框架. 完整代码以及 ...

  2. 看了这篇你就会手写RPC框架了

    一.学习本文你能学到什么? RPC的概念及运作流程 RPC协议及RPC框架的概念 Netty的基本使用 Java序列化及反序列化技术 Zookeeper的基本使用(注册中心) 自定义注解实现特殊业务逻 ...

  3. 基于netty手写RPC框架

    代码目录结构 rpc-common存放公共类 rpc-interface为rpc调用方需要调用的接口 rpc-register提供服务的注册与发现 rpc-client为rpc调用方底层实现 rpc- ...

  4. 手写RPC框架(netty+zookeeper)

    RPC是什么?远程过程调用,过程就是业务处理.计算任务,像调用本地方法一样调用远程的过程. RMI和RPC的区别是什么?RMI是远程方法调用,是oop领域中RPC的一种实现,我们熟悉的restfull ...

  5. 手写RPC框架

    https://www.bilibili.com/video/av23508597?from=search&seid=6870947260580707913 https://github.co ...

  6. 手写MQ框架(四)-使用netty改造梳理

    一.背景 书接上文手写MQ框架(三)-客户端实现,前面通过web的形式实现了mq的服务端和客户端,现在计划使用netty来改造一下.前段时间学习了一下netty的使用(https://www.w3cs ...

  7. java 从零开始手写 RPC (04) -序列化

    序列化 java 从零开始手写 RPC (01) 基于 socket 实现 java 从零开始手写 RPC (02)-netty4 实现客户端和服务端 java 从零开始手写 RPC (03) 如何实 ...

  8. java 从零开始手写 RPC (05) reflect 反射实现通用调用之服务端

    通用调用 java 从零开始手写 RPC (01) 基于 socket 实现 java 从零开始手写 RPC (02)-netty4 实现客户端和服务端 java 从零开始手写 RPC (03) 如何 ...

  9. 手写MQ框架(一)-准备启程

    一.背景 很久以前写了DAO框架和MVC框架,前段时间又重写了DAO框架-GDAO(手写DAO框架(一)-从“1”开始,源码:https://github.com/shuimutong/gdao.gi ...

随机推荐

  1. spring boot 解决 跨域 的两种方法 -- 前后端分离

    1.前言 以前做项目 ,基本上是使用 MVC 模式 ,使得视图与模型绑定 ,前后端地址与端口都一样 , 但是现在有些需求 ,需要暴露给外网访问 ,那么这就出现了个跨域问题 ,与同源原则冲突, 造成访问 ...

  2. kafka学习笔记(二)kafka的基本使用

    概述 第一篇随笔从消息队列的定义和各种应用,以及kafka的分类定义和基本知识,第二篇就写一篇关于kafka的基本实际配置和使用的随笔,包括kafka的集群参数的配置,生产者使用机制,消费者使用机制. ...

  3. 我选择了MySQL和SpringData JPA

    我是3y,一年CRUD经验用十年的markdown程序员‍常年被誉为优质八股文选手 今天想跟大家聊聊数据库层面上的事,austin项目继续更新(注:今天聊的数据库都特指关系型数据库) 01.数据库选择 ...

  4. linux简单命令汇总

    ls [选项] [文件或目录] -a 显示所有文件,包括隐藏文件 -l 显示详细信息 -d 查看目录属性 -h 人性化显示文件大小 -i 显示inode mkdir [选项] 目录名 -p 递归创建 ...

  5. 【刷题-LeetCode】210. Course Schedule II

    Course Schedule II There are a total of n courses you have to take, labeled from 0 to n-1. Some cour ...

  6. 搭建服务器之文件共享cifs,nfs,samba

    cifs: 微软系统中用于网上邻居共享的一个机制,在linux下也可以通过命令mount -t cifs .....来挂载共享的文件目录等. nfs: linux之间的共享文件方式,基于rpc ser ...

  7. promise的队列,宏任务,微任务,同步任务

    // promise里面有一个特别的任务,就是微任务 // 同步任务>微任务>宏任务 setTimeout(() => { console.log("setTimeout& ...

  8. MIME类型说明(HTTP协议中数据类型)

    MIME(HTTP协议中数据类型) MIME:多功能Internet邮件扩充服务.MIME类型的格式是"大类型/小类型",并与某一种文件的扩展名相对应. 常见的MIME类型: RT ...

  9. 只要一行代码,实现五种 CSS 经典布局

    常用的页面布局,其实就那么几个.下面我会介绍5个经典布局,只要掌握了它们,就能应对绝大多数常规页面. 这几个布局都是自适应的,自动适配桌面设备和移动设备.代码实现很简单,核心代码只有一行,有很大的学习 ...

  10. Java安全之C3P0利用与分析

    Java安全之C3P0利用与分析 目录 Java安全之C3P0利用与分析 写在前面 C3P0 Gadget http base C3P0.getObject() 序列化 反序列化 Class.forN ...