数据通信

如果需要考虑的是两台机器(甚至多台)怎么使用Netty进行通信。大体上分为三种:

1 第一种:使用长连接通道不断开的形式进行通信。也就是服务端和客户端的通道一直处于开启状态。

如果服务器性能足够好,并且我们的客户端数量也比较少的情况下,推荐这种方式。

2 第二种:一次性批量提交数据,采用短连接方式。也就是我们会把数据保存在本地临时缓冲区或者临时表里,

当达到临界值时一次性批量提交。又或者根据定时任务轮询提交。这种情况弊端是做不到实时性传输。对实施性不

高的应用程序中推荐使用。

3 第三种:可以使用一种特殊的长连接,在指定某一时间内,服务器与某客户端没有任何通信,则断开连接。

下次连接是客户端向服务器发送请求的时候,在次建立连接。但是这种模式我们需要考虑两个因素:

1 如何在超时(即服务器和客户端没有任何通信)后关闭通道?

使用 new ReadTimeoutHandler(5, TimeUnit.SECONDS);即可设置超时时间

关闭通道后又如何再次建立连接?

采用了一个小判断,每次在getChannelFuture()时判断是否需要重新连接。

2 客户端宕机时,我们无需考虑。下次客户端重启之后我们就可以与服务器建立连接,但是服务器宕机时我们的客户端如何与服务器建立连接呢?

服务端宕机的问题:

我们可以写一个定时任务,定时的(比如每隔一个小时)尝试与服务器建立连接,检测服务器是否处于可用状态,如果服务器宕机了则不再发送业务请求,直到定时检测发现服务器恢复正常。

心跳检测

使用socket通信一般会经常处理多个服务器之间的心跳检测,一般来讲我们去维护服务器集群,肯定要有一台或几台服务器主机(Master),然后还有N台(Slave),那么主机肯定要时刻知道自己下面所有的从服务器的各方面情况(比如磁盘使用情况,性能,CPU使用率等等),然后进行实时监控的功能,这种功能在分布式架构中叫做心跳检测或者心跳监控,如果跨网跨域还要考虑安全问题。最佳处理方式还是应该用一些框架实现,比如Netty就可以做这样一件事情。

可以使用sigar用于监控我们这个服务器的所有信息

Sigar全名是System Information Gatherer And Reporter,中文名是系统信息收集和报表工具。我是一个开源的工具,提供了跨平台的系统信息收集的API ,是Hyperic-hq产品的基础包,是Hyperic HQ主要的数据收集组件。它用来从许多平台收集系统和处理信息。

这些平台包括:Linux,Windows,Solaris,AIX,HP-UX,FreeBSD和Mac OSX。

CPU信息:包括基本信息(vendor、model、mhz、cacheSize)和统计信息(user、sys、idle、nice、wait)

文件系统信息:包括Filesystem、Size、Used、Avail、Use%、Type

事件信息:类似Service Control Manager

内存信息:物理内存和交换内存的总数、使用数、剩余数;RAM的大小

网络信息:包括网络接口信息和网络路由信息

进程信息:包括每个进程的内存、CPU占用数、状态、参数、句柄

IO信息:包括IO的状态,读写大小等

服务状态信息

系统信息:包括操作系统版本,系统资源限制情况,系统运行时间以及负载,JAVA的版本信息

1 首先客户端在发送请求时,channelActive方法中进行安全认证

2 服务端收到请求判断请求类型,如果请求参数为String类型则进行安全认证,给客户端回写认证信息

3 客户端通过判断服务端是否认证成功,使用线程池:Executors.newScheduledThreadPool(1);每隔三秒发送一次发送健康包检测

RequestInfo:省去get、set

客户端代码

服务端代码

Netty上传下载

Netty在上传时会将文件分成多个小块chunck,比方说:一个文件10M,Netty会用ChunckedWriteHandler(支持异步发送的码流(大文件传输)但不占用过多的内存,防止java内存溢出)类将这个文件拆分,比如说分成10份,每份1M分10次进行传输,将10次传输封装成1个response进行响应。这样做的好处,每次传输的内容小所以够快。

---------------------

作者:石印掌纹

来源:CSDN

原文:https://blog.csdn.net/LIAN_XL/article/details/79799072

版权声明:本文为博主原创文章,转载请附上博文链接!

Netty实践场景的更多相关文章

  1. 1、ZooKeeper 基本概念、使用方法、实践场景

    ZooKeeper 基本概念 ZooKeeper 是面向分布式应用的协调服务,其实现了树形结构的数据模型(与文件系统类似),并且提供了简洁的编程原语.ZooKeeper 能够作为基础,用于构建更高层级 ...

  2. 京东的Netty实践,京麦TCP网关长连接容器架构

    背景 早期京麦搭建 HTTP 和 TCP 长连接功能主要用于消息通知的推送,并未应用于 API 网关.随着逐步对 NIO 的深入学习和对 Netty 框架的了解,以及对系统通信稳定能力越来越高的要求, ...

  3. Netty实践与NIO原理

    一.阻塞IO与非阻塞IO Linux网络IO模型(5种) (1)阻塞IO模型 所有文件操作都是阻塞的,以套接字接口为例,在进程空间中调用recvfrom,系统调用直到数据包到达且被复制到应用进程缓冲区 ...

  4. Google Protobuf结合Netty实践

    1.Win版Protobuf代码生成工具下载: https://github.com/protocolbuffers/protobuf/releases 注意下载protoc-3.6.1-win32. ...

  5. Netty实践二(心跳检测)

    我们使用Socket通信一般经常会处理多个服务器之间的心跳检测,一般来讲,我们去维护服务器集群,肯定要有一台或几台服务器主机(Master),然后还应该有N台(Slave),那么我们的主机肯定要时时刻 ...

  6. Netty实践一(数据通信)

    我们需要了解下在真正项目应用中如何去考虑Netty的使用,大体上对于一些参数设置都是根据服务器性能决定的.这个不是最主要的. 我们需要考虑的问题是两台机器(甚至多台)使用Netty的怎样进行通信,大体 ...

  7. Netty实践

    Netty是JBOSS针对网络开发的一套应用框架,它也是在NIO的基础上发展起来的.netty基于异步的事件驱动,具有高性能.高扩展性等特性,它提供了统一的底层协议接口,使得开发者从底层的网络协议(比 ...

  8. 宜人贷蜂巢API网关技术解密之Netty使用实践

    一.背景 宜人贷蜂巢团队,由Michael创立于2013年,通过使用互联网科技手段助力金融生态和谐健康发展.自成立起一直致力于多维度数据闭环平台建设.目前团队规模超过百人,涵盖征信.电商.金融.社交. ...

  9. Netty中的坑(下篇)

    其实这篇应该叫Netty实践,但是为了与前一篇名字保持一致,所以还是用一下坑这个名字吧. Netty是高性能Java NIO网络框架,在很多开源系统里都有她的身影,而在绝大多数互联网公司所实施的服务化 ...

随机推荐

  1. POJ1083(Moving Tables)--简单模拟

    题目链接:http://poj.org/problem?id=1083 如图所示在一条走廊的两侧各有200个房间,现在给定一些成对的房间相互交换桌子,但是走廊每次只能通过一组搬运, 也就是说如果两个搬 ...

  2. ztree在onCheck()方法中防止因触发联动关系导致页面多次渲染而卡死的问题

    这几天在项目中遇到了要使用树形选择框, 而且要求比较复杂,具体叙述如下: 首先是有个选择框,左边选择是适用的商品,右边显示已经选择的商品.也就是说,左边每次勾选操作,都要触发一个事件去刷新右边的页面, ...

  3. Cause: com.mysql.jdbc.PacketTooBigException: Packet for query is too large (16944839 > 16777216). You can change this value on the server by setting the max_allowed_packet' variable.

    今天发现task微服务的error日志报如下错误: Cause: com.mysql.jdbc.PacketTooBigException: Packet for query is too large ...

  4. 使用NSFileManager管理文件系统

    文件系统作为被所有进程使用的基本资源之一,在macOS和iOS中主要用于处理数据文件.应用程序以及与操作系统自身相关的持久存储. iOS中的文件系统格式为HFS Plus,macOS中的主要格式也是H ...

  5. 1.NoSQL入门和概述

    入门概述: 1.为什么要用到NoSQL a)  单机MySQL的美好年代,在90年代,一个网站的访问量一般都不大,用单个数据库完全可以轻松应付.在那个时候,更多的都是静态网页,动态交互类型的网站不多. ...

  6. 8.读写锁ReadWriteLock

    /*ReadWriteLock 读写锁*/ private ReadWriteLock lock = new ReentrantReadWriteLock(); lock.readLock().loc ...

  7. python3和python2共存

    在window上同时安装py3.5和py2.7,但是命令行敲击python命令后,默认只出现py2.7的信息,敲击python3命令,提示未知的命令. 从网上查了一下,虽然环境变量都添加对了,但是可执 ...

  8. 我用Python爬虫挣钱的那点事

    在下写了10年Python,期间写了各种奇葩爬虫,挣各种奇葩的钱,写这篇文章总结下几种爬虫挣钱的方式. 1.最典型的就是找爬虫外包活儿.这个真是体力活,最早是在国外各个freelancer网站上找适合 ...

  9. Spark(二)算子详解

    目录 Spark(二)算子讲解 一.wordcountcount 二.编程模型 三.RDD数据集和算子的使用 Spark(二)算子讲解 @ 一.wordcountcount 基于上次的wordcoun ...

  10. 0004SpringBoot整合Redis

    在已经整合了SpringDataJPA和Junit的基础上,整合Redis,只需要一下几步即可: 1.下载64windows版的Redis安装包.解压并启动服务端 2.配置Redis的起步依赖(pom ...