TCP/IP网络编程之数据包协议
一、概要
在了解了网络字节序之后,接下来就是要讲最最重点的消息协议。数据包是什么呢,数据包可以理解为两个人讲电话说的每一句话的内容。通过大家约定好的方式去理解。达到只有接听电话两个人才懂的东西。在程序中如何体现出来呢,那么接着往下看。
技术交流QQ群:580749909 欢迎交流有问必答,文章尾有个人的微信公众号有兴趣的小伙伴多多关注。
二、简介

消息数据包主要是以二进制数组的形式存在,主要分为4个部分。
校验位:校验是否是双方约定好的“暗号”,如果校验位都不通过就没必要再继续往下解析节约处理时间。
消息头:是描述整个消息长度以及其它附加信息。
消息体:描述消息的具体内容,比如说想获取“股票历史行情数据”这些具体想得到的内容序列化之后存放在消息体中。
消息尾:通常用来描述整个消息的结束,主要还是需要看应用场景消息尾可以不需要。
三、主要内容
代码设计层面来说大致是基于以上的路线来走,首先我们脑子里有一个概念
1.消息是一个整体,这个整体分为四个部分(校验位、消息头、消息体、消息尾)
2.实际传输时以byte数组(二进制)的形式进行传递,将要写入的内容转换为字节按照顺序依次写入数组。解析同样按照这个规则解析再转为具体内容。
3.数据格式,上一条提到了二进制形式传递那怎么把你要传的数据以一种标准的方式发送出去呢。这里举例几种数据格式json 还有 protobuf。推荐用protobuf序列化速度快数据包压缩的体积更小。
4.大端小端的约定,服务方和客户方约好我们传输写入字节序的大小端。推荐统一用大端。
5.代码设计
6.数据包的读取顺序,是从校验位依次往后读取至消息尾。
四、代码设计
第一步,声明一个接口来定义数据包基础结构。
public interface IPacket
{
byte[] Serialize(); void Deserialize(ref byte[] data);
}
第二步,分别定义响应(Respone)和请求(Request)数据包结构
响应(Respone)
public class RpcRespone<TMessage> : IPacket
where TMessage : IMessage
{
/// <summary>
/// 4个byte表示package长度
/// </summary>
public int Length { get; private set; } /// <summary>
/// package头18个字节
/// </summary>
public RespHeader Header { get; set; } /// <summary>
/// package内容
/// </summary>
public TMessage Body { get; set; } public byte[] Serialize()
{
var header = Header.Serialize();
Length += header.Length; byte[] body = null;
var json = JsonConvert.SerializeObject(Body);
if (json != null)
{
body = Encoding.UTF8.GetBytes(json);
Length += body.Length;
} var package = new byte[+Length];
BytesWriter.Write(Length, ref package, ); //length
BytesWriter.Write(header, ref package, ); //header
if (body != null)
{
BytesWriter.Write(body, ref package, + RespHeader.Length); //body
} return package;
} public void Deserialize(ref byte[] data)
{
try
{
Length = BytesReader.ReadInt32(ref data, ); var header = BytesReader.ReadBuffer(ref data, , RespHeader.Length);
Header = new RespHeader();
Header.Deserialize(ref header);
var body = BytesReader.ReadBuffer(ref data, + RespHeader.Length, Length - RespHeader.Length);
var json = Encoding.UTF8.GetString(body);
Body = JsonConvert.DeserializeObject<TMessage>(json);
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("JsonConvert Deserialize. {0}", ex.Message);
}
}
}
public class ReqHeader : IPacket
{
public const int Length = ; /// <summary>
/// 包头标志,用于校验
/// </summary>
public byte Checkbit { get; set; } /// <summary>
/// 8个byte表示uid
/// </summary>
public long Uid { get; set; } /// <summary>
/// 8个byte表示是requestId
/// </summary>
public long RequestId { get; set; } /// <summary>
/// 1个bit表示是否加密
/// </summary>
public bool IsEncrypt { get; set; } /// <summary>
/// 2个byte表示commandId
/// </summary>
public short CommandId { get; set; } /// <summary>
/// 2个byte表示扩展位1的长度
/// </summary>
public short Ext1 { get; set; } /// <summary>
/// 2个byte表示扩展位2的长度
/// </summary>
public short Ext2 { get; set; } public byte[] Serialize()
{
Checkbit = Header.Checkbit;
var header = new byte[]; try
{
BytesWriter.Write(Checkbit, ref header, );
BytesWriter.Write(Uid, ref header, );
BytesWriter.Write(RequestId, ref header, );
BytesWriter.Write(IsEncrypt, ref header, );
BytesWriter.Write(CommandId, ref header, );
BytesWriter.Write(Ext1, ref header, );
BytesWriter.Write(Ext2, ref header, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Serialize Request Header Exception. {0}", ex.Message);
} return header;
} public void Deserialize(ref byte[] data)
{
try
{
Checkbit = BytesReader.ReadByte(ref data, );
Uid = BytesReader.ReadInt64(ref data, );
RequestId = BytesReader.ReadInt64(ref data, );
IsEncrypt = BytesReader.ReadBool(ref data, );
CommandId = BytesReader.ReadInt16(ref data, );
Ext1 = BytesReader.ReadInt16(ref data, );
Ext2 = BytesReader.ReadInt16(ref data, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Serialize Request Header Exception. {0}", ex.Message);
}
}
}
请求(Request)
public class RpcRequest<TMessage> : IPacket
where TMessage : class, IMessage
{
/// <summary>
/// 4个byte表示package长度
/// </summary>
public int Length { get; private set; } /// <summary>
/// package头24个字节
/// </summary>
public ReqHeader Header{ get; set; } /// <summary>
/// package内容
/// </summary>
public TMessage Body { get; set; } public byte[] Serialize()
{
var header = Header.Serialize();
Length += header.Length; byte[] body = null;
var json = JsonConvert.SerializeObject(Body);
if (json != null)
{
body = Encoding.UTF8.GetBytes(json);
Length += body.Length;
} var package = new byte[ + Length];
BytesWriter.Write(Length, ref package, ); //length
BytesWriter.Write(header, ref package, ); //header
if (body != null)
{
BytesWriter.Write(body, ref package, + ReqHeader.Length); //body
} return package;
} public void Deserialize(ref byte[] data)
{
try
{
Length = BytesReader.ReadInt32(ref data, ); var header = BytesReader.ReadBuffer(ref data, , ReqHeader.Length);
Header = new ReqHeader();
Header.Deserialize(ref header); var body = BytesReader.ReadBuffer(ref data, + ReqHeader.Length, Length - ReqHeader.Length);
var json = Encoding.UTF8.GetString(body);
//LogHepler.Log.DebugFormat("JsonConvert Deserialize. Id:[{0}] body:[{1}]", Header.RequestId, json);
Body = JsonConvert.DeserializeObject<TMessage>(json);
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("JsonConvert Deserialize. {0}", ex.Message);
}
}
}
public class RespHeader : IPacket
{
public const int Length = ; /// <summary>
/// 包头标志,用于校验
/// </summary>
public byte Checkbit { get; set; } /// <summary>
/// 8个字节,请求ID
/// </summary>
public long RequestId { get; set; } /// <summary>
/// 4个字节,返回结果状态码
/// </summary>
public int Code { get; set; } /// <summary>
/// 1个字节,是否加密
/// </summary>
public bool IsEncrypt { get; set; } /// <summary>
/// 4个字节,命令ID
/// </summary>
public short CommandId { get;set; } /// <summary>
/// 2个字节,扩展参数
/// </summary>
public short Ext1{get; set; } public byte[] Serialize()
{
Checkbit = Header.Checkbit;
var header = new byte[];
try
{
BytesWriter.Write(Checkbit, ref header, );
BytesWriter.Write(RequestId, ref header, );
BytesWriter.Write(Code, ref header, );
BytesWriter.Write(IsEncrypt, ref header, );
BytesWriter.Write(CommandId, ref header, );
BytesWriter.Write(Ext1, ref header, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Serialize Respone Header Exception. {0}", ex.Message);
} return header;
} public void Deserialize(ref byte[] data)
{
try
{
Checkbit = BytesReader.ReadByte(ref data, );
RequestId = BytesReader.ReadInt64(ref data, );
Code = BytesReader.ReadInt32(ref data, );
IsEncrypt = BytesReader.ReadBool(ref data, );
CommandId = BytesReader.ReadInt16(ref data, );
Ext1 = BytesReader.ReadInt16(ref data, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Deserialize Respone Header Exception. {0}", ex.Message);
}
}
}
以上基本是数据包的设计思路和代码设计的实现。后面会专门写博客专门讲解实战应用。

TCP/IP网络编程之数据包协议的更多相关文章
- TCP/IP网络编程之套接字类型与协议设置
套接字与协议 如果相隔很远的两人要进行通话,必须先决定对话方式.如果一方使用电话,另一方也必须使用电话,而不是书信.可以说,电话就是两人对话的协议.协议是对话中使用的通信规则,扩展到计算机领域可整理为 ...
- 浅谈TCP/IP网络编程中socket的行为
我认为,想要熟练掌握Linux下的TCP/IP网络编程,至少有三个层面的知识需要熟悉: 1. TCP/IP协议(如连接的建立和终止.重传和确认.滑动窗口和拥塞控制等等) 2. Socket I/O系统 ...
- TCP/IP网络编程系列之四(初级)
TCP/IP网络编程系列之四-基于TCP的服务端/客户端 理解TCP和UDP 根据数据传输方式的不同,基于网络协议的套接字一般分为TCP和UDP套接字.因为TCP套接字是面向连接的,因此又称为基于流的 ...
- TCP/IP网络编程之多播与广播
多播 多播方式的数据传输是基于UDP完成的,因此,与UDP服务端/客户端的实现非常接近.区别在于,UDP数据传输以单一目标进行,而多播数据同时传递到加入(注册)特定组的大量主机.换言之,采用多播方式时 ...
- TCP/IP网络编程之套接字的多种可选项
套接字可选项进而I/O缓冲大小 我们进行套接字编程时往往只关注数据通信,而忽略了套接字具有的不同特性.但是,理解这些特性并根据实际需要进行更改也十分重要.之前我们写的程序在创建好套接字后都是未经特别操 ...
- TCP/IP网络编程之基于TCP的服务端/客户端(二)
回声客户端问题 上一章TCP/IP网络编程之基于TCP的服务端/客户端(一)中,我们解释了回声客户端所存在的问题,那么单单是客户端的问题,服务端没有任何问题?是的,服务端没有问题,现在先让我们回顾下服 ...
- TCP/IP网络编程之基于TCP的服务端/客户端(一)
理解TCP和UDP 根据数据传输方式的不同,基于网络协议的套接字一般分为TCP套接字和UDP套接字.因为TCP套接字是面向连接的,因此又称为基于流(stream)的套接字.TCP是Transmissi ...
- 【TCP/IP网络编程】:09套接字的多种可选项
本篇文章主要介绍了套接字的几个常用配置选项,包括SO_SNDBUF & SO_RCVBUF.SO_REUSEADDR及TCP_NODELAY等. 套接字可选项和I/O缓冲大小 前文关于套接字的 ...
- UNIX环境高级编程——TCP/IP网络编程 常用网络信息检索函数
UNIX环境高级编程——TCP/IP网络编程 常用网络信息检索函数 gethostname() getppername() getsockname() gethostbyname() ...
随机推荐
- Python 访问字符串中的值
Python 访问字符串中的值 Python 不支持单字符类型,单字符在 Python 中也是作为一个字符串使用.高佣联盟 www.cgewang.com Python 访问子字符串,可以使用方括号来 ...
- loj #6247. 九个太阳 k次单位根 神仙构造 FFT求和原理
LINK:九个太阳 不可做系列. 构造比较神仙. 考虑FFT的求和原理有 \(\frac{1}{k}\sum_{j=0}^{k-1}(w_k^j)^n=[k|n]\) 带入这道题的式子. 有\(\su ...
- JavaSwing+Mysql实现简单的登录界面+用户是否存在验证
原生Java+mysql登录验证 client login.java 功能:实现登录页面,与服务端传来的数据验证 package LoginRegister; import java.awt.Cont ...
- 将map中的json转ObjecId
我们直接从gridfs中取文件列表时取出来的文件_id为: "_id": { "timestamp": 1587091947, "counter&qu ...
- Linux学习笔记之linux软件包安装以及源的替换
先是软件源的替换,在刚安装的Ubuntu中会配有原先的软件源,所以如果要替换时,可在网上找与自己ubuntu相对应的软件源,比如我的ubuntu版本为12.04,所以我得找到相对应能够适用Ubuntu ...
- 20、Java 泛型
1.晓之以理,动之以码 学Java就是很上头哦,一来直接三连问!!! 什么是泛型?为什么要用泛型?泛型怎么用? 当然泛型在Java中有很重要的一个地位,在面向对象编程以及在各种设计模式中有非常广泛的应 ...
- 通过java程序(JSch)运行远程linux主机上的shell脚本
如果您看完文章之后,觉得对您有帮助,请帮我点个赞,您的支持是我不竭的创作动力! 如果您看完文章之后,觉得对您有帮助,请帮我点个赞,您的支持是我不竭的创作动力! 如果您看完文章之后,觉得对您有帮助,请帮 ...
- Python 错误 异常
8 错误,调试和测试 8.1错误处理 所有的异常来自 BaseException 记录错误 : # err_logging.py import logging def foo(s): return 1 ...
- 搭建 springboot selenium 网页文件转图片环境
1. 环境准备 需要有 chrome 浏览器 + chrome driver + selenium 客户端 离线 chrome 下载地址 # 64位 linux 系统 https://dl.googl ...
- Java对象与类—对象与类
1.类 类(class)是构造对象的模板,具体点说类就是对具有相同性质,相同行为的一群对象的抽象说明.由类构造(construst)对象的过程称为创建类的实例(instance). 2.对象 对象是类 ...