TCP/IP网络编程之数据包协议
一、概要
在了解了网络字节序之后,接下来就是要讲最最重点的消息协议。数据包是什么呢,数据包可以理解为两个人讲电话说的每一句话的内容。通过大家约定好的方式去理解。达到只有接听电话两个人才懂的东西。在程序中如何体现出来呢,那么接着往下看。
技术交流QQ群:580749909 欢迎交流有问必答,文章尾有个人的微信公众号有兴趣的小伙伴多多关注。
二、简介

消息数据包主要是以二进制数组的形式存在,主要分为4个部分。
校验位:校验是否是双方约定好的“暗号”,如果校验位都不通过就没必要再继续往下解析节约处理时间。
消息头:是描述整个消息长度以及其它附加信息。
消息体:描述消息的具体内容,比如说想获取“股票历史行情数据”这些具体想得到的内容序列化之后存放在消息体中。
消息尾:通常用来描述整个消息的结束,主要还是需要看应用场景消息尾可以不需要。
三、主要内容
代码设计层面来说大致是基于以上的路线来走,首先我们脑子里有一个概念
1.消息是一个整体,这个整体分为四个部分(校验位、消息头、消息体、消息尾)
2.实际传输时以byte数组(二进制)的形式进行传递,将要写入的内容转换为字节按照顺序依次写入数组。解析同样按照这个规则解析再转为具体内容。
3.数据格式,上一条提到了二进制形式传递那怎么把你要传的数据以一种标准的方式发送出去呢。这里举例几种数据格式json 还有 protobuf。推荐用protobuf序列化速度快数据包压缩的体积更小。
4.大端小端的约定,服务方和客户方约好我们传输写入字节序的大小端。推荐统一用大端。
5.代码设计
6.数据包的读取顺序,是从校验位依次往后读取至消息尾。
四、代码设计
第一步,声明一个接口来定义数据包基础结构。
public interface IPacket
{
byte[] Serialize(); void Deserialize(ref byte[] data);
}
第二步,分别定义响应(Respone)和请求(Request)数据包结构
响应(Respone)
public class RpcRespone<TMessage> : IPacket
where TMessage : IMessage
{
/// <summary>
/// 4个byte表示package长度
/// </summary>
public int Length { get; private set; } /// <summary>
/// package头18个字节
/// </summary>
public RespHeader Header { get; set; } /// <summary>
/// package内容
/// </summary>
public TMessage Body { get; set; } public byte[] Serialize()
{
var header = Header.Serialize();
Length += header.Length; byte[] body = null;
var json = JsonConvert.SerializeObject(Body);
if (json != null)
{
body = Encoding.UTF8.GetBytes(json);
Length += body.Length;
} var package = new byte[+Length];
BytesWriter.Write(Length, ref package, ); //length
BytesWriter.Write(header, ref package, ); //header
if (body != null)
{
BytesWriter.Write(body, ref package, + RespHeader.Length); //body
} return package;
} public void Deserialize(ref byte[] data)
{
try
{
Length = BytesReader.ReadInt32(ref data, ); var header = BytesReader.ReadBuffer(ref data, , RespHeader.Length);
Header = new RespHeader();
Header.Deserialize(ref header);
var body = BytesReader.ReadBuffer(ref data, + RespHeader.Length, Length - RespHeader.Length);
var json = Encoding.UTF8.GetString(body);
Body = JsonConvert.DeserializeObject<TMessage>(json);
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("JsonConvert Deserialize. {0}", ex.Message);
}
}
}
public class ReqHeader : IPacket
{
public const int Length = ; /// <summary>
/// 包头标志,用于校验
/// </summary>
public byte Checkbit { get; set; } /// <summary>
/// 8个byte表示uid
/// </summary>
public long Uid { get; set; } /// <summary>
/// 8个byte表示是requestId
/// </summary>
public long RequestId { get; set; } /// <summary>
/// 1个bit表示是否加密
/// </summary>
public bool IsEncrypt { get; set; } /// <summary>
/// 2个byte表示commandId
/// </summary>
public short CommandId { get; set; } /// <summary>
/// 2个byte表示扩展位1的长度
/// </summary>
public short Ext1 { get; set; } /// <summary>
/// 2个byte表示扩展位2的长度
/// </summary>
public short Ext2 { get; set; } public byte[] Serialize()
{
Checkbit = Header.Checkbit;
var header = new byte[]; try
{
BytesWriter.Write(Checkbit, ref header, );
BytesWriter.Write(Uid, ref header, );
BytesWriter.Write(RequestId, ref header, );
BytesWriter.Write(IsEncrypt, ref header, );
BytesWriter.Write(CommandId, ref header, );
BytesWriter.Write(Ext1, ref header, );
BytesWriter.Write(Ext2, ref header, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Serialize Request Header Exception. {0}", ex.Message);
} return header;
} public void Deserialize(ref byte[] data)
{
try
{
Checkbit = BytesReader.ReadByte(ref data, );
Uid = BytesReader.ReadInt64(ref data, );
RequestId = BytesReader.ReadInt64(ref data, );
IsEncrypt = BytesReader.ReadBool(ref data, );
CommandId = BytesReader.ReadInt16(ref data, );
Ext1 = BytesReader.ReadInt16(ref data, );
Ext2 = BytesReader.ReadInt16(ref data, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Serialize Request Header Exception. {0}", ex.Message);
}
}
}
请求(Request)
public class RpcRequest<TMessage> : IPacket
where TMessage : class, IMessage
{
/// <summary>
/// 4个byte表示package长度
/// </summary>
public int Length { get; private set; } /// <summary>
/// package头24个字节
/// </summary>
public ReqHeader Header{ get; set; } /// <summary>
/// package内容
/// </summary>
public TMessage Body { get; set; } public byte[] Serialize()
{
var header = Header.Serialize();
Length += header.Length; byte[] body = null;
var json = JsonConvert.SerializeObject(Body);
if (json != null)
{
body = Encoding.UTF8.GetBytes(json);
Length += body.Length;
} var package = new byte[ + Length];
BytesWriter.Write(Length, ref package, ); //length
BytesWriter.Write(header, ref package, ); //header
if (body != null)
{
BytesWriter.Write(body, ref package, + ReqHeader.Length); //body
} return package;
} public void Deserialize(ref byte[] data)
{
try
{
Length = BytesReader.ReadInt32(ref data, ); var header = BytesReader.ReadBuffer(ref data, , ReqHeader.Length);
Header = new ReqHeader();
Header.Deserialize(ref header); var body = BytesReader.ReadBuffer(ref data, + ReqHeader.Length, Length - ReqHeader.Length);
var json = Encoding.UTF8.GetString(body);
//LogHepler.Log.DebugFormat("JsonConvert Deserialize. Id:[{0}] body:[{1}]", Header.RequestId, json);
Body = JsonConvert.DeserializeObject<TMessage>(json);
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("JsonConvert Deserialize. {0}", ex.Message);
}
}
}
public class RespHeader : IPacket
{
public const int Length = ; /// <summary>
/// 包头标志,用于校验
/// </summary>
public byte Checkbit { get; set; } /// <summary>
/// 8个字节,请求ID
/// </summary>
public long RequestId { get; set; } /// <summary>
/// 4个字节,返回结果状态码
/// </summary>
public int Code { get; set; } /// <summary>
/// 1个字节,是否加密
/// </summary>
public bool IsEncrypt { get; set; } /// <summary>
/// 4个字节,命令ID
/// </summary>
public short CommandId { get;set; } /// <summary>
/// 2个字节,扩展参数
/// </summary>
public short Ext1{get; set; } public byte[] Serialize()
{
Checkbit = Header.Checkbit;
var header = new byte[];
try
{
BytesWriter.Write(Checkbit, ref header, );
BytesWriter.Write(RequestId, ref header, );
BytesWriter.Write(Code, ref header, );
BytesWriter.Write(IsEncrypt, ref header, );
BytesWriter.Write(CommandId, ref header, );
BytesWriter.Write(Ext1, ref header, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Serialize Respone Header Exception. {0}", ex.Message);
} return header;
} public void Deserialize(ref byte[] data)
{
try
{
Checkbit = BytesReader.ReadByte(ref data, );
RequestId = BytesReader.ReadInt64(ref data, );
Code = BytesReader.ReadInt32(ref data, );
IsEncrypt = BytesReader.ReadBool(ref data, );
CommandId = BytesReader.ReadInt16(ref data, );
Ext1 = BytesReader.ReadInt16(ref data, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Deserialize Respone Header Exception. {0}", ex.Message);
}
}
}
以上基本是数据包的设计思路和代码设计的实现。后面会专门写博客专门讲解实战应用。

TCP/IP网络编程之数据包协议的更多相关文章
- TCP/IP网络编程之套接字类型与协议设置
套接字与协议 如果相隔很远的两人要进行通话,必须先决定对话方式.如果一方使用电话,另一方也必须使用电话,而不是书信.可以说,电话就是两人对话的协议.协议是对话中使用的通信规则,扩展到计算机领域可整理为 ...
- 浅谈TCP/IP网络编程中socket的行为
我认为,想要熟练掌握Linux下的TCP/IP网络编程,至少有三个层面的知识需要熟悉: 1. TCP/IP协议(如连接的建立和终止.重传和确认.滑动窗口和拥塞控制等等) 2. Socket I/O系统 ...
- TCP/IP网络编程系列之四(初级)
TCP/IP网络编程系列之四-基于TCP的服务端/客户端 理解TCP和UDP 根据数据传输方式的不同,基于网络协议的套接字一般分为TCP和UDP套接字.因为TCP套接字是面向连接的,因此又称为基于流的 ...
- TCP/IP网络编程之多播与广播
多播 多播方式的数据传输是基于UDP完成的,因此,与UDP服务端/客户端的实现非常接近.区别在于,UDP数据传输以单一目标进行,而多播数据同时传递到加入(注册)特定组的大量主机.换言之,采用多播方式时 ...
- TCP/IP网络编程之套接字的多种可选项
套接字可选项进而I/O缓冲大小 我们进行套接字编程时往往只关注数据通信,而忽略了套接字具有的不同特性.但是,理解这些特性并根据实际需要进行更改也十分重要.之前我们写的程序在创建好套接字后都是未经特别操 ...
- TCP/IP网络编程之基于TCP的服务端/客户端(二)
回声客户端问题 上一章TCP/IP网络编程之基于TCP的服务端/客户端(一)中,我们解释了回声客户端所存在的问题,那么单单是客户端的问题,服务端没有任何问题?是的,服务端没有问题,现在先让我们回顾下服 ...
- TCP/IP网络编程之基于TCP的服务端/客户端(一)
理解TCP和UDP 根据数据传输方式的不同,基于网络协议的套接字一般分为TCP套接字和UDP套接字.因为TCP套接字是面向连接的,因此又称为基于流(stream)的套接字.TCP是Transmissi ...
- 【TCP/IP网络编程】:09套接字的多种可选项
本篇文章主要介绍了套接字的几个常用配置选项,包括SO_SNDBUF & SO_RCVBUF.SO_REUSEADDR及TCP_NODELAY等. 套接字可选项和I/O缓冲大小 前文关于套接字的 ...
- UNIX环境高级编程——TCP/IP网络编程 常用网络信息检索函数
UNIX环境高级编程——TCP/IP网络编程 常用网络信息检索函数 gethostname() getppername() getsockname() gethostbyname() ...
随机推荐
- PHP debug_print_backtrace() 函数
定义和用法 debug_print_backtrace() 函数打印 backtrace. 该函数显示由 debug_print_backtrace() 函数代码生成的数据. 语法 debug_pri ...
- EF Code First数据库模型及属性约束
1.今日完成任务 数据库实体的创建 实体属性约束的添加 实体之间关系的添加 2.核心代码 EF模型 属性约束及实体之间的关系 使用FlutAPI对模型进行修正 3.遇到的问题及解决方案 最主要的是联合 ...
- 基于.NetCore3.1系列 —— 日志记录之日志配置揭秘
一.前言 在项目的开发维护阶段,有时候我们关注的问题不仅仅在于功能的实现,甚至需要关注系统发布上线后遇到的问题能否及时的查找并解决.所以我们需要有一个好的解决方案来及时的定位错误的根源并做出正确及时的 ...
- Java8的@sun.misc.Contended注解
@sun.misc.Contended 介绍 @sun.misc.Contended 是 Java 8 新增的一个注解,对某字段加上该注解则表示该字段会单独占用一个缓存行(Cache Line). 这 ...
- 回首Java——再回首JDK
如果你是刚要被Java军训的新兵,可有几时对环境搭建而不知所措?又如若你是驰骋Java战场多年的老将,可曾拿起陪伴你许久的82年的JDK回味一番?今天我们就来道一道JDK,重新来认识认识这个既熟悉又陌 ...
- 不使用spring-boot-starter-parent作为依赖parent
背景环境 在某些情况下由于某些原因,我们的项目不能使用spring-boot-starter-parent作为<parent>依赖,一定要有自己的<parent>,但同时还希望 ...
- 谁说Cat不能做链路跟踪的,给我站出来
背景 链路跟踪,我们有很多可选项.常见的有 zipkin,pinpoint,skywalking,jaeger 等. 基本上都是根据谷歌的<Dapper 大规模分布式系统的跟踪系统>这篇论 ...
- java数组输出的三种方式
第一种:foreach语句遍历输出 //通过foreach语句遍历输出数组 int nums[] = new int [4]; for (int num:nums) { System.out.prin ...
- “随手记”开发记录day02
今天完成了 向瑜- 布局: 1.修改日期(√) 2.选择分类(√) 3.输入金额(√) 赵常恒- 1.登录,注册页面布局(√) 刘志霄- 1.个人信息页面规划(√)
- Nginx一个server主机上80、433,http、https共存
如果一站点既要80 http访问,又要443https访问. 要让https和http并存,不能在配置文件中使用ssl on,配置listen 443 ssl; 实例 server { listen ...