应用层通讯协议开发浅析

Original:http://blog.csdn.net/phunxm/article/details/5086080

1．通讯协议的概念及其要素

在OSI开放互联参考模型中，对等实体（peer）之间数据单元在发送方逐层封装（encapsulation），在接收方的逐层解析（decapsulation）。发送方N层实体从N+1层实体获得的数据包称为服务数据单元（Service Data Unit，SDU）。N层实体只将其视为须要本实体提供服务的数据，将服务数据单元进行封装，使其成为一个对方可以理解的数据单元（Protocol Data Unit，PDU），封装过程其实是为SDU增长对等实体间约定的控制信息（Protocol Control Information，PCI）的过程。

为了保证网络的各个功能的相对独立性，以及便于实现和维护，一般将协议划分为多个子协议，而且让这些协议保持一种层次结构，子协议的集合一般称为协议簇（Protocol Family）。

网络协议的分层有利于将复杂的问题分解成多个简单的问题，从而分而治之。各层的协议由各层的实体（entity）实现，通讯双方对等层中完成相同协议功能的实体称为对等实体。对等实体按协议进行通讯，因此协议反映的是对等层的对等实体之间的一种横向关系，严格地说，协议是对等实体共同遵照的规则和约定的集合。

通讯协议精确地定义了双方通讯控制信息和解释信息：发送方能将特定信息（文本、图片、音频、视频）按协议封装成指定格式的数据包，最终以串行化比特流在网络上传输；接收方接收到数据包后，根据协议将比特流解析为本地化数据，从而获取对方发送过来的原始信息。

通讯协议包括三个要素：

（1）语法：规定了信息的结构和格式；

（2）语义：代表信息要表达的内容；

（3）同步：规则涉及双方的交互关系和事件顺序。

整个计算机网络的实现体现为协议的实现，TCP/IP协议是Internet互联网的核心协议。

 

2．通讯协议开发步骤

（1） 协议的开发主要包括协议设计、协议形式描述、协议实现和协议一致性测试。协议的开发过程与步骤如图1所示。

 

图1 协议开发过程与步骤

（2） 协议设计过程当中的分组发送接收模型如图2所示。

 

 

 

图2协议设计过程当中的分组发送接收模型

（3）协议的一致性测试

协议的一致性测试是指测试协议可否按照预想的控制策略实现正确的通讯，主要体如今数据包经过信道从信源传送到信宿后，信宿可以根据协议正确的解析出原始信息。

协议的一致性测试如图3所示。

 

图3 协议一致性测试环境

根据测试环境的能够分为局部测试和分布式测试，如图4所示。

 

图4局部测试法、分布式测试法

 

3．数据包和数据报

为方便描述自定义协议，仍是借用数据包和数据报来描述封装数据单元和传输数据单元，但这里的数据包和数据报彻底不一样于TCP/IP架构中的Packet和Datagram概念。

下文所述的数据包指封装的基本单位，以TLV（Type-Length-Value）格式封装基本消息单位；数据报Package是传输的基本单位，头部包含序列号和命令信息。接收端根据命令信息分辨事件类型，作出不一样的解析。报文实体是多个TLV数据包组成的链表。

4.数据包TLV的设计

从应用层HTTP协议，到超文本置标语言HTML（HyperText Mark-up Language），再到可扩展置标语言XML（Extensible Markup Language），它们提供了数据的格式化存储、传输和格式化显示的规范，是网络通讯的基石。然而HTTP协议以及HTML/XML置标语言的本质就是定义一堆标签（Tag）对数据进行串行化序列化，而后接收方再根据标签解析、还原数据。

自定义通讯协议的关键是对数据包的合理构造（construct）和正确解析（parse），即制定编解码规则。

抽象语法标记ASN（Abstract Syntax Notation） BER的长度肯定的编码方式，由3部分组成Identifier octets、Length octets和Contents octets，实际上这就是一种TLV（Type-Length-Value）模型：类型字段（Type或Tag）是关于标签和编码格式的信息；长度字段（Length）定义数值的长度； 内容字段（Value）表示实际的数值。

所以，一个编码值又称TLV三元组。编码能够是基本型或结构型，若是它表示一个简单类型的、完整的显式值，那么编码就是基本型（primitive）；若是它表示的值具备嵌套结构，那么编码就是结构型 （constructed）。

TLV编码就是指对Type（Tag）、Length和Value进行编码，造成比特流；解码是编码的逆过程，是从比特流缓冲区中解析还原出原始数据。

采用C++编程语言设计TLV协议类，其类视图如图5所示。

 

图5 CTLV类视图

目前只提供设置整形值（int型）的setValue_Int和设置字符串值（C_String型）的SetValue_Cstring两个接口。

TLV将数据封装成包的格式如表1所示。 

 

 

TLV包
头部		包实体
m_dwTag	m_nLen	m_pValue

 

 表1 TLV包格式

TLV的接口说明：

（1）值类型标签m_vtTag是内部辅助枚举变量，它根据构造TLV时传递的服务类型标签m_dwTag来肯定。

（2）TLV::m_nLen在为TLV设置具体值时肯定。

（3）TLV包的封装：

 

•  使用Tag参数建立一个TLV对象后，调用TLV::setValue_*方法为TLV填充具体值；
•  调用TLV::toBuffer方法打包到缓冲区streamBuffer。

 

（4）TLV包的解析：建立一个TLV对象后，调用TLV::fromBuffer方法从缓冲区streamBuffer解析出TLV。

（5）封装和解析涉及到本机字节顺序和网络字节顺序的转换问题。

（6）调用TLV::setValue_*方法填充TLV时，统一字节边界数为4。

 

5.数据报Package的设计

不一样于底层的数据包/数据报只是对数据层次的封装解析，实际应用程序是以事件驱动的，所以必须注册不一样的信令（事件类型标签），而后填充到数据报中。接收端根据信令作出相应的事件处理。

例如在C/S通讯系统中，客户端每每要先登陆，经过服务器端的校验才能进行后续通讯。所以客户端运行后，须要构造并向服务器端发送含有LOGIN信令的包含用户名字符串strUserName和密码字符串strPassWord的数据报；服务器端解析LOGIN信令后作校验处理，而后发送含有LOGIN_RESPONSE信令和校验结果的回执数据报给客户端。

采用C++编程语言设计Package类，其类视图如图6所示。

 

 

图6 CPackage类视图

Package类将TLV封装成包的格式如表2所示。

 

Package包
头部			序列号	包实体
m_nCmdLen	m_dwCmdID	m_dwCmdState	m_nSeqNo	Count*TLV

 

 

表2 Package包格式

Package的接口说明：

（1）Package::m_nCmdLen是整个Package包的长度，将其做为首个字段的好处在于当传送大数据包时，接收方能够根据数据长度来控制读状态，从而将一个大数据包分批接收。

（2）Package::m_nCmdLen在构造函数中初始化为16，在调用Package::addTLV方法填充包实体时增加。

（3）Package包的封装：

 

• 建立Package对象后，调用Package::setHeader方法填充头部信令；
• 建立TLV对象并填充数据，再调用Package::addTLV方法填充包实体；
• 调用Package::toBuffer方法将Package打包到缓冲区streamBuffer。

 

（4）Package包的解析：

 

• 先建立一个Package对象，调用Package::fromBuffer方法从缓冲区streamBuffer先解析出Package的头部和序列号，再从剩余缓冲区中解析出TLV并将其串行化到链表。
• 调用Package::getTLV方法根据Tag从链表中查找具体TLV包，再调用TLV::getValue方法取得具体值。

 

（5）Package::toBuffer方法和Package::fromBuffer方法主要遍历Package::m_TLV_List列表，而后调用TLV::toBuffer方法和TLV::fromBuffer方法解析出TLV数据单元。

TLV数据包的功能测试（主要是本地测试）

鉴于实际通讯数据最后都要转换成比特流，故只测试发送字符串类型的变量，仅测试协议可否正确打包、解析。其余类型的普通数据均可以转换成字符串传输，最后，接收方根据m_dwTag肯定值类型m_vtTag，解析出具体值。

对TLV::setValue_C_String方法填充TLV的测试，须要考虑字节对齐问题。对于长度为4字节倍数的C状态字符串，打包时省去末尾的‘/0’结束标志符。须要测试长度非4倍数的字符串和长度为4倍数的字符串。

经本地测试，调用TLV::setValue_Int方法和TLV::setValue_C_String方法构造整形和字符串时，可以正确封装、正确解析。

Package数据报的功能测试，主要是将TLV组合成包，而后添加信令，完成特定的通讯。对登录LOGIN和发送消息SUBMIT_SM的测试代表Package协议能正确封装、正确解析。

在实际项目中使用Package通讯协议，对于稍大一点的数据块须要控制好读的步骤，以便能接收整包完整的信息。

本文示例代码下载：《TLV应用层协议开发示例》

 

参考：

《计算机网络协议和实现技术》 鲁士文

《TLV 格式及编解码示例》

《XML和TLV打包解包性能比较》