【通信框架】Google的开源通信框架protobuf概述
在阅读的过程中有不论什么问题,欢迎一起交流
QQ:1494713801
一、作用
protobuf(Protocol Buffers)是Google内部使用的一个项目,后来贡献给开源社区为大家使用。它要做的事情和xml类似。就是要把某种数据结构的信息有某种格式保存起来,主要用于数据存储、传输协议格式等场合。
二、长处
和xml有着类似的功能。那么肯定有一些更加优势的地方。
1、时间开销
xml格式化(序列化)的开销还能够,可是xml解析(反序列化)的开销较大。相比protobuf的时间开销要小一些;
2、空间开销
为了提高可读性xml中引入了一些冗余的文本信息,空间开销加大。相比protobuf的空间开销要小一些;
3、开发调用简单
仅仅需使用message定义消息结构。在发送方使用set方法发送消息,在接收方使用调用方法接收消息就可以。
省去了xml配置、编译和解析的过程。
比方:
有个电子商务的系统(如果用C++实现),当中的模块A须要发送大量的订单信息给模块B,通讯的方式使用socket。
如果订单包含例如以下属性:
--------------------------------
时间:time(用整数表示)
客户id:userid(用整数表示)
交易金额:price(用浮点数表示)
交易的描写叙述:desc(用字符串表示)
--------------------------------
假设使用protobuf实现。首先要写一个proto文件(最好还是叫Order.proto),在该文件里加入一个名为"Order"的message结构。用来描写叙述通讯协议中的结构化数据。该文件的内容大致例如以下:
--------------------------------
message Order
{
required int32 time = 1;
required int32 userid = 2;
required float price = 3;
optional string desc = 4;
}
--------------------------------
然后,使用protobuf内置的编译器编译 该proto。因为本样例的模块是C++。你能够通过protobuf编译器的命令行參数(看“这里
”),指定它生成C++语言的“订单包装类”。
(一般来说,一个message结构会生成一个包装类)
然后你使用类似以下的代码来序列化/解析该订单包装类:
--------------------------------
// 发送方
Order order;
order.set_time(XXXX);
order.set_userid(123);
order.set_price(100.0f);
order.set_desc("a test order");
string sOrder;
order.SerailzeToString(&sOrder);
// 然后调用某种socket的通讯库把序列化之后的字符串发送出去
// ......
--------------------------------
// 接收方
string sOrder;
// 先通过网络通讯库接收到数据。存放到某字符串sOrder
// ......
Order order;
if(order.ParseFromString(sOrder)) // 解析该字符串
{
cout << "userid:" << order.userid() << endl
<< "desc:" << order.desc() << endl;
}
else
{
cerr << "parse error!" << endl;
}
--------------------------------
4、代码灵活,减少模块间的耦合性
A和B两个模块相互通信。当当中一个模块或消息格式发生改变时,仅仅需修改一点代码就可以。
5、支持多种编程语言
Google公布的源代码中包含C++、Java、Python三种语言。如今能够支持ActionScript、C#、Lisp、Erlang、Perl、PHP、Ruby等。并且Protobuf支持通信的两方使用不同的语言开发。
三、缺点
1、代码可读性差
Protobuf使用二进制格式进行编码,假设通信两方有一方出现了问题,二进制的消息非常难被读懂,非常难对错误定位。
尽管Protobuf提供了TextFormat工具类,可是也不能彻底解决这个问题。未解决这个问题能够直接抓包并dump成log以定位错误。
2、缺乏自描写叙述
没有自描写叙述信息,二进制的格式非常难被看懂,需配合Proto文件。
四、Protobuf的使用及实例
1 下载安装
(1)下载
须要两个包。protobuf-2.5.0.tar.gz,protoc-2.5.0-win32.zip。
本来能够到https://code.google.com/p/protobuf/downloads/list下载。只是被墙了。
能够移步到这里下载:http://download.csdn.net/detail/erli11/7408633
下载同样版本号供java使用的protobuf-java-2.5.0.jar:
http://repo1.maven.org/maven2/com/google/protobuf/protobuf-java/2.5.0/protobuf-java-2.5.0.jar
2demo展示
(1)创建proto文件
在protoc-2.5.0-win32文件夹(包括protoc.ext可运行文件),创建msg.proto
- package discover;
- option java_package = "com.sg.discover";
- option java_outer_classname = "SocialRecommend";
- message RecommendInfo {
- optional string hid = 1;
- optional string tags = 2;
- repeated TopicInfo topicList = 3;
- }
- message TopicInfo {
- optional string name = 1;
- optional string type = 2;
- repeated string entities = 3;
- repeated string tags = 4;
- }
(2)使用例如以下命令编译proto文件。生成相应Java代码
注:编译成功无消息输出。会产生文件。
./ 与 msg.proto中间有空格
(3)序列化
- private SocialRecommend.RecommendInfo transRecommendInfoToPB(RecommendBean recommendInfo) {
- SocialRecommend.RecommendInfo.Builder builder =
- SocialRecommend.RecommendInfo.newBuilder();
- builder.setHid(recommendInfo.hid);
- builder.setTags(recommendInfo.tags);
- for(int i = 0; i< recommendInfo.topicList.size(); i++){
- TopicInfo topicInfo = recommendInfo.topicList.get(i);
- SocialRecommend.TopicInfo kvTopic = trasnTopicInfoToPB(topicInfo);
- builder.addTopicList(kvTopic);
- }
- return builder.build();
- }
- byte[] pbByteArray = pb.toByteArray();
(4)反序列化
- SocialRecommend.RecommendInfo msg = SocialRecommend.RecommendInfo.parseFrom(pbByteArray);
- System.out.println(msg);
參考http://blog.csdn.net/program_think/article/details/4229773
【通信框架】Google的开源通信框架protobuf概述的更多相关文章
- C++测试利器--google test开源测试框架
资料 偶然发现了google的测试框架gtest,马上试了下,效果挺不错,特别是对于写c++的人来说,方便很多.以前自己写c++的模块,通常是写好了模块后再另外定义些函数,然后在函数里面写测试用例来测 ...
- [转]玩转Google开源C++单元测试框架Google Test系列
gtest的官方网站是: http://code.google.com/p/googletest/ 从官方的使用文档里,你几乎可以获得你想要的所有东西 http://code.google.com/p ...
- 转:玩转Google开源C++单元测试框架Google Test系列
转自http://www.cnblogs.com/coderzh/archive/2009/04/06/1426755.html 前段时间学习和了解了下Google的开源C++单元测试框架Google ...
- 玩转Google开源C++单元测试框架Google Test系列(转载)
越来越多公司采用敏捷开发,单元和回归测试越来越重要,GTest作为最佳C++单元测试工具越来越多的被使用.转自 http://www.cnblogs.com/coderzh/archive/2009/ ...
- Google的开源C++单元测试框架Google Test
玩转Google开源C++单元测试框架Google Test系列(gtest)(总) 前段时间学习和了解了下Google的开源C++单元测试框架Google Test,简称gtest,非常的不错. 我 ...
- 玩转Google开源C++单元测试框架Google Test系列(gtest)(转)
转自:http://www.cnblogs.com/coderzh/archive/2009/04/06/1426755.html 前段时间学习和了解了下Google的开源C++单元测试框架Googl ...
- Google开源C++单元测试框架Google Test
1.玩转Google开源C++单元测试框架Google Test系列(gtest)之一 - 初识gtest 2.玩转Google开源C++单元测试框架Google Test系列(gtest)之二 - ...
- 玩转Google开源C++单元测试框架Google Test系列(gtest)(总)
原文地址:http://www.cnblogs.com/coderzh/archive/2009/04/06/1426755.html 前段时间学习和了解了下Google的开源C++单元测试框架Goo ...
- [转]玩转Google开源C++单元测试框架Google Test系列(gtest)(总)
文章转载自CoderZh的技术博客 地址:https://www.cnblogs.com/coderzh/archive/2009/04/06/1426755.html 前段时间学习和了解了下Goog ...
随机推荐
- 【【henuacm2016级暑期训练】动态规划专题 H】Greenhouse Effect
[链接] 我是链接,点我呀:) [题意] 在这里输入题意 [题解] 原题意等价于:给你一个序列(实数的位置没用!)..你可以改变其中某些元素的位置(插入到某些位置中间. 然后让他变成有序的. (有序的 ...
- 2015 Multi-University Training Contest 3 hdu 5318 The Goddess Of The Moon
The Goddess Of The Moon Time Limit: 6000/3000 MS (Java/Others) Memory Limit: 65536/65536 K (Java/ ...
- c/c++常见试题
- 本书已出版<拨云见日:基于android的内核与系统架构源代码分析 >
已陆续倒到各大电商站点及新华书店 http://item.jd.com/11594135.html http://product.china-pub.com/4472138 http://www.am ...
- 关于 折半查找 while 条件 < , <=
int bin_search(int a[],int len,int key) { int low=0; int high=len-1; while(low<=high) //若为low< ...
- [JZOJ 5908] [NOIP2018模拟10.16] 开荒(kaihuang)解题报告 (树状数组+思维)
题目链接: https://jzoj.net/senior/#contest/show/2529/1 题目: 题目背景:尊者神高达作为一个萌新,在升级路上死亡无数次后被一只大黄叽带回了师门.他加入师门 ...
- BZOJ 3165 李超线段树
思路: 李超线段树 我是把线段转成斜率的形式搞得 不知道有没有更简单的方法 //By SiriusRen #include <cmath> #include <cstdio> ...
- SPSS学习小记
2013年1月8日 最近一直在SPSS中处理数据,涉及到函数部分,不是太懂,特记录于此,以便翻阅. SPSS判断字符变量中是否含有某字符串的表示方式: (INDEX(url,'ad')>0 ...
- 10 quick tips for Redis
Redis is hot in the tech community right now. It's come a long way from being a small personal proje ...
- 【原创】关于JMS[1]
面向消息中间件(MOM)为分布式系统提供异步,解耦,稳定,可扩展和安全的行为.MOM在分布式计算领域是一个重要的概念.它允许应用使用代理器API在分布式环境实现各种功能.Java消息服务(Java M ...