boost的asio接收单路大数据量udp包的方法
开发windows客户端接收RTP视频流,当h264视频达到1080P 60fps的时候,按包来调用recvfrom的函数压力比较大,存在丢包的问题,windows的完成端口的性能效果当然可以解决这个问题,而boost的asio在windows上是基于完成端口来开发的,所以采用boost的asio和环形缓冲区的方法,可以解决接收单路大数据量udp包中丢包的问题。
需要引入的头文件为:
- #include "CircledBuffer.h"
- #include <iostream>
- #include <boost/asio.hpp>
- #include <boost/bind.hpp>
其中CircledBuffer.h是自定义的缓冲区的类,之后会有介绍,boost的两个文件是asio必需的两个文件。
需要定义的全局变量为:
- using boost::asio::ip::udp;
- boost::asio::io_service service;
- boost::asio::ip::udp::socket sock(service);
- boost::asio::ip::udp::endpoint sender_ep;
- CircledBuffer readBuffer;
- PacketBuffer* packet;
其中io_service是用来标示启动的,后面会调用run。sock和endpoint类似于描述符和sockaddr_in的关系。CircledBuffer和PacketBuffer*,是自定义缓冲区。
主函数为:
- int main(int argc, char* argv[]) {
- boost::asio::ip::udp::endpoint ep( boost::asio::ip::address::from_string("192.168.1.206"),
- 9002);
- sock.open(ep.protocol());
- sock.set_option(boost::asio::ip::udp::socket::reuse_address(true));
- boost::asio::socket_base::receive_buffer_size recv_option(8*65534);
- sock.set_option(recv_option);
- sock.bind(ep);
- packet = readBuffer.GetLast();
- sock.async_receive_from(boost::asio::buffer(packet->data, packet->bufferSize), sender_ep, &on_read);
- service.run();
- }
初始化ep和sock,其中udp接收的数量比较大的话,需要设定receive_buffer_size,然后bind,设置接受buffer为packet。
介绍一下async_receive_from函数,它有三个参数,分别为接收的buffer,远端的ep,注意与本端的ep不同,远端的ep不用初始化设置,再就是buffer收满后的回调函数。
回调函数的内容是:
- void on_read(const boost::system::error_code & err, std::size_t
- read_bytes) {
- std::cout << "read: " << read_bytes << std::endl;
- readBuffer.MoveNext();
- packet= readBuffer.GetLast();
- sock.async_receive_from(boost::asio::buffer(packet->data, packet->bufferSize), sender_ep, &on_read);
- }
与main函数的接收部分一致,这里用了不断的自身回调,来实现while recvfrom的功能。
补充说一句,用申请好的CircledBuffer,便于后期的多线程或者异步strand的处理,而不阻塞接收。
缓冲区类的代码:
头文件:
- #ifndef CIRCLED_BUFFER_H
- #define CIRCLED_BUFFER_H
- #include <memory.h>
- #include <boost/atomic.hpp>
- #define CIRCLED_BUFFER_SIZE 300
- #define BUFFER_SIZE 2000
- struct PacketBuffer
- {
- PacketBuffer(){bufferSize=BUFFER_SIZE;dataSize=0;}
- unsigned int bufferSize;
- unsigned int dataSize;
- char data[BUFFER_SIZE];
- PacketBuffer& operator=(PacketBuffer& other)
- {
- memcpy(data,other.data,other.dataSize);
- dataSize = other.dataSize;
- bufferSize = other.bufferSize;
- return *this;
- }
- };
- class CircledBuffer
- {
- public:
- CircledBuffer(unsigned int bufSize=CIRCLED_BUFFER_SIZE);
- public:
- ~CircledBuffer(void);
- PacketBuffer* GetAt(unsigned int idx){return &packets[idx];}
- PacketBuffer* GetLast()
- {
- return GetAt(writeIndex.load(boost::memory_order_consume));
- };
- void MoveNext()
- {
- unsigned int idx = writeIndex.load(boost::memory_order_relaxed);
- writeIndex.store((idx+1)%bufferSize,boost::memory_order_release);
- };
- unsigned int GetLastIndex(){return writeIndex.load(boost::memory_order_consume);};
- unsigned int GetSize(){return bufferSize;};
- protected:
- boost::atomic<unsigned int> writeIndex;
- unsigned int bufferSize;
- PacketBuffer* packets;
- };
- #endif
缓冲区类的构造函数与析构函数
- #include "CircledBuffer.h"
- CircledBuffer::CircledBuffer(unsigned int bufSize)
- :bufferSize(bufSize),
- writeIndex(0)
- {
- packets = new PacketBuffer[bufSize];
- }
- CircledBuffer::~CircledBuffer(void)
- {
- delete []packets;
- }
boost的asio接收单路大数据量udp包的方法的更多相关文章
- 大数据量下MySQL插入方法的性能比较
不管是日常业务数据处理中,还是数据库的导入导出,都可能遇到需要处理大量数据的插入.插入的方式和数据库引擎都会对插入速度造成影响,这篇文章旨在从理论和实践上对各种方法进行分析和比较,方便以后应用中插入方 ...
- (转)预估大数据量下UV的方法
在实际应用中,我们经常碰到这种情况,即要统计某个对象或者事件独立出现的次数.对于较小的数据量,这很容易解决,我们可以首先在内存中对序列进行排序,然后扫描有序序列统计独立元素数目.其中排序时间复杂度为O ...
- tomcat优化---大数据量提交tomcat时,tomcat无法接收导致页面无反应
关于tomcat的一个优化问题: 有时候保存大数据量的数据时.tomcat不优化的话,页面会没反应.tomcat后台并不报错,仅仅是提示以下内容: 警告: More than the maximum ...
- 大数据量冲击下Windows网卡异常分析定位
背景 mqtt的服务端ActiveMQ在windows上,多台PC机客户端不停地向MQ发送消息. 现象 观察MQ自己的日志data/activemq.log里显示,TCP链接皆异常断开.此时尝试从服务 ...
- 大数据量下,分页的解决办法,bubuko.com分享,快乐人生
大数据量,比如10万以上的数据,数据库在5G以上,单表5G以上等.大数据分页时需要考虑的问题更多. 比如信息表,单表数据100W以上. 分页如果在1秒以上,在页面上的体验将是很糟糕的. 优化思路: 1 ...
- MySQL大数据量快速分页实现(转载)
在mysql中如果是小数据量分页我们直接使用limit x,y即可,但是如果千万数据使用这样你无法正常使用分页功能了,那么大数据量要如何构造sql查询分页呢? 般刚开始学SQL语句的时候,会这 ...
- 【转载】大数据量传输时配置WCF的注意事项
WCF传输数据量的能力受到许多因素的制约,如果程序中出现因需要传输的数据量较大而导致调用WCF服务失败的问题,应注意以下配置: 1.MaxReceivedMessageSize:获取或设置配置了此绑定 ...
- mysql innobackupex xtrabackup 大数据量 备份 还原
大数据量备份与还原,始终是个难点.当MYSQL超10G,用mysqldump来导出就比较慢了.在这里推荐xtrabackup,这个工具比mysqldump要快很多. 一.Xtrabackup介绍 1, ...
- mysql innobackupex xtrabackup 大数据量 备份 还原(转)
原文:http://blog.51yip.com/mysql/1650.html 作者:海底苍鹰 大数据量备份与还原,始终是个难点.当MYSQL超10G,用mysqldump来导出就比较慢了.在这里推 ...
随机推荐
- JavaWeb Session
1. Session概述 1.1. 什么是Session Session一般译为会话,是解决Http协议的无状态问题的方案,可以将一次会话中的数据存储在服务器端的内存中,保证在下一次的会话中可以使用. ...
- MySQL备份账号权限
grant select,show view,lock tables,trigger on confluence.* to 'DBbackup'@'127.0.0.1' identified by ' ...
- Spring之rmi实例演示
环境介绍:本文中服务端客户端使用的都是ssm框架,配置文件分为spring_servlet.xml,spring_service.xml,mybatis.xml 在spring里面使用rmi完成远程调 ...
- spring boot 打包
打成jar直接运行比较简单,这里特别说明的是打成war包,部署在外部的tomcat方式: 1.修改启动代码 import org.springframework.boot.SpringApplicat ...
- springboot 配置过滤器
能配置例外 先写配置文件类 FilterConfig.java package com.ty.tyzxtj.config; import javax.servlet.Filter; import or ...
- POJ 2482 Stars in Your Window (线段树区间合并+扫描线)
这题开始一直被矩形框束缚了,想法一直都是枚举线,但是这样枚举都需要O(n^2)...但是看了别人的思路,感觉这题思想真心很好(PS:开头好浪漫的描述啊,可惜并没有什么用) 题意就是在平面上给你一些星 ...
- UOJ132 【NOI2015】小园丁与老司机
本文版权归ljh2000和博客园共有,欢迎转载,但须保留此声明,并给出原文链接,谢谢合作. 本文作者:ljh2000 作者博客:http://www.cnblogs.com/ljh2000-jump/ ...
- 初识Django---视图
MTV模型 一.Django的MTV分别代表: Model(模型):负责业务对象与数据库的对象 Template(模板):负责如何把页面展示给用户 View(视图 ...
- 解决:Python爬取https站点时SNIMissingWarning和InsecurePlatformWarning
今天想利用Requests库爬取糗事百科站点,写了一个请求,却报错了: 后来参考kinsomy的博客,在cmd中pip install pyopenssl ndg-httpsclient pyasn1 ...
- 使用Intellij Idea打开项目不能显示树形目录
按下列步骤操作:1. 关闭IDEA, 2.然后删除项目文件夹下的.idea文件夹3.重新用IDEA工具打开项目 Open...