手机Android音视频採集与直播推送，实现单兵、移动监控类应用

最新手机採集推送直播监控以及EasyDarwin开源流媒体平台的版本号及代码：

• EasyDarwin 开源流媒体云平台：https://github.com/easydarwin
• EasyClient 开源流媒体平台client：http://fir.im/EasyClient
• EasyCamera 安卓手机单兵监控端：http://fir.im/EasyCamera

恰逢2014 Google I/O大会，不难看出安卓在Google的推进以及本身的开放性作用下，已经快延生到生活的各个方面了，从安卓智能手机、平板，到可穿戴的Android Ware、眼镜、手表、再到Android汽车、智能家居、电视。甚至近期看新闻，日本出的几款机器人都是Android系统的。再把目光放回监控行业。传统监控中的移动终端设备，比如：单兵设备、手持设备、车载终端设备，包含家庭监控中用到的智能设备，都能够用Android系统替代了，不仅开发容易，并且易扩展，设备也更加智能了。

图 - Android在手持设备中的应用

一步一步来，我们先实现Android手机的音视频採集与上传的实时监控功能。Google Code上有一个开源项目：spydroid-ipcamera，spydroid能在Android手机中建立一个精简的HTTP Server和RTSP Server，功能相似于一般的IpCamera，既能够通过网页訪问摄像机并改动监控配置，还能通过http或者rtsp协议，获取监控的实时音视频，并且从其代码结构中。能够看出。spydroid已经实现了RTSPServer、RTSPClient、RTP、RTCP、H264、AAC...等等功能，总之，咱们须要的Utility都已经具备了。仅仅要将这些功能组合到一块就能实现咱们要的直播需求了。

图 - Android实现IPCamera的功能

在之前的博客“基于Darwin实现的分布式流媒体直播server系统”中。我们用Windows的摄像头和麦克风分别採集音视频数据，编码成H264和AAC。再用RTP打包。推送到Darwin流媒体server，实现直播。相同，我们參考EasyIpCamera的设计方法，App启动后，连接并保活至中心管理server，接收来自CMS的控制命令。

採集安卓摄像头视频和mic声音，进行H264和AAC编码（这里我们仅仅參考spydroid实现了硬编码。软编码在兴许中将会更新进来。只是经过尝试，眼下大部分Android音视频採集都支持硬编码），再通过RTSP和RTP，将实时音视频数据推送到流媒体server，并由流媒体server进行转发和分发，实现直播。

图 - Android接入EasyDSS

这里主要就是RTSP/RTP的推送过程。这个在之前的博客“基于DSS的先侦听后推送式流媒体转发”中详细描写叙述了这个过程，详细的推送代码也能够參考live555的DarwinInjector类实现，咱们这里直接改动spydroid中的RTSPClient就能够实现ANNOUNCE/SETUP/PLAY/RTP过程了，详细流程源码及协议流程也能够參考“用Darwin和live555实现的直播框架”中的描写叙述。

Android採集端下载：http://pan.baidu.com/s/1kTwrasB   EasyDSS(Win)server下载：http://pan.baidu.com/s/1ntoFSSh  EasyDSS(Linux)server下载：http://pan.baidu.com/s/1c0b6bUo

用法与博客“基于Darwin实现的分布式流媒体直播server系统”中EasyIpCamera的方法一致，仅仅须要配置EasyDSSserverCMS的地址和port号，就能够接入到EasyDSS。兴许全部流程与EasyIpCamera相似，仅仅有当有client请求实时视频的时候才会推送音视频流，其它情况仅仅与CMS连接保活，流媒体处于Idle状态。

watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQveGllamlhc2h1/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/SouthEast" alt="" width="360" height="600" />

图 - Android採集端配置界面

实时效果：经过測试对吧，延时性与网络和手机的相关性非常大。不同网络条件，不同手机硬件，可能对照出的延时效果不一样，用三星Glaxy3手机。在网络情况比較好的情况下，实时音视频的延时大概在1.3s（公网传输）左右：

watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQveGllamlhc2h1/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/SouthEast" width="600" height="255" alt="" />

图 - 连续測试2'52'，延时1.35s

watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQveGllamlhc2h1/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/SouthEast" width="600" height="280" alt="" />

图 - 连续測试9'17''。延时1.58s

      未来还会继续扩展和优化Android实时音视频採集程序，包含增加录像、抓图、软编码、对讲、抖动控制、录像上传等等方面，欢迎大家共同交流和进步！

------------------------------------------------------------

本文转自www.easydarwin.org，很多其它开源流媒体解决方式。请关注我们的微信：EasyDarwin