Android直播系统的实现，直播APP开发Android端推流及播放

想实现一个Android的直播系统&＃xff0c;但是对于这方面的资料都比较零碎&＃xff0c;一开始是打算用ffmpeg来实现编码推流&＃xff0c;在搜集资料期间&＃xff0c;找到了几个强大的开源库&＃xff0c;直接避免了jni的代码&＃xff0c;集成后只用少量的java代码就可实现编码、推流和取流播放&＃xff0c;整理了一下做了一个demo&＃xff0c;在这里记录一下

效果图&＃xff1a;

编码和推流&＃xff0c;有两个方案选择&＃xff1a;

一&＃xff1a;
使用javacv来实现&＃xff0c;最终也是用过ffmpeg来进行编码和推流&＃xff0c;javacv实现到可以直接接收摄像头的帧数据
需要自己实现的代码只是打开摄像头&＃xff0c;写一个SurfaceView进行预览&＃xff0c;然后实现PreviewCallback将摄像头每一帧的数据交给javacv即可
javacv地址&＃xff1a;https://github.com/bytedeco/javacv
demo地址&＃xff1a;https://github.com/beautifulSoup/RtmpRecoder/tree/master

二&＃xff1a;
使用Android自带的编码工具&＃xff0c;可实现硬编码&＃xff0c;这里有一个国内大神开源的封装很完善的的库yasea&＃xff0c;第一种方法需要实现的Camera采集部分也一起封装好了&＃xff0c;进行一些简单配置就可以实现编码推流&＃xff0c;并且yasea目前已经直接支持摄像头的热切换&＃xff0c;和各种滤镜效果
yasea地址&＃xff08;内置demo&＃xff09;&＃xff1a;https://github.com/begeekmyfriend/yasea

服务器

流媒体服务器我用的是srs&＃xff0c;项目地址&＃xff1a;https://github.com/ossrs/srs
关于srs的编译、配置、部署、在官方wiki中已经写的很详细了&＃xff0c;并且srs同样是国内开发人员开源的项目&＃xff0c;有全中文的文档&＃xff0c;看起来很方便
这里有最基本的简单编译部署过程 Android直播实现&＃xff08;二&＃xff09;srs流媒体服务器部署

播放器

android端的播放使用vitamio&＃xff0c;还是国内的开源播放器&＃xff0c;是不是感觉国内的前辈们越来越屌了^~!
vitamio支持几乎所有常见的的视频格式和流媒体协议
vitamio地址&＃xff08;内置demo&＃xff09;&＃xff1a;https://github.com/yixia/VitamioBundle

这里使用的是yaesa库&＃xff0c;先介绍一下直播实现的流程&＃xff1a;
一&＃xff1a;使用yaesa进行摄像头采集、编码然后向srs服务器rtmp推流
二&＃xff1a;部署srs流媒体服务器
三&＃xff1a;使用vitamio取流播放

编码和推流已经整合在一起&＃xff0c;demo地址&＃xff1a;https://github.com/SiKang123/LiveTest

yaesa推流&＃xff1a;
首先 clone yesa源码&＃xff0c;导入library库

//布局文件中实现<net.ossrs.yasea.SrsCameraViewandroid:id&＃61;"&＃64;&＃43;id/glsurfaceview_camera"android:layout_width&＃61;"match_parent"android:layout_height&＃61;"match_parent"/>

//java代码 需要实现接口 implements SrsEncodeHandler.SrsEncodeListener, RtmpHandler.RtmpListener, SrsRecordHandler.SrsRecordListenerSrsCameraView cameraView &＃61; (SrsCameraView) findViewById(R.id.glsurfaceview_camera)mPublisher &＃61; new SrsPublisher(cameraView);//编码状态回调mPublisher.setEncodeHandler(new SrsEncodeHandler(this));mPublisher.setRecordHandler(new SrsRecordHandler(this));//rtmp推流状态回调mPublisher.setRtmpHandler(new RtmpHandler(this));//预览分辨率mPublisher.setPreviewResolution(1280, 720);//推流分辨率mPublisher.setOutputResolution(720, 1280);//传输率mPublisher.setVideoHDMode();//开启美颜&＃xff08;其他滤镜效果在MagicFilterType中查看&＃xff09;mPublisher.switchCameraFilter(MagicFilterType.BEAUTY);//打开摄像头&＃xff0c;开始预览&＃xff08;未推流&＃xff09;mPublisher.startCamera();//mPublisher.switchToSoftEncoder();//选择软编码mPublisher.switchToHardEncoder();//选择硬编码//开始推流 rtmpUrl&＃xff08;ip换成服务器的部署ip&＃xff09;&＃xff1a;"rtmp://192.168.31.126/android/teststream"mPublisher.startPublish(rtmpUrl);


关键代码就这么几句&＃xff08;状态回调有很多这里就不贴了&＃xff0c;可以看demo&＃xff09;&＃xff0c;剩下的交给yasea&＃xff0c;编码推流就搞定了&＃xff0c;是不是简单到怀疑人生&＃xff1f;

vitamio取流播放
首先还是clone vitamio的源码&＃xff0c;导入vitamio库

/首先不要忘了在Manifest里注册InitActivity/

<activityandroid:name&＃61;"io.vov.vitamio.activity.InitActivity"android:configChanges&＃61;"orientation|screenSize|smallestScreenSize|keyboard|keyboardHidden|navigation"android:launchMode&＃61;"singleTop"android:theme&＃61;"&＃64;android:style/Theme.NoTitleBar"android:windowSoftInputMode&＃61;"stateAlwaysHidden" />/*布局文件*/
<io.vov.vitamio.widget.VideoViewandroid:id&＃61;"&＃64;&＃43;id/surface_view"android:layout_width&＃61;"wrap_content"android:layout_height&＃61;"wrap_content" />

/*java代码*//*onCreate中,用于检查vitamioLibs库是否准备完成*如果Manifest中没有初始化InitActivity&＃xff0c;这里会返回false&＃xff0c;并自动初始化InitActivity*/if (!LibsChecker.checkVitamioLibs(this))return;VideoView mVideoView&＃61;(VideoView) findViewById(R.id.surface_view);/*会有几秒延时*/mVideoView.setVideoPath(rtmpUrl);


然后就可以开始愉快的播放rtmp流了&＃xff0c;是不是简单到令人发指&＃xff1f;

关键代码就这么多&＃xff0c;具体代码可以看看demo&＃xff1a;https://github.com/SiKang123/LiveTest
移动端的编码、推流、和播放就到这&＃xff0c;后面会介绍一下srs的部署

srs流媒体服务器部署

前面介绍了Android端的编码、推流和播放
Android直播实现&＃xff08;一&＃xff09;Android端推流、播放

但是作为android程序员&＃xff0c;写好了推流器和播放器&＃xff0c;没有服务器来测试还是很头疼的&＃xff0c;这里就介绍一下srs服务器的最简单的部署&＃xff0c;如果有兴趣深入研究的可以去看看官方的wiki&＃xff0c;因为是国内开发人员开源的&＃xff0c;提供中文文档&＃xff0c;讲解的很详细 https://github.com/ossrs/srs/wiki/v3_CN_Home

编译&＃xff1a;
官方推荐在CentOs 6.x 和 Ubuntu12.x下编译&＃xff0c;为了避免不必要的麻烦&＃xff0c;我直接在Ububtu 12.04.5上进行编译和部署的

首先clone srs源码

git clone https://github.com/ossrs/srs
cd srs/trunk


然后进行编译

./configure --rtmp-hls --with-http-api --with-ffmpeg && make
//--rtmp-hls&＃xff1a;开启ssl/hls&＃xff0c;其他功能都处于关闭状态。
//--with-http-api&＃xff1a;开启http api接口。
//--with-ffmpeg&＃xff1a;开启FFMPEG

这里只编译了基础功能&＃xff0c;更详细的配置可以看&＃xff1a;https://github.com/ossrs/srs/wiki/v1_CN_Build

编译完之后启动就可以了

//启动时也可以自定义去配置&＃xff0c;制定一个conf文件就可以了&＃xff0c;这里用现成的rtmp.conf来启动
./objs/srs -c conf/rtmp.conf


如果没报错&＃xff0c;这个时候服务器就已经启动了&＃xff0c;把Android推流和播放端的ip地址&＃xff0c;改成srs部署的ip就可以实现直播了&＃xff08;注意&＃xff1a;如果是用虚拟机&＃xff0c;要把网络模式换位桥接模式&＃xff0c;让虚拟机拥有独立的ip&＃xff0c;否则主系统可以访问到srs&＃xff0c;但局域网内的手机是访问不到的&＃xff09;

为了测试srs是否已经成功启动&＃xff0c;可以先用ffmpeg 对一个本地视频文件进行推流&＃xff0c;srs的/doc/下有测试的flv文件&＃xff0c;直接用ffmpeg进行推流

//ip地址换成自己部署的ip
sudo ./objs/ffmpeg/bin/ffmpeg -re -i ./doc/source.200kbps.768x320.flv \-vcodec copy \-f flv -y rtmp://192.168.31.126/srstest/teststream

不出意外的话在终端中就应该开始一帧一帧的推流了&＃xff1a;

这样就推流成功了&＃xff0c;然后用srs的在线播放器试一下能否观看
http://winlinvip.github.io/srs.release/trunk/research/players/srs_player.html

服务器启动以后&＃xff0c;把Android推流和播放端的ip改为服务器的部署ip&＃xff0c;就可以开始直播了

如果没有成功&＃xff0c;可以利用srs在线播放器来帮助测试&＃xff1a;
1.测试推流可以在Android上向服务器推流&＃xff0c;用srs在线播放&＃xff0c;播放成功推流就没问题了
2.测试播放可以像上边一样&＃xff0c;先用ffmpeg推流一个视频文件&＃xff0c;在Android端播放