手把手教你搭建音视频通信系统——Android版本

前两天,图鸭君给大家介绍了如何在iOS端搭建音视频通信系统,今天我就给大家介绍一下如何搭建一个完整的Android音视频通信系统。

一、准备:

首先在图鸭官网:http://tucodec.com 进行注册,获得SDK中所需要的AppKey、AppSecret,注册登录后如下图所示:

图1 注册后获取AppKey、AppSecret

其次到开发者里选择下载android中所需SDK。

图2 SDK下载展示

最后解压,如下图所示:

图3 SDK解压后内容

voip_android_demo1.0是用于演示的demo,图鸭君也将要按照这个demo以及SDK开发文档进行讲解,打开resource资源文件,如图4所示:


图4 resource文件夹内容

将voip_android.aar提取出来导入到工程,里面包含了提供相关操作的java类以及so库,配置相关的环境。

导入”voip_android.aar”文件(如图5)

在“libs”文件夹下添加aar包,在build文件夹下添加:

repositories {

    flatDir {

        dirs 'libs'

    }

}

在dependencies下添加:

compile(name: 'voip_android', ext: 'aar')

配置其他三方库(如图5)

在gradle文件里面的dependencies 下添加下面三方库:

api "com.alibaba:fastjson:1.1.63.android"加入权限AndroidManifest.xml加入以下权限:


图5 gradle文件内容

完成上述操作后,我们的音视频通讯App所需的大体框架已经完成啦,之后就是码代码,完成系统UI界面绘制和用户之间通讯的逻辑操作。

在图鸭科技提供的SDK中,我们可以看到只需要调用三个类进行操作,可见快速集成音视频通信并不是那么复杂。如图6所示:

图6  SDK中操作类

二、操作类定义:

1、TYVoipAndroid:提供所有Voip相关方法

2、TYVoipVideoCapture:摄像头管理类

3、TYVoipVideoRender:Voip客户端视频渲染视图.,渲染在此视图上进行

了解上述主要接口文件及其定义后,我们来了解SDK中的通信原理:SDK中,所有用户都以通讯节点的形式存在,作为节点的用户都拥有自己唯一的表示—— UserID ,整个SDK会根据每个用户的UserID来进行通讯。

例如,甲和乙之间进行通讯,假设甲的UserID为401,乙的UserID为402,甲登录后向乙发送我要和你开视频,乙登录后向甲发送我要和你开视频,甲开始渲染乙的视图,乙开始渲染甲的视图 。完成上述所有操作后,甲乙建立通讯。

三、完整的SDK使用步骤简介:

<1>初始化TYVoipAndroid、TYVoipVideoCapture类:

mTYVoipAndroid = new TYVoipAndroid(new Handler(), Context,null);

mVideoCapture = TYVoipVideoCapture(mTYVoipAndroid ,                                          TYVoipVideoCapture.CaptureParam(mTYVoipAndroid.config.videoWidth,  

                             mTYVoipAndroid.config.videoHeight));


<2>登录转发服务器(建议写成单例,一次登录,多次调用):

loginRelayServer(String ip, short port, int userId, int sessionId, int AppKey, int AppSecret);


<3>开启相机,注册音视频回调,初始化Voip客户端,开启传输

mVideoCapture.start(false, mTYVoipAndroid.config, mMainRender.parent    as   ViewGroup);

mTYVoipAndroid.registerVideoCallback(mVideoCallback);

mTYVoipAndroid.registerAudioCallback(mAudioCallback);

mTYVoipAndroid.initVoip(mVideoCapture);

mTYVoipAndroid.startVoip(int videoBitRate, int audioBitRate, int userId);


<4>根据逻辑,添加(删除)需要通话的节点:

mTYVoipAndroid.addClientNode(int userId);

//mTYVoipAndroid.removeClientNode(int userId);


<5>不需要通话时,停止voip:

mTYVoipAndroid.stopCall()

//清空现有的连接节点(不再接收节点的数据)

mTYVoipAndroid.clearClientNodeList();

<6>根据具体的业务逻辑重复步骤3、4、5


<7>在程序结束时销毁voip

mTYVoipAndroid.release()

四、部分代码解释:(从用户甲的实现代码来解释)

private TYVoipVideoRender preView;    //渲染甲的视图

private TYVoipVideoRender otherView;  //渲染乙的视图

<1>登录操作:

  甲(UserID:401)登录操作,返回值为是否登录成功(非0即为成功):

/**

*连接转发服务器

*@param ip @param 端口号@param userId @param sessionId

*@param AppKey @param AppSecret @return !0即为成功

*/

mTYVoipAndroid.loginRelayServer(ip, port, 401, sessionId, AppKey,  AppSecret);


<2>连接操作

甲连接乙操作:

...一系列操作/

//甲自己加入到通讯中

mTYVoipAndroid.startVoip(512, 16000, 401);

//添加节点(添加乙的USerID)

mTYVoipAndroid.addClientNode(402);

//在videoCallBack上进行视图渲染

private TYVoipAndroid.VideoCallback mVideoCallback = new TYVoipAndroid.VideoCallback() {

    @Override

    public void renderVoipVideoData(VoipImage voipImage) {

        if (voipImage.isLocal){

        //本地视频渲染(甲的数据流)

        preView.pushVideoFrame(voipImage);

        }else {

//非本地视频渲染(乙的数据流)

          otherView.pushVideoFrame(voipImage);

        }

    }

};

//在audioCallBack回调方法目前还未用到,忽视此回调


<3>断开操作

甲进行断开通信操作

//停止相机视频捕捉

mVideoCapture.stop()

//清空现有的连接节点(不再接收节点的数据)

mTYVoipAndroid.clearClientNodeList();

//结束Voip通话

mTYVoipAndroid.stopCall()

//释放资源

mTYVoipAndroid.release()

项目中最重要的代码介绍完啦,那测试一下,看看我们的成果吧。


图7 测试效果图

达到上图所示结果,一套完整的android音视频通信系统就完成了。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,718评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,683评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,207评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,755评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,862评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,050评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,136评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,882评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,330评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,651评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,789评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,477评论 4 333
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,135评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,864评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,099评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,598评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,697评论 2 351

推荐阅读更多精彩内容