AI 助理
备案控制台
开发者社区 开发与运维 文章 正文

Android平台一对一音视频通话方案对比：WebRTC VS RTMP VS RTSP

2023-08-08 383
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： Android平台一对一音视频通话方案对比：WebRTC VS RTMP VS RTSP

一对一音视频通话使用场景

一对一音视频通话都需要稳定、清晰和流畅，以确保良好的用户体验，常用的使用场景如下：

  1. 社交应用：社交应用是一种常见的使用场景，用户可以通过音视频通话进行面对面的交流；
  2. 在线教育：老师和学生可以通过音视频通话功能进行实时互动，提高教学效率；
  3. 远程协助：在某些工作场景下，比如应急指挥项目，需要通过音视频通话功能进行远程协助，进行技术支持、维修服务等；
  4. 视频会议：一对一的音视频通话是视频会议非常重要的一部分，用于两个参会者之间的沟通，当然也可以合流输出；
  5. 语音通话：使用语音通话，如在行车过程中，此时语音通话就是一个很好的选择。

一对一音视频通话技术方案

WebRTC方案

在Android平台上实现一对一音视频通话，你可以使用WebRTC，WebRTC提供了实时音视频通话的功能。以下是一个简单的步骤说明如何实现：

  1. 设置环境：首先，你需要在你的开发环境中安装Android Studio，并且配置好必要的SDK；
  2. 添加依赖：在你的项目中，你需要添加WebRTC的库。在你的build.gradle文件中添加如下依赖；
  3. 实现音视频捕获：你需要实现音视频的捕获。在Java中，你可以使用AudioRecord和VideoCapturer类来实现；
  4. 创建PeerConnection：创建PeerConnection对象，这个对象会用于音视频的编解码和网络传输；
  5. 显示本地音视频流：使用MediaStream.VideoTrack和MediaStream.AudioTrack将捕获的音视频流添加到PeerConnection中，然后通过VideoRenderer和AudioRenderer显示出来；
  6. 创建并发送offer：创建并发送一个offer，这个offer包含了你的音视频通道信息以及你愿意接受的连接参数；
  7. 接收并解析offer：在另一端，接收到offer后，解析出音视频通道信息以及连接参数，然后创建并返回一个answer；
  8. 接收answer：在本地，接收到answer后，解析出音视频通道信息以及连接参数，然后创建并启动对应的通道。

RTMP方案

RTMP是一种基于TCP的流媒体协议，主要用于视频直播。它提供了实时传输音频和视频的功能，可以用于一对一或一对多的场景，RTMP可用于内网或公网环境下，缺点是需要单独部署RTMP Server，数据通过RTMP Server中转，配合低延迟的RTMP Player，互动可以很轻松的在毫秒级。

smartechocancellation.jpg

以大牛直播SDK的demo为例，RTMP推送的代码如下：

classButtonPushStartListenerimplementsOnClickListener    {
publicvoidonClick(Viewv)
        {    
if (isPushingRtmp)
            {
stopPush();
btnPushStartStop.setText("推送RTMP");
isPushingRtmp=false;
return;
            }
Log.i(PUSH_TAG, "onClick start push rtmp..");
if (libPublisher==null)
return;
InitPusherAndSetConfig();
Log.i(PUSH_TAG, "videoWidth: "+pushVideoWidth+" videoHeight: "+pushVideoHeight+" pushType:"+pushType);
if ( libPublisher.SmartPublisherSetURL(publisherHandle, publishURL) !=0 )
            {
Log.e(PUSH_TAG, "Failed to set rtmp pusher URL..");
            }
intstartRet=libPublisher.SmartPublisherStartPublisher(publisherHandle);
if (startRet!=0) {
isPushingRtmp=false;
Log.e(TAG, "Failed to start push stream..");
return;
            }
CheckInitAudioRecorder();
btnPushStartStop.setText("停止推送 ");
isPushingRtmp=true;
    };

停止RTMP推送：

//停止rtmp推送privatevoidstopPush() {
if(!isPushingRtmp)
  {
return;
  }
if ( !isRTSPPublisherRunning) {
if (audioRecord_!=null) {
Log.i(TAG, "stopPush, call audioRecord_.StopRecording..");
audioRecord_.Stop();
if (audioRecordCallback_!=null) {
audioRecord_.RemoveCallback(audioRecordCallback_);
audioRecordCallback_=null;
      }
audioRecord_=null;
    }
  }
if (libPublisher!=null) {
libPublisher.SmartPublisherStopPublisher(publisherHandle);
  }
if (!isRTSPPublisherRunning) {
if (publisherHandle!=0) {
if (libPublisher!=null) {
libPublisher.SmartPublisherClose(publisherHandle);
publisherHandle=0;
      }
    }
  }
}

RTMP播放：

btnPlaybackStartStopPlayback.setOnClickListener(newButton.OnClickListener() 
        {  
//  @Override  publicvoidonClick(Viewv) {  
if(isPlaybackViewStarted)
                  {
btnPlaybackStartStopPlayback.setText("开始播放 ");
if ( playerHandle!=0 )
                  {
libPlayer.SmartPlayerStopPlay(playerHandle);
libPlayer.SmartPlayerClose(playerHandle);
playerHandle=0;
                  }
isPlaybackViewStarted=false;
                  }
else                  {
Log.i(PLAY_TAG, "Start playback stream++");
playerHandle=libPlayer.SmartPlayerOpen(curContext);
if(playerHandle==0)
                      {
Log.e(PLAY_TAG, "sur faceHandle with nil..");
return;
                      }
libPlayer.SetSmartPlayerEventCallbackV2(playerHandle,
newEventHandePlayerV2());
libPlayer.SmartPlayerSetSurface(playerHandle, playerSurfaceView);   //if set the second param with null, it means it will playback audio only..libPlayer.SmartPlayerSetRenderScaleMode(playerHandle, 1);
libPlayer.SmartPlayerSetExternalAudioOutput(playerHandle, newPlayerExternalPcmOutput());
libPlayer.SmartPlayerSetAudioOutputType(playerHandle, 1);
libPlayer.SmartPlayerSetBuffer(playerHandle, playbackBuffer);
libPlayer.SmartPlayerSetFastStartup(playerHandle, isPlaybackFastStartup?1:0);
if ( isPlaybackMute )
                      {
libPlayer.SmartPlayerSetMute(playerHandle, isPlaybackMute?1:0);
                      }
if (isPlaybackHardwareDecoder) {
intisSupportHevcHwDecoder=libPlayer.SetSmartPlayerVideoHevcHWDecoder(playerHandle,1);
intisSupportH264HwDecoder=libPlayer                        .SetSmartPlayerVideoHWDecoder(playerHandle,1);
Log.i(TAG, "isSupportH264HwDecoder: "+isSupportH264HwDecoder+", isSupportHevcHwDecoder: "+isSupportHevcHwDecoder);
                  }
libPlayer.SmartPlayerSetAudioVolume(playerHandle, curAudioVolume);
libPlayer.SmartPlayerSetUrl(playerHandle, playbackUrl);
intiPlaybackRet=libPlayer.SmartPlayerStartPlay(playerHandle);
if( iPlaybackRet!=0 )
                      {
libPlayer.SmartPlayerClose(playerHandle);
playerHandle=0;
Log.e(PLAY_TAG, "StartPlayback strem failed.."); 
return;
                      }
btnPlaybackStartStopPlayback.setText("停止播放 ");
btnPlaybackPopInputUrl.setEnabled(false);
btnPlaybackHardwareDecoder.setEnabled(false);
btnPlaybackSetPlayBuffer.setEnabled(false);
btnPlaybackFastStartup.setEnabled(false);
isPlaybackViewStarted=true;
Log.i(PLAY_TAG, "Start playback stream--");
                  }
                }
        });

轻量级RTSP服务+RTSP播放方案

纯内网环境下，两个终端可同时开启轻量级RTSP服务，然后相互拉取对方回调上来的RTSP URL，通过回音消除等，实现智能化场景的一对一音视频互动，不然智能门禁等场景，均可使用，实测延迟毫秒级，不影响互动体验，效果非常好：

对应的代码如下：

//Author: daniusdk.com    //启动/停止RTSP服务classButtonRtspServiceListenerimplementsOnClickListener {
publicvoidonClick(Viewv) {
if (isRTSPServiceRunning) {
stopRtspService();
btnRtspService.setText("启动RTSP服务");
btnRtspPublisher.setEnabled(false);
isRTSPServiceRunning=false;
return;
            }
Log.i(TAG, "onClick start rtsp service..");
rtsp_handle_=libPublisher.OpenRtspServer(0);
if (rtsp_handle_==0) {
Log.e(TAG, "创建rtsp server实例失败! 请检查SDK有效性");
            } else {
intport=8554;
if (libPublisher.SetRtspServerPort(rtsp_handle_, port) !=0) {
libPublisher.CloseRtspServer(rtsp_handle_);
rtsp_handle_=0;
Log.e(TAG, "创建rtsp server端口失败! 请检查端口是否重复或者端口不在范围内!");
                }
//String user_name = "admin";//String password = "12345";//libPublisher.SetRtspServerUserNamePassword(rtsp_handle_, user_name, password);if (libPublisher.StartRtspServer(rtsp_handle_, 0) ==0) {
Log.i(TAG, "启动rtsp server 成功!");
                } else {
libPublisher.CloseRtspServer(rtsp_handle_);
rtsp_handle_=0;
Log.e(TAG, "启动rtsp server失败! 请检查设置的端口是否被占用!");
                }
btnRtspService.setText("停止RTSP服务");
btnRtspPublisher.setEnabled(true);
isRTSPServiceRunning=true;
            }
        }
    }

发布RTSP流：

//发布/停止RTSP流classButtonRtspPublisherListenerimplementsOnClickListener {
publicvoidonClick(Viewv) {
if (isRTSPPublisherRunning) {
stopRtspPublisher();
if (!isPushingRtmp) {
ConfigControlEnable(true);
                }
btnRtspPublisher.setText("发布RTSP流");
btnGetRtspSessionNumbers.setEnabled(false);
btnRtspService.setEnabled(true);
isRTSPPublisherRunning=false;
return;
            }
Log.i(TAG, "onClick start rtsp publisher..");
if (!isPushingRtmp) {
InitPusherAndSetConfig();
            }
if (publisherHandle==0) {
Log.e(TAG, "Start rtsp publisher, publisherHandle is null..");
return;
            }
Stringrtsp_stream_name="stream1";
libPublisher.SetRtspStreamName(publisherHandle, rtsp_stream_name);
libPublisher.ClearRtspStreamServer(publisherHandle);
libPublisher.AddRtspStreamServer(publisherHandle, rtsp_handle_, 0);
if (libPublisher.StartRtspStream(publisherHandle, 0) !=0) {
Log.e(TAG, "调用发布rtsp流接口失败!");
return;
            }
if (!isPushingRtmp) {
if (pushType==0||pushType==1) {
CheckInitAudioRecorder();    //enable pure video publisher..                }
ConfigControlEnable(false);
            }
startLayerPostThread();
btnRtspPublisher.setText("停止RTSP流");
btnGetRtspSessionNumbers.setEnabled(true);
btnRtspService.setEnabled(false);
isRTSPPublisherRunning=true;
        }
    }


获取RTSP流会话链接数：

//当前RTSP会话数弹出框privatevoidPopRtspSessionNumberDialog(intsession_numbers) {
finalEditTextinputUrlTxt=newEditText(this);
inputUrlTxt.setFocusable(true);
inputUrlTxt.setEnabled(false);
Stringsession_numbers_tag="RTSP服务当前客户会话数: "+session_numbers;
inputUrlTxt.setText(session_numbers_tag);
AlertDialog.BuilderbuilderUrl=newAlertDialog.Builder(this);
builderUrl                .setTitle("内置RTSP服务")
                .setView(inputUrlTxt).setNegativeButton("确定", null);
builderUrl.show();
    }
//获取RTSP会话数classButtonGetRtspSessionNumbersListenerimplementsOnClickListener {
publicvoidonClick(Viewv) {
if (libPublisher!=null&&rtsp_handle_!=0) {
intsession_numbers=libPublisher.GetRtspServerClientSessionNumbers(rtsp_handle_);
Log.i(TAG, "GetRtspSessionNumbers: "+session_numbers);
PopRtspSessionNumberDialog(session_numbers);
            }
        }
    }

播放RTSP不再赘述，和播放RTMP一样，只是URL类型不一样，需要注意的是，不管走RTMP还是RTSP，都需要开启回音消除。

技术总结

Android平台一对一互动，纯内网环境下，不部署单独的流媒体服务器，走轻量级RTSP服务真的非常方便，如果需要扩展到公网业务，建议可以考虑RTMP，如果有很好的开发能力，也可以考虑WebRTC，具体根据实际场景选择即可。

文章标签：
Java
C++
Android开发
开发工具
UED
编解码
网络协议
Web App开发
视频直播
关键词：
Android平台
Android vs
Android rtsp
Android rtmp
Android平台rtsp
音视频牛哥
目录
相关文章
131王
|
2月前
|
安全 Android开发 iOS开发
Android vs iOS：深入剖析两大移动操作系统的优劣与未来趋势####
【10月更文挑战第21天】 本文旨在通过技术视角，全面对比分析Android与iOS两大主流移动操作系统的架构差异、用户体验、安全性及生态系统等方面，探讨其各自优势与不足，并预测未来发展趋势。 ####
131王
73 1
aliyun0641063962-48771
|
3月前
|
安全 Android开发 iOS开发
Android vs. iOS：构建生态差异与技术较量的深度剖析###
本文深入探讨了Android与iOS两大移动操作系统在构建生态系统上的差异，揭示了它们各自的技术优势及面临的挑战。通过对比分析两者的开放性、用户体验、安全性及市场策略，本文旨在揭示这些差异如何塑造了当今智能手机市场的竞争格局，为开发者和用户提供决策参考。 ###
aliyun0641063962-48771
90 3
叫个什么名字
|
2月前
|
搜索推荐 Android开发 iOS开发
安卓vs. iOS：操作系统的终极对决####
本文探讨了安卓和iOS两种主流移动操作系统的特点，从用户体验、系统生态、硬件兼容性等维度进行对比分析。通过深入浅出的方式，揭示了两者在技术层面的优劣及未来发展趋势，旨在帮助用户更好地理解并选择适合自己的平台。 ####
叫个什么名字
51 5
131王
|
2月前
|
安全 搜索推荐 Android开发
Android vs. iOS:解锁智能手机操作系统的奥秘####
【10月更文挑战第21天】 在当今这个数字化时代，智能手机已成为我们生活中不可或缺的伙伴。本文旨在深入浅出地探讨两大主流操作系统——Android与iOS的核心差异、优势及未来趋势，帮助读者更好地理解这两个平台背后的技术哲学和用户体验设计。通过对比分析，揭示它们如何塑造了我们的数字生活方式，并展望未来可能的发展路径。无论您是技术爱好者还是普通用户，这篇文章都将带您走进一个充满创新与可能性的移动世界。 ####
131王
118 3
aliyun0641063962-48771
|
2月前
|
安全 搜索推荐 Android开发
Android vs. iOS：一场永无止境的较量####
在智能手机操作系统领域，Android与iOS犹如两极，各自引领着不同的技术潮流和用户体验哲学。本文深入探讨了这两个平台的发展历程、核心优势、以及它们如何塑造了我们的数字生活，旨在为读者提供一个全面而客观的视角，理解这场持续多年的“战争”背后的真正意义。 ####
aliyun0641063962-48771
46 1
萝卜带泥
|
3月前
|
安全 Android开发 iOS开发
Android vs iOS：探索移动操作系统的设计与功能差异###
【10月更文挑战第20天】 本文深入分析了Android和iOS两个主流移动操作系统在设计哲学、用户体验、技术架构等方面的显著差异。通过对比，揭示了这两种系统各自的独特优势与局限性，并探讨了它们如何塑造了我们的数字生活方式。无论你是开发者还是普通用户，理解这些差异都有助于更好地选择和使用你的移动设备。 ###
萝卜带泥
73 3
叫个什么名字
|
3月前
|
搜索推荐 vr&ar Android开发
Android vs. iOS：一场永无止境的辩论#### 一、
在当今的智能手机市场，Android和iOS无疑是两大巨头，它们各有千秋，吸引了全球数十亿用户。本文将深入探讨这两个操作系统的核心差异、优势以及未来发展趋势，帮助读者更全面地理解这场科技界的“双雄争霸”。 #### 二、
叫个什么名字
37 2
叫个什么名字
|
3月前
|
开发工具 Android开发 iOS开发
Android vs iOS：构建移动应用时的关键考量####
本文深入探讨了Android与iOS两大移动平台在开发环境、性能优化、用户体验设计及市场策略方面的差异性，旨在为开发者提供决策依据。通过对比分析，揭示两个平台各自的优势与挑战，帮助开发者根据项目需求做出更明智的选择。 ####
叫个什么名字
57 5
131王
|
3月前
|
搜索推荐 Android开发 数据安全/隐私保护
安卓vs. iOS：两大操作系统的终极对决####
【10月更文挑战第17天】 本文将深入浅出地探讨安卓和iOS这两大智能手机操作系统的差异与优劣，通过对比它们的技术架构、用户体验、市场表现及未来发展趋势，为读者提供一个全面而客观的视角。无论你是技术爱好者还是普通消费者，都能从中获得有价值的信息。 ####
131王
78 2
131王
|
3月前
|
安全 Android开发 iOS开发
安卓vs iOS：探索两种操作系统的独特魅力与技术深度###
【10月更文挑战第16天】 本文旨在深入浅出地探讨安卓（Android）与iOS这两种主流移动操作系统的特色、优势及背后的技术理念。通过对比分析，揭示它们各自如何塑造了移动互联网的生态，并为用户提供丰富多彩的智能体验。无论您是科技爱好者还是普通用户，都能从这篇文章中感受到技术创新带来的无限可能。 ###
131王
79 2

热门文章

最新文章

  • 1
    【03】优雅草央千澈详解关于APP签名以及分发-上架完整流程-第三篇安卓APP上架华为商店后面的步骤-华为应用商店相对比较麻烦一些-华为商店安卓上架
  • 2
    app开发之安卓Android+苹果ios打包所有权限对应解释列表【长期更新】-以及默认打包自动添加权限列表和简化后的基本打包权限列表以uniapp为例-优雅草央千澈
  • 3
    王立平--android中的anim(动画)
  • 4
    [Android]使用AdapterTypeRender对不同类型的item数据到UI的渲染
  • 5
    Android客户端与服务器端的json数据交互（很详细）
  • 6
    Android软件版本更新
  • 7
    [Android] 基于WLAN无线执行自动化方法
  • 8
    Android layer-list：联合shape（2）
  • 9
    Android Studio常用快捷键
  • 10
    分享七个非常有用的Android开发工具和工具包
  • 1
    Android 定时任务
    70
  • 2
    android 设置系统时间的流程
    490
  • 3
    Android经典面试题之Kotlin中object关键字实现的是什么类型的单例模式？原理是什么？怎么实现双重检验锁单例模式？
    79
  • 4
    探索iOS与安卓应用开发的核心差异及未来趋势
    46
  • 5
    探索安卓与iOS开发的差异：构建未来应用的关键考量
    65
  • 6
    Android经典面试题之Kotlin中Lambda表达式有哪些用法
    41
  • 7
    Android经典面试题之Kotlin中Lambda表达式和匿名函数的区别
    44
  • 8
    安卓与iOS开发环境对比分析
    58
  • 9
    安卓与iOS应用开发的对比分析
    50
  • 10
    探索安卓与iOS开发的差异：平台特性、工具和市场趋势
    75

    • 相关课程

    更多
  • 开源Android容器化框架Atlas开发者指南

    • 相关电子书

    更多
  • 58同城Android客户端Walle框架演进与实践之路
  • Android组件化实现
  • 蚂蚁聚宝Android秒级编译——Freeline

    • 相关实验场景

    更多
  • 基于函数计算实现音视频转码
    • 下一篇
    阿里云开通OSS存储服务详细流程