相较于ffmpeg我更倾向于使用socket实现推流工作

简介: 相较于ffmpeg我更倾向于使用socket实现推流工作

前言

  在当今的音视频处理领域,FFmpeg无疑是一个强大的工具,它能够实现各种复杂的音视频编解码、转码、流媒体处理等功能。然而,在实际应用中我发现在某些场景下,使用FFmpeg进行推流工作并不是最佳选择。相反,我更倾向于使用socket来实现推流工作。在这篇博客中,我将详细介绍为什么我会选择socket而不是FFmpeg来进行推流工作,以及如何利用socket实现高效的推流方案。希望这篇文章能为广大音视频开发者提供一些有益的参考和启示。

ffmpeg&socket简介

  FFmpeg获取原始音视频数据并封装成数据包,然后进行编码转换等工作,最后通过特定协议(如RTMP)推送到服务器。由于ffmpeg过于成熟,在网上对于ffmpeg的介绍也比较多因此这里就不过多的对它进行介绍。

  socket库是一种用于实现网络通信的模块。它基于BSD Sockets API,并提供了高级的接口以供程序员使用。套接字,或称为Socket,是计算机网络中用于数据交换的数据结构。在网络通信开始之前,需要创建套接字来实现数据的发送和接收。套接字可以被看作是电话插孔,没有它将无法进行通信。

使用比对

  在python中我们使用opencv读取视频流或者摄像头然后调用ffmpeg进行推流工作往往需要借助其他工具进行开端口,例如使用EasyDarWin、ffmpeg-server和nginx等进行开启rtsp或rtmp端口,这里我们势必会增加消耗。   使用socket的话则不必借助其他工具进行开端口,socket库自身即可设定tcp端口(未被占用)通过下面这段代码可输出一个可用的端口号便于后续使用。

scss

复制代码

import socket
def get_random_tcp_port():
    with socket.socket(socket.AF_INET, socket.SOCK_STREAM) as s:
        s.bind(("", 0))
        s.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1)
        return s.getsockname()[1]
random_tcp_port = get_random_tcp_port()
print("随机选择的TCP端口是:", random_tcp_port)

数据比对

  在这里我们对于同一图像进行数据传输,这里采取了调用ffmpeg与socket库进行比对:

方法 数据型 数据量 协议
opencv+ffmpeg bytes 451584 rtsp\rtmp
opencv+socket bytes 69366 tcp
opencv+encode+socket bytes 18304 tcp

相对于FFmpeg,使用socket实现推流工作有以下几点优势:

  1. 低延迟:基于socket的推流方式能实现较低的延迟,对于实时性要求较高的应用场景非常有利。
  2. 稳定性高:socket方式传输的数据包较小,因此在网络状况不佳的情况下,也能保证推流的稳定性。
  3. 协议灵活:socket方式允许我们自定义协议,这使得我们能够更好地满足特定需求,而FFmpeg虽然支持多种流媒体协议如RTSP、HLS、RTMP等,但其协议是固定的。
  4. 兼容性好:socket方式可以在不同平台和设备上进行推流,具有良好的通用性和兼容性。
  5. 控制能力强:通过socket,我们可以更好地控制数据传输的过程,例如可以方便地实现循环推流。

总结:

  由于测试的画面不便于上传,这里请原谅我没有放比对的图像(192010803的图像延迟在0.5秒左右)。因此在实际需求来选择合适的技术方案。在某些特定场景下,如实时性要求较高、对协议有特殊需求或需要跨平台兼容等情况下,使用socket实现推流工作可能是一个更好的选择。


相关文章
|
存储 Cloud Native Ubuntu
音视频 ffmpeg命令直播拉流推流
音视频 ffmpeg命令直播拉流推流
ffmpeg推流报错Failed to update header with correct duration.
ffmpeg推流报错Failed to update header with correct duration.
915 0
|
2月前
|
应用服务中间件 Linux nginx
FFmpeg学习笔记(一):实现rtsp推流rtmp以及ffplay完成拉流操作
这篇博客介绍了如何使用FFmpeg实现RTSP推流到RTMP服务器,并使用ffplay进行拉流操作,包括在Windows和Linux系统下的命令示例,以及如何通过HTML页面显示视频流。
580 0
|
2月前
|
网络协议 应用服务中间件 nginx
FFmpeg错误笔记(一):nginx-rtmp-module推流出现 Server error: Already publishing
这篇文章讨论了在使用nginx-rtmp-module进行RTMP推流时遇到的“Server error: Already publishing”错误,分析了错误原因,并提供了详细的解决办法,包括修改nginx配置文件和终止异常的TCP连接。
215 0
FFmpeg错误笔记(一):nginx-rtmp-module推流出现 Server error: Already publishing
|
2月前
FFmpeg学习笔记(二):多线程rtsp推流和ffplay拉流操作,并储存为多路avi格式的视频
这篇博客主要介绍了如何使用FFmpeg进行多线程RTSP推流和ffplay拉流操作,以及如何将视频流保存为多路AVI格式的视频文件。
358 0
|
4月前
|
编解码 Java Android开发
FFmpeg开发笔记(四十五)使用SRT Streamer开启APP直播推流
​SRT Streamer是一个安卓手机端的开源SRT协议直播推流框架,可用于RTMP直播和SRT直播。SRT Streamer支持的视频编码包括H264、H265等等,支持的音频编码包括AAC、OPUS等等,可谓功能强大的APP直播框架。另一款APP直播框架RTMP Streamer支持RTMP直播和RTSP直播,不支持SRT协议的直播。而本文讲述的SRT Streamer支持RTMP直播和SRT直播,不支持RTSP协议的直播。有关RTMP Streamer的说明参见之前的文章《使用RTMP Streamer开启APP直播推流》,下面介绍如何使用SRT Streamer开启手机直播。
94 4
FFmpeg开发笔记(四十五)使用SRT Streamer开启APP直播推流
|
5月前
|
视频直播 Windows
FFmpeg开发笔记(四十一)结合OBS与MediaMTX实现SRT直播推流
《FFmpeg开发实战》书中介绍了直播中的RTSP、RTMP和SRT协议,SRT提供更低延迟和稳定性。FFmpeg从4.0版起支持SRT,OBS Studio和MediaMTX等工具也已支持。在Windows环境下,通过集成libsrt的FFmpeg,可以建立SRT直播系统。MediaMTX日志显示SRT服务监听8890端口,OBS Studio设置SRT推流至"publish:live"。ffplay和VLC通过"read:live"拉流成功,验证了SRT推拉流功能。更多详情见《FFmpeg开发实战:从零基础到短视频上线》。
203 2
FFmpeg开发笔记(四十一)结合OBS与MediaMTX实现SRT直播推流
|
5月前
|
Web App开发 缓存 编解码
FFmpeg开发笔记(三十八)APP如何访问SRS推流的RTMP直播地址
《FFmpeg开发实战》书中介绍了轻量级流媒体服务器MediaMTX,适合测试RTSP/RTMP协议,但不适用于复杂直播场景。SRS是一款强大的开源流媒体服务器,支持多种协议,起初为RTMP,现扩展至HLS、SRT等。在FFmpeg 6.1之前,推送给SRS的HEVC流不受支持。要播放RTMP流,Android应用可使用ExoPlayer,需在`build.gradle`导入ExoPlayer及RTMP扩展,并根据URL类型创建MediaSource。若SRS播放黑屏,需在配置文件中开启`gop_cache`以缓存关键帧。
173 2
FFmpeg开发笔记(三十八)APP如何访问SRS推流的RTMP直播地址
|
5月前
|
Web App开发 缓存 Linux
FFmpeg开发笔记(三十六)Linux环境安装SRS实现视频直播推流
《FFmpeg开发实战》书中第10章提及轻量级流媒体服务器MediaMTX,适合测试RTSP/RTMP协议,但不适合生产环境。推荐使用SRS或ZLMediaKit,其中SRS是国产开源实时视频服务器,支持多种流媒体协议。本文简述在华为欧拉系统上编译安装SRS和FFmpeg的步骤,包括安装依赖、下载源码、配置、编译以及启动SRS服务。此外,还展示了如何通过FFmpeg进行RTMP推流,并使用VLC播放器测试拉流。更多FFmpeg开发内容可参考相关书籍。
139 2
FFmpeg开发笔记(三十六)Linux环境安装SRS实现视频直播推流
|
6月前
|
编解码 Java Android开发
FFmpeg开发笔记(三十一)使用RTMP Streamer开启APP直播推流
RTMP Streamer是一款开源的安卓直播推流框架,支持RTMP、RTSP和SRT协议,适用于各种直播场景。它支持H264、H265、AV1视频编码和AAC、G711、OPUS音频编码。本文档介绍了如何使用Java版的RTMP Streamer,建议使用小海豚版本的Android Studio (Dolphin)。加载项目时,可添加国内仓库加速依赖下载。RTMP Streamer包含五个模块:app、encoder、rtmp、rtplibrary和rtsp。完成加载后,可以在手机上安装并运行APP,提供多种直播方式。开发者可以从《FFmpeg开发实战:从零基础到短视频上线》获取更多信息。
141 7
FFmpeg开发笔记(三十一)使用RTMP Streamer开启APP直播推流