相较于ffmpeg我更倾向于使用socket实现推流工作

简介: 相较于ffmpeg我更倾向于使用socket实现推流工作

前言

  在当今的音视频处理领域,FFmpeg无疑是一个强大的工具,它能够实现各种复杂的音视频编解码、转码、流媒体处理等功能。然而,在实际应用中我发现在某些场景下,使用FFmpeg进行推流工作并不是最佳选择。相反,我更倾向于使用socket来实现推流工作。在这篇博客中,我将详细介绍为什么我会选择socket而不是FFmpeg来进行推流工作,以及如何利用socket实现高效的推流方案。希望这篇文章能为广大音视频开发者提供一些有益的参考和启示。

ffmpeg&socket简介

  FFmpeg获取原始音视频数据并封装成数据包,然后进行编码转换等工作,最后通过特定协议(如RTMP)推送到服务器。由于ffmpeg过于成熟,在网上对于ffmpeg的介绍也比较多因此这里就不过多的对它进行介绍。

  socket库是一种用于实现网络通信的模块。它基于BSD Sockets API,并提供了高级的接口以供程序员使用。套接字,或称为Socket,是计算机网络中用于数据交换的数据结构。在网络通信开始之前,需要创建套接字来实现数据的发送和接收。套接字可以被看作是电话插孔,没有它将无法进行通信。

使用比对

  在python中我们使用opencv读取视频流或者摄像头然后调用ffmpeg进行推流工作往往需要借助其他工具进行开端口,例如使用EasyDarWin、ffmpeg-server和nginx等进行开启rtsp或rtmp端口,这里我们势必会增加消耗。   使用socket的话则不必借助其他工具进行开端口,socket库自身即可设定tcp端口(未被占用)通过下面这段代码可输出一个可用的端口号便于后续使用。

scss

复制代码

import socket
def get_random_tcp_port():
    with socket.socket(socket.AF_INET, socket.SOCK_STREAM) as s:
        s.bind(("", 0))
        s.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1)
        return s.getsockname()[1]
random_tcp_port = get_random_tcp_port()
print("随机选择的TCP端口是:", random_tcp_port)

数据比对

  在这里我们对于同一图像进行数据传输,这里采取了调用ffmpeg与socket库进行比对:

方法 数据型 数据量 协议
opencv+ffmpeg bytes 451584 rtsp\rtmp
opencv+socket bytes 69366 tcp
opencv+encode+socket bytes 18304 tcp

相对于FFmpeg,使用socket实现推流工作有以下几点优势:

  1. 低延迟:基于socket的推流方式能实现较低的延迟,对于实时性要求较高的应用场景非常有利。
  2. 稳定性高:socket方式传输的数据包较小,因此在网络状况不佳的情况下,也能保证推流的稳定性。
  3. 协议灵活:socket方式允许我们自定义协议,这使得我们能够更好地满足特定需求,而FFmpeg虽然支持多种流媒体协议如RTSP、HLS、RTMP等,但其协议是固定的。
  4. 兼容性好:socket方式可以在不同平台和设备上进行推流,具有良好的通用性和兼容性。
  5. 控制能力强:通过socket,我们可以更好地控制数据传输的过程,例如可以方便地实现循环推流。

总结:

  由于测试的画面不便于上传,这里请原谅我没有放比对的图像(192010803的图像延迟在0.5秒左右)。因此在实际需求来选择合适的技术方案。在某些特定场景下,如实时性要求较高、对协议有特殊需求或需要跨平台兼容等情况下,使用socket实现推流工作可能是一个更好的选择。


相关文章
|
11月前
|
存储 Cloud Native Ubuntu
音视频 ffmpeg命令直播拉流推流
音视频 ffmpeg命令直播拉流推流
ffmpeg推流报错Failed to update header with correct duration.
ffmpeg推流报错Failed to update header with correct duration.
674 0
|
2月前
|
编解码 Java Android开发
FFmpeg开发笔记(四十五)使用SRT Streamer开启APP直播推流
​SRT Streamer是一个安卓手机端的开源SRT协议直播推流框架,可用于RTMP直播和SRT直播。SRT Streamer支持的视频编码包括H264、H265等等,支持的音频编码包括AAC、OPUS等等,可谓功能强大的APP直播框架。另一款APP直播框架RTMP Streamer支持RTMP直播和RTSP直播,不支持SRT协议的直播。而本文讲述的SRT Streamer支持RTMP直播和SRT直播,不支持RTSP协议的直播。有关RTMP Streamer的说明参见之前的文章《使用RTMP Streamer开启APP直播推流》,下面介绍如何使用SRT Streamer开启手机直播。
56 4
FFmpeg开发笔记(四十五)使用SRT Streamer开启APP直播推流
|
3月前
|
视频直播 Windows
FFmpeg开发笔记(四十一)结合OBS与MediaMTX实现SRT直播推流
《FFmpeg开发实战》书中介绍了直播中的RTSP、RTMP和SRT协议,SRT提供更低延迟和稳定性。FFmpeg从4.0版起支持SRT,OBS Studio和MediaMTX等工具也已支持。在Windows环境下,通过集成libsrt的FFmpeg,可以建立SRT直播系统。MediaMTX日志显示SRT服务监听8890端口,OBS Studio设置SRT推流至"publish:live"。ffplay和VLC通过"read:live"拉流成功,验证了SRT推拉流功能。更多详情见《FFmpeg开发实战:从零基础到短视频上线》。
103 2
FFmpeg开发笔记(四十一)结合OBS与MediaMTX实现SRT直播推流
|
3月前
|
Web App开发 缓存 编解码
FFmpeg开发笔记(三十八)APP如何访问SRS推流的RTMP直播地址
《FFmpeg开发实战》书中介绍了轻量级流媒体服务器MediaMTX,适合测试RTSP/RTMP协议,但不适用于复杂直播场景。SRS是一款强大的开源流媒体服务器,支持多种协议,起初为RTMP,现扩展至HLS、SRT等。在FFmpeg 6.1之前,推送给SRS的HEVC流不受支持。要播放RTMP流,Android应用可使用ExoPlayer,需在`build.gradle`导入ExoPlayer及RTMP扩展,并根据URL类型创建MediaSource。若SRS播放黑屏,需在配置文件中开启`gop_cache`以缓存关键帧。
112 2
FFmpeg开发笔记(三十八)APP如何访问SRS推流的RTMP直播地址
|
3月前
|
Web App开发 缓存 Linux
FFmpeg开发笔记(三十六)Linux环境安装SRS实现视频直播推流
《FFmpeg开发实战》书中第10章提及轻量级流媒体服务器MediaMTX,适合测试RTSP/RTMP协议,但不适合生产环境。推荐使用SRS或ZLMediaKit,其中SRS是国产开源实时视频服务器,支持多种流媒体协议。本文简述在华为欧拉系统上编译安装SRS和FFmpeg的步骤,包括安装依赖、下载源码、配置、编译以及启动SRS服务。此外,还展示了如何通过FFmpeg进行RTMP推流,并使用VLC播放器测试拉流。更多FFmpeg开发内容可参考相关书籍。
78 2
FFmpeg开发笔记(三十六)Linux环境安装SRS实现视频直播推流
|
4月前
|
编解码 Java Android开发
FFmpeg开发笔记(三十一)使用RTMP Streamer开启APP直播推流
RTMP Streamer是一款开源的安卓直播推流框架,支持RTMP、RTSP和SRT协议,适用于各种直播场景。它支持H264、H265、AV1视频编码和AAC、G711、OPUS音频编码。本文档介绍了如何使用Java版的RTMP Streamer,建议使用小海豚版本的Android Studio (Dolphin)。加载项目时,可添加国内仓库加速依赖下载。RTMP Streamer包含五个模块:app、encoder、rtmp、rtplibrary和rtsp。完成加载后,可以在手机上安装并运行APP,提供多种直播方式。开发者可以从《FFmpeg开发实战:从零基础到短视频上线》获取更多信息。
103 7
FFmpeg开发笔记(三十一)使用RTMP Streamer开启APP直播推流
|
4月前
|
Web App开发 安全 Linux
FFmpeg开发笔记(二十六)Linux环境安装ZLMediaKit实现视频推流
《FFmpeg开发实战》书中介绍轻量级流媒体服务器MediaMTX,但其功能有限,不适合生产环境。推荐使用国产开源的ZLMediaKit,它支持多种流媒体协议和音视频编码标准。以下是华为欧拉系统下编译安装ZLMediaKit和FFmpeg的步骤,包括更新依赖、下载源码、配置、编译、安装以及启动MediaServer服务。此外,还提供了通过FFmpeg进行RTSP和RTMP推流,并使用VLC播放器拉流的示例。
196 3
FFmpeg开发笔记(二十六)Linux环境安装ZLMediaKit实现视频推流
|
4月前
|
编解码 Linux iOS开发
FFmpeg开发笔记(二十三)使用OBS Studio开启RTMP直播推流
OBS(Open Broadcaster Software)是一款开源、跨平台的直播和和Linux。官网为<https://obsproject.com/>。要使用OBS进行直播,需执行四步:1) 下载并安装OBS Studio(<https://obsproject.com/download>),2) 启动流媒体服务器如MediaMTX,生成RTMP推流地址,3) 打开OBS Studio,设置直播服务为自定义RTMP服务器(127.0.0.1:1935/stream),调整视频分辨率,4) 添加视频来源并开始直播。同时,通过FFmpeg的拉流程序验证直播功能正常。
116 4
FFmpeg开发笔记(二十三)使用OBS Studio开启RTMP直播推流
|
5月前
[音视频 ffmpeg] 复用推流
[音视频 ffmpeg] 复用推流
下一篇
无影云桌面