AI 助理
文档备案控制台
开发者社区 视觉智能 文章 正文

【2015~2024】大牛直播SDK演化史

2024-08-13 862
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 大牛直播SDK始创于2015年，旨在提供低延迟的RTMP推拉流解决方案，特别适用于毫秒级延迟的应用场景。初始版本针对Android平台实现RTMP直播推送，随后扩展至Windows、iOS和Linux平台，支持RTMP与RTSP播放器，延迟稳定在一秒以内。SDK涵盖实时推流、播放、GB28181设备接入、录像、多路流媒体转发、轻量级RTSP服务等多种功能，并支持H.265编码格式。该SDK适用于在线教育、智慧安防等多个行业场景，并已发展成为GitHub上获得超过10000星标的强大跨平台流媒体内核直播SDK。

大牛直播SDK的由来

大牛直播SDK始于2015年，最初我们只是想做个低延迟的RTMP推拉流解决方案，用于移动单兵等毫秒级延迟的场景下，我们先是实现了Android平台RTMP直播推送模块，当我们用市面上可以找到的RTMP播放器测试时延的时候，居然都要6-7秒延迟，这在直播场景下，几乎是不可接受的，所以我们有了做RTMP直播播放器的想法。

最早我们是实现了Windows平台RTMP直播播放，整体延迟，控制在几百毫秒，然后是Android和iOS平台，再后来，覆盖了Linux平台。

RTMP推流模块，也从Android平台慢慢覆盖了Windows、Android、iOS和Linux，从单纯的采集摄像头，到屏幕，再到Unity窗体。

模块覆盖了轻量级RTSP服务、RTSP播放、一对一互动、推拉流录像、GB28181设备接入模块等。

image.gif

至此，大牛直播SDK已经成为Github过10000⭐的超强全自研跨平台流媒体内核直播SDK。

我们致力于传统行业极致体验的音视频直播技术解决方案，产品涵盖跨平台的实时RTMP推流、RTMP/RTSP直播播放(支持RTSP/RTMP H.265)、GB28181设备接入、实时录像、多路流媒体转发(RTSP转RTMP，RTMP转RTMP，RTSP|RTMP转GB28181)、音视频导播、动态视频合成、音频混音、一对一互动直播、内置轻量级RTSP服务、RTSP网关服务等，比快更快，业界真正靠谱的超低延迟直播SDK。

场景覆盖在线教育、智慧教室|无纸化推屏|会议、运营商视频云平台、执法记录、电力巡检、智慧水利、智慧煤矿、管廊隧道、虚拟仿真实训教学、VR教育、云展会、金融双录、远程医疗、智能可视门禁对讲、智慧安防、智能家居、物联网、智能车载、传统硬件领域、媒体移动直播、应急指挥调度(针对保险、城管、交警、消防、公安等职能管理部门的单兵应急执法系统)、远程专家诊断、可视化巡检、(如电信/电力线路/铁路沿线/水利设施/油田/消防设施巡检)、移动视频安防监控，企业内训、监控对接等。

我们做了什么

支持平台架构

支持平台 支持架构
Windows平台 x86 debug/release, x64 debug/release
Linux(含麒麟操作系统) x86_64, aarch64
Android平台 armeabi-v7a, arm64-v8a, x86, x86_64
iOS平台 arm64

最新Release Note：

大牛直播SDK Release note

Windows端

  • RTMP直播推流SDK RTMP推送SDK(支持同时推多路url，支持RTMP扩展H.265推送))；
  • RTMP直播播放器SDK 业内首屈一指的RTMP超低延迟直播播放器SDK(支持RTMP H.265扩展播放)；
  • RTSP直播播放器SDK 支持RTSP H.265播放及扩展录像、业内为数不多真正好用的RTSP播放器SDK，支持IE浏览器OCX控件接口调用；
  • Unity3D RTMP/RTSP直播播放器SDK 业内为数不多的Windows支持Unity3D的超低延迟RTMP/RTSP直播播放器SDK，支持快照、录像、实时静音、view旋转、快速切换URL等特性；
  • RTMP/RTSP多路流媒体转RTMP推送SDK 支持同时多路拉取rtmp/rtsp流/本地flv文件，并分别转发到服务器，业内为数不多支持RTSP/RTMP H.265拉流转发的SDK；
  • 轻量级RTSP服务SDK 为满足内网无纸化/电子教室等内网超低延迟需求，避免让用户配置单独的服务器，大牛直播SDK在推送端支持轻量级RTSP服务SDK，推送端SDK支持的功能，内置轻量级RTSP服务SDK后，功能继续支持，windows端特定机型支持RTSP H.265视频输出，支持单播和组播模式；
  • 内网RTSP网关SDK 内网RTSP网关SDK，系内置轻量级RTSP服务SDK扩展，完成外部RTSP/RTMP数据拉取并注入到轻量级RTSP服务SDK工作，多个内网客户端直接访问内网轻量级RTSP服务获取公网数据，无需部署单独的服务器，支持RTSP/RTMP H.265数据接入，支持单播和组播模式；
  • 导播SDK 数据源：1. rtmp/rtsp音视频流；2. 本地屏幕/摄像头/音频数据；3.本地flv文件；多路流合成一路实时导播推送；
  • 录像SDK 支持拉取rtmp/rtsp流实时录像模块/实时快照功能，支持纯音频、纯视频、音视频录制模式，支持音频(PCMU/PCMA,Speex等)转AAC后再录像，业内为数不多的支持RTSP/RTMP H.265录制到MP4文件的录像SDK；
  • RTMP/RTSP一对一互动SDK 基于标准协议(RTMP或RTSP)的跨平台(Windows/Andriod/iOS)一对一互动SDK，支持回音消除，完美支持一对一互动场景；
  • SEI扩展数据发送/接收SDK 支持推送端通过H.264 SEI信息扩展，实时传输文本/二进制数据信息(如实时字幕/时间戳/题目分发/公告广播等)，播放端做相应解析和回显；

Linux|麒麟操作系统

  • RTMP直播推流SDKRTMP推送SDK(支持推送屏幕、摄像头数据，支持RTMP扩展H.265推送)；
  • RTMP直播播放器SDK业内首屈一指的RTMP超低延迟直播播放器SDK(支持RTMP H.265扩展播放)；
  • RTSP直播播放器SDK支持RTSP H.265播放及扩展录像、业内为数不多真正好用的RTSP播放器SDK；
  • [RTMP/RTSP多路流媒体转RTMP推送SDK]支持同时多路拉取rtmp/rtsp流，并分别转发到服务器，业内为数不多支持RTSP/RTMP H.265拉流转发的SDK；
  • 轻量级RTSP服务SDK 为满足内网无纸化/电子教室等内网超低延迟需求，避免让用户配置单独的服务器，大牛直播SDK在推送端支持轻量级RTSP服务SDK，推送端SDK支持的功能，内置轻量级RTSP服务SDK后，功能继续支持；
  • [录像SDK]支持拉取rtmp/rtsp流实时录像模块/实时快照功能，支持纯音频、纯视频、音视频录制模式，支持音频(PCMU/PCMA,Speex等)转AAC后再录像，业内为数不多的支持RTSP/RTMP H.265录制到MP4文件的录像SDK。

Android端

  • RTMP直播推流端SDK Android屏幕、摄像头RTMP推流SDK，支持RTMP扩展H.265推送(H.265硬编码)；
  • GB28181接入SDK Android屏幕、摄像头编码注册接入到GB28181服务平台；
  • RTMP直播播放器SDK 业内首屈一指的RTMP超低延迟直播播放器SDK(支持RTMP H.265扩展播放)；
  • RTSP直播播放器SDK 支持RTSP H.265播放及扩展录像、业内为数不多真正好用的RTSP播放器SDK;
  • Android平台外部编码数据实时预览播放SDK 外部编码后音视频数据（视频：H.264/H.265，音频：AAC/PCMA/PCMU）实时预览播放SDK;
  • Unity3D RTMP/RTSP直播播放器SDK 业内为数不多的Android支持Unity3D的超低延迟RTMP/RTSP直播播放器SDK，支持快照、录像、实时静音、view旋转、快速切换URL等特性;
  • 录像SDK 支持拉取rtmp/rtsp流实时录像模块/实时快照功能，支持纯音频、纯视频、音视频录制模式，支持音频(PCMU/PCMA,Speex等)转AAC后再录像，业内为数不多的支持RTSP/RTMP H.265录制到MP4文件的录像SDK；
  • RTMP/RTSP多路流媒体转RTMP推送SDK 支持实时拉取的rtmp/rtsp流转发到指定rtmp url;
  • 轻量级RTSP服务SDK 为满足内网无纸化/电子教室等内网超低延迟需求，避免让用户配置单独的服务器，大牛直播SDK在推送端支持轻量级RTSP服务SDK，推送端SDK支持的功能，内置轻量级RTSP服务SDK后，功能继续支持(支持H.265)；
  • RTMP/RTSP一对一互动SDK 基于标准协议(RTMP或RTSP)的跨平台(Windows/Andriod/iOS)一对一互动SDK，支持回音消除，完美支持一对一互动场景；
  • SEI扩展数据发送/接收SDK 支持推送端通过H.264 SEI信息扩展，实时传输文本/二进制数据信息(如实时字幕/时间戳/题目分发/公告广播等)，播放端做相应解析和回显。

iOS端

  • RTMP直播推流端SDK iOS屏幕(基于ReplayKit)、摄像头RTMP推流SDK;
  • RTMP直播播放器SDK 业内首屈一指的RTMP超低延迟直播播放器SDK(支持RTMP H.265扩展播放);
  • RTSP直播播放器SDK 支持RTSP H.265播放及扩展录像、业内为数不多真正好用的RTSP播放器SDK;
  • Unity3D RTMP/RTSP直播播放器SDK 业内为数不多的iOS支持Unity3D的超低延迟RTMP/RTSP直播播放器SDK，支持快照、录像、实时静音、view旋转、快速切换URL等特性;
  • 录像SDK 支持拉取rtmp/rtsp流实时录像模块/实时快照功能，支持纯音频、纯视频、音视频录制模式，支持音频(PCMU/PCMA,Speex等)转AAC后再录像，业内为数不多的支持RTSP/RTMP H.265录制到MP4文件的录像SDK；
  • RTMP/RTSP多路流媒体转RTMP推送SDK 支持实时拉取的rtmp/rtsp流转发到指定rtmp url;
  • 轻量级RTSP服务SDK 为满足内网无纸化/电子教室等内网超低延迟需求，避免让用户配置单独的服务器，大牛直播SDK在推送端支持轻量级RTSP服务SDK，推送端SDK支持的功能，内置轻量级RTSP服务SDK后，功能继续支持；
  • 内网RTSP网关SDK 内网RTSP网关SDK，系内置轻量级RTSP服务SDK扩展，完成外部RTSP/RTMP数据拉取并注入到轻量级RTSP服务SDK工作，多个内网客户端直接访问内网轻量级RTSP服务获取公网数据，无需部署单独的服务器，支持RTSP/RTMP H.265数据接入；
  • RTMP/RTSP一对一互动SDK 基于标准协议(RTMP或RTSP)的跨平台(Windows/Andriod/iOS)一对一互动SDK，支持回音消除，完美支持一对一互动场景；
  • SEI扩展数据发送/接收SDK 支持推送端通过H.264 SEI信息扩展，实时传输文本/二进制数据信息(如实时字幕/时间戳/题目分发/公告广播等)，播放端做相应解析和回显。

相关模块：

1. Windows平台测试EXE：

  • [SmartPublisherDemo.exe] RTMP|RTSP推送、轻量级RTSP服务、扩展SEI发送、采集录像演示程序；
  • [SmartPlayer.exe] RTMP|RTSP播放SDK、扩展SEI接收、拉流录像演示程序；
  • [SmartStreamRelayDemo.exe] 多路RTSP|RTMP转RTMP推送演示程序；
  • [SmartMixStreamDemo.exe] RTMP|RTSP拉流然后和本地摄像头或屏幕合流演示程序；
  • [SmartEchoCancellation.exe] 基于标准RTMP服务的一对一互动演示程序（demo源码以C#为例）；
  • [Windows平台RTMP|RTSP 4路播放演示程序] Windows 4路RTSP/RTMP播放Demo；
  • [Windows平台IE浏览器OCX控件RTMP|RTSP播放测试程序] Windows平台RTMP|RTSP播放SDK OCX控件。

2.Windows平台集成对接DEMO：

  • [Windows平台C++ SDK demo工程代码] Windows平台RTMP|RTSP推送SDK、内置RTSP服务SDK、录像SDK(C++) Demo工程；
  • [Windows平台C++ SDK demo工程代码] Windows平台RTMP|RTSP播放SDK(C++) Demo工程；
  • [Windows平台C++ SDK demo工程代码] Windows平台多路RTSP|RTMP转RTMP推送模块SDK(C++) Demo工程；
  • [Windows平台C++ SDK demo工程代码] Windows平台混流SDK(C++) Demo工程；
  • [Windows平台C# SDK demo工程代码] Windows平台RTMP|RTSP推送SDK、内置RTSP服务SDK、录像SDK(C#) Demo工程；
  • [Windows平台C# SDK demo工程代码] Windows平台RTMP|RTSP播放SDK(C#) Demo工程；
  • [Windows平台C# SDK demo工程代码] Windows平台多路RTSP|RTMP转RTMP推送模块SDK(C#) Demo工程；
  • [Windows平台一对一互动SDK demo工程代码(以C#为例)] 基于标准RTMP服务的一对一互动demo，可扩展RTSP一对一互动；

3.Android平台集成对接DEMO：

对应Android Studio DEMO工程说明：

  • SmartPlayerV2: RTMP|RTSP直播播放SDK demo，涵盖实时录像、快照、扩展SEI数据接收等功能；
  • SmartPublisherV2: RTMP直播推送SDK、RTSP直播推送SDK、GB28181接入SDK、轻量级RTSP服务SDK、扩展SEI发送SDK、实时录像SDK多合一demo；
  • SmartEchoCancellationV2: 基于RTMP的一对一互动demo(可扩展RTSP一对一互动)；
  • SmartServiceCameraPublisherV2: 后台摄像头RTMP直播推送SDK；
  • SmartServicePublisherV2: 智慧教室|无纸化会议等屏幕采集(推屏) 、RTMP直播推送demo；
  • SmartRelayDemoV2: RTMP|RTSP直播播放SDK、RTMP|RTSP转RTMP推送SDK、RTMP|RTSP实时录像、轻量级RTSP服务四合一demo。

4.iOS平台集成对接DEMO：

  • SmartiOSPlayerV2: RTMP|RTSP直播播放SDK demo，涵盖实时录像、快照、扩展SEI数据接收等功能；
  • SmartiOSPublisherV2: RTMP直播推送SDK、RTSP直播推送SDK、轻量级RTSP服务SDK、扩展SEI发送SDK、实时录像SDK多合一demo；
  • SmartiOSEchoCancellation: 基于RTMP的一对一互动demo(可扩展RTSP一对一互动)；
  • SmartiOSScreenPublisherV2: 基于ReplayKit采集的智慧教室|无纸化会议等屏幕采集(推屏) 、RTMP直播推送demo；
  • SmartiOSRelayDemoV2: RTMP|RTSP直播播放SDK、RTMP|RTSP转RTMP推送SDK、RTMP|RTSP实时录像、轻量级RTSP服务四合一demo。

大牛直播SDK集成和调用说明

平台扩展

除了Windows/Linux/Android/iOS Native SDK，大牛直播SDK发布了Unity环境下的RTMP推流|轻量级RTSP服务（Windows平台+Linux平台+Android平台）和RTMP|RTSP拉流（Windows、Linux、Android和iOS平台全覆盖）低延迟的解决方案。

目前，大牛直播SDK的Unity3D环境下，已覆盖以下SDK：

  • Windows平台RTMP直播推送SDK（采集Unity窗体、摄像头或屏幕）;
  • Windows平台轻量级RTSP服务SDK（采集Unity窗体、摄像头或屏幕）;
  • Windows平台RTMP|RTSP直播播放SDK；
  • Linux平台RTMP直播推送SDK（采集Unity窗体、Unity声音）;
  • Linux平台RTMP|RTSP直播播放SDK；
  • Android平台RTMP直播推送SDK（采集Unity窗体、摄像头、麦克风或Unity声音）；
  • Android平台轻量级RTSP服务SDK（采集Unity窗体、摄像头、麦克风或Unity声音）；
  • Android平台RTMP|RTSP直播播放SDK；
  • iOS平台RTMP|RTSP直播播放SDK。

总结

厚积薄发，登上山顶，不是为了饱览风光，是为了寻找更高的山峰，从敬畏到颠覆，以匠人之心，专注、极致、智慧，志在成为业内为数不多真正靠谱的流媒体技术方案提供商。

文章标签：
音视频终端 SDK
开发工具
Windows
Android开发
图形学
iOS开发
音视频牛哥
目录
相关文章
阿里云存储
|
存储 缓存 文件存储
如何保证分布式文件系统的数据一致性
分布式文件系统需要向上层应用提供透明的客户端缓存，从而缓解网络延时现象，更好地支持客户端性能水平扩展，同时也降低对文件服务器的访问压力。当考虑客户端缓存的时候，由于在客户端上引入了多个本地数据副本（Replica)，就相应地需要提供客户端对数据访问的全局数据一致性。
阿里云存储
32714 80
如何保证分布式文件系统的数据一致性
豆约翰
|
前端开发 容器
HTML5+CSS3前端入门教程---从0开始通过一个商城实例手把手教你学习PC端和移动端页面开发第8章FlexBox布局（上）
HTML5+CSS3前端入门教程---从0开始通过一个商城实例手把手教你学习PC端和移动端页面开发第8章FlexBox布局
豆约翰
17766 21
游客az45invlwmno4
|
设计模式 存储 监控
设计模式（C++版）
看懂UML类图和时序图30分钟学会UML类图设计原则单一职责原则定义：单一职责原则，所谓职责是指类变化的原因。如果一个类有多于一个的动机被改变，那么这个类就具有多于一个的职责。而单一职责原则就是指一个类或者模块应该有且只有一个改变的原因。bad case：IPhone类承担了协议管理（Dial、HangUp）、数据传送（Chat）。good case：里式替换原则定义：里氏代换原则(Liskov 
游客az45invlwmno4
36697 21
设计模式（C++版）
有礼貌的灰绅士
|
存储 编译器 C语言
抽丝剥茧C语言（初阶 下）（下）
抽丝剥茧C语言（初阶 下）
有礼貌的灰绅士
17612 8
汀丶人工智能
|
机器学习/深度学习 人工智能 自然语言处理
带你简单了解Chatgpt背后的秘密：大语言模型所需要条件（数据算法算力）以及其当前阶段的缺点局限性
带你简单了解Chatgpt背后的秘密：大语言模型所需要条件（数据算法算力）以及其当前阶段的缺点局限性
汀丶人工智能
24772 14
指剑
|
机器学习/深度学习 弹性计算 监控
重生之---我测阿里云U1实例(通用算力型)
阿里云产品全线降价的一力作，2023年4月阿里云推出新款通用算力型ECS云服务器Universal实例，该款服务器的真实表现如何？让我先测为敬！
指剑
36678 15
重生之---我测阿里云U1实例(通用算力型)
倚天架构-张先国
|
SQL 存储 弹性计算
Redis性能高30%，阿里云倚天ECS性能摸底和迁移实践
Redis在倚天ECS环境下与同规格的基于 x86 的 ECS 实例相比，Redis 部署在基于 Yitian 710 的 ECS 上可获得高达 30% 的吞吐量优势。成本方面基于倚天710的G8y实例售价比G7实例低23%，总性价比提高50%；按照相同算法，相对G8a，性价比为1.4倍左右。
倚天架构-张先国
36611 46
码界西柚
|
存储 算法 Java
【分布式技术专题】「分布式技术架构」手把手教你如何开发一个属于自己的限流器RateLimiter功能服务
随着互联网的快速发展，越来越多的应用程序需要处理大量的请求。如果没有限制，这些请求可能会导致应用程序崩溃或变得不可用。因此，限流器是一种非常重要的技术，可以帮助应用程序控制请求的数量和速率，以保持稳定和可靠的运行。
码界西柚
29850 52

视觉智能

热门文章

最新文章

  • 1
    OPENCV图像处理提高(一）图像增强
  • 2
    图像文字识别(OCR)用什么算法小结
  • 3
    [AR]ImageTarget(图像识别)
  • 4
    阿里云达摩院资深算法专家浅谈：视觉生产技术探索及应用
  • 5
    图像识别试验 - 字符验证码、车牌号、身份证号
  • 6
    【图像识别】告诉你机器如何看见这个世界
  • 7
    使用图像文字识别技术获取失信黑名单
  • 8
    想尝试搭建图像识别系统？这里有一份TensorFlow速成教程
  • 9
    Double DIP ——一种无监督层图像分割 AI 技术
  • 10
    带你读《深度学习与图像识别：原理与实践》之一：机器视觉在行业中的应用
  • 1
    【AI加持】基于PyQt5+YOLOv8+DeepSeek的摔倒行为检测系统（详细介绍）
    28
  • 2
    企业如何抓住AI红利？阿里云权益中心深度解读与实战指南
    108
  • 3
    基于端侧 AI 与云边协同的电力智能巡检解决方案实践
    140
  • 4
    AI解说大师Agent Skill详解：如何让智能体具备自主任务规划能力？
    257
  • 5
    电路设计调试：那些书本上没写，但实际中常踩的坑
    111
  • 6
    辐射超标、静电复位等等这些EMC问题背后藏着什么？
    115
  • 7
    AR 眼镜多模态融合：视觉、语音与 IMU 的端侧协同实践
    157
  • 8
    协作机器人和工业机器人的区别
    234
  • 9
    边缘AI算法在工业AR眼镜中的部署实践：从模型轻量化到端侧推理
    366
  • 10
    AutoGod:安卓5-16全兼容！一站式自动化框架，开发效率直接拉满
    354

    • 相关电子书

    更多
  • 低代码开发师（初级）实战教程
  • 冬季实战营第三期：MySQL数据库进阶实战
  • 阿里巴巴DevOps 最佳实践手册
    • 下一篇
    开通oss服务