AI 助理
备案控制台
开发者社区 视觉智能 文章 正文

【2015~2024】大牛直播SDK演化史

2024-08-13 184
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
视觉智能开放平台，视频资源包5000点
视觉智能开放平台，图像资源包5000点
视觉智能开放平台，分割抠图1万点
简介： 大牛直播SDK始创于2015年，旨在提供低延迟的RTMP推拉流解决方案，特别适用于毫秒级延迟的应用场景。初始版本针对Android平台实现RTMP直播推送，随后扩展至Windows、iOS和Linux平台，支持RTMP与RTSP播放器，延迟稳定在一秒以内。SDK涵盖实时推流、播放、GB28181设备接入、录像、多路流媒体转发、轻量级RTSP服务等多种功能，并支持H.265编码格式。该SDK适用于在线教育、智慧安防等多个行业场景，并已发展成为GitHub上获得超过10000星标的强大跨平台流媒体内核直播SDK。

大牛直播SDK的由来

大牛直播SDK始于2015年，最初我们只是想做个低延迟的RTMP推拉流解决方案，用于移动单兵等毫秒级延迟的场景下，我们先是实现了Android平台RTMP直播推送模块，当我们用市面上可以找到的RTMP播放器测试时延的时候，居然都要6-7秒延迟，这在直播场景下，几乎是不可接受的，所以我们有了做RTMP直播播放器的想法。

最早我们是实现了Windows平台RTMP直播播放，整体延迟，控制在几百毫秒，然后是Android和iOS平台，再后来，覆盖了Linux平台。

RTMP推流模块，也从Android平台慢慢覆盖了Windows、Android、iOS和Linux，从单纯的采集摄像头，到屏幕，再到Unity窗体。

模块覆盖了轻量级RTSP服务、RTSP播放、一对一互动、推拉流录像、GB28181设备接入模块等。

image.gif

至此，大牛直播SDK已经成为Github过10000⭐的超强全自研跨平台流媒体内核直播SDK。

我们致力于传统行业极致体验的音视频直播技术解决方案，产品涵盖跨平台的实时RTMP推流、RTMP/RTSP直播播放(支持RTSP/RTMP H.265)、GB28181设备接入、实时录像、多路流媒体转发(RTSP转RTMP，RTMP转RTMP，RTSP|RTMP转GB28181)、音视频导播、动态视频合成、音频混音、一对一互动直播、内置轻量级RTSP服务、RTSP网关服务等，比快更快，业界真正靠谱的超低延迟直播SDK。

场景覆盖在线教育、智慧教室|无纸化推屏|会议、运营商视频云平台、执法记录、电力巡检、智慧水利、智慧煤矿、管廊隧道、虚拟仿真实训教学、VR教育、云展会、金融双录、远程医疗、智能可视门禁对讲、智慧安防、智能家居、物联网、智能车载、传统硬件领域、媒体移动直播、应急指挥调度(针对保险、城管、交警、消防、公安等职能管理部门的单兵应急执法系统)、远程专家诊断、可视化巡检、(如电信/电力线路/铁路沿线/水利设施/油田/消防设施巡检)、移动视频安防监控，企业内训、监控对接等。

我们做了什么

支持平台架构

支持平台 支持架构
Windows平台 x86 debug/release, x64 debug/release
Linux(含麒麟操作系统) x86_64, aarch64
Android平台 armeabi-v7a, arm64-v8a, x86, x86_64
iOS平台 arm64

最新Release Note：

大牛直播SDK Release note

Windows端

  • RTMP直播推流SDK RTMP推送SDK(支持同时推多路url，支持RTMP扩展H.265推送))；
  • RTMP直播播放器SDK 业内首屈一指的RTMP超低延迟直播播放器SDK(支持RTMP H.265扩展播放)；
  • RTSP直播播放器SDK 支持RTSP H.265播放及扩展录像、业内为数不多真正好用的RTSP播放器SDK，支持IE浏览器OCX控件接口调用；
  • Unity3D RTMP/RTSP直播播放器SDK 业内为数不多的Windows支持Unity3D的超低延迟RTMP/RTSP直播播放器SDK，支持快照、录像、实时静音、view旋转、快速切换URL等特性；
  • RTMP/RTSP多路流媒体转RTMP推送SDK 支持同时多路拉取rtmp/rtsp流/本地flv文件，并分别转发到服务器，业内为数不多支持RTSP/RTMP H.265拉流转发的SDK；
  • 轻量级RTSP服务SDK 为满足内网无纸化/电子教室等内网超低延迟需求，避免让用户配置单独的服务器，大牛直播SDK在推送端支持轻量级RTSP服务SDK，推送端SDK支持的功能，内置轻量级RTSP服务SDK后，功能继续支持，windows端特定机型支持RTSP H.265视频输出，支持单播和组播模式；
  • 内网RTSP网关SDK 内网RTSP网关SDK，系内置轻量级RTSP服务SDK扩展，完成外部RTSP/RTMP数据拉取并注入到轻量级RTSP服务SDK工作，多个内网客户端直接访问内网轻量级RTSP服务获取公网数据，无需部署单独的服务器，支持RTSP/RTMP H.265数据接入，支持单播和组播模式；
  • 导播SDK 数据源：1. rtmp/rtsp音视频流；2. 本地屏幕/摄像头/音频数据；3.本地flv文件；多路流合成一路实时导播推送；
  • 录像SDK 支持拉取rtmp/rtsp流实时录像模块/实时快照功能，支持纯音频、纯视频、音视频录制模式，支持音频(PCMU/PCMA,Speex等)转AAC后再录像，业内为数不多的支持RTSP/RTMP H.265录制到MP4文件的录像SDK；
  • RTMP/RTSP一对一互动SDK 基于标准协议(RTMP或RTSP)的跨平台(Windows/Andriod/iOS)一对一互动SDK，支持回音消除，完美支持一对一互动场景；
  • SEI扩展数据发送/接收SDK 支持推送端通过H.264 SEI信息扩展，实时传输文本/二进制数据信息(如实时字幕/时间戳/题目分发/公告广播等)，播放端做相应解析和回显；

Linux|麒麟操作系统

  • RTMP直播推流SDKRTMP推送SDK(支持推送屏幕、摄像头数据，支持RTMP扩展H.265推送)；
  • RTMP直播播放器SDK业内首屈一指的RTMP超低延迟直播播放器SDK(支持RTMP H.265扩展播放)；
  • RTSP直播播放器SDK支持RTSP H.265播放及扩展录像、业内为数不多真正好用的RTSP播放器SDK；
  • [RTMP/RTSP多路流媒体转RTMP推送SDK]支持同时多路拉取rtmp/rtsp流，并分别转发到服务器，业内为数不多支持RTSP/RTMP H.265拉流转发的SDK；
  • 轻量级RTSP服务SDK 为满足内网无纸化/电子教室等内网超低延迟需求，避免让用户配置单独的服务器，大牛直播SDK在推送端支持轻量级RTSP服务SDK，推送端SDK支持的功能，内置轻量级RTSP服务SDK后，功能继续支持；
  • [录像SDK]支持拉取rtmp/rtsp流实时录像模块/实时快照功能，支持纯音频、纯视频、音视频录制模式，支持音频(PCMU/PCMA,Speex等)转AAC后再录像，业内为数不多的支持RTSP/RTMP H.265录制到MP4文件的录像SDK。

Android端

  • RTMP直播推流端SDK Android屏幕、摄像头RTMP推流SDK，支持RTMP扩展H.265推送(H.265硬编码)；
  • GB28181接入SDK Android屏幕、摄像头编码注册接入到GB28181服务平台；
  • RTMP直播播放器SDK 业内首屈一指的RTMP超低延迟直播播放器SDK(支持RTMP H.265扩展播放)；
  • RTSP直播播放器SDK 支持RTSP H.265播放及扩展录像、业内为数不多真正好用的RTSP播放器SDK;
  • Android平台外部编码数据实时预览播放SDK 外部编码后音视频数据（视频：H.264/H.265，音频：AAC/PCMA/PCMU）实时预览播放SDK;
  • Unity3D RTMP/RTSP直播播放器SDK 业内为数不多的Android支持Unity3D的超低延迟RTMP/RTSP直播播放器SDK，支持快照、录像、实时静音、view旋转、快速切换URL等特性;
  • 录像SDK 支持拉取rtmp/rtsp流实时录像模块/实时快照功能，支持纯音频、纯视频、音视频录制模式，支持音频(PCMU/PCMA,Speex等)转AAC后再录像，业内为数不多的支持RTSP/RTMP H.265录制到MP4文件的录像SDK；
  • RTMP/RTSP多路流媒体转RTMP推送SDK 支持实时拉取的rtmp/rtsp流转发到指定rtmp url;
  • 轻量级RTSP服务SDK 为满足内网无纸化/电子教室等内网超低延迟需求，避免让用户配置单独的服务器，大牛直播SDK在推送端支持轻量级RTSP服务SDK，推送端SDK支持的功能，内置轻量级RTSP服务SDK后，功能继续支持(支持H.265)；
  • RTMP/RTSP一对一互动SDK 基于标准协议(RTMP或RTSP)的跨平台(Windows/Andriod/iOS)一对一互动SDK，支持回音消除，完美支持一对一互动场景；
  • SEI扩展数据发送/接收SDK 支持推送端通过H.264 SEI信息扩展，实时传输文本/二进制数据信息(如实时字幕/时间戳/题目分发/公告广播等)，播放端做相应解析和回显。

iOS端

  • RTMP直播推流端SDK iOS屏幕(基于ReplayKit)、摄像头RTMP推流SDK;
  • RTMP直播播放器SDK 业内首屈一指的RTMP超低延迟直播播放器SDK(支持RTMP H.265扩展播放);
  • RTSP直播播放器SDK 支持RTSP H.265播放及扩展录像、业内为数不多真正好用的RTSP播放器SDK;
  • Unity3D RTMP/RTSP直播播放器SDK 业内为数不多的iOS支持Unity3D的超低延迟RTMP/RTSP直播播放器SDK，支持快照、录像、实时静音、view旋转、快速切换URL等特性;
  • 录像SDK 支持拉取rtmp/rtsp流实时录像模块/实时快照功能，支持纯音频、纯视频、音视频录制模式，支持音频(PCMU/PCMA,Speex等)转AAC后再录像，业内为数不多的支持RTSP/RTMP H.265录制到MP4文件的录像SDK；
  • RTMP/RTSP多路流媒体转RTMP推送SDK 支持实时拉取的rtmp/rtsp流转发到指定rtmp url;
  • 轻量级RTSP服务SDK 为满足内网无纸化/电子教室等内网超低延迟需求，避免让用户配置单独的服务器，大牛直播SDK在推送端支持轻量级RTSP服务SDK，推送端SDK支持的功能，内置轻量级RTSP服务SDK后，功能继续支持；
  • 内网RTSP网关SDK 内网RTSP网关SDK，系内置轻量级RTSP服务SDK扩展，完成外部RTSP/RTMP数据拉取并注入到轻量级RTSP服务SDK工作，多个内网客户端直接访问内网轻量级RTSP服务获取公网数据，无需部署单独的服务器，支持RTSP/RTMP H.265数据接入；
  • RTMP/RTSP一对一互动SDK 基于标准协议(RTMP或RTSP)的跨平台(Windows/Andriod/iOS)一对一互动SDK，支持回音消除，完美支持一对一互动场景；
  • SEI扩展数据发送/接收SDK 支持推送端通过H.264 SEI信息扩展，实时传输文本/二进制数据信息(如实时字幕/时间戳/题目分发/公告广播等)，播放端做相应解析和回显。

相关模块：

1. Windows平台测试EXE：

  • [SmartPublisherDemo.exe] RTMP|RTSP推送、轻量级RTSP服务、扩展SEI发送、采集录像演示程序；
  • [SmartPlayer.exe] RTMP|RTSP播放SDK、扩展SEI接收、拉流录像演示程序；
  • [SmartStreamRelayDemo.exe] 多路RTSP|RTMP转RTMP推送演示程序；
  • [SmartMixStreamDemo.exe] RTMP|RTSP拉流然后和本地摄像头或屏幕合流演示程序；
  • [SmartEchoCancellation.exe] 基于标准RTMP服务的一对一互动演示程序（demo源码以C#为例）；
  • [Windows平台RTMP|RTSP 4路播放演示程序] Windows 4路RTSP/RTMP播放Demo；
  • [Windows平台IE浏览器OCX控件RTMP|RTSP播放测试程序] Windows平台RTMP|RTSP播放SDK OCX控件。

2.Windows平台集成对接DEMO：

  • [Windows平台C++ SDK demo工程代码] Windows平台RTMP|RTSP推送SDK、内置RTSP服务SDK、录像SDK(C++) Demo工程；
  • [Windows平台C++ SDK demo工程代码] Windows平台RTMP|RTSP播放SDK(C++) Demo工程；
  • [Windows平台C++ SDK demo工程代码] Windows平台多路RTSP|RTMP转RTMP推送模块SDK(C++) Demo工程；
  • [Windows平台C++ SDK demo工程代码] Windows平台混流SDK(C++) Demo工程；
  • [Windows平台C# SDK demo工程代码] Windows平台RTMP|RTSP推送SDK、内置RTSP服务SDK、录像SDK(C#) Demo工程；
  • [Windows平台C# SDK demo工程代码] Windows平台RTMP|RTSP播放SDK(C#) Demo工程；
  • [Windows平台C# SDK demo工程代码] Windows平台多路RTSP|RTMP转RTMP推送模块SDK(C#) Demo工程；
  • [Windows平台一对一互动SDK demo工程代码(以C#为例)] 基于标准RTMP服务的一对一互动demo，可扩展RTSP一对一互动；

3.Android平台集成对接DEMO：

对应Android Studio DEMO工程说明：

  • SmartPlayerV2: RTMP|RTSP直播播放SDK demo，涵盖实时录像、快照、扩展SEI数据接收等功能；
  • SmartPublisherV2: RTMP直播推送SDK、RTSP直播推送SDK、GB28181接入SDK、轻量级RTSP服务SDK、扩展SEI发送SDK、实时录像SDK多合一demo；
  • SmartEchoCancellationV2: 基于RTMP的一对一互动demo(可扩展RTSP一对一互动)；
  • SmartServiceCameraPublisherV2: 后台摄像头RTMP直播推送SDK；
  • SmartServicePublisherV2: 智慧教室|无纸化会议等屏幕采集(推屏) 、RTMP直播推送demo；
  • SmartRelayDemoV2: RTMP|RTSP直播播放SDK、RTMP|RTSP转RTMP推送SDK、RTMP|RTSP实时录像、轻量级RTSP服务四合一demo。

4.iOS平台集成对接DEMO：

  • SmartiOSPlayerV2: RTMP|RTSP直播播放SDK demo，涵盖实时录像、快照、扩展SEI数据接收等功能；
  • SmartiOSPublisherV2: RTMP直播推送SDK、RTSP直播推送SDK、轻量级RTSP服务SDK、扩展SEI发送SDK、实时录像SDK多合一demo；
  • SmartiOSEchoCancellation: 基于RTMP的一对一互动demo(可扩展RTSP一对一互动)；
  • SmartiOSScreenPublisherV2: 基于ReplayKit采集的智慧教室|无纸化会议等屏幕采集(推屏) 、RTMP直播推送demo；
  • SmartiOSRelayDemoV2: RTMP|RTSP直播播放SDK、RTMP|RTSP转RTMP推送SDK、RTMP|RTSP实时录像、轻量级RTSP服务四合一demo。

大牛直播SDK集成和调用说明

平台扩展

除了Windows/Linux/Android/iOS Native SDK，大牛直播SDK发布了Unity环境下的RTMP推流|轻量级RTSP服务（Windows平台+Linux平台+Android平台）和RTMP|RTSP拉流（Windows、Linux、Android和iOS平台全覆盖）低延迟的解决方案。

目前，大牛直播SDK的Unity3D环境下，已覆盖以下SDK：

  • Windows平台RTMP直播推送SDK（采集Unity窗体、摄像头或屏幕）;
  • Windows平台轻量级RTSP服务SDK（采集Unity窗体、摄像头或屏幕）;
  • Windows平台RTMP|RTSP直播播放SDK；
  • Linux平台RTMP直播推送SDK（采集Unity窗体、Unity声音）;
  • Linux平台RTMP|RTSP直播播放SDK；
  • Android平台RTMP直播推送SDK（采集Unity窗体、摄像头、麦克风或Unity声音）；
  • Android平台轻量级RTSP服务SDK（采集Unity窗体、摄像头、麦克风或Unity声音）；
  • Android平台RTMP|RTSP直播播放SDK；
  • iOS平台RTMP|RTSP直播播放SDK。

总结

厚积薄发，登上山顶，不是为了饱览风光，是为了寻找更高的山峰，从敬畏到颠覆，以匠人之心，专注、极致、智慧，志在成为业内为数不多真正靠谱的流媒体技术方案提供商。

文章标签：
音视频终端 SDK
开发工具
Windows
Android开发
图形学
iOS开发
音视频牛哥
目录
相关文章
千寻简
|
6月前
|
Java API 开发工具
得物开放平台接入得物SDK
得物开放平台、得物SDK、得物PUSH、获取订单、虚拟发货
千寻简
640 1
得物开放平台接入得物SDK
音视频牛哥
|
开发工具
一张图了解大牛直播SDK
来源：https://github.com/daniulive/SmarterStreaming
音视频牛哥
136 0
音视频牛哥
|
3月前
|
编解码 开发工具 C#
[大牛直播SDK]Windows平台RTMP直播推送模块功能设计
大牛直播SDK采用全自研框架，具备高度可扩展性与自适应算法，显著降低延迟并提高采集编码效率。SDK以模块化设计，支持RTMP推流及多种音视频编码格式（如AAC、SPEEX、H.264、H.265），并能与播放器SDK组合实现丰富功能，包括流媒体转发、内置RTSP服务等。提供了详尽的参数配置选项，支持多摄像头、屏幕采集与水印叠加，并兼容Windows 7及以上操作系统。该SDK以C++/C#双接口形式提供，集成简便，同时包含调试与发布版本库，便于开发者快速上手。此外，支持断网重连、实时预览及多种编码前后的数据对接需求。
音视频牛哥
54 0
疯狂的猿
|
6月前
|
安全 Java 开发工具
NEMeeting SDK网易会议 v1.0
NEMeeting SDK网易会议 v1.0
疯狂的猿
74 0
音视频牛哥
|
JSON 开发工具 Android开发
apicloud如何对接大牛直播SDK
随着apicloud的普及，越来越多的用户苦于apicloud下没有一款真正靠谱低延迟的rtmp/rtsp直播播放器苦恼。
音视频牛哥
94 0
monkeyone
|
JavaScript 开发工具
搭建基于SDK网课系统
搭建基于SDK网课系统
monkeyone
260 0
搭建基于SDK网课系统
EdgePlus
|
监控 开发工具
阿里视频云技术专家孙小军：短视频SDK非编架构与渲染引擎技术实现
在6月8日上海云栖视频专场中，阿里视频云技术专家孙小军进行了一场短视频技术分享，解读了短视频非编架构和渲染技术架构的实现原理。阿里云短视频SDK服务了1000多家企业用户，遇到了不同垂直行业、不同业务场景的客户。
EdgePlus
5988 0
拓幻科技
|
算法 开发工具 计算机视觉
动态贴纸SDK带来短视频新潮流
短视频美颜SDK在拥有了人脸识别的技术条件后，动态贴纸更加贴合人脸，使视频更具有趣味性，这也是提升用户留存率和体验感的重要原因之一。人脸识别SDK加上动态贴纸SDK，一站式的开发服务满足用户多变的应用需求，完善的系统解决方案满足不同并发层超低延时需求，让短视频系统轻松实现AR新玩法。
拓幻科技
1806 0
直播开发王玉章
|
编解码 开发工具
短视频SDK架构设计，短视频APP开发目标首选
短视频 SDK 实践中主要做的一些事情，这其中最重要的就是短视频 SDK 的架构设计，包括架构设计理念、架构图、整体数据流程、模块架构设计等。
直播开发王玉章
1878 0
直播开发王玉章
|
编解码 开发工具 Android开发
基于框架式的短视频APP开发 SDK 架构设计实践
直播开发王玉章
2493 0

视觉智能

热门文章

最新文章

  • 1
    【图像识别】告诉你机器如何看见这个世界
  • 2
    带你读《深度学习与图像识别：原理与实践》之一：机器视觉在行业中的应用
  • 3
    YOLOv8改进 | 主干网络 | 增加网络结构增强小目标检测能力【独家创新——附结构图】
  • 4
    ‘通义万相’使用体验——令人惊艳的AI绘画创作大模型
  • 5
    在实际应用中，如何判断是否需要创建信任所有证书的 TrustManager
  • 6
    YOLOv8改进 | 融合模块 | 用Resblock+CBAM卷积替换Conv【轻量化网络】
  • 7
    极智AI | 一文看懂昇腾达芬奇架构计算单元
  • 8
    5款开源BI工具优缺点及介绍
  • 9
    【OpenVI-图像超分实战篇】别用GAN做超分了，快来试试基于扩散模型的图像超分吧！
  • 10
    达摩院CVPR2023人脸重建论文HRN解读——REALY榜单冠军模型
  • 1
    函数式编程
    17
  • 2
    如何创建一个信任所有证书的`TrustManager`
    23
  • 3
    在实际应用中，如何判断是否需要创建信任所有证书的 TrustManager
    77
  • 4
    2024重生之回溯数据结构与算法系列学习之串（12）【无论是王道考研人还是IKUN都能包会的；不然别给我家鸽鸽丟脸好嘛？】
    18
  • 5
    2024重生之回溯数据结构与算法系列学习（11）【无论是王道考研人还是IKUN都能包会的；不然别给我家鸽鸽丟脸好嘛？】
    17
  • 6
    2024重生之回溯数据结构与算法系列学习之栈和队列精题汇总（10）【无论是王道考研人还是IKUN都能包会的；不然别给我家鸽鸽丢脸好嘛？】
    15
  • 7
    2024重生之回溯数据结构与算法系列学习之单双链表精题详解（9）【无论是王道考研人还是IKUN都能包会的；不然别给我家鸽鸽丢脸好嘛？】
    18
  • 8
    2024重生之回溯数据结构与算法系列学习（8）【无论是王道考研人还是IKUN都能包会的；不然别给我家鸽鸽丢脸好嘛？】
    18
  • 9
    2024重生之回溯数据结构与算法系列学习（7）【无论是王道考研人还是IKUN都能包会的；不然别给我家鸽鸽丢脸好嘛？】
    14
  • 10
    2024重生之回溯数据结构与算法系列学习之王道第2.3章节之线性表精题汇总二（5）【无论是王道考研人还是IKUN都能包会的；不然别给我家鸽鸽丢脸好嘛？】
    12

    • 相关课程

    更多
  • 天池大赛平台产品使用说明
  • 百炼实训营--进阶版
  • HaaS智能硬件开发训练营
  • 开放语聊技术与应用
  • 阿里极客的AI最新玩法解读
  • 阿里小蜜中的机器阅读技术

    • 相关电子书

    更多
  • 网易云音乐音视频算法处理的 Serverless 探索之路
  • 优酷质保秘籍
  • 阿里小程序繁星计划-高德小程序

    • 相关实验场景

    更多
  • 【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
  • SAE 极速部署专属 AI 证件照神器
  • 借助OSS搭建在线教育视频课程分享网站
  • 重温童年的“五子棋”，赢取专属阿里云Serverless证书
  • EMAS Serverless搭建《私人云相册》小程序
  • 零基础入门Serverless：一键部署红白机小游戏
    • 下一篇
    无影云桌面