麒麟操作系统|Linux下低延时RTMP|RTSP直播播放实现

简介: 国产操作系统多为以Linux为基础二次开发的操作系统。2014年4月8日起,美国微软公司停止了对Windows XP SP3操作系统提供服务支持,这引起了社会和广大用户的广泛关注和对信息安全的担忧。而2020年对Windows7服务支持的终止再一次推动了国产系统的发展。

背景

       国产操作系统多为以Linux为基础二次开发的操作系统。2014年4月8日起,美国微软公司停止了对Windows XP SP3操作系统提供服务支持,这引起了社会和广大用户的广泛关注和对信息安全的担忧。而2020年对Windows7服务支持的终止再一次推动了国产系统的发展。

      工信部对此表示,将继续加大力度,支持Linux的国产操作系统的研发和应用,并希望用户可以使用国产操作系统。随着信息技术和互联网的快速发展普及,电子商务已经成为不可抗拒的现代商业潮流,云计算、大数据应用日趋成熟,但随之带来了许多问题和挑战。为全面响应国家“互联网+”战略的提出和深入贯彻落实国家“十二五”规划纲要,帮助传统企业开展“商务智慧转型”,加强电子商务深入应用,特别是移动电子商务发展中的环境保障建设,促进电子商务行业健康有序发展,使电子商务相关的技术和经济、法律和规则、诚信和信誉及如何建立一个安全、可靠、可信的电子商务环境,保障电子商务活动中系统、交易的安全性,信息的保密性,已经成为当前亟待需要探讨和解决的重要课题。

国产操作系统|Linux下RTMP|RTSP直播播放

      在发布国产操作系统|Linux平台的RTMP|RTSP直播播放SDK之前,大牛直播SDK(官方)的直播播放SDK无需赘述,采用自研内核框架,功能齐全、高稳定、超低延迟、超低资源占用,覆盖Windows、Android和iOS平台。


      本次发布的可用于国产操作系统和Linux上的的RTMP|RTSP直播播放SDK, 视频绘制使用XLib相关库实现, 音频输出使用PulseAudio和Alsa Lib实现,除了常规功能如实时静音、快照、buffer time设定、网络自动重连等,RTMP支持扩展H265播放, RTSP也支持H265播放。


      播放器接口和调用都比较简单,集成复杂度低,且不依赖于QT。

相关DEMO

       大牛直播SDK发布的Linux平台播放器SDK支持多实例播放,以单个窗体播放为例,相关代码如下:

const char* player_url_ = "rtsp://admin:daniulive12345@192.168.0.120:554/h264/ch1/main/av_stream";
int main(int argc, char *argv[])
{
  XInitThreads(); // X支持多线程, 必须调用
  NT_SDKLogInit();
  // SDK初始化
  SmartPlayerSDKAPI player_api;
  if (!NT_PlayerSDKInit(player_api))
  {
    fprintf(stderr, "SDK init failed.\n");
    return 0;
  }
  auto display = XOpenDisplay(nullptr);
  if (!display)
  {
    fprintf(stderr, "Cannot connect to X server\n");
    player_api.UnInit();
    return 0;
  }
  display_ = display;
  auto screen = DefaultScreen(display);
  auto root = XRootWindow(display, screen);
  XWindowAttributes root_win_att;
  if (!XGetWindowAttributes(display, root, &root_win_att))
  {
    fprintf(stderr, "Get Root window attri failed\n");
    player_api.UnInit();
    XCloseDisplay(display);
    return 0;
  }
  if (root_win_att.width < 100 || root_win_att.height < 100)
  {
    fprintf(stderr, "Root window size error.\n");
    player_api.UnInit();
    XCloseDisplay(display);
    return 0;
  }
  fprintf(stdout, "Root Window Size:%d*%d\n", root_win_att.width, root_win_att.height);
  int main_w = root_win_att.width / 2, main_h = root_win_att.height / 2;
  auto black_pixel = BlackPixel(display, screen);
  auto white_pixel = WhitePixel(display, screen);
  main_wid_ = XCreateSimpleWindow(display, root, 0, 0, main_w, main_h, 0, white_pixel, black_pixel);
  if (!main_wid_)
  {
    fprintf(stderr, "Cannot Create Main Window\n");
    player_api.UnInit();
    XCloseDisplay(display);
    return 0;
  }
  XSelectInput(display, main_wid_, StructureNotifyMask | KeyPressMask);
  auto sub_wid = CreateSubWindow(display, screen, main_wid_);
  if (!sub_wid)
  {
    fprintf(stderr, "Cannot Create Render Window\n");
    player_api.UnInit();
    XDestroyWindow(display, main_wid_);
    XCloseDisplay(display);
    return 0;
  }
  XMapWindow(display, main_wid_);
  XStoreName(display, main_wid_, win_base_title);
  XMapWindow(display, sub_wid);
  NT_HANDLE handle = nullptr;
  // 打开一个播放实例,可以Open多个播放实例, 然后播放多路
  if (NT_ERC_OK != player_api.Open(&handle, 0, nullptr))
  {
    player_api.UnInit();
    fprintf(stderr, "player_api.Open failed!\n");
    XDestroyWindow(display, sub_wid);
    XDestroyWindow(display, main_wid_);
    XCloseDisplay(display);
    return 0;
  }
  player_api.SetEventCallBack(handle, nullptr, &NT_OnSDKEventHandle);
  player_api.SetVideoSizeCallBack(handle, nullptr, &NT_SDKVideoSizeHandle);
  player_api.SetReportDownloadSpeed(handle, 1, 5); // 5秒上报一次下载速度
  player_api.SetRtspTimeout(handle, 15);
  player_api.SetRtspAutoSwitchTcpUdp(handle, 1);
  player_api.SetBuffer(handle, 0); // 设置缓存
  player_api.SetIsOutputAudioDevice(handle, 1);
  player_api.SetAudioOutputLayer(handle, 0); // 使用pluse 或者 alsa播放, 两个可以选择一个
  //player_api.SetAudioVolume(handle, 100);
  player_api.SetURL(handle, player_url_); // 设置播放地址, rtsp或者rtmp地址
  player_api.SetXDisplay(handle, display);
  player_api.SetXScreenNumber(handle, screen);
  player_api.SetRenderXWindow(handle, sub_wid); // 设置绘制的X窗口
  player_api.SetRenderScaleMode(handle, 1); // 按比例绘制或者全填充
  player_api.SetRenderTextureScaleFilterMode(handle, 3); 
  player_api.SetFastStartup(handle, 1);
  player_api.SetLowLatencyMode(handle, 0);
  if (NT_ERC_OK != player_api.StartPlay(handle))
  {
    player_api.Close(handle);
    handle = nullptr;
    player_api.UnInit();
    fprintf(stderr, "player_api.StartPlay failed!\n");
    XDestroyWindow(display, sub_wid);
    XDestroyWindow(display, main_wid_);
    XCloseDisplay(display);
    return 0;
  }
  while (true)
  {
    while (MY_X11_Pending(display, 10))
    {
      XEvent xev;
      memset(&xev, 0, sizeof(xev));
      XNextEvent(display, &xev);
      if (xev.type == ConfigureNotify)
      {
        if (xev.xconfigure.window == main_wid_)
        {
          if (xev.xconfigure.width != main_w || xev.xconfigure.height != main_h)
          {
            main_w = xev.xconfigure.width;
            main_h = xev.xconfigure.height;
            XMoveResizeWindow(display, sub_wid, 0, 0, main_w-4, main_h-4);
          }
        }
        else
        {
          if (sub_wid == xev.xconfigure.window)
          {
            player_api.OnWindowSize(handle, xev.xconfigure.width, xev.xconfigure.height);
          }
        }
      }
      else if (xev.type == KeyPress)
      {
        if (xev.xkey.keycode == XKeysymToKeycode(display, XK_Escape))
        {
          fprintf(stdout, "ESC Key Press\n");
          if (handle != nullptr)
          {
            player_api.StopPlay(handle); // 停止播放
            player_api.Close(handle);
            handle = nullptr;
          }
          XDestroyWindow(display, sub_wid);
          XDestroyWindow(display, main_wid_);
          XCloseDisplay(display);
          player_api.UnInit();
          fprintf(stdout, "Close Player....\n");
          return 0;
        }
      }
    }
  }
}

日志设置和SDK Init相关

void NT_SDKLogInit()
{
  SmartLogAPI log_api;
  memset(&log_api, 0, sizeof(log_api));
  GetSmartLogAPI(&log_api);
  log_api.SetLevel(SL_INFO_LEVEL);
  log_api.SetPath((NT_PVOID)"./");
}
bool NT_PlayerSDKInit(SmartPlayerSDKAPI& player_api)
{
  memset(&player_api, 0, sizeof(player_api));
  GetSmartPlayerSDKAPI(&player_api);
  auto ret = player_api.Init(0, nullptr);
  if (NT_ERC_OK != ret)
  {
    fprintf(stderr, "player_api.Init failed!\n");
    return false;
  }
  else
  {
    fprintf(stdout, "player_api.Init ok!\n");
  }
  return true;
}


窗体相关

Display* display_ = nullptr;
Window   main_wid_ = None;
const char* win_base_title = "Rtmp/Rtsp Live Player Demo";
int EventPoll(int fd, bool is_write, int timeout_ms)
{
  int result;
  do
  {
    struct pollfd info;
    info.fd = fd;
    if (is_write)
    {
      info.events = POLLOUT;
    }
    else
    {
      info.events = POLLIN | POLLPRI;
    }
    result = poll(&info, 1, timeout_ms);
  } while (result < 0 && errno == EINTR);
  return result;
}
bool MY_X11_Pending(Display* display, int timeout_ms)
{
  XFlush(display);
  if (XEventsQueued(display, QueuedAlready) > 0)
  {
    return true;
  }
  if (EventPoll(ConnectionNumber(display), false, timeout_ms))
  {
    if (XPending(display) > 0)
    {
      return true;
    }
  }
  return false;
}
Window CreateSubWindow(Display* display, int screen, Window parent)
{
  XWindowAttributes  parent_win_att;
  XGetWindowAttributes(display, parent, &parent_win_att);
  fprintf(stdout, "parent w:%d, h:%d\n", parent_win_att.width, parent_win_att.height);
  XSetWindowAttributes swa;
  swa.border_pixel = WhitePixel(display, screen);
  swa.event_mask = KeyPressMask | StructureNotifyMask;
  return XCreateWindow(display, parent, 0, 0, parent_win_att.width-4, parent_win_att.height-4,
    2, parent_win_att.depth, InputOutput, parent_win_att.visual, CWEventMask | CWBorderPixel, &swa);
}


Event回调

void NT_OnSDKEventHandle(NT_HANDLE handle, NT_PVOID user_data,
  NT_UINT32 event_id,
  NT_INT64  param1,
  NT_INT64  param2,
  NT_UINT64 param3,
  NT_PCSTR  param4,
  NT_PCSTR  param5,
  NT_PVOID  param6
  )
{
  if (NT_SP_E_EVENT_ID_DOWNLOAD_SPEED == event_id)
  {
    fprintf(stdout, "OnSDKEventHandle handle:%p speed:%lldkbps, %lldKB/s. \r", handle, (param1 * 8) / 1000, param1 / 1024);
    fflush(stdout);
  }
}


视频分辨率回调

void NT_SDKVideoSizeHandle(NT_HANDLE handle, NT_PVOID userData,
  NT_INT32 width, NT_INT32 height)
{
  if (display_ && main_wid_)
  {
    std::ostringstream ss;
    ss << win_base_title << "  [Video Size: " << width << "*" << height << " ]";
    XStoreName(display_, main_wid_, ss.str().c_str());
  }
}


相关界面

20210721163705858.png

总结

国产操作系统|Linux下的RTMP、RTSP直播播放,经实际测试,延迟和Windows平台一样,毫秒级,随着国产操作系统在无纸化同屏等行业的推进,越来越多的场景需要这样一款稳定性高延迟低的RTMP|RTSP播放器,本文抛砖引玉,感兴趣的开发者可酌情参考。

相关文章
|
3天前
|
存储 Linux C语言
Linux:冯·诺依曼结构 & OS管理机制
Linux:冯·诺依曼结构 & OS管理机制
9 0
|
1月前
|
存储 Linux
linux查看系统版本、内核信息、操作系统类型版本
linux查看系统版本、内核信息、操作系统类型版本
62 9
|
2天前
|
存储 Shell Linux
操作系统实战(一)(linux+C语言)
本篇文章重点在于利用linux系统的完成操作系统的实验,巩固课堂知识
|
2天前
|
Linux Shell
Linux操作系统下查找大文件或目录的技巧
Linux操作系统下查找大文件或目录的技巧
10 2
|
3天前
|
算法 Ubuntu Linux
为什么Linux不是实时操作系统
本文探讨了Linux为何不是实时操作系统(RTOS)。实时性关乎系统对事件的确定性响应时间,而Linux虽能保证调度执行的实时任务,但无法确保中断响应时间、中断处理时间和任务调度时间的确定性。中断响应时间受中断屏蔽时间影响,Linux中无法确保;中断处理时间因不支持中断嵌套而不确定;任务调度时间虽快,但调度点的限制影响实时性。Linux的定位是通用操作系统,追求平均性能而非绝对实时性。为改善实时性,Linux提供了不同抢占模型,如可抢占内核(Low-Latency Desktop)和PREEMPT-RT补丁,后者接近硬实时但牺牲了吞吐量。PREEMPT-RT正逐渐成为Linux实时增强的标准。
10 1
为什么Linux不是实时操作系统
|
3天前
|
存储 Ubuntu Linux
xenomai3+linux构建linux实时操作系统-基于X86_64和arm
Xenomai是一个实时性解决方案,通过在Linux上添加实时内核Cobalt来增强实时性能。它有三个主要部分:libcobalt(用户空间实时库)、Cobalt(内核空间实时内核)和硬件架构特定层(ipipe-core或dovetail)。ipipe-core适用于Linux 5.4以下版本,而dovetail用于5.4及以上版本。本文介绍了在X86 Ubuntu环境下,如何编译Xenomai内核,搭建应用环境,包括配置、编译、安装和实时性测试。对于其他硬件架构,如ARM和ARM64,步骤类似。文章还提到了Xenomai与Linux内核版本的兼容性和实时性测试结果。
12 0
xenomai3+linux构建linux实时操作系统-基于X86_64和arm
|
3天前
|
消息中间件 测试技术 Linux
linux实时操作系统xenomai x86平台基准测试(benchmark)
本文是关于Xenomai实时操作系统的基准测试,旨在评估其在低端x86平台上的性能。测试模仿了VxWorks的方法,关注CPU结构、指令集等因素对系统服务耗时的影响。测试项目包括信号量、互斥量、消息队列、任务切换等,通过比较操作前后的时戳来测量耗时,并排除中断和上下文切换的干扰。测试结果显示了各项操作的最小、平均和最大耗时,为程序优化提供参考。注意,所有数据基于特定硬件环境,测试用例使用Alchemy API编写。
10 0
linux实时操作系统xenomai x86平台基准测试(benchmark)
|
4天前
|
供应链 安全 Ubuntu
详细介绍:国产操作系统银行麒麟V10的下载和安装
详细介绍:国产操作系统银行麒麟V10的下载和安装
详细介绍:国产操作系统银行麒麟V10的下载和安装
|
13天前
|
存储 Oracle 关系型数据库
linux操作系统相关资源优化
【4月更文挑战第21天】基于操作系统的性能优化也是多方面的,主要是系统安装、系统内核参数、网络参数、文件系统等几个方面进行衡量
24 2
|
19天前
|
存储 缓存 安全
【linux基础(八)】计算机体系结构--冯诺依曼系统&操作系统的再理解
【linux基础(八)】计算机体系结构--冯诺依曼系统&操作系统的再理解