四、Elecard Stream Analyzer 码流分析工具
1、简介
Elecard Stream Analyzer 是一款简单小巧的码流分析工具，通过该软件，用户可以快速的分析查看视频序列码流；用户只需将视频文件导入软件内，系统就会自动帮您分析文件，分析后就会显示视频码的文件大小、码流类型、数据包数等内容了
2、下载
链接：https://pan.baidu.com/s/1hMGBTPB58xYTmYysPwlrCA
提取码：ykhf
3、码流
码流（Data Rate）是指视频文件在单位时间内使用的数据流量，也叫码率，是视频编码中画面质量控制中最重要的部分。
同样分辨率下，视频文件的码流越大，压缩比就越小，画面质量就越好。
4、使用
打开一个 aac 文件，查看相关编解码信息
5、特色介绍
- 显示和保存流摘要和图片信息
- 显示的解码，预测和未经过滤的帧数据(YUV 和单机)
- 显示剩余，转换和反量化系数
- 保存的解码，预测，未经过滤和残余信息
- 显示 VPS，SPS，PPS 的片头与偏移和位大小指示(如标准文档中)
- 显示的编码树组数据：位置，分片索引，瓷砖指数，大小，编码，预测(MV，MVD及 MV 候选人)，变换单元信息
- 切片和小块边界，分区，运动矢量，种类，比特大小，量化的可视化
- 通过图表栏或缩略图导航
- 显示器内部的视频流比特分配。能够选择的比特流元素的显示
- 流导航和显示 I，P，B，IP 和关键帧模式
- 显示参考帧的
- 十六进制查看器
- 流浏览器 - 文件内容(头层)呈现在文本模式下
- 查看参考原始数据
- 指标计算
- 参照原始数据可视化比较(温度，减，比较，块 PSNR 模式)
6、多码流
多码流技术是通过在编码过程中同时产生多种不同码流及分辨率的流媒体数据， 根据用户实际网络带宽条件为之自动分配相对最佳解码画质的解决方案。
五、FFmpeg
这里仅对 FFmepg 做简要介绍，因其内容庞大，具体部分准备放到后面讲解
1、简介
ffmpeg 是一个跨平台的音视频处理库， 为了跨平台那么就需要编译出适用于各个平台的 ffmpeg 库。
FFmpeg 是一套可以用来记录、 转换数字音频、 视频， 并能将其转化为流的开源计算机程序。它提供了录制、 转换以及流化音视频的完整解决方案。它包含了非常先进的音频/视频编解码库 libavcodec， 为了保证高可移植性和编解码质量，libavcodec 里很多 code 都是从头开发的。
2、FFmpeg 项目组成
- libavformat：用于各种音视频封装格式的生成和解析，包括获取解码所需信息以生成解码上下文结构
- libavcodec：用于各种类型声音/图像编解码；
- libavutil：包含一些公共的工具函数；
- libswscale：用于视频场景比例缩放、色彩映射转换；
- libpostproc：用于后期效果处理；
①、ffmpeg：该项目提供的一个工具，可用于格式转换、解码或电视卡即时编码等
②、ffsever：一个 HTTP 多媒体即时广播串流服务器；
③、ffplay：是一个简单的播放器，使用 ffmpeg 库解析和解码，通过 SDL 显示；
3、FFmpeg 组成
官网介绍 FFMPEG 是一个多媒体框架，其包含了多个模块库：AVFormat，AVCodec，AVFilter，
AVDevice，AVUtil 等，并且提供了基于这些库的三个命令行工具: ffmpeg， ffplay， ffprobe。
4、使用 ffmpeg 的方式分为两种
- 一种方式是直接使用 ffmpeg 提供的这三个命令行工具来进行多媒体处理；
- 另一种是使用 ffmpeg 封装的这些库进行二次开发
5、FFmpeg 命令行
- 列出支持的格式
- 剪切一段媒体文件
- 提取一个视频文件中的音频文件
- 从 MP4 文件中抽取视频流导出为裸的 H264 数据
- 视频静音， 即只保留视频 -an，-vn
- 使用 AAC 音频数据和 H264 视频生成 MP4 文件
- 音频格式转换
- 从 WAV 音频文件中导出 PCM 裸数据
- 将一个 MP4 的文件转换为一个 GIF 动图
- 使用一组图片生成 gif
- 淡入效果器使用
- 将两路声音合并，比如加背景音乐
- 为视频添加水印效果
- 视频提亮效果器
- 视频旋转效果器的使用
- 视频裁剪效果器的使用
- 将一段视频推送到流媒体服务器上
- 将流媒体服务器上的流 dump 到本地
- 将两个音频文件以两路流的形式封装到一个文件中
6、FFmpeg 下载及安装
①、FFmpeg 下载
官方下载地址：https://ffmpeg.org/download.html
选择 windows build from gyan.dev
选择其中一个进行下载
②、安装
<1>、下载好解压到本地目录 D:\FFmpeg 下
<2>、设置环境变量
此电脑 -> 属性 -> 高级系统设置 -> 环境变量 -> 系统环境变量 -> PATH -> 编辑
新增 D:\FFmpeg\ffmpeg-6.0-essentials_build\bin 到环境变量中
③、测试
<1>、 查看 FFmpeg 的版本
cmd 中输入 ffmpeg -version 检查一下是否安装成功
这个回显说明安装成功
<2>、视频格式转换测试
我们再做一个测试将 mp4 格式文件转换成 flv 格式文件
D:\Work\test 目录下有一个 mp4 文件
输入以下命令
ffmpeg -i SampleVideo_1280x720_20mb.mp4 -c copy -f flv SampleVideo_1280x720_20mb.flv
完整的回显信息
D:\Work\test>ffmpeg -i SampleVideo_1280x720_20mb.mp4 -c copy -f flv SampleVideo_1280x720_20mb.flv ffmpeg version 6.0-essentials_build-www.gyan.dev Copyright (c) 2000-2023 the FFmpeg developers built with gcc 12.2.0 (Rev10, Built by MSYS2 project) configuration: --enable-gpl --enable-version3 --enable-static --disable-w32threads --disable-autodetect --enable-fontconfig --enable-iconv --enable-gnutls --enable-libxml2 --enable-gmp --enable-bzlib --enable-lzma --enable-zlib --enable-libsrt --enable-libssh --enable-libzmq --enable-avisynth --enable-sdl2 --enable-libwebp --enable-libx264 --enable-libx265 --enable-libxvid --enable-libaom --enable-libopenjpeg --enable-libvpx --enable-mediafoundation --enable-libass --enable-libfreetype --enable-libfribidi --enable-libvidstab --enable-libvmaf --enable-libzimg --enable-amf --enable-cuda-llvm --enable-cuvid --enable-ffnvcodec --enable-nvdec --enable-nvenc --enable-d3d11va --enable-dxva2 --enable-libvpl --enable-libgme --enable-libopenmpt --enable-libopencore-amrwb --enable-libmp3lame --enable-libtheora --enable-libvo-amrwbenc --enable-libgsm --enable-libopencore-amrnb --enable-libopus --enable-libspeex --enable-libvorbis --enable-librubberband libavutil 58. 2.100 / 58. 2.100 libavcodec 60. 3.100 / 60. 3.100 libavformat 60. 3.100 / 60. 3.100 libavdevice 60. 1.100 / 60. 1.100 libavfilter 9. 3.100 / 9. 3.100 libswscale 7. 1.100 / 7. 1.100 libswresample 4. 10.100 / 4. 10.100 libpostproc 57. 1.100 / 57. 1.100 Input #0, mov,mp4,m4a,3gp,3g2,mj2, from 'SampleVideo_1280x720_20mb.mp4': Metadata: major_brand : isom minor_version : 512 compatible_brands: isomiso2avc1mp41 creation_time : 1970-01-01T00:00:00.000000Z encoder : Lavf53.24.2 Duration: 00:01:57.31, start: 0.000000, bitrate: 1436 kb/s Stream #0:0[0x1](und): Video: h264 (Main) (avc1 / 0x31637661), yuv420p(progressive), 1280x720 [SAR 1:1 DAR 16:9], 1048 kb/s, 25 fps, 25 tbr, 12800 tbn (default) Metadata: creation_time : 1970-01-01T00:00:00.000000Z handler_name : VideoHandler vendor_id : [0][0][0][0] Stream #0:1[0x2](und): Audio: aac (LC) (mp4a / 0x6134706D), 48000 Hz, 5.1, fltp, 383 kb/s (default) Metadata: creation_time : 1970-01-01T00:00:00.000000Z handler_name : SoundHandler vendor_id : [0][0][0][0] Output #0, flv, to 'SampleVideo_1280x720_20mb.flv': Metadata: major_brand : isom minor_version : 512 compatible_brands: isomiso2avc1mp41 encoder : Lavf60.3.100 Stream #0:0(und): Video: h264 (Main) ([7][0][0][0] / 0x0007), yuv420p(progressive), 1280x720 [SAR 1:1 DAR 16:9], q=2-31, 1048 kb/s, 25 fps, 25 tbr, 1k tbn (default) Metadata: creation_time : 1970-01-01T00:00:00.000000Z handler_name : VideoHandler vendor_id : [0][0][0][0] Stream #0:1(und): Audio: aac (LC) ([10][0][0][0] / 0x000A), 48000 Hz, 5.1, fltp, 383 kb/s (default) Metadata: creation_time : 1970-01-01T00:00:00.000000Z handler_name : SoundHandler vendor_id : [0][0][0][0] Stream mapping: Stream #0:0 -> #0:0 (copy) Stream #0:1 -> #0:1 (copy) Press [q] to stop, [?] for help frame= 2932 fps=0.0 q=-1.0 Lsize= 20659kB time=00:01:57.29 bitrate=1442.9kbits/s speed=1.27e+03x video:15013kB audio:5497kB subtitle:0kB other streams:0kB global headers:0kB muxing overhead: 0.726677% D:\Work\test>
此刻再看 D:\Work\test 目录下多了一个名为 SampleVideo_1280x720_20mb.flv 的文件
测试视频素材下载
各种格式，MP4, flv, mkv, 3gp 视频下载地址：
https://www.sample-videos.com/index.php#sample-mp4-video
https://docs.espressif.com/projects/esp-adf/en/latest/design-guide/audio-samples.html
