开发者学堂课程【高校精品课-华中科技大学 -智能媒体计算:走进多媒体、模拟信号的数字化】学习笔记,与课程紧密联系,让用户快速学习知识。
课程地址:https://developer.aliyun.com/learning/course/811/detail/15666
走进多媒体、模拟信号的数字化
内容介绍:
一、多媒体
二、数字信号与系统
三、信噪比
四、信号量化噪声比
一、多媒体( Multimedia )
1、定义:
从字面上看来讲,就是它不只是一种媒体。Multiple 就是多个的意思。
⑴融合两种或者两种以上媒体的一种人-机交互式信息交流和传播媒体。
⑵融合媒体形式:文字、图形、图像、声音、动画和电视图像
例如一出生睁开双眼看到的就是五彩斑斓的世界,听到了父母亲的声音,这是声音的这种格式。长大开始认字,那就是文字了,看动画片,这是动画。看电视,这是视频。比如说画个圆、曲线的话,这都是图形方面。
这里面的多媒体指多种的媒体形式在计算机里面怎么对他进行处理。
2、特点:
由于是多种媒体的融合在一起因此这个媒体形式,它具有这样的特点:
⑴集成性、实时性(例如动画、视频直播、新闻、比赛)、交互性(例如游戏)
⑵数字化(现在的多媒体信号为数字信号)
网页超文本文件为多媒体融合提供条件,尤其是 HTML5出来以后编辑一个非常漂亮的这种多媒体形式的网页就变得十分容易。
微信公众号中文字、图像、图形、视频融合在一个文件里形成一个整体的内容展现,为整个的这种多媒体形式的多媒体教学提供了很好的方便。
很典型的一个例子是现在的这个政治学习的软件学习强国。那里面其实有关整个党的这种新闻、总书记的讲话、党史资料,老电影。革命歌曲等等全在里面。有了这么一个学习的平台基本上可以把各种资料整合在了一起,也是现在主流的叫做媒体融合。
媒体融合的技术基础就是多媒体的技术。
二、数字信号与系统
1、多媒体信号目前都是以数字的形式存在的。但实际上自然界的任何一种信号,它都是以模拟信号存在的。模拟信号要进到数字系统里面去,那么就要进行模拟信号和数字信号的转换。
2、数字系统的定义:
数字系统是一个能对数字信号进行加工、传递、和存储的实体,它由实现各种功能的数字逻辑电路相互连接而成。
例如:智能手机、数字计算机、MP3、洗衣机空调控制面板、电视机都是数字系统,但复杂程度不同。实际上智能手机本身已经是一台数字计算机了,因此数字计算机的很多特点在智能手机里面也是有的,因此它是一个很复杂的也是非常非常典型的数字系统。
3、模拟信号与数字信号的相互转换
⑴ A/D -模数转换( Analog-Digital ):模拟信号变成数字信号
⑵ D/A -模数转换( Digital-Analog ):数字信号还原到模拟信号
⑶模拟信号:模拟信号是一个连续的波形,如何对它进行数字化?
时间维度上对曲线进行采样(采样是每隔一定的时间间隔采集一个点)
采样间隔越小,采集到的点越多,对这个曲线的描述越精细。
//奈奎斯特采样定理:采样间隔即采样频率只有高于原始信号的频率两倍的时候,才能不失真地还原原始信号;如果低于两倍的频率,低得越多,失真就越多。//
通过这样的采样间隔将原本连续的线变成离散的点,将这些离散的点,存到计算机里面变成01的组合,即在垂直坐标上将其进行了离散,这就是量化。
量化就像在垂直坐标上加很多水平线,将其分为格子,格子越多,描述差别越小。画八条线,描述8个数,从0~7的话,需要三位。将曲线幅度变化分为八个等级即011-111
观察红色的采样点是否都在线上,可知:很多点不在,有的差别还很大。若采样点不在线上,四舍五入,要么靠上,要么靠下,离哪个近靠哪一级。这时发现线画的太稀疏,误差大。
继续细化,变为16个格子,将线加密,原来不在线上的点在线上了,原来离线很远的点现在已经接近了。将线加密后,离散点接近线,采样点的值描述精度进一步提高,从8变为16,二进制位数变为四位即0110-1101。再继续加线的话,描述的精度指标会越来越高。
⑷总结:
模拟信号进行数字化需要采样。
①采样:每隔一定的时间间隔采取一个点
②采样频率:根据奈奎斯特的采样定理,采样频率不低于模拟信号最高频率的两倍,这样就可以不失真地还原成原来的模拟信号。
③量化:把信号幅度划分成若干小段,若每段都是相等的,就是一个均匀的量化,称为线性量化;否则称为非线性量化。
量化取决于用二进制这个数的位数。
④量化精度:用样本值的二进制位数来表示,位数越多精度越高,数据也越大。量化精度取决于二进制的位数。
无论是声音图像还是视频都是通过这种方式进行模拟信号到数字信号转换的。不同的是声音它是个二维的,就是在时间轴上去把波形采样出来。而图像是个二维的,要把空间的点,把它采集下来,并且进行量化。而动画或者视频,它除了空间,还有时间的维度。三维动画,
是三维视频,那么维度就继续加大。
三、信噪比 ( SNR S/N ): Signal to Noise Radio
1、描述一个信号的质量好坏的时候通常是用信噪比。在模拟信号里面或在数字信号里面,都有信噪比的概念。
⑴定义:指一个电子设备或者电子系统中信号与噪声的比值
信号:来自设备外部需要通过设备进行处理的电子信号。
噪声:指经过设备后产生的原信号中并不存在的无规则额外信号(或信息)
噪声信号不随原信号的变化而变化,与原信号无关,与信号的失真不同,它是无规律的,比如采样由于精度不够,就是采样点间隔太大了。这引起的失真它是有规律的,它跟原始型号是有联系的。
⑵单位:分贝( dB )
2、计算公式:
P 指功率或能量,Ps 指信号功率,Pn 指噪声的功率
由于功率和电压成平方正比,所以可用电压取代功率,电压的平方可以把它变换到前面来:
信噪比是与质量成正比的,或者是信号的质量与信噪比成正比。信噪比越大,信号质量越好,相反噪声越小,信噪比值越大。这个值越大,信号的质量就越高。
四、信号量化噪声比
1、把一个模拟信号变换成了这个数字信号以后,在哪里可以产生噪声?
在量化的过程里,由于采样点的值很少有恰好在线上,不在线上的这个点需四舍五入取整,要靠离它最近的值,在这个过程里面产生了误差,这个误差叫量化噪声。
2、量化噪声,取的名字叫信号量化噪声比,既然有噪声,怎么描述这个信号量化之后的信号的质量?
在有噪声的情景中,描述信号量化之后的信号质量,将信噪比的概念引入,由于是在量化过程中产生的噪声,就用信号与量化噪声的比即( SQNR )( Signal to Quantization Noise Radio )表示质量。
有三位是8种组合(0-7),这个绿圈的值它最大的误差实际上是这个格子的1/2。取这个这个点在两条线中间的时候,就是离上下两条线一样高的时候,差值是最大的,也就是等于1/2。
⑴ 计算方法:( N 为量化位数)
将数值代入,推导可得 SQNR 所得值
⑵从这个公式上来看 SQNR 与量化的精度就是二进制的位数n是成正比,量化位数越高, SQNR 越大,质量越高。
每增加一位, SQNR 增加6 dB
16位达到96 dB
⑶提高量化精度可以提高信噪比,就可以提高信号整体质量。
后面的课就会分别从声音、图像、动画视频不同的媒体形式来介绍如何对这些模拟信号进行数字化以及它们本身所涉及到的一些基本的概念。