多媒体通信技术知识点复习

第一章

媒体是指信息传递和存取的最基本的技术和手段,由此可知,“媒体”往往不是指媒体本身,而是指处理和应用它的一套技术。

媒体的分类:1.感觉媒体(声音、图形、动画、运动图像和文本);2.表示媒体(图像编码、文本编码和声音编码);3.显示媒体(显示屏、打印机、扬声器、键盘、鼠标、扫描仪、触摸屏);4.存储媒体(硬盘、光盘、软盘、ROM、RAM);5.传输媒体(同轴电缆、双绞线、光缆)

多媒体系统和多媒体体系的异同:多媒体系统中的媒体相互之间是有关联的,是以时空同步的方式存在的;多媒体系统中媒体与媒体之间是毫无关系的。两者的重要区别在于媒体间的同步性。

多媒体技术是多种技术的有机集成而形成的一个新的多媒体系统。

超文本不是顺序的,而是一个非线性的网状结构。特点:具有多种媒体信息、网络结构形式及交互特性。超文本是一种典型的数据库技术,是由节点和表达节点之间关系的链组成的网。超文本可以看作是三个要素的组合:节点、链和网络。

超文本系统的基本特性:1.超文本的数据库是由“声、文、图”各类节点或内容组合的节点组成的网络,具有多媒体化,网状的信息结构使它的信息表达接近现实世界;2.屏幕中的窗口和数据库中的节点具有对应关系;3.超文本的设计者可以很容易地按需要创作、删除、编辑节点,同样也可以生成链,完成、删除链接,改变链的属性等操作;4.用户可对超文本进行浏览和查询;5.具备良好的扩充功能,接受不断更新的超媒体管理和查询技术,为用户提供了吸纳新写作方法的途径;6.超文本系统的多媒体化和交互性。

超媒体:超链接将若干不同的媒体链接起来的集合。

超文本与超媒体的组成要素:1.节点:节点是表达信息的单位(分为表现型和组织型)2.链:链用于固定节点间的信息联系,以某种形式将一个节点与其他节点链接起来3.网络:由节点和链构成,是一个有向图。

多媒体通信系统结构模式:

传输网络、

网络服务平台、

多媒体通信平台、

一般应用、特殊应用(一部分是终端设备,另一部分是传输、交换设备)

第二章

多媒体信息特征:1.数据量庞大2.码率可变,突发性强3.复合性信息多,同步性、实时性要求高。

冗余种类:空间、时间、信息熵、结构、知识、视觉、其他冗余。

数据压缩性能指标:1.压缩比

2.重现质量(客观评估、主观评估(表2.4-1))

3.压缩和解压缩的速度

第三章

1.听觉掩蔽(在人类听觉系统中,一个声音的存在会影响人们对其他声音的听觉能力,使一个声音在听觉上掩蔽了另一个声音)

2.频谱掩蔽

3.瞬态掩蔽

4.失真

5.声道(幅值、相位、时序)

音频信号数字化:采样-量化-编码

音频信号压缩编码:波形、参数、混合编码。

斜率过载:当输入信号变化比较快时,编码器的输出无法跟上信号的变化,从而会使重建的模拟信号发生畸变的现象。

颗粒噪声:当输入信号没有变化时,预测信号和输入信号的差会十分接近,这时,编码器的输出是0和1交替出现的现象。

离散余弦变换(DCT)优点:1.它真正代表了频域变换,因此很容易根据人儿获得最好的主观编码质量2.对于自回归输入过程,并且相邻样点有较高的相关性时,其

性能非常接近KLT3.可以借助FFT进行快速运算。

IP电话原理:使用语音压缩算法对语音数据进行压缩编码,再按IP协议将这

些语音数据打包,并通过IP网络将语音IP包分组传输到目的地,最后经解压处理,还原成原来的语音信号。IP电话的实现方式:1.电话机到电话机或PC2.PC到电话

机或PC3.以太电话机到以太电话机或PC。IP电话优点:比电话传送语音的线路利

用率高许多倍。IP电话的相关标准: 1.H.323标准2.SIP3.MGCP、H.248标准。IP 电电话的关键技术:1.音频压缩技术2.IP电话的传输时延问题3.分组语音技术4.静噪抑制技术5.回声消除技术6.语音抖动处理技术7.话音优先技术

第四章

图像信号分为静态图像和动态图像两种(按其内容变化与时间关系来分)。

YUV彩色空间优点:亮度信号Y和色差信号U、V是相互独立的,目前最常用的YUV采样平率的比例有:4:2:2和4:1:1。

彩色图象信号的分量编码:一种是复合编码,它直接对符合图像信号进行采样、编码和传输;另一种是分量编码,它首先把复合图像中的亮度和色度信号分离出来,然后分别进行取样、编码和传输。

图像信号数字化:取样和量化

数字图像压缩方法:1.可逆编码2.不可逆编码(按照信息论角度);1.预测编码2.变换编码3.量化和矢量量化编码4.信息熵编码5.子带编码6.结构编码7.基于知识的编码(按压缩方法的原理分类)

变换编码:对图像数据进行某种形式的正交变换,并对变换后的数据进行编码,从而达到数据压缩的目的。

二值图(只有黑白两个亮度值的图像)压缩标准:ITU-T制定的G3和G4;JBIG

静止图像压缩标准JPEG:1.无损压缩编码模式2.基于DCT的顺序编码模式3.基于DCT的累进编码模式(频谱选择、连续逼近)4.基于DCT的分层编码模式

动态图像压缩编码标准:H.261、H.263、MPEG-1、MPEG-2、MPEG-4、MPEG-

7(多媒体内容描述接口)、MPEG-21(目标是一个交互式多媒体框架)

第五章:

图像文件格式:GIF、Flic、A VI、MPEG、WMV、BMP、PCX、TGA、EPS、TIF、JPEG、DXF、IGS 声音文件格式:CD、Wave、MPEG、MIDI、WMA、VOC、VQF、AIFF、模块文件格式流媒体(在网络中使用流式传输技术的连续时基媒体)实现流式传输的

两种方法:实时流式传输和顺序流式传输。流媒体播放方式:单播、组播、点播与广播流式文件格式:计时、压缩和版权信息

支持流媒体的网络协议:1.实时传输协议(RTP):在Internet上针对多媒体数据流的一种传输协议2.实时传输控制协议(RTCP):和RTP一起提供流量控制和拥塞控制的服务3.实时流协议(RSTP):定义了一对多的应用程序如何有效地通过IP网络传送多媒体数据4.资源预定协议(RSVP):Internet上的资源预定协议。为多媒体数据流传输预留一部分网络资源,在一定程度上为流媒体的传输提供QoS。

流媒体系统的基本构成:

第六章“

多媒体对通信网的要求:1.吞吐要求(网络的吞吐量就是它的传输网络物理链路的比特率减

去各种额外开销,非为三个方面:传输带宽要求、存储贷款要求和流量要求)2.实时性和可靠性要求(除了与网络速率有关,还受通信协议影响)3.时空约束(各种媒体之间是相互约束相互关联的,它包括空间和时间上的关联及级数)4.分布处理要求(对网络发展前景预测及期望)

现有网络对多媒体通信的支撑情况:主要分三类:1.电信网络(公用电话网、分组交换网、数字数据网)2.计算机网络(局域网、广域网、光纤分布式数据接口)3.电视传播网络(有线电视网、卫星电视网、混合光线同轴网)

实时传输协议(RTP):是一种独立于应用程序的协议规范,是用来解决IP网上为传送实时数据包的一种IETE标准协议。

第七章