多媒体技术基础知识

2、存储容量大小
图像是由一些排成行列的像素组成 的，在计算机中的存储格式有BMP、TIF 、GIFD等。一般数据量比较大。除了可 以表达真实的相片，也可以表现复杂绘 画的某些细节，具有灵活和富于创造力 等特点。在打印输出和放大时，容易发 生失真。
图形也称矢量图文件中只记录生成图的 算法和图上的某些特征点，容易进行移动 、缩放、旋转和扭曲等变换，主要用于表 示线框型的图画、工程制图、美术字等。 常用的矢量图文件有3DS（用于3D造型） 、DXF（用于CAD）、WMF（用于桌面出版 ）等。图形只保存算法和特征点，相对于 位图的大数据量来说，它占用的存储空间 也比较小。但是显示速度没有图像快，打 印输出和放大时，质量较高不会发生很大 失真。
1.1多媒体技术的形成和发展
一、什么是多媒体？（理解） 文本、声音、图形、图象和动画等是
信息的载体，其中两个或多于两个的组合 构成了多媒体。
多媒体技术内容：（理解）
多媒体技术：运用计算机综合处理多 媒体信息（文本、声音、图形、图像等） 的技术，包括将多种信息建立逻辑连接， 进而集成一个具有交互性的系统等等。
有损压缩：利用人的视觉特性使解压缩后 的图像看起来与原始图像一样。 压缩比高 如：预测编码、变换编码、 模型编码及混合编码等。
二、视频信号压缩编码的标准
JPEG静止图像压缩算法 MPEG运动图像压缩算法
视频压缩方式（补充）：
Micosoft Video1:使用8位有损压缩方 法压缩模拟视频。它压缩后的动画尺 寸大，而且在进行渐变色处理时会出 现条纹。
编码过程
（1）将信源符号按概率递减顺序排列；
（2）把两个最小的概率加起来，作为新符 号的概率；
（3）重复（1）和（2），直到概率和达到1 为止；
（4）在每次合并消息时，将被合并的消息 赋予1和0或0和1；
（5）寻找从每一信源符号到概率为1的路径 ，记录下路径上的1和0
（6）对每一符号写出从码树的根到终结点1 、0序列
INDEO :是专门处理局部动态 影像和色彩、画质细腻的静态图 像的压缩编码技术，压缩比低， 且需要较高速的CPU才能确保播 放品质。处理渐变色和火焰效果 时会有严重的马赛克。
Radius Cinepak:这种有损压缩方法最初 用于压缩24位视频，从而在CD-ROM驱 动器上播放，图像质量好，播放速度快 ，能压缩成黑白动画。它的特点是压缩 后尺寸小，渐变色外理时不会出现条玟 和马赛克，压缩后火焰效果也不会出现 马赛克。但如果使用贴图背景，背景会 比较粗糙。
五、监视器与颜色
监视器的分辨率分类： 屏幕分辨率 图像分辨率 像素分辨率
2.4 动画（animation）
定义：指运动的画面。利用快速变 换帧的内容达到运动的效果。
制作工具：animation、Flash、 3D max等
视觉暂留
计算机动画设计主要是为了能够 生成和处理一连串的静态画面，并 通过高速放映来欺骗人的眼睛，使 人们相信屏幕上的画面是动态的。
二、多媒体技术的特性（了解） （1）集成性 （2）实时性 （3）交互性 （4）高质量
三、促进多媒体技术发展的关键技术（了 解）
1、CD--ROM
2、高速计算机网络
3、高速位处理技术、专用集成电路技术 和亚微米集成电路技术
4、多媒体压缩技术、人机交互技术和分 布式技术
二、多媒体技术的发展过程及应用（了解） 1、启蒙发展阶段
MPEG通过帧运动补偿有效地压缩了数据的 比特数，它采用了三种图像，帧内图、预测 图和双向预测图。有效地减少了冗余信息。 对于MPEG来说，帧间数据压缩、运动补偿 和双向预测，这是和JPEG主要不同的地方。 而JPEG和MPEG相同的地方均采用了DCT帧 内图像数据压缩编码。
另外，MPEG中视频信号包含有静止画 面（帧内图）和运动信息（帧间预测图） 等不同的内容，量化器的设计比JPEG 压缩算法中量化器的设计考虑的因素要 多。
三、数字化声音和MIDI的比较
MIDI信息实际上就是乐谱的数字表示。与 波形声音相比，MIDI数据不是声音而是指 令，因此它的数据量要比波形声音少的多 。对MIDI的编辑很灵活，可以自由地改变 曲调、音色等属性，波形声音就很难做到 这点。波形声音与设备有关，MIDI数据与 设备有关，即MIDI音乐文件所产生的声音 与用来回放的特定的设备有关。数字化声 音最重要的优点就是重放质量的一致性、 可靠性比较好，可自始至终保证质量。
一、多媒体应用系统开发的一般步骤 （1）确定开发对象 （2）明确开发方法 （3）准备多媒体数据 （4）集成一个多媒体系统
ቤተ መጻሕፍቲ ባይዱ
二、多媒体数据制作概念
根据多媒体应用系统的需要， 制作数字音频、数字图像、动 画等文件，完成应用系统的多 媒体数据准备工作。
3.1 数字音频的制作
一、数字音频的制作过程 1、音频概述 声波的表示方法
音频数字化：把模拟音频信号转换成 有限个数字表示的离散序列。 转换过程：选择采样频率，进行采样
选择分辨率，进行量化 形成声音文件
数字录音文件大小的计算：
S=R×D ×（r/8） ×1
S以字节为单位
声音文件的格式：
WAV(waveform) au(audio) AIF (Audio Interchangeable File Format) snd(sound)为扩展名的文件格式
1.3 多媒体系统的组成（理解 ）
1、计算机硬件 2、多媒体计算机所配置的硬件 3、多媒体I/O控制及接口 4、多媒体的核心系统 5、创作系统 6、应用系统
1.4 多媒体网络应用技术（了解）
1、局域网 定义： 局域网LAN（Local Area Network）
能够“把分散在一个建筑物或相邻几个 建筑物中的计算机、终端、带大容量存 储器的外围设备、控制器、显示器以及 连接其他网络而使用的网络连接器等相 互连接起来，以很高的速率（1～20Mbps） 进行通信”。
数字压缩技术三个重要指标
1、信息存储量之比 大 2、压缩的算法 简单 3、恢复效果 好
基本原理
压缩编码： 冗余压缩法（无损压缩法或熵编码
） 有损压缩法（熵压缩法）
（一）变长编码
1、Huffman编码 定义：对统计独立信源达到最小平
均码长的编码方法 ，具有惟一可译性 。
基本原理：按信源符号出现的概率 大小进行排序，出现概率大的分配短码 ，出现概率小的则分配长码。
基本服务方式（电子邮件、文件传输、 远程登录）
扩展服务方式
第二章 多媒体信息的表示与压缩
2.1 文字 一、西文（ASCII码） 二、汉字（数字编码、拼音码、 字型编码）
2.2 音频（Audio）
定义：20HZ～20KHZ的音频范围 分类：波形声音、语音、音乐 声音三要素：音调、音强、音色
一、数字音频
2、初期应用和标准化阶段
在我国，多媒体技术和应用的发展始 于20世纪80年代。
1.2 多媒体技术的分类（了解）
按功能和应用分类： 1、基于功能的分类
（1）开发系统 （2）演示系统 （3）培训系统 （4）家庭系统
2、基于应用的分类： （1）多媒体信息咨询系统 （2）多媒体管理系统 （3）多媒体辅助教育系统 （4）多媒体通信系统 （5）多媒体娱乐系统
动画技术参数
帧速度 数据量 图象质量
2.5 超文本和超媒体
定义： 超文本：由信息结点和表示结
点间相关性的链构成的一个具有一 定逻辑结构和语义的网络。
超媒体：多媒体＋超文本
超文本主要成分： 结点和表示结点间关系的链
超文本系统的三层模型： 数据库层 超文本抽象机层 用户接口层
2.6 数据压缩
多媒体冗余信息： 空域相关 时域相关 视觉掩盖效应
计算机实现动画的两种方法
造型动画：对每一个活动的对象分 别进行设计，并构造每一 对象的特征，然后用这些 对象组成完整的画面，进 行实时转换，形成动画。
帧动画
是由一幅幅连续的画面组成 的画像或图形序列
动画和视频
是连续渐变的静态图像或图形序列，沿 时间轴顺次更换显示，从而构成运动视 觉的媒体。 动画：序列中每帧图像是人工或计算机 产生的图像。 视频：序列中每帧图像是通过实时摄取 自然景象或活动对象。
Full Frames:在将动画信息以数据流形 式存储时，这种方法质量高并得到普 便使用。这种方法形成的AVI文件需要 大量的硬盘空间，但可为动画提供高 质量的单个连续文件。因为它适合于 很多机器类型并与桌面视频应用程序 兼容，对交互式多媒体产品，是十分 有效的。
JPEG和MPEG的差别
MPEG视频压缩技术是针对运动图像的数据 压缩技术。为了提高压缩比，帧内图像数据 和帧间图像数据压缩技术必须同时使用。
2、算术编码
定义：是一种二元码的编码方法， 在不考虑信源统计的情况下，只要监视 一小段时间内码出现的频率，不管统计 是平稳的或非平稳的，编码的码率总能 趋近于信源熵值，每次迭代时的编码算 法只处理一个数据符号，并且只有算术 运算。
原理：也是一种统计编码，每个符号对 应0到1上的一段子区间，区间长度为该 符号出现的概率。该方法将被编码的符 号串（数值串）表示成实数0到1之间的 一个区间。初始把它设为整个区间。当 出现一个新的待编码符号，先把完整的0 到1区间映射到上一次形成的区间，然后 新区间取为0到1上的新符号对应区间所 映成的像。解码时，根据区间的覆盖性 来逐一解出原符号串。
功能（从应用角度）： （1）设备共享 （2）信息共享 （3）可进行高速数据通信，进行多种媒体
信息的通信 （4）分布式处理 （5）提高兼容性 （6）安全性
2、广域网
定义：WAN即Wide Area Network 是在较大 地理范围内将计算机连接起来的计算机 网络。
3、因特网 （1）internet的发展 （2）internet提供的服务方式
一、音频信号编码基础 音频冗余主要表现为：
时域冗余度 频域冗余度
音频信号的编码方式：
（1）波形编码，如PCM、APC、ATC等 （2）分析合成方法（参数编码方法）如 PLC （3）混合编码方法
2.8 视频信号的压缩编码
一、视频信号的压缩编码分类
无损压缩：利用数据的统计特性来进行数 据压缩，典型的编码:Huffman编码、算术 编码等。 不失真 压缩比低
预测编码：
根据某一数据模型利用以往的样本值对 新样本值进行预测，然后将样本实际值 与预测值的差值进行编码。如果模型足 够好，且样本序列的时间相关性较强， 那么误差信号的幅度将远小于原始信号， 可以用较少的值对其差值量化，得到较 好的压缩效果。预测编码常用的是差分 脉冲编码调制（DPCM）和自适应的差分 脉冲编码调制（ADPCM）。
关于压缩比
衡量一个压缩算法好坏的标准，除了解压 后的数据有无失真或失真程度之外，是看 压缩比的大小。压缩比常用的定义有两种： （1） 采样压缩比 （2） 比特压缩比
数字视频的制式
PAL制式 NTSC制式
影响数字视频质量的因素
（1）帧速 （2）分辨率 （3）颜色数 （4）压缩比 （5）关键帧
三、多媒体制作
变换编码：
是将通常在空间域描写的图像信号， 变换到另外一些正交矢量空间（即变 换域）中进行描写，而且通过选择合 适的变换关系使变换域中描写的各信 号分量之间相关性很小或者互不相关， 从而达到数据压缩的目的。
模型编码：
是指采用模型的方法对传输的图像 进行参数估测。典型的有分形编码。
2.7 音频信号的压缩编码
VOC、MIDI、 SNO、RMI文件
1、WAV文件 存储容量大
2、VOC文件 3、MIDI文件
用于音乐，与WAV文件不同
二、乐器数字接口（MIDI）
MIDI信息实际上是一段音乐的描述，只 记录产生某种声音的指令，指令中包括 了使用MIDI设备的音乐、音量和持续时 间长短信息。是数字化的乐谱，由音符 序列、定时及合成音色的乐器定义组成 。
2.3 视觉媒体
计算机的图形、图像均为视觉媒体 表示方式：位图表示、矢量表示、 曲线表示（动态图像）、符号表示 一、图形、图像文件格式
DIB、BMP、PCX、TIFF等
二、位图
又称点阵图，是一种写实的手 法。 能够忠实地记录图像中 每一个象素的颜色和位置
三、矢量图
四、矢量图与位图的比较
1、概念上： 矢量图（图形）一般指计算机绘制的画 面，如直线、圆、圆弧、任意曲线和图 表等 图像是指由输入设备捕捉的实际场景画 面或以数字化形式存储的任意画面。