视频信号处理基本知识

以上就是以彩色视频信号为例，说明其编码和译码的简单过程。
第6页/共44页
4．1．3 图象的颜色模型 4．1．3．1 视角系统对颜色的感知
颜色是视觉系统对可见光的感知结果。可见光是波长在380 nm～780 nm之间 的电磁波，我们看到的大多数光不是一种波长的光，而是由许多不同波长的 光组合成的。研究表明，人的视网膜有对红、绿、蓝颜色敏感程度不同的三 种锥体细胞，另外还有一种在光功率极端低的条件下才起作用的杆状体细胞， 因此颜色只存在于眼睛和大脑。在计算机图像处理中，杆状细胞还没有扮演 什么角色。人的视觉系统对颜色的感知可归纳出如下几个特性： 1、眼睛本质上是一个照相机。人的视网膜(human retina)通过神经元来感知外 部世界的颜色，每个神经元或者是一个对颜色敏感的锥体(cone)，或者是一 个对颜色不敏感的杆状体(rod)。 2、红、绿和蓝三种锥体细胞对不同频率的光的感知程度不同，对不同亮度的感 知程度也不同，如图4-03所示。这就意味着，人们可以使用数字图像处理技 术来降低数据率而不使人感到图像质量明显下降。
第9页/共44页
图4-05 彩色显像管产生颜色的原理 颜色＝R(红色的百分比)＋G(绿色的百分比)＋B(蓝色的百分比)
当三基色等量相加时，得到白色；等量的红绿相加而蓝为0值时得到黄色；等量的红 蓝相加而绿为0时得到品红色；等量的绿蓝相加而红为0时得到青色。这些三基色相加的结 果如图4-06所示。
第10页/共44页
传送
D/A变换
R
回放
解
彩
D/A变换
坐 标
G
色 输
变
出
码
D/A变换
换 B设 备
图 4-2-2
视频信号译码过程框图
已压缩的视频信号经解码器进行解压缩，再由D/A变换器恢复亮度和二个色差信号（Y、 U、V）。这三个信号（Y、U、V）经变换可恢复原始的R、G、B三基色信号。R、G、B加到 输出设备上（最常见的输出设备就是电视机、监视器或彩色打印机等）供用户观察。
第16页/共44页
生成的颜色
黑 蓝 绿 青 红 品红 黄 白
RGB彩色空间和CMY彩色空间也可以使用图4-08所示的立方体来表示。
图4-08 RGB彩色空间和CMY彩色空间的表示法
第17页/共44页
4．1．3．3 彩色空间的线性变换标准 为了使用人的视角特性以降低数据量，通常把RGB空间表示的彩色图像变换到其他彩色空 间。目前采用的彩色空间变换有三种：YIQ, YUV和YCrCb。每一种彩色空间都产生一种亮 度分量信号和两种色度分量信号，而每一种变换使用的参数都是为了适应某种类型的显示 设备。其中，YIQ适用于NTSC彩色电视制式，YUV适用于PAL和SECAM彩色电视制式，而 YCrCb适用于计算机用的显示器。 1、 YUV与YIQ模型
第7页/共44页
图4-03 视觉系统对颜色和亮度的响应特性[1][3]
图4-03 视觉系统对颜色和亮度的响应特性[1][3
第8页/共44页
4．1．3．2 图像的颜色模型 一个能发出光波的物体称为有源物体，它的颜色由该物体发出的光波决定，使用RGB相加 混色模型；一个不发光波的物体称为无源物体，它的颜色由该物体吸收或者反射哪些光波 决定，用CMY相减混色模型。 1、 显示彩色图像用RGB相加混色模型 电视机和计算机显示器使用的阴极射线管(cathode ray tube，CRT)是一个有源物体。CRT 使用3个电子枪分别产生红(Red)、绿(Green)和蓝(Blue)三种波长的光，并以各种不同的 相对强度综合起来产生颜色，如图4-05所示。组合这三种光波以产生特定颜色称为相加混 色，称为RGB相加模型。相加混色是计算机应用中定义颜色的基本方法。
第4页/共44页
R
彩 色
G
信
息
源B
Y 坐U 标 变 换
V
A/D变 换
A/D变 换
A/D变 换
映 射
量
编
变 换
化
码
图 4-2-1 彩色视频信号的编码过程框图
当视频信号传送到接收端（或存贮于不同媒体的视频信号回放）时，视频信号要经过译 码来恢复原始数据，译码过程框图如图 4-2-2 所示。
第5页/共44页
在相减混色中，当三基色等量相减时得到黑色；等量黄色(Y)和品红(M)相减而青色(C) 为0时，得到红色(R)；等量青色(C)和品红(M)相减而黄色(Y)为0时，得到蓝色(B)；等量 黄色(Y)和青色(C)相减而品红(M)为0时，得到绿色(G)。这些三基色相减结果如图4-07所 示。
第13页/共44页
第2页/共44页
三、图像的种类 在计算机中，有两种类型的图：矢量图(vector graphics)和位映像图(bitmapped
graphics)。矢量图是用数学方法描述的一系列点、线、弧和其他几何形状，如图4-2(a)所 示。因此存放这种图使用的格式称为矢量图格式，存储的数据主要是绘制图形的数学描述； 位映像图(bitmapped graphics)也称光栅图(raster graphics)，这种图就像电视图像一样， 由像点组成的，如图4-2 (b)，因此存放这种图使用的格式称为位映像图格式，经常简称为 位图格式，存储的数据是描述像素的数值。
图4-07 相减混色 彩色打印机采用的就是这种原理，印刷彩色图片也是采用这种原理。按每个像素每种颜 色用1位表示，相减法产生的8种颜色如表4-03所示。由于彩色墨水和颜料的化学特性，用 等量的三基色得到的黑色不是真正的黑色，因此在印刷术中常加一种真正的黑色(black ink)，所以CMY又写成CMYK。
第3页/共44页
4．1．2 视频信号的编码和译码 彩色视频信号的编码过程框图如图 4-2-1 所示。图中假设视频信号源提供的是模拟的 三基色R、G、B信号。该信号在彩色坐标变换中，实现式（4-2-1）所示的变换。先将R、 G、B信号变换为亮度和二个色差信号（Y、U、V）。而后，对Y、U、V三个信号分别进 行采样并进行A/D变换。后面的工作主要是对这些信号进行数据压缩，以保证在一定质量 指标的基础上最大限度地减少数据量。经过数据压缩的彩色视频信号可用于传递（无线、 光纤等），也可用磁盘（或磁带等媒体）存贮起来或用光盘将其记录下来。有关问题的细 节，是本章后面要阐述的主要内容。
(4) 在每场的开始部分保留20扫描线作为控制信 息，因此只有485条线的可视数据。Laser disc约 ~420线，S-VHS约~320线
(5) 每行微秒，水平回扫时间10微秒(包含5微秒 的水平同步脉冲)，所以显示时间是微秒。
(6) 颜色模型：YIQ
第24页/共44页
3、 彩色电视 在彩色电视中，用Y、C1, C2彩色表示法分别表示亮度信号和两个色差信号，C1，C2的含
每秒钟扫描多少行称为行 频fH；每秒钟扫描多少场 称为场频ff；每秒扫描多 少帧称帧频fF。ff和fF是两 个不同的概念。
1. PAL制电视的扫描特 性
PAL电视制的主要扫描特 性是：
(1) 625行(扫描线)/帧， 25帧/秒(40 ms/帧)
(2) 高宽比(aspect ratio)：4:3
(3) 隔行扫描，2场/帧， 行/场
在彩色电视制式中，使用YUV和YIQ模型来表示彩色图像。在PAL彩色电视制式中使用YUV 模型，其中的YUV不是那几个英文单词的组合词，而是符号，Y表示亮度，UV用来表示色差， U、V是构成彩色的两个分量；在NTSC彩色电视制式中使用YIQ模型，其中的Y表示亮度，I、 Q是两个彩色分量。
第18页/共44页
第11页/共44页
表4-02 16色VGA调色板的值
代码 R
G
B
H
S
L
0
0
0
0
160
0
0
1
0
0
128 160
240
60
2
0
128
0
80
240
60
3
0
128
128 120
240
60
4 128
0
0
0
240
60
颜色 黑(Black) 蓝(Blue) 绿(Green) 青(Cyan)
红(Red)
第12页/共44页
第22页/共44页
2、 电视扫描和同步
扫描有隔行扫描(interlaced scanning)和非隔行扫描之分。非隔行扫描也称逐行扫描， 图4-08表示了这两种扫描方式的差别。黑白电视和彩色电视都用隔行扫描，而计算机显示 图像时一般都采用非隔行扫描。
(a) 逐行扫描
(b) 隔行扫描
第23页/共44页
YUV的优点： 1、YUV表示法的重要性是它的亮度信号(Y)和色度信号(U、V)是相互独立的 。 2、YUV表示法的另一个优点是可以利用人眼的特性来降低数字彩色图像所需要的存储容 量。
2 YUV与RGB彩色空间变换 在考虑人的视觉系统和阴极射线管(CRT)的非线性特性之后，RGB和YUV的对应关系可以近 似地用下面的方程式表示： YRGB URGB VRG
第21页/共44页
4.1.4.1 彩色电视制式 1、简介
•三种彩色电视制式：NTSC制、PAL制和SECAM制。这里不包括高清晰度彩色电 视HDTV (High-Definition television)。 •NTSC(National Television Systems Committee)彩色电视制是1952年美国国家 电视标准委员会定义的彩色电视广播标准，称为正交平衡调幅制。美国、加拿大 等大部分西半球国家，以及日本、韩国、菲律宾等国和中国的台湾采用这种制式。 •由于NTSC制存在相位敏感造成彩色失真的缺点，因此德国(当时的西德)于1962年 制定了PAL(Phase-Alternative Line)制彩色电视广播标准，称为逐行倒相正交平 衡调幅制。德国、英国等一些西欧国家，以及中国、朝鲜等国家采用这种制式。 •法国制定了SECAM (法文：Sequential Coleur Avec Memoire)彩色电视广播标准， 称为顺序传送彩色与存储制。法国、苏联及东欧国家采用这种制式。世界上约有 65个地区和国家试验这种制式。 •NTSC制、PAL制和SECAM制都是兼容制制式
第19页/共44页
3 YIQ与RGB彩色空间变换 RGB和YIQ的对应关系用下面的方程式表示： YRGB IRGB QRGB 或者写成矩阵的形式，
第20页/共44页
4 YCrCb与RGB彩色空间变换 数字域中的彩色空间变换与模拟域的彩色空间变换不同。它们的分量使用Y、Cr
和Cb来表示，与RGB空间的转换关系如下： Y＝R＋G＋B Cr＝R－－B)＋128 CbR－G＋B)＋128 或者写成矩阵的形式，
2、 打印彩色图像用CMY相减混色模型 用彩色墨水或颜料进行混合，这样得到的颜色称为相减色。在理论上说，任何一种颜色
都可以用三种基本颜料按一定比例混合得到。这三种颜色是青色(Cyan)、品红(Magenta) 和黄色(Yellow)，通常写成CMY，称为CMY模型。用这种方法产生的颜色之所以称为相减色， 是因为它减少了为视觉系统识别颜色所需要的反射光。
(4) 颜色模型：YUV
2. NTSC制的扫描特性
NTSC彩色电视制的主要特性是：
(1) 525行/帧, 30帧/秒(29.97 fps, 33.37 ms/frame)
(2) 高宽比：电视画面的长宽比(电视为4:3；电 影为3:2；高清晰度电视为16:9)
(3) 隔行扫描，一帧分成2场(field)，线/场
图4-06 相加混色
在多媒体计算机中，除用RGB来表示图像之外，还用色调-饱和度-亮度(hue-saturationlightness，HSL)颜色模型
在HSL模型中，H定义颜色的波长，称为色调；S定义颜色的强度(intensity)，表示颜 色的深浅程度，称为饱和度；L定义掺入的白光量，称为亮度。用HSL表示颜色的重要性， 是因为它比较容易为画家所理解。若把S和L的值设置为1，当改变H时就是选择不同的纯颜 色；减小饱和度S时，就可体现掺入白光的效果；降低亮度时，颜色就暗，相当于掺入黑 色。因此在Windows中也用了HSL表示法，16色VGA调色板的值也表示在表5-02中。
第14页/共44页
青色 0 0 0 0 1 1 1 1
表4-03 相减色
品红
黄色
0
0
0
1
1
0
1
1
0
0
011源自011第15页/共44页
相减色 白 黄 品红 红 青 绿 蓝 黑
相加混色 RGB 000 001 010 011 100 101 110 111
表4-04 相加色与相减色的关系 相减混色 CMY 111 110 101 100 011 010 001 000