数字化视频采集技术

《数字化视频采集技术》由会员分享，可在线阅读，更多相关《数字化视频采集技术（4页珍藏版）》请在装配图网上搜索。

1、摘 要 : 介绍了视频的模式、数字化视频的采样方式以及各种压缩算法。关键词：视频模型；数字化视频，信号采集；压缩算法中图分类号： TP37 文献标识码： B 文章编号： 1004-373X(2003)09-012-03随着信息技术的不断发展，人们将计算机技术引入视频采集、制作领域，传统的视频领域正面临着模拟化向数字化的变革，过去需要用大量的人力和昂贵的设备去处理视频图像，如今已经发展到在家用计算机上就能够处理。用计算机处理视频信息和用数字传输视频信号在很多领域有着广泛的应用前景。1 视频模型中国和欧洲采用的电视制式是 PAL 制(逐行倒相制 )，美国和日本采用的 NTSC 制，一个 PAL 信

2、号有 25fb s的帧率，一个NTSC制信号有30fb /s的帧率。视频信号在质量上可区分为复合视频 (Composite) , S-Vide ,YUV和数字(Digital)4个级别。复合视频，VHS, VHS-C和VideO8都是把亮度、色差和同步信号复合到一个信号中，当把复合信号分离时，滤波器会降低图像的清晰度，亮度滤波时的带宽是有限的，否则就会无法分离亮度和色差，这样亮度的分离受到限制，对色差来讲也是如此。因此复合信号的质量比较一般，但他的硬件成本较低，目前普遍用于家用录像机。 S-Vide， S-VHS， S-VHS-C 和 Hi8 都是利用 2个信号表现视频信号，即利用Y表现亮度同

3、步，C信号是编码后的色差信号，现在很多家用电器(电视机，VCD，SHVCD，DVD)上的S端子，是在信号的传输中，采用了 Y/C独立传输的技术，避免滤波带来的信号损失，因此图像质量较好。YUV视频信号是3个信号Y，U，V组成的，Y是亮度和同步信号，U, V是色差信号，由于无需滤波、 编码和解码， 因而图像质量极好， 主要应用于专业视频领域。 数字及同步信号利用 4 个信号：红、绿、蓝及同步信号加于电视机的显像管，因此图像质量很高。还有一种信号叫射频信号，他取自复合视频信号，经过调制到 VHF 或 UHF(UltraHigh Frequency) ，这种信号可长距离发送。现在电视台就采用这种方式

4、，通过使用不同的发射频率同时发送多套电视节目。模拟视频信号携带了由电磁信号变化而建立的图像信息，可用电压值的不同来表示，比如黑白信号，0 V 表示黑， 0.7V 表示白，其他灰度介于两者之间； 数字视频信号是通过把视频帧的每个象素表现为不连续的颜色 值来传送图像资料，并且由计算机使用二进制数据格式来传送和储存象素值，也就是对模拟信号进行 A/D 转换后得到的数字化视频信号。数字视频信号的优点很多：(1) 数字视频信号没有噪声，用 0和 1表示，不会产生混淆，而模拟信号要求屏蔽以减少噪声。(2) 数字视频信号可利用大规模集成电路或微处理器进行各类运算处理，而模拟信号只能简单地对亮度、 对比度和颜

5、色等进行调整。(3) 数字视频信号可以长距离传输而不产生损失，可以通过网络线、 光纤等介质传输， 很方便地实现资源共享，而模拟信号在传输过程中会产生信号损失。2 数字化视频采集NTSC 和 PAL 视频信号是模拟信号，但计算机是以数字方式显示信息的，因此 NTSC 和 PAL 信号在能被计 算机使用之前， 必须被数字化 (或采样)。一个视频图形适配器 (通常叫做抓帧器或视频采集卡 )经常被用来数字 化视频模拟信号，并将之转换为计算机图形信号。视频信号的数字记录需要大量的磁盘空间，例如，一幅 640X480中分辨率的彩色图像(24b/pixel)，其数据量约为0. 92Mb/s，如果存放在650

6、MB的光盘中，在 不考虑音频信号的情况下，每张光盘也只能播放24s，使用如此巨大的磁盘空间存储数字视频，是大多数计算机用户所无法接受的。在这种情况下，将视频带到计算机上，以有效的帧率播放存储信息，是使用计算机 处理视频能力的最大障碍，鉴于此种情况，我们采用数据压缩系统和帧尺寸、色彩深度和图像精度折衷的办 法，对视频数据进行压缩，以节省磁盘存储空间，数字化视频采集技术也就变成了现实。数字化视频的过程，通常被叫做数字化视频采集。模拟信号到数字信号的转换中通常用 8b 来表示，对于专业或广播级的信号转换等级会更高。对于彩色信号，无论是 RGB 还是 YUV 方式，只需用 24b 来表示。因此采样频率

7、的高低是决定数字化视频图像质量的重要指标，如表 1 所示。由于显示时采用了 4: 3方式，所以PAL制方阵的图像大小是768X576，因为768 : 576 = 4: 3, YUV信号 在数字化过程中可以采用不同的采样频率，如4；4： 4， 4： 2： 2或 4： 1： 0，由于色差信号用较低的采样频率不会影响到整体的图像效果，通常是降低 U, V的采样频率以减少数据量。4： 1 : 0方式指U, V的采 样频率是Y的1/4,而且是隔行采样，也就是第1行采U，第2行采V，第3行采U等，这样可以大大减 少数据量，这对 JPEG 和 MPEG 编码是很重要的。视频采集中计算机的处理设备通常有 3种

8、类型，即帧采集卡、动态图像连续采集卡、电视节目接受卡。帧采 集卡的工作原理是把偶合视频信号解码成 RGB或YUV，RGB或YUV信号经过A/ D转换后进人帧存体， 帧存体内的数据根据同步信号不断被刷新。帧存体内的数据需要保存时，计算机给出控制信号，帧存体数据 不再被刷新，这时计算机可以读出帧存体数据传送到计算机内存或存放到硬盘中。 由于视频信号是隔行扫描， 在数字化过程中每帧图像分成两场，每场的分辨率是 228 行，因此高速运动的图像采集后有抖动的感觉，要 解决这一问题可以只采集一场或缩短快门时间。采集连续图像到计算机中是比较困难的，因为单一帧静止图 像的数据量已经很大，而动态图像是2530帧

9、/s,模拟的视频图像数字化后所得到的量数据巨大，使传输、 存储和处理很困难。解决这一问题的办法一般有 3 种:(1) 利用局部数据总线，提高数据传输速度；(2) 大大降低分辨率；(3) 采用压缩编码。对视频图像进行压缩编码，是目前最流行的方法，过去需要昂贵的设备才能处理的视频图像，如今已经发展 到家用计算机就能处理。在实际工作中，对数字视频信号的质量要求也不尽相同。在军事和医学领域，对图 像信号的采集要求高分辨率且不允许压缩； 在广播级的视频制作上， 要求高质量但允许压缩， 例如， MPEGl ， MPEG2 ；在普通的家用录像带或 VCD， DVD 光盘制作上， 由于存储空间的限制， 分辨率

10、要求高但允许压缩。3 几种压缩算法目前，流行的压缩算法主要有以下几种:(1) JPEG (Joint Photographic Experts Group)他是用于静态图像压缩的标准，主要方法是把一幅图像分成8X8的方阵并进行离散余弦变换(DCT)，把图像变换成频率，提高压缩比的方法就是去掉高频部分。原则上讲 JPEG 标准是静态压缩标准，并不适合连续图 像采集。 JPEG 定义了 2 种基本压缩算法:一种是基于差分脉冲码调制 (DPCM) 的无失真压缩算法；另一种 是基于离散余弦 (DCT) 的有失真压缩算法。 JPEG 的压缩算法流程图如图 1 所示。从 RGB 到 YUV 的彩色空间的变

11、换，对减少数据冗余很有益，但最重要的是 DCT 离散余弦变换，基于 DCT的 JPEG 压缩算法可分成以下几步进行: 通过 DCT 映射变换减少数据的冗余量。 利用人的视觉加权函数，对 DCT的变换系数进行量化 差分编码和行程编码，把原始图像数据分成一系列的 8X8子块进行DCT变换，对于每个8X8子块的64 个系数中的直流系数DC采用DPCM编码或差分编码，其余63个交流系数采用零行程长度编码，即zig-zag之字形扫描。 熵编码，是JPEG压缩编码的最后一步，他是基于量化系数统计特性所进行的无失真编码通常采用游程长度编码或 Huffman( 哈夫曼 )编码。(2) M-JPEG (Moti

12、on JPEG)他是利用 JPEG 算法把一系列图像存于硬盘，目前用于视频制作的非线性编辑系统，广泛采用的算法就是 M-JPEG ，这种压缩方法对活动的视频图像通过实时帧内编码过程单独地压缩每一帧，在编辑过程中可以随 机存取压缩视频的任意帧，而与其他帧不相关，这对精确到帧的后期编辑是非常理想的，该系统的 M-JPEG 采集编辑卡对图像的采集分辨率均可达到 768X576，25帧/ s(PAL制)或640X480，30帧/ s(NTSC制)。 M-JPEG 的优点很多，由于算法不太复杂，只是在频域里对人眼不敏感的高频分量进行取舍，而在时域里能 量仍能均匀分布，可以用很小的压缩比 (如 2：1)全

13、帧采集，从而实现广播级指标所要求的无损压缩。(3) MPEG(Motion Picture Experts Group)有 MPEGl 和 MPEG2 两种压缩编码方式， MPEGl 采用动态图像编码的的方法，目前在计算机和电视视频制 作领域获得广泛的应用，他的视频压缩算法的核心是处理帧间冗余，即在帧之间保持不变的图像信息来更好 地压缩数据。 而 M-JPEG 只压缩单独的帧， 帧与帧之间并不压缩， 这就决定了他所形成的数据流是高质量且 庞大，必须由专门的硬件来实现，在实际应用上受到了很大限制。 MPEGl 依赖于 2个基本技术：一是基于 16X16 块的运动补偿； 二是帧内图像的 JPEG

14、压缩。所谓运动补偿就是为了寻找冗余， 软件通常把这 2个帧 分成象素块，在两帧之间寻找相似的象素块，并且只存储在两帧之间变化的图像。如果帧与帧之间有快速丰 富的图像变化，图像质量就会迅速降低，为了避免这种失真， 动态压缩算法允许说明参考帧 (也称内部帧、当 前帧)。 MPEGl 的帧间编码采用 3 种方式： Intra，简称I帧，也就是当前帧，大约半秒取1帧，作为其他帧的参考。 Predicted，简称P帧，也称预测帧，根据当前帧的变化预测下一帧，对其预测误差做有条件的传送，以达到提高压缩比的目的。 Bi-directional，简称B帧，也称插补帧、双向预测帧，他根据前面和后面的帧双向预测产

15、生增加B帧的数目会减少 I 帧和 P 帧之间的相关性。这样对提高压缩比有益而对图像质量有损，所以 I 帧、 B 帧、 P 帧之间的时间间隔应根据被压缩视频画面的 复杂程度和重建图像的质量来综合考虑决定。MPEGI压缩算法能将视频信号压缩到0. 51 b/pixel，压缩数据率为1 . 2M /s,还原图像的质量与VHS相当，目前市场上流行的 VCD光盘，也就是MPEGI的一个 代表产品，但由于其图像质量较差，在不久的将来会被 DVD 产品所淘汰。MPEG2 是一种图像能恢复到广播质量的编码方法，也采用帧间压缩的算法，但在视频信号质量上优于MPEGl ，目前发展非常迅速，典型产品是高清晰视频光盘

16、 DVD 、高清晰数字电视 HDTV 等。(4) WTP 小波变换压缩法小波变换起源于 1989 年，是在研究函数分析中为克服三角函数的时域分析能力不足而提出的。他采用局部 函数在频域和时域同时分析法， 将图像信号分析成不同的频率区域， 然后根据图像统计特性和人眼生理特性， 在不同的频域采取不同的压缩算法，使视频数据量减小。小波变换不受带宽限制，只要选取的小波函数和相 关滤波器合适，就能使视频能量集中在低频分量上。即使在编码过程中取较大的压缩比，还原图像的质量仍 然较好。加拿大和美国的知名视频厂商生产的非线性编辑系统就采用小波变换算法，他的优点是图像采集质 量高，缺点是格式专用，与 M-JPE

17、G 相比，交换性、通用性差。(5) DV 格式算法DV 格式是数字视频磁带经常采用的一种压缩格式， 他的压缩算法主要基于 DCT 离散余弦变换进行的帧内压 缩，因此是一种可编辑的格式， 如今已经演变出 DVCAM 和 DVCPRO 两种互不兼容的专业级数字视频格式， 主要应用于 635 mm 数字磁带摄录系统，他还支持 IEEE 1394 接口和传输标准，可与当今流行的非线性 编辑系统建立纯数字连接，因而具有良好的发展空间和应用前景。4 结语视频信号被采集到计算机后，就可进入编辑制作阶段，由于硬盘录像机、数字摄像机、非线性编辑系统等数字产品的快速发展，将视频制作带人全面数字化时代，视频的网络化传输和直接播出技术已成为现实。