多媒体概念课件

《多媒体概念课件》由会员分享，可在线阅读，更多相关《多媒体概念课件（55页珍藏版）》请在装配图网上搜索。

1、多媒体概念多媒体技术与应用多媒体技术与应用张金玲多媒体概念 教学目的：参考教材：多媒体技术及应用，杨小平，尤晓东主编；肖林，谢红等编著；清华大学出版社，2009多媒体概念 考核内容：平时成绩：考勤、课堂实验、课后综合实验 期末考试：选择、判断、填空、操作 教学系统登录网址：211.71.20.68 文件管理功能多媒体概念 答疑：周一中午上机时间，1007机房 教学系统短信 注意：确认选课 补充个人信息多媒体概念第一章 多媒体概念 多媒体概述 多媒体元素 多媒体信息的数据压缩 多媒体系统 多媒体技术多媒体概念1.1 多媒体概述 媒体与多媒体 媒体分类 多媒体的关键特性多媒体概念1.1.1 媒体与

2、多媒体 媒体：是指传播信息的介质。准确地说，媒体又称媒质或媒介，是信息表示、信息传递和信息存储的载体。多媒体概念 计算机领域中的媒体 存储信息的实体（媒质）：磁带、光盘、磁盘、半导体存储器等 传递信息的载体（媒介）：文字、声音、图形和图像等多媒体技术中所说的媒体多媒体概念 多媒体 英文：Multimedia=multiple+media 是指将多个不同但相互关联的媒体综合集成在一起而产生的一种传播、存储和表现信息的全新载体。包括多媒体信息和多媒体技术两方面。多媒体概念1.1.2 媒体分类 按承载信息的方式来划分 感觉媒体：能直接作用于人的感官，使人产生感觉的媒体。如声音、图像、气味、味道等 表

3、示媒体：为了利用计算机对感觉媒体进行加工、处理和传输而人为构造出来的一种媒体，即用于数据交换的编码，是感觉媒体数字化后的表现形式。如条形码、文本编码、图像编码、声音编码等 显示媒体：感觉媒体与电信号之间转换用的媒体，分为输入显示媒体（键盘、鼠标、话筒、摄像机、扫描仪等）和输出显示媒体（显示器、音箱、打印机、投影仪）多媒体概念 存储媒体：又称存储介质，用来存放表示媒体的媒体，如磁盘、磁带、光盘、内存等 传输媒体：将表示媒体由一处传送到另一处的物理载体，如双绞线、光纤和无线传输介质等核心：感觉媒体感觉媒体和表示媒体表示媒体多媒体概念存储器存储器输出设备输出设备CPU输入设备输入设备表示媒体表示媒体

4、存储媒体存储媒体显示媒体显示媒体显示媒体显示媒体传输媒体传输媒体表示媒体表示媒体五种媒体的关系五种媒体的关系多媒体概念 按计算机处理数据的形式来划分 文本、声音、图形、图像、动画和视频 从人机交互的角度来划分 视觉、听觉、触觉、嗅觉和味觉多媒体概念1.1.3 多媒体的关键特性 信息载体的多样化 计算机所能处理的信息媒体的多样性（视觉、听觉的输入输出）信息载体的集成性 多媒体信息的集成（信息的多通道统一获取、统一存储与组织、合成表现等）多媒体设备的集成（硬件、软件）信息载体的交互性 用户不仅仅单一地接受多媒体信息，还可以通过各种设备和软件控制多媒体信息的播放。多媒体概念1.2 媒体元素 文本 图

5、形 图像 声音 动画 视频多媒体概念1.2.1 文本 文本文件 非格式化文本文件，如“.txt”文件；格式化文本文件，如“.doc”文件。微机中 英文：ASCII编码 中文：GB-2312编码 计算机获取文字的方法 键盘、手写、语音、OCR多媒体概念1.2.2 图形 图形一般指由计算机绘制的画面 如直线、矩形、圆、圆弧、任意曲线和图表等，机械结构图、建筑结构图都是典型的组合图形。图形文件只记录生成图的算法和图上的某些特征点，因此又称为矢量图。优点：便于部分控制、不失真、数据量小 缺点：真实感差 2D，3D.dwg,.dxf数据：圆心+半径多媒体概念多媒体概念1.2.3 图像 图像是指由输入设备

6、捕捉的实际场景画面，或以数字化形式存储的任意画面，它用数字来描述像素点的强度和颜色。静止的图像就象一个矩阵，由一些排成行列的点组成，这些点称之为像素点，这类图像又称为位图（bitmap）。位用来记录每个像素点的颜色和亮度。计算机中常用的图像文件 BMP：位图文件（bitmap）GIF：颜色少，无损压缩，支持透明 JPG：有损压缩，5:150:1 Tif,pcx,psd多媒体概念多媒体概念1.2.4 声音 声音是一种物体震动产生的波按照其频率的不同，可分为次声波（频率低于20Hz）、超声波（频率高于20kHz）和可听声波（频率在20Hz与20kHz之间），可听声波也称为音频波。常用的声音文件 W

7、AV(波形文件)：任意声音数字化后形成的文件 MID(数字音频文件)：记录音乐行为 MP3：根据MPEG-1 Layer3压缩得到的文件，压缩比10：1 12：1 多媒体概念1.2.5 动画 动画是动态图画。实质是一幅幅静态图像的连续播放，一幅静态图像称为一帧。每一帧通常是人工制造出来的图形。计算机设计动画方法有两种造型动画：对场景中的每一个对象分别进行设计和控制帧动画：由位图组成的连续画面 常用的动画文件 GIF：图像和动画文件格式（存放多幅连续图像）FLI/FLC SWF：Flash矢量动画格式多媒体概念1.2.6 视频 将若干幅有联系的图像画面（帧）连续播放便形成了视频视频的每一帧，实际

8、上就是一幅静态图像，多幅图像连续播放（电影的播放速度是24帧秒），对于人眼就会产生图像“动”的效果。计算机中主要的视频文件AVI、MPG、ASF多媒体概念1.3 多媒体信息的数据压缩 多媒体数据压缩概述 数据压缩技术基础 数据压缩方法 多媒体数据压缩标准多媒体概念1.3.1 多媒体数据压缩概述 数字化后的声音、图像和视频的数据量巨数字化后的声音、图像和视频的数据量巨大，多媒体信息的数据压缩技术是多媒大，多媒体信息的数据压缩技术是多媒体技术迅速发展的关键技术之一。体技术迅速发展的关键技术之一。多媒体信息的数据量多媒体信息的数据量 冗余的基本概念冗余的基本概念 数据冗余的种类数据冗余的种类多媒体概

9、念未压缩多媒体信息的数据量未压缩多媒体信息的数据量 声音数据量=（采样频率量化位数声道数声音持续时间）8 每小时电话话音(8k813600)/8=28125(KB)27.47(MB)每小时CD音乐(44.1k1623600)/8 620156(KB)605(MB)每小时5.1声道 CD音质音乐（44.1k165.13600）/8 1581398(KB)1544(MB)1.5(GB)多媒体概念未压缩多媒体信息的数据量未压缩多媒体信息的数据量 静态图像数据量=（垂直方向分辨率水平方向分辨率颜色深度）8 分辨率为640480的真彩色位图图像：(64048024)8=900(KB)相机(如Nikon

10、D200)拍摄的照片图像分辨率为38822592，颜色深度为24位：(3882259224)8 29479(KB)28.8(MB)多媒体概念未压缩多媒体信息的数据量未压缩多媒体信息的数据量 动态视频数据量=（分辨率颜色深度）帧频 播放时间 8 彩电PAL制式帧频为25，每帧画面为625行，宽高比为4:3，每秒数据量：(6254/3)62524)25 8 38147(KB)37.25(MB)每小时的数据量约为131GB，在650MB的光盘中只能存放不到18秒的视频。高清晰度电视（HDTV）分辨率为19201080，帧频为30，每秒数据量为：(1920108024)30 8=182250(KB)1

11、77.98(MB)需要的传输带宽为1423.8 Mbps；每小时的数据量约为626GB。多媒体概念冗余的基本概念冗余的基本概念 冗余：多余 多媒体信息的数据量=信息量(有效数据)冗余数据量 多媒体信息的数据冗余主要体现在两个方面 时间或空间上相同或相似信息的重复 无法传递或播出的信号，这部分信号的数据可以被压缩剔除 多媒体概念数据冗余的种类数据冗余的种类 空间冗余 时间冗余 结构冗余 知识冗余 视觉冗余 听觉冗余 编码冗余 多媒体概念1.3.2 数据压缩技术基础 熵的概念 量化 数据压缩技术的性能指标多媒体概念熵的概念 信息熵 用来表示一条信息中真正需要编码的平均信息量，即该信息数据压缩的理论

12、极限。信息量：从概率相同的N个事件中选出一个事件所需要的信息量度 信源S的熵定义为：H(s)=pi log2(1/pi)pi是符号Si在S中出现的概率；log2(1/pi)表示包含在Si中的信息量，也就是编码Si所需要的位数。例如一幅灰度图像采用256级灰度，如果一个像素点取值每一个灰度级的概率均为pi=1256，则每一个灰度级的编码需要8个二进制位，即每一个像素点就需要8位编码表示。多媒体概念熵计算实例 有一幅100个像素组成的灰度图像，灰度共有5级，分别用符号A、B、C、D和E表示，100个像素中各级灰度的像素数如下：灰度级灰度A灰度B灰度C灰度D灰度E像素个数 502510105如果用3

13、个二进制位表示5个等级的灰度值，也就是每个像素用3位表示，编码这幅图像总共需要300位；按照香农理论，这幅图像的熵为：H(s)=(50/100)log2(100/50)+(25/100)log2(100/25)+(10/100)log2(100/10)+(10/100)log2(100/10)+(5/100)log2(100/5)1.88 (bit)这就是说每个符号用1.88位表示，100个像素需用188位。多媒体概念量化（数字化）模拟信号到数字信号的转化（A/D转换）包含采样和量化两个步骤 采样：用有限个离散量来代替无限的连续模拟量 声音：时间轴上的离散化 图像：空间区域的离散化 量化：将连

14、续取值用一定的量化级来代表，即用一定位数表示的离散整数表示离散采样点的具体取值 声音：幅度值的量化表示 图像：灰度和颜色值的量化表示音频采样频率图像分辨率音频量化位数/量化级颜色深度/像素深度多媒体概念多媒体概念多媒体概念 图像分辨率对图像质量的影响265x180133x9066x4533x22多媒体概念 颜色深度对图像质量的影响256级灰度级灰度16级灰度级灰度8级灰度级灰度4级灰度级灰度多媒体概念量化 采样率（Hz）：每秒钟的采样次数 采样定理（奈奎斯特定理）：在进行模拟/数字信号的转换过程中，当采样频率fs大于原始信号的最高频率fmax的2倍时，即：fs=2fmax,则采样之后的数字信号

15、完整地保留了原始信号中的信息。一般实际应用中保证采样频率为信号最高频率的510倍 多媒体概念 帧率（frames per second,fps）：每秒钟视频帧的个数 电影：24fps PAL制式：25fps NTSC制式：30fps 比特率（bits per second,bps）:每秒钟媒体数据所使用的比特位数 音频：采样率 量化位数 视频：帧率 每幅图像的比特数多媒体概念量化 采样率与比特率频带(Hz)带宽(kHz)采样频率(kHz)量化位数声道数比特率(kbps)电话20032003.088164远程会议5070007.016161256数字音频光盘202000020.044.11621

16、411.2数字音频带202000020.048.01621536多媒体概念 量化处理：是降低数据比特率的有效措施 标量量化：一维量化，一个采样点对应一个量化结果(PCM编码器)矢量量化：多维量化 又称向量量化，将若干个标量数据组构成一个矢量，从码本(codebook)中选取一个与该矢量失真最小的码字来近似该矢量，在矢量空间给以整体量化，从而压缩了数据而不损失多少信息。多媒体概念数据压缩技术的性能指标 信息压缩比 压缩后多媒体信息的质量 压缩和解压缩的速度 数据压缩处理的硬件和软件开销 多媒体概念1.3.3 数据压缩方法 根据解码后数据是否能够完全无损地恢复原始数据来进行划分 无损压缩、有损压缩

17、 根据压缩方法的原理进行分类 预测编码、统计编码、变换编码、行程编码、算术编码、量化与向量量化编码、分频带编码、结构编码以及基于知识的编码等 多媒体概念1.3.4 多媒体数据压缩标准 音频压缩标准音频压缩标准 G.7x,GSM,NSAG.7x,GSM,NSA MP3:MPEG 1 Audio Layer 3，压缩比10:112:1 静止图像压缩标准静止图像压缩标准（JPEG）多媒体概念 运动图像压缩标准运动图像压缩标准（MPEG）MPEG-1：数字存贮媒体活动图像及其伴音的编码 MPEG-2：数字电视标准 MPEG-4：多媒体应用标准 MPEG-7(1+2+4)：多媒体内容描述接口标准 MPE

18、G-21：多媒体框架标准 视频通信编码标准视频通信编码标准 H.261 H.263 H.264多媒体概念1.4 多媒体系统 多媒体系统是可以交互式处理多媒体信息的计算机系统，由多媒体硬件系统和多媒体软件系统组成。多媒体概念1.4.1 多媒体硬件系统 多媒体概念 多媒体CPU 多媒体个人计算(MPC,Multimedia Personal Computer)多媒体CPU性能的关键点：主频 指令集多媒体概念 多媒体接口卡：解决多媒体数据的输入/输出问题 声卡，显卡，视频压缩卡，视频采集卡，光驱接口卡等 外部设备 输入设备：摄像机，数码相机，扫描仪，话筒等 输出设备：电视机，投影仪，音响等 人机交互

19、设备：键盘，鼠标，触摸屏，手写输入设备等多媒体概念1.4.2 多媒体软件系统 多媒体系统软件 多媒体操作系统 设备驱动程序 多媒体支撑软件 多媒体工作平台 多媒体创作工具 多媒体应用软件 多媒体概念1.5 多媒体技术 多媒体技术特点 多媒体关键技术多媒体概念1.5.1 多媒体技术特点 集成性与控制性 多通道统一获取、控制和合成 按照人的要求表现信息，作用于人的多种感官 交互性与实时性 人对信息的主动选择和控制 用户操作时，多媒体信息应得到实时控制 非线性与灵活性 超链接方式读取信息 根据自己的需要灵活的使用多种信息表现形式多媒体概念1.5.2 多媒体关键技术 多媒体数据压缩技术 多媒体数据库技术 信息展现与交互技术 多媒体通信技术 虚拟现实技术 多媒体概念思考题：多媒体相关概念 媒体分类，不同类型媒体的特点 各种媒体元素的常见类型及特点 数字媒体数据量的计算 冗余的概念和分类 媒体的数据化（相关概念、技术指标）压缩方法的分类 各类媒体的典型压缩标准 多媒体系统的组成