《多媒体技术原理及应用 (2).ppt》由会员分享,可在线阅读,更多相关《多媒体技术原理及应用 (2).ppt(179页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、第3章 多媒体计算机系统组成 n 多媒体存储技术 n 多媒体功能卡 n 多媒体信息获取与显示设备 n 多媒体个人计算机 n CD-I交互式多媒体系统 n DVI多媒体计算机系统 n VCD与DVD播放系统n 多媒体工作站 3.1多媒体存储技术3.1.1 多媒体信息存储的特点n 多媒体信息存在和表现的形式n 正文 包括文字和数据n 向量图形 图元组成的图形n 位图图像n 数字化声音和高保真音响n 数字化视频3.1.2 光盘存储原理n 光存储技术n 光存储技术的产品化形式是由光盘驱动器和光盘片组成的光盘驱动系统。n 驱动器读写头是用半导体激光器和光路系统组成的光头,记录介质采用磁光材料。n 光存储
2、技术原理 改变一个存储单元的性质,使其性质的变化反映出被存储的数据;识别这种性质的变化,就可以读出存储数据。n 光存储单元的性质,例如反射率、反射光极化方向等均可以改变,它们对应着存储二进制数据0(不变)、1(改变),光电检测器能够通过检测出光强和光极性的变化来识别信息。n 高能量激光束可以聚焦成约1微米的光斑,因此光存储技术比其他存储技术有更高的容量。光盘系统的特点n 与硬盘相比,具有可拆卸性;容量相当;驱动器较贵,但盘片便宜;读写速度慢。n 与磁带相比,具有容量大、随机存取性强的优点。n 激光头与介质无接触,不受环境影响而退磁,信息保存时间长,可达30年以上。光盘系统技术指标n 容量 光盘
3、盘片的容量n 平均存取时间 在光盘上找到需要读写信息的位置所需时间n 数据传输率 n 接口标准及格式规范等 存储容量n 指它所能读写的光盘盘片的容量。n 光盘容量又分为格式化容量和用户容量,采用不同的格式和不同驱动器,光盘格式化后容量不同。n 一般用户容量比格式化容量要少,因为光盘还需要存放有关控制、校验等信息。平均存取时间n 是在光盘上找到需要读写的信息的位置所需要的时间。n 指从计算机向光盘驱动器发出命令,到光盘驱动器可以接受读写命令为止的时间。n 一般取光头沿半径移动全程1/3长度所需要的时间为平均寻道时间,盘片旋转一周的一半时间为平均等待时间,两者加上读写光头稳定时间就是平均存取时间。
4、数据传输率有多种定义方式。n 一种是指从光盘驱动器送出的数据率,可以定义为单位时间内光盘的光道上传送的数据比特数,这与光盘转速、存储密度有关。n 另一种定义是指控制器与主机间的传输率,它与接口规范、控制器内的缓冲器大小有关。光盘的分类 n CD-ROM只读光盘 n WORM一次写多次读光盘 n Rewritable可重写光盘 CD-ROMn 最常用的光盘系统,直径约12cm,因为它容量大,约650MB,价格便宜,市场上颇受用户的欢迎。n CD-ROM光盘是由母盘压模制成的,一旦复制成形,永久不变,用户只能读出信息。n CD-ROM采用激光调制方式记录信息,将信息以凹坑和凸区的形式记录在螺旋形光
5、道上。WORM一次写多次读光盘 n WORM光盘在使用前首先要进行格式化,形成格式化信息区和逻辑目录区,利用激光照射介质,使介质变异,利用激光不同的变化,使其产生一连串排列的“点”,从而完成写的过程。n 引入文件分配表的概念,在光盘的根目录下面是用户定义的逻辑目录,逻辑目录对应文件管理区。n 在逻辑目录建立同时,用户可以根据需要,对其中重要数据进行加密。n 一旦写入就不能再更改。Rewritable可重写光盘n 可重写光盘或称可擦写光盘是最理想的光盘类型,也是最有应用前途的光盘类型。它像硬盘一样可读写,利用浮动磁光头在磁光盘上进行磁场调制,可进行高速重写磁光记录。只读光盘读原理 n 只读光盘上
6、的信息是沿着盘面螺旋形状的信息轨道以凹坑和凸区的形式记录的。n 它既可以记录模拟信息(如Laser Vision系统),也可以记录数字信号(如CD-DA)。坑深0.12m0.6m1.6m在螺旋形光道上以凹坑和凸区表示的信息001000100000100 图3.1 只读光盘工作原理在光盘上记录模拟信息n 模拟信号先进行频率调制(FM),声音信号加在经过频率调制的视频信号上,所得到的综合信号经过双向限幅,再转换成光盘上长度不等的凹坑和凸区,边缘之间的长度反映了视频信号频率的高低和声音信号的频率和幅度。在光盘上写/读数字信息n 光道上凹坑或凸区的长度是0.3微米的整数倍。凹凸交界的正负跳变沿均代表数
7、字“1”,两个边缘之间代表数字“0”,“0”的个数是边缘之间长度决定的。n 通过光学探测仪器产生光电检测信号,从而读出“0”、“1”数据。n 数字信号记录的优点是抗干扰能力强,由于盘片损坏或变脏而造成的读出错误也容易得到纠正。EFM编码n 为了提高读出数据可靠性,减少误读率,存储数据采用EFM(Eight to Fourteen Modulation)编码,即将1字节的8位编码为14位的光轨道位,并在每14位之间插入3位“合并位”以确保“1”码间至少有2个“0”码,但最多有10个“0”码。可重写光盘的擦写原理n 光盘记录方式可分为两大类:n 磁光式n 相变式 磁光式擦写原理n 当前国际上较流行
8、的是磁光式,该盘普遍采用玻璃盘基上再加四层膜结构组成,它是以稀土过渡金属非晶体垂直磁化膜作为记录介质光学膜和保护膜的多层夹心结构。n 两种磁光写操作方法居里点记录(稀土铁合金膜介质)n 补偿点记录(稀土钴合金膜介质)磁光写的过程n 用激光照射光盘垂直膜面磁化方向上的磁化物质,并对其垂直磁化。n 利用磁性物质居里点热磁效应,在某一方向饱和式磁化,用激光对需要存储信息“1”的单元区域加热,使其温度超过居里点,失去磁性。在盘的另一面上施加一个外磁场,使被照单元反向磁化,这样该单元磁化方向与其他未照射单元方向相反,从而生产一个信息存储状态“1”,而其他未经照射单元相当于存储信息“0”。n 信息擦去过程
9、与写过程刚好相反,即恢复原来的磁化方向。相变式擦写原理n 利用记录介质的两个稳态之间的互逆相结构的变化来实现信息的记录和擦除。两种稳态是反射率高的晶态和反射率低的非晶态(玻璃态)。n 写过程是把记录介质的信息点从晶态转变为非晶态。n 擦过程是写过程的逆过程,即把激光束照射的信息点从非晶态恢复到晶态。3.1.3 光盘标准 1.光盘发展历史 n 1972年9月5日Philips公司向国际新闻界展示了长时间播放电视节目的光盘系统,在光盘上记录的是模拟电视信号。n 1978年,SONY生产的影碟机正式投放市场,光盘的直径为30厘米,一片双面盘的播放时间可达2小时。n 1979年,Philips公司发表
10、了激光唱机(compact disk player)。光盘的规范和标准 n CD-DAn CD-ROMn CD-V(Video)n 可录CDn CD-In CD-ROM XA n Photo-CD n Video CD CD-DA n 1981年制定红皮书,即CD-DA(Digital Audio)激光数字音频光盘的规范。这个标准是CD的最基本标准。CD-ROM n 1985年制定黄皮书,经修订,1988年正式作为国 际 标 准 ISO9660,1991年 又 推 出 了 ISO 9660。CD-V(video)n 从红皮书发展而来,在影碟机上使用,视频信息可以输出到电视机。可录CDn 可录C
11、D(recordable CD)盘的橙皮书标准。可录CD分为两类,即CD-MO和CD-WO。CD-MO称为磁光盘,可重写;CD-WO又称CD-R,这种盘一旦用户写入数据就不能抹掉。CD-I n 1987年制定绿皮书规范用于交互式多媒体CD-I系统中。n 1992年推出第二代CD-I,可播放交互式视频图像。CD-ROM XA(extended architecture)n 1988年,Philips、SONY及 Microsoft制定CD-ROM扩展结构,1991年又制定CD-ROM XA 规范,对应于ISO9660。Photo-CDn 像片光盘,1991年Philips和KODAK对外发布Ph
12、oto-CD,1992年制定规范。用于存放数字化的静态照片。Video CD n 1993年制定的白皮书规范,采用MPEG压缩算法压缩动态图像。它能使Video CD节目能够在CD-I、CD-ROM/XA和Video CD播放机上播放。2.CD-ROM的性能指标(1)容量 约为650MB。(2)数据传送速率 最初推出为150KB/S,称为单速,后又推出倍速(300KB/S),四速(600 KB/S),48X等光驱。(3)存储缓冲器 早期为64KB,目前常用的为128 KB或256KB。(4)存取时间 200400ms(5)误码率 1/10121/1016,采用复杂的纠错编码技术降低了误码率。(
13、6)体积光盘驱动器的大小一般为 41mm(H)146mm(W)206mm(D)(7)接口 采用SCSI接口、IDE接口和AT总线接口。接口可以集成在音频板、视频板或主机板上,也可以是一块单独的板。(8)MTBF(mean time between failures)平均无故障时间约为25000小时左右。(9)兼容性 支持Photo-CD和CD-ROM XA。3.光盘的规范及格式 n CD-DA规范及格式 n CD-ROM规范及格式 n CD-I光盘的数据格式 n 激光视盘 CD-DA规范及格式 n CD-DA即激光唱盘,光盘的物理规格为直径12cm,内径1.5cm,厚度0.12cm,重量14克
14、。这种光盘常采用常线速(CLV)伺服方式,逆时针旋转。n 其螺旋线光道上等长分段,每段称为一个扇区。每个扇区都存放定量数据块,并以特定的地址标记,其单位为“分”、“秒”、“扇区”,即1分=60秒,1秒=75扇区。n 光道总长度为74分,即可存放74分钟高音质非压缩的音频信号。n CD-DA每个扇区的音频数据分为许多称为帧的单元,每帧共有33个字节。n 一帧中每个通道有6个音频数据,有左右2个通道,每个通道的样本值是16位的数据,共24个字节。一帧中有8个校验字节和1个“控制与显示(C&D)”字节。n 错误的检测和校正采用的是CIRC(cross interleave reed-solomon
15、code)码。图3.2 CD-DA帧及扇区格式 C&D1B音频数据12B校验4B音频数据12B校验4B8位 8位 8位 8位24位 3位 14 3 14 3 14 3 14 3帧0 帧1 帧2 帧971扇区1帧同步位合并位33字节EFM调制588个通道位n CD-ROM同样是把光轨道分为等长的扇区,使用分、秒、扇区的数据编址方法,采用常线速伺服方式。它与CD-DA的不同主要在每个扇区中数据格式的不同。n CD-ROM光盘有两种格式:Mode1和Mode2。Mode1格式Mode2格式SYNC12BHEADER4BUSER DATA 2048BEDC 4BSPACE 8BECC276BSYNC1
16、2BHEADER 4BUSER DATA 2336B图3.3 CD-ROM的Mode1和Mode2格式 Mode1和Mode2格式相同之处 n 这两种方式的扇区首部都是12字节的同步码(SYNC),其前后为“00H”而中间10个字节存放“FFH”数据。紧接着的4个字节为地址字段,或称扇区头(HEADER),它采用分、秒、扇区号的制式确定地址标号,地址字段中设置了MODE字节,指明该扇区是哪种格式 Mode1和Mode2格式不同之处n 用户数据量不同。Model1为2048个字节,Mode2为2336个字节。n 存储数据的类型不同。Mode1用于存放对错误极为敏感的数据,如计算机程序等;而Mod
17、e2用于存放对错误不太敏感的数据,如声音、图像、图形等。n Mode2的数据经过CIRC检验后的误码率为1/109,对声音、图像类的数据可以不必做进一步校验;而要满足计算机数据误码率小于1/1012的要求,则应对Mode1的数据作进一步校验。Mode1中的容错机制 n 用了4个字节作为错误检测码(EDC),采用的循环冗余校验码CRC,只能检测是否有错n 用276个字节作为错误校正码(ECC),可以校正扇区中多个字节错误。n 通过两级校验,Mode1中数据误码率可以降到1/1012。CD-ROM XA n 它所定义格式包括与CD-I格式相同的FORM1和FORM2格式,解决了普通CD-ROM驱动
18、器不能读CD-I格式光盘的问题。n CD-ROM XA的数据格式(FORM1,FORM2)SYNC 12BHEADER 4BSUBHEADER 8BUSER DATA 2048BEDC 4 BECC 276BSYNC 12BHEADER 4BSUBHEADER 8BUSER DATA 2324BEDC4B图3.4 CD-ROM XA FORM1和FORM2格式 n CD-ROM XA在HEADER后面增加了8个字节信息来进一步说明扇区中用户数据,其中存放有数据类型(音频、视频、数据等)格式形式,触发位(记录开始、文件结束、实时性等),数据编码信息(ADPCM、CLUT、DYUV等)。n 这样C
19、D-ROM XA驱动器可通过对子头信息的识别,读出数据区中多种媒体的信息,特别地能正确读出CD-I中采用ADPCM压缩的音频数据。CD-ROM卷和文件结构n 卷和文件结构由逻辑块(5122n字节)和逻辑扇区(20482n字节)、记录、文件、卷、卷集等多级结构定义。n 由于CD-ROM驱动器的平均寻道时间较长,为了能高速检索CD-ROM光盘上文件,ISO为CD-ROM光盘的文件目录结构规定了路径表 图3.5 CD-ROM目录结构和路径表 CD-I光盘的数据格式 n CD-I光盘的数据格式是从CD-DA和CD-ROM光盘格式演变而来的。n 其扇区格式与CD-ROM XA相同,它有三个区:导入区(L
20、ead-in Area),节目区(Program Area)和导出区(Lead-out Area)。n CD盘上的信息均采用EFM记录方式进行记录。由于光盘原始误码率较高,所以都采用能纠突发错误的CIRC码。n CD-I光盘的导入区 是由若干个空扇区组成的,这样做的目的是使识别节目区变得容易。n CD-I光盘可以有多到99条光道,编号为199。n CD-I光盘的导出区 或者是空扇区(最后一条光道是CD-I光道时)或者是无声的帧(最后一条光道是CD-DA光道)图3.6 CD盘结构图3.7 只有CD-I光道的CD-I盘结构 导入区 166信息扇区盘标记 2250信息扇区CD-I数据 导出区节目区光
21、道1n 含有CD-DA光道的CD-I光盘,第一条光道必须是CD-I光道;且任一条CD-I光盘上的CD-DA光道必须在CD-I光道之后。n 一片CD-I光盘上的CD-DA光道可以有一条或多条CD-DA光道,但最多不超过98条。而一条光道的长度可以是300个扇区(相当于4秒)和325000个扇区(相当于最长的超级HiFi播放72分钟)之间的数。导入区 166B信息扇区 盘标记 2250信息扇区 CD-I数据 2250信息扇区 CD-DA 导出区 图3.8 有CD-I和CD-DA光道的CD-I盘结构 节目区光道1 光道n CD-DA(n=99)n CD-I光盘的导出区或者是空扇区(最后一条光道是CD
22、-I光道时)或者是无声的帧(最后一条光道是CD-DA光道)n CD-I盘上的所有数据都以文件形式存放,任何一个文件都可以通过盘上的路径表取出。n 每个文件都有文件描述符记录,存放于文件目录中。文件描述符记录包含有文件名、文件号、文件大小、地址、拥有者、属性、交叉存取因子、读取许可权。n 文件分为目录文件、实时文件和标准文件。n CD-I的数据以两种专门的数据格式FORM1和FORM2记录。如光盘是用FORM1记录,因为它有EDC和ECC码,CD-I系统利用它们可以获得误码率小于1/1013数据。激光视盘 n 激光视盘也是一种只读光盘,家用激光视盘又称为影碟机,是独立的视频播放设备,与音响设备和
23、电视机(监视器)相连就可以播放视盘。n 计算机可以通过外设接口与视盘播放机相连,视盘在多媒体应用形式主要是“交互式视盘”,由计算机控制视盘的播放、视频帧的寻址和显示。n 视盘与前述的几种光盘原理结构一样 n 视盘的型号 大-12英寸,小-12CMn 视盘有两种信息记录格式 常线速(CLV)常角速(CA V)CLV型视盘n 扇区长度为常数,以紧凑形式存放信息,每盘可以存放60分钟的视频信号。n 当驱动器从内圈到外圈读盘时,由于内圈和外圈存放的信息量不同,所以转速也不同。在内圈可达到每分钟1800转,在外圈轨道每分钟约600转。CAV型视盘n 以类似于磁盘的方式划分扇区,扇区长度从内圈到外圈逐渐增
24、加,每盘仅可存放30分钟视频信号。n 优点是驱动器读盘时,从内圈到外圈,转速一致,对NTSC制式,CA V视盘转速为每分钟1800转,对PAL制式,CA V视盘转速为每分钟1500转。n 这种信息存放格式有利于单帧访问、搜索、帧序列的随机访问等功能,适合于多媒体平台。Video CD标准n Video CD标准是目前流行的视频光盘标准,它描述一个使用CD格式和MPEG-1标准的数字电视播放系统。n Video CD定义了MPEG光道的结构,它由MPEG-Video扇区和MPEG-Audio扇区组成。光道上的Video(电视图像)和Audio(声音)是按MPEG-1的规定进行编码。n MPEG-
25、Video扇区和MPEG-Audio扇区是交错存放在光道上。图3.9 Video CD结构 V V V V A V V V V V A V V V V V A V V 信息包开始码 4BSCR(系统参考时钟)5BMUX速率 3B信息包数据 2312B信息包开始码 4BSCR(系统参考时钟)5BMUX速率 3B信息包数据 2292B0020BVideo CD光道结构MPEG Video扇区的一般结构MPEG Audio扇区的一般结构4.CD-ROM光盘制作过程(1)数据准备(2)主盘制作(3)复制光盘 图3.10 CD-ROM光盘制作过程 3.1.4 DVD光盘n MPEG-2的视频质量是广播级
26、质量,为解决其MPEG-2数据存储问题,研制了DVD并于1995年完成标准化方案。n DVD盘片尺寸与CD相同,容量最高的双层双面盘可达17GB。单面单层DVD盘能够存储4.7GB的数据,存储133分钟的MPEG-2视频,其分辨率与现在电视相同,并配备Dolby AC-3/MPEG-2音频质量的声音和不同语言的字幕。表3.1 DVD系列标准与CD系列标准DVD系列 CD系列Book A:DVD-ROM CD-ROMBook B:DVD-Video Video CDBook C:DVD-Audio CD-AudioBook D:DVD-Recordable CD-RBook E:DVD-RAM
27、CD-MO 表3.2 DVD-Video的规格数据传输率可变速率,平均速率为4.69Mbps,最大速率10.7Mbps图像压缩标准MPEG-2标准声音标准NTSC:DolbyAC-3或 LPCM,可 选 用MPEG-2 AudioPAL/SECAM:MPEG MUSICAM 5.1或LPCM,可选用Dolby AC-3通道数多达8个声音通道和32个字幕通道n 从外观和尺寸上看,DVD盘和CD-ROM盘没什么差别,直径均为120mm,厚度为1.2mm;新的DVD播放机能够播放已有的CD激光唱片和VCD。不同点:n DVD光道之间的间距由原来的1.6m缩小到0.74m,而记录信息的最小凹坑凸区长度
28、由原来的0.83m缩小到0.4m,这是DVD盘存储容量提高到4.7GB的主要原因。n DVD信号的调制方式和错误校正方法也做了相应的修正以适合高密度的需要,它采用效率较高的8比特到16比特+(EFM PLUS)调制方式,DVD校验系统采用更可靠的RS-PC(Reed Solomon Product Code)。n DVD播放机也采用波长更短(由780nm减小至635/650nm)的激光源来提高聚焦激光束的精度。3.2 多媒体功能卡 n 包括视频信号捕捉、压缩、处理、播放的视频卡,音频卡,VGA与TV的转换卡,图形加速卡,光盘接口卡等。n 通过这些功能卡将计算机与各种外部设备相连,构成一个制作和
29、播出多媒体系统的工作环境。n 具有代表性的多媒体功能卡:声音卡、视频卡3.2.1 声音卡 n 声音卡或音频卡是处理音频信号的计算机插件,它是普通计算机向MPC升级一种重要部件。目前作为微机必备功能集成在主板上.n MPC所用声音卡由专用DSP芯片管理声音的输入输出和MIDI操作。音频数据是8位或16位的PCM数据或压缩格式ADPCM数据。n 声霸卡(Sound Blaster,SB)及其特点:(1)立体声或单声道声音采样(ADC)和重放(DAC);(2)采样速率从4KHz到44KHz程序可调;(3)功能强大的FM音乐合成芯片(128种音色);(4)MIDI接口和游戏杆端口;(5)CD-ROM驱
30、动器及接口;(6)可选择多种声源(麦克风、CD唱机、线路输入);(7)内带的混声器芯片可以控制各种数字与模拟音量;(8)音箱输出接口有功放功能。n 随SB系列卡还带有丰富的软件,主要是:(1)声音编辑,录制、播放、修改声音;(2)文本到声音转换(TTS);(3)语音识别,利用V oice Assist支持用语音控制计算机执行Windows命令;(4)调频电子琴,将计算机变成一台功能齐全的电子琴;(5)乐曲文件播放,支持MIDI和CMF两种乐曲文件;(6)软件开发工具,供二次开发使用。n 音频卡主要由下列部件组成:MIDI输入/输出;MIDI合成芯片;带有脉冲编码调制电路的数模转换器;压缩芯片;
31、语音合成器;语音识别电路;音频输出或线输出的输出电路等。n 其结构如书中图3.11所示。图3.11 音频卡的结构框图 图3.12 数字化声音的获取与处理流程 3.2.2 视频卡 1.C-Cube公司视频卡n CL550用了40多万只晶体管集成了JPEG压缩编码所需的DCT/逆向DCT单元、量化器、可变长编码器等单元。n 压缩率可以通过修改量化表和VLC表的内容来改变。当执行JPEG的有损压缩算法时,可按不同的图像质量、存储器容量、带宽等应用环境来设置不同的压缩比。n 压缩比可以从8:1到100:1之间任意选择。n CL550专用芯片上还提供有数字视频接口和直接与系统总线相连的接口,视频接口支持
32、8位灰度、RGB、CMYK及YUV数字信号的输入和输出。图3.13 CL550框图视频接口余弦变换/反余弦变换 量化器压缩/解压缩Huffman 编码 主机 接口 量化表 解码表 块存储FIFO128*13/控制地址数据11163218控制地址/数据压缩时的数据流方向像素总线接口PBI主机总线接口HBICL550编码过程n 图像像素数据经过像素总线接口(PBI)输入到CL550处理器。n 数字化数值在输入到缓冲单元块存储后,以独立分量存储。n 每个分量的88像素点阵数据首先由DCT单元处理,之后DCT系数矩阵根据用户编程选择的量化表,由量化单元进行量化处理。n 在CL550器件内部的量化矩阵存
33、储区中,可同时存储4个64字长的量化系数矩阵,分别适用于不同的彩色分量。n 量化后的矩阵被Z形扫描顺序扫描处理,对直流系数(DC)和交流系数AC分别表示,而后再同时对DC和AC两部分共同完成哈夫曼编码查表处理。n 哈夫曼编码的结果最终作为JPEG压缩后的数据传送到主机总线接口(HBI),成为最终的处理结果。CL550解码过程n 图像解码过程与编码过程相反,JPEG标准格式的压缩数据输入到哈夫曼解码单元解码,又返回FIFO区域等待进行下一步处理。n 游程编码解码单元从FIFO区域中读出解码后的数据,生成交流系数AC值,并进行Z形扫描生成88点阵格式。而生成的DC值另做处理。n 然后进行逆量化和逆
34、DCT,处理的结果输入到输出缓冲区中,而后像素总线接口取出这里的视频像素数据,按照一定的视频同步时序,输出到像素数据总线,供显示设备使用。n 利用其内部的320阶流水线处理结构,将JPEG算法每一操作运算都分解安排到流水线每一阶中。n CL550-30处理器可以工作在29.41MHz的时钟频率,这就使得流水线处理可以在每秒内完成109次运算,这样的处理速度应用于JPEG算法时,每秒可压缩14.7M图像像素点。n CL550-10每秒也可压缩5M图像像素数据,CL550-35每秒可压缩17.5M图像像素数据 C-Cube公司基于CL550推出静态图像压缩板系列产品n 可运行基本环境包括80386
35、(33MHz主频)CPU,ISA或EISA总线结构,VGA显示卡(8位、16位或24位),Windows3.10,4MBRAM,50MB以上硬盘。n 另外,这些产品可支持多种图像文件格式。n 许多公司围绕CL-550设计各种图像板以满足多媒体系统的应用,如多媒体信息系统,图像处理,扫描仪,数字摄象机,电视电话,彩色传真等 CL450 C-Cube公司推出CL450系列产品及CL680解码器就是其中较好的产品。n CL450包括RISC处理器、Huffman解码器、DRAM控制器、视频显示控制器等单元,三条总线是主机总线、DRAM总线、像素总线。n CL450完全遵从MPEG标准,能实现RGB和
36、YUV格式的相互转换,支持NTSC和PAL制式,能完成SIF分辨率(352240,30Hz或352288,25Hz)的实时解码,并支持视频和音频的同步,可全部或部分显示解码后图像。图3.14 CL450解码器框图 主机接口 编码数据FIFO栈HUFFMAN解码单元 CPUDRAM控制器位流缓冲器帧缓冲器主机接口 视频接口数据控制数据地址控制数据控制控制地址视频显示控制器DRAM接口 n CL450通过执行宏码完成高层次功能。宏码由C-Cube和硬件提供,并且把它作为产品一部分。在CL450完全操作之前,宏码必须由软件装入CL-450中,C-Cube公司提供的源码供用户在其目标系统中修改和编译。
37、n 应用程序可以两种方式操作CL450,它们是寄存器操作方式和宏命令操作方式。CL450产品主要面向低成本应用,例如CD-I系统、视频游戏、交互式多媒体系统、交互式电视等。2.视频采集卡n 视频采集卡将视频信号连续转换为计算机存储的数字视频数据,其典型产品如Creative公司的视霸卡,它是具有良好性能的视频处理卡。n 其工作原理如下:视频信号源、摄像机、录像机或激光视盘的信号首先经A/D变换,通过多制式数字解码器得到YUV数据,然后由视频窗口控制器对其进行剪裁,改变比例后存入帧存储器。帧存储器的内容在窗口控制器的控制下,与VGA同步信号或视频编码器的同步信号同步,再送到D/A变换器变成模拟R
38、GB信号,同时送到数字式视频编码器进行视频编码,最后输出到VGA监视器及电视或录像机。图3.15 视频采集卡结构框图 图3.16 窗口控制器的逻辑框图n(1)A/D变换和数字解码;n(2)窗口控制器;n(3)帧存储器系统;n(4)数模变换和距阵变换;n(5)视频信号和VGA信号的叠加;n(6)数字式多制式视频信号编码部分。3.3 多媒体信息获取与显示设备 n 多媒体计算机必须配置必要的外部设备来完成多媒体信息获取和显示的功能n 常见有鼠标、光笔、扫描仪、摄像机、触摸屏、彩色显示器、打印机等设备。3.3.1 图像获取设备 n 数字化图像获取设备常见的有扫描仪、数字照相机等静态图像获取设备和摄像机
39、等视频图像获取设备。1.图像数字化n 自然景物成象后的图像信息以照片或视频记录介质的形式保存,这些图像须数字化成计算机能处理的数字化信息,才能被多媒体计算机处理。n 对于照片和视频图像来说,不管是从图像信息的空间分布和亮度(颜色)分布都是连续的,这些连续的信息量必须离散化,离散化的过程即数字化处理过程,它应该包括空间位置的离散和亮度电平的离散化。n 步骤:采样,量化,模数变换。空间采样n 一幅图像在二维方向上分成MN个网格,每个网格用一个亮度值来表示该区域亮度,这样一幅图像就离散化为MN个亮度值来表示。这个过程称为图像的采样,其中MN称为采样的分辨率,网格的亮度值即为采样值。图3.17 图像的
40、采样 NM 空间采样的分类 n 一维采样用扫描方式(如传真、扫描仪等)把二维图像转化为一维随时间变化的信号。这样得到的一维行扫描信号经采样实现图像数字化。n 二维采样是目前发展的固体摄象器件采用的通用方法,它把光电转换和采样功能结合起来。固体摄象器件由MN个光敏元件构成,每个光敏元件对应一个采样点,MN个光敏元件构成MN个采样点。量化n 所谓量化就是把连续的亮度值分为K个区间,每个区间上对应着一个亮度I。落于区间i中的任何亮度值都以亮度值Ii表示,共有K个不同亮度值。n 按照量化区间划分方法,量化可分为均匀量化和非均匀量化。区间1 2 K亮度I1 I2 IK表3.3 区间与亮度对应关系 模数变
41、换n 实现量化的过程称为模数变换,这个过程一般采用PCM量化器来实现,PCM量化是均匀量化。n 非均匀量化一方面可利用PCM量化的结果,根据信号特性处理为非均匀量化的数据;另一方面也可以利用专门的非均匀量化器来实现。n 另外,还要考虑图像数据采样过程中产生的失真和噪声,包括叠加噪声,孔径效应及插入噪声等。2.图像扫描仪 n 20世纪80年代中期出现的光机电一体化高科技产品。n 基本原理是将反映图像特征的光信号转换成计算机可接受的电信号。n 工作过程 CCD,光电转换。n 图像扫描仪是最常用的静态图像输入设备。n 它往往配置大量的管理和控制扫描过程软件及文字识别、排版、图文数据库等软件,使扫描仪
42、提供很强图文信息获取能力。n 扫描仪还提供设置扫描区域、分辨率、亮度、图像深度等参数,扫描后图像还可进一步处理。图像扫描仪的种类:n 平板式n 手持式n 滚动式3.电视摄像机n 电视摄象机由摄象镜头管、同步信号发生电路、偏转电路、放大电路、电源等部分组成。n 来自被摄物体的光通过光学系统在摄象管的靶上形成光学图像,这个光学图像经摄象管转换成电信号,以视频信号方式输出被摄图像。n 彩色图像摄取重要的是分离出三基色信号,利用滤色片、分色镜或棱镜等把光分解成三基色。n 最新产品不用电子管作光电转换,用电荷耦合器件CCD等固态摄象器件,这种器件具有体积小、重量轻、省电、寿命长、可靠性高等优点。3.3.
43、2 显示设备n 多媒体计算机系统中信息显示的设备主要有PC机的显示系统。包括两部分:显示器,显示适配器。n 显示适配器由寄存器、视频存储器和控制电路三部分组成,其中视频存储器包括显示帧缓存RAM和存放BIOS的ROM。显示适配器可以是一块插入PC总线的扩展卡或集成在主板上。n 显示器与显示适配器相配。主要有两类,即多同步显示器和平面直角显示器 n 从扫描频率角度来分,显示器主要有固定扫描频率与可变扫描频率两种。3.3.3 触摸屏n 触摸屏最早出现于20 世纪70年代,90年代随着多媒体应用得到成熟和推广。n 触摸屏包括3个部分:传感器;控制部件;驱动程序。n 触摸屏的分类(按工作原理):红外线
44、触摸屏 电阻式触摸屏 电容式触摸屏 表面声波技术 底座式矢量压力测力触摸屏 等。1.触摸屏技术(1)红外线触摸屏n 工作原理n 红外触摸屏有内置式和外挂式两种(2)电阻式触摸屏 电阻式触摸屏感应器是一块覆盖电阻性栅格的玻璃,再在上面蒙上一层涂有导电涂层并有特殊模压凸缘的聚脂薄膜。凸缘避免其表面的涂层与玻璃的涂层接触。控制器向玻璃4角加有稳定的5伏电压,并读取导电层的电压值。当屏幕被触摸时,压力使聚脂薄膜凹陷而碰到玻璃,导电层接触。控制器向玻璃的两个邻角加电压,并把对面两个角接地,于是电阻栅格使玻璃片上形成从矩形的一边到另一边线性变化的电压阶梯,控制器从两个方向测出触摸点的电压值,从而计算出触摸
45、的精确位置。(3)电容式触摸屏n 这种触摸屏由模拟感应器和智能双向控制器组成。n 感应器是块透明的玻璃,表面有导电涂层,其上覆盖一层保护性玻璃外层。n 它工作时在感应器边缘的电极产生分布的电压场,用手指或其他导电体触摸导电涂层时,电容改变,电压场变化,控制器检测这些变化,从而确定触摸的位置。控制器把数字化的位置数据传到主机,以实现人机的交互。n 电容式触摸屏的感应器安装在监视器内部,外部与普通监视器一样,可靠性较高。(4)表面声波触摸屏 n 表面声波是应变能仅集中在物体表面传播的弹性波。n SAW触摸屏在一片玻璃的每个角上装有两个发射器和两个接收器,一系列的声波反射器被嵌进玻璃中,沿着两面从顶
46、至底穿过玻璃。发射器朝一个方向发射5MHz的短脉冲。当脉冲离开一角后,就会不断地被每个反射器反射回来一部分声波。n 当触摸玻璃的某点就阻碍了脉冲能量通过那点反射到达接收机,于是从接收的脉冲信号中就见到一段缺口。脉冲起点至下跌点间的时间长度就确定了触摸点的坐标。控制器通过互换两对发射器和接收器,就可测出触摸在X及Y方向的坐标。(5)矢量压力测力触摸屏 n 这种触摸屏的原理是在CRT外面盖上一块四角装有应力计的平板玻璃。n 当玻璃受到压力时,应力计就会出现电压或电阻等电气特性的变化。压力越重,变化值就越大。每个角记录这些变化。n 控制器读取每个角的记录值,并计算触压位置。这种触摸屏分辨率较低。2.
47、触摸屏的支持软件 n DOS设备驱动程序n 仿真程序-MOUSE仿真n 软件辅助开发工具 图3.18 触摸屏的支持软件 3.4 多媒体个人计算机 n 所谓多媒体个人机(MPC)就是具有多媒体处理功能的个人计算机。n MPC配置特点:(1)一个功能强大,速度快的CPU;(2)大容量的存储器空间;(3)高分辨率显示接口与设备;(4)可处理音响的接口与设备;(5)可处理图像的接口与设备;(6)可存放大量数据的配置等。n MPC配置(扩充)(1)光盘驱动器(2)音频卡(3)视频卡(4)扫描卡(5)打印机接口(6)交互控制接口(7)网络接口(8)图形加速卡 其他多媒体计算机 n Macintosh多媒体
48、计算机n Amiga多媒体个人计算机 3.5 CD-I交互式多媒体系统 n CD-I系统是家用交互式多媒体系统,它是Philips公司和Sony公司于1986年4月联合推出的一种电视计算机或称Smart TV系统。n 该系统把各种多媒体信息存放在容量为650MB的只读光盘上,用户可通过CD-I系统读取光盘的内容来进行演播,光盘的数据使用CD-I格式存放。n CD-I的正式商品于1991年面市,用户可以交互式地把家用电视机和计算机相连,通过鼠标器、操纵杆、遥控器等装置选择人们感兴趣的视听节目进行播放,是一种较好多媒体系统产品。1.CD-I基本系统结构 CD-I基本系统主要有5部分构成:(1)音频
49、处理子系统(2)视频处理子系统(3)多任务的操作系统(4)CD播放机(5)微处理器、存储器、键盘、定位装置和CSD字体模块 图3.19 CD-I基本系统结构音频处理子系统视频处理子系统存取控制器RAM定位装置键盘选件ROMCD-RTOSCSD字体CD-DA控制器CD-I接口MPUDMA控制器NVRAM 时钟日历CD播放机RGB视频信号左通道 右通道数据 控制信号 数据和控制BUS2.CD-I音频子系统 n CD-I基本系统有4种标准音质的运行方式和一种非实时的语音音质运行方式。n CD-I除继承CD-DA超级高保真音质运行方式外,还有A、B、C三个音质等级的运行方式。A级相当于Laser Vi
50、sion音质,B级相当于FM调频广播的音质,C级相当于AM调幅广播的音质。这4种音质的语音为实时的语音。表3.4 CD-I音频方式 级别 采样率(KHZ)位数/样本频率响应(KHZ)数据率(B/s)通道数数据流百分数播放时间(小时)CD-DA PCM 超级HiFi44.1 16 20 1711001立体声100 1CD-I ADPCMA(LV)37.8 8 17 85100 2立体声50 242500 4单通道25 4B(FM)37.8 4 17 42500 4立体声25 421300 8单通道12.5 8C(AM)18.9 4 8.5 21300 8立体声12.5 810600 16单通道6