◆多媒体:指信息表示媒体的多样化,常见的多媒体有文本、图形、图形、声音、音乐、视频、动画等多种形式。
◆多媒体技术:是利用计算机技术把文本、声音、视频、动画、图形和图像等多种多媒体进行综合处理,使多种信息之间建立逻辑连接,集成一个完整的系统。
◆多媒体(从本质上)的重要特征:多维化、继集成性、交互性、实时性。
◆多媒体及多媒体技术产生于20世纪80年代◆多媒体计算机(MPC )标准:MPC1 1990年诞生; MPC2 1993年5月;MPC 1995年6月◆多媒体的核心任务:获取、处理、转发或分发多媒体信息,使多媒体信息之间建立逻辑链接◆多媒体信息处理的最终目标:能跨越各种网络和设备,透明的、强化的使用多媒体资源◆多媒体系统的关键技术:多媒体数据的处理、多媒体数据的存储、多媒体数据的传输、多媒体输入/输出技术◆多核处理器:指将多个运算核封装在一个芯片内部。
◆多媒体信息以3种模式相互集成:制约式、协作式、交互式◆超媒体:是超文本和多媒体信息浏览坏境下的结合。
它采用面向对象的信息组织与管理形式。
◆超媒体信息网络:将多媒体各个信息单元组成一个由节点和各种链构成的网络。
◆虚拟现实(UR )就是采用计算机技术生成一个逼真的视觉、听觉、触觉及嗅觉的感觉世界,用户可以用人的自然技能对这个生成的虚拟实体进行交互考察◆人机界面设计目的:通过对用户需求的解释大道一种人机之间较好的通信能力◆高速多媒体通信技术:指为满足新一代信息系统中实时多媒体信息传输的需要。
◆多媒体技术的应用:①音频/视频流点播;②电子出版物;③医疗卫生;④游戏与娱乐;⑤计算机视频会议;⑥多媒体展示和信息查询系统;⑦管理信息系统(MIS )和办公自动化系统(OA );⑧传媒、广告;⑨教学管理系统;⑩移动卫星。
◆多媒体技术未来将朝着智能化和多维化方向发展★多媒体计算机硬件组成:主机、音频/视频处理设备、光盘驱动器、媒体输入/输出设备★CPU (central processing unit)中央处理器,其内部结构可分为控制单元、逻辑单元、存储单元★多媒体I/O设备可分为:输入设备、输出设备、用于网络通信的通信设备★触摸屏分类:电阻式、电容式、红外线式、声表面波式★视频捕捉卡:把输入的模拟视频信号通过内置芯片提供的捕捉功能转换成数字信号设备★NTSC 352*240 分辨率 30帧/秒 PAL 352*288分辨率 25帧/秒★影响显存性能的参数:显存的容量、显存的数据位数与宽带、显存的速度★所需显存=图形分辨率*色彩精度/8 (二维)所需显存(帧存)=图形分辨率*3*色彩精度/8 (三维)★显存的速度一般以ns 为单位★打印机主要分为:击打式和非击打式击打式打印机:点阵式打印机非击打式打印机:激光打印机、喷墨式打印机★调制解调器(Modem )作用:利用模拟信号传输线路传输数字信号★网卡工作原理:整理计算机上发往网上的数据,并将数据分解为适当大小的数据包后在网络上发出去,同时还负责网线上传过来的数据。
★网卡按连线的插口类型分:RJ-45水晶、BNC 细缆口、AUI★ADSL (非对称式数字用户线路)调制解调器采用两种方法实现:频分多路复用(FDM )、回波消除★ADSL 调制解调设备采用3种线路编码技术:抑制载波幅度和相位(CAP )、离散多音复用(DMT )、离散小波多音复用(DWMT )★相变存储器:一种新型的半导体存储技术,是加工到纳米尺寸的可逆相变材料,利用材料晶态时低阻与非晶态时的高阻特性来实现存储的技术★存储技术:NAS (网络附加存储)、SAN (存储局域网)、DAS (直接附加存储)、IP 存储、光存储、虚拟存储★虚拟存储:把物理上相互独立的存储模块用软、硬件集中起来管理,形成逻辑上的存储单元,从而使主机得以访问★虚拟存储分为:对称式和非对称式★虚拟存储最直接的好处:提高存储利用率、降低成本、简化存储管理★USB 设备的优点:使用方便;速度快(USB 的3种设备传输速率:1.5Mbps 、12 Mbps、480 Mbps);连接灵活;独立供电;支持多媒体;低成本★USB 硬件结构:采用四线电缆,信号定义由2条电源线和2条信号线组成★USB 工作方式是基于令牌的总线,USB 采用级联星形拓扑,该拓扑由3个基本部分组成:主机(host )、集成器(hub )、功能设备(funcs )★USB 系统有如下3个基本组件:主控制器驱动程序(HCD )、USB 驱动程序(USBD )、USB 客户软件★USB 的软件结构;1. 总线接口;B 系统,由主控制驱动程序、USB 驱动程序、USB 客户软件组成。
★USB 主机的功能:检测链接和移除的USB 设备;管理主机和USB 设备;链接USB 状态和活动统计;控制主控制器和USB 设备间的电气接口。
★USB 的数据流传输方式:其分同步传输方式、中断传输方式、控制传输方式、批传输方式。
★提高芯片容量的方法:改良逻辑结构以提高其存储密度,更先进的工艺使芯片可集成更多的晶体管,芯片堆叠封装技术达到翻倍的效能。
★数字摄像设备:CCD (电荷耦合元件)、CMOS (金属氧化物半导体元件)★CCD :CCD 技术和结构主要考虑最佳的光学属性和图片质量,CCD 传感器原理是以横竖线短阵形式排列,各像素点包含一个光电二极管和控制相邻电荷单元,光电二极管将光子转化为电子,聚焦的电子数量相应于光强度,并转换成各自独立的电荷包单元。
★CMOS:采用标准硅处理方法加工。
★数字摄像头:主要参数是为最大分辨率、传感器像素、接口类型、色彩位数、感光元件、最大帧数。
★数码相机:其特征为像素、镜头、快门。
★数码相机:是指能够进行拍摄,并且能通过自身内部进行处理,把拍摄到得景物转换为数字格式进行存储的照相机。
◆数字化信息的基本单位:比特(bit )◆信号的数字化处理包括两个步骤:时间上的离散化即采样;幅度上的离散化即量化。
◆采样也叫抽样,是信号在时间上的离散化(通过采样脉冲和模拟信号相乘来实现)◆量化:对幅指进行离散化,即将振动幅值用二进制量化电平表示◆离散方法:离散傅里叶变换(DFT )及逆变换表示法(IDFT )◆小波变换用于图像编码的基本思想:把图像进行多分辨率分解,分解成不同空间,不同频率的子图像,然后再对子图像进行系数编码。
系数编码是小波变换用于压缩的核心,而压缩的实质是对系数的量化压缩◆图像处理技术中最基本的问题是对色彩的处理◆色彩可用色调、饱和度、亮度来描述◆色调指某种颜色的性质和特点,它是由物体表面反射的光线中什么波长占优势决定的◆亮度是作用于物体表面的光线反射系数,也可以说是指各种纯正的色彩相互比较所产生的明暗差别◆饱和度指颜色色调的变现程度◆图像深度是用来描述颜色的多少◆图像深度是指位图中记录每个像素点所占的位置◆图像深度与色彩的映射关系主要有真彩色、伪彩色、调配色◆色彩空间及其变换:RGB 【R :G :B :红:绿:蓝】颜色模式、 Lab 颜色模式、HSB 颜色模式(由三个要素—色调、饱和度、亮度)、CMYK 【C 、M 、Y 、K :青、品红、黄、黑】颜色模式、 YUV 颜色模式(一个亮度信号Y ,两个色差信号U 、V )◆YUV 表示法的重要性是亮度信号Y 和色差信号(U 、V )是相互独立的,其优点是可利用人眼的特性来降低数字彩色图像所需要的存储容量◆数据压缩的目的:尽可能地消除数据的冗余,便于数据存储和运输◆冗余分类:统计冗余、信息熵冗余、结构冗余、知识冗余、视觉冗余◆图像数据压缩的算法:信息熵编码、通用编码、预测编码、模型编码、矢量量化编码、子带编码、混合编码◆压缩算法的指标包括:压缩比、算法的复杂性和运算速度、失真度、无损编码、有损编码◆变换编码:是将时域信号变换到频域信号上进行处理的方法。
◆矢量图:是用数学的方法描述的一系列点、线、弧和其他几何形状◆位图映像图(光栅图),由像素组成◆位图映像图图形文件常见的格式:BMP 、GIF 、PNG◆BMP 图像文件由三部分组成:位图文件头数据结构、位图信息数据结构、位图阵列◆PNG 图像的缺点:文件格式不支持动应用;PNG 不支持CMYK 的模式、◆静态图像压缩标准 JPEG 标准◆JPEG 标准规定了两种工作方式:顺序方式和渐进方式;且具有3种级别编码算法:基本系统、扩展系统、无真系统。
基本系统编码算法以离散余弦变换(DCT )为核心。
◆JPEG 基本系统算法过程:通过离散余弦变换减少图像数据的相关性;利用人眼视觉特性对系数进行自适应量化;对每个子块量化后的系数矩阵进行Z 形扫描,将悉数矩阵变换成符号序列;用哈夫曼变长码对符号进行熵编码。
◆JPEG 2000标准算法核心:采用以离散小波变换算法(DWT )为主的多解析编码方式◆JPEG 2000优势:高压缩率;无损压缩;渐进传输;感兴趣区域压缩。
◆动态图像压缩标准:MPEG 标准(减少空间冗余)◆MPEG-4主要应用于可是电话、视频邮件、电子新闻◆MPEG-4最重要的三个技术特征:基于内容的压缩、更高的压缩比、时空可伸缩性◆MPEG-4与MPEG-1和 MPEG-2不同之处在于:MPEG-1和 MPEG-2是基于帧的规则,而 MPEG-4是基于媒体对象的规范◆MPEG-4将数字电视最终完全取代现有的模拟电视◆H.261标准适用于综合业务数字网(ISDN )◆H.263标准适用于公共交换电话网(PSTN )◆H.263目的是能在现有的电话网上传输活动图像◆半像素运动补偿:指半像素为一点像素值由相邻点整像素位置的值进行双线性内插得到◆H.264标准的关键技术:分层设计;高精度、多模式运动估计;4*4块的整数变换;同统一的VCL ;帧内预测;面向IP 和无线环境★声音的三要素:音调、音强、音色音强也称响度,用来描述声音的强弱,取决于声音的幅度★音频信号压缩技术:无损压缩、有损压缩★均匀量化(线性量化):采用相等的量化间隔对采样得到的信号进行量化★非均匀量化(非线向量化)基本思想:对输入信号进行量化时,大的输入信号采用大的量化间隔,晓得输入信号采用小的量化间隔。
★音频信号处理的方法:采样、量化★. 数字语音通信语音质量分4类,广播质量、网络质量、通信质量、合成质量★自适应差分脉冲编码调制ADPCM 的思想是:1. 利用自适应的思想改变量化的大小,即使用小的量化增量去编码小的差值,使用大的量化增量去编码打的差值;2. 使用过去的样本值估算下一个输入样本的预测值,使实际样本值和预测值之间的差值总是最小。
★MIDI 是数字音乐电子合成音乐的统一国际标准,其目的是解决各种电子乐器间存在的兼容性问题。
★MIDI 定义的内容:定义了计算机音乐程序、音乐合成器及其他电子音乐设备交换音乐信号的方式★声卡的声道:1. 单声道:比较原始的声音复制形式;2. 立体声:声音在录制时被分配到两个独立的声道;3. 四声道环绕声:其四个发音点位前左前、右后、左后、右及附加低音单元。