流媒体技术的应用及其发展趋势 (华中科技大学电子与信息工程系 武汉 430074) 摘 要 流媒体是一种以音视频数据流的方式在网络上传递多媒体信息的技术，具有实时性和连续性的特点。本文从流媒体技术的基础和系统结构入手，主要就流媒体技术的应用和未来发展趋势进行了探讨。
关键词 流媒体 应用 0 引 言 近年来，随着网络宽带的发展和用户需求的驱动，流媒体技术和相关的应用得到越来越多的关注，随时随地观看的方式深受教育、娱乐等行业的喜爱，被认为是未来高速宽带网络的主流应用之一。在网络上传输音视频等多媒体信息目前主要有下载和流式传输两种方案。音视频文件一般都较大，所以需要的存储容量也较大；同时由于网络带宽的限制，下载常常要花数分钟甚至数小时，所以这种处理方法延迟也很大。流式传输时，声音、影像或动画等时基媒体由音视频服务器向用户计算机的连续、实时传送，用户不必等到整个文件全部下载完毕，而只需经过几秒或十数秒的启动延时即可进行观看。当声音等时基媒体在客户机上播放时，文件的剩余部分将在后台从服务器内继续下载。流式不仅使启动延时成十倍、百倍地缩短，而且不需要太大的缓存容量。流式传输避免了用户必须等待整个文件全部从Internet上下载才能观看的缺点。 本文首先概要的介绍了流媒体技术的基础和流媒体系统的基本结构，接着重点介绍了流媒体技术的应用，最后对流媒体技术未来的发展趋势进行了探讨。
1 流媒体技术基础 所谓流媒体技术，就是将连续的影像和声音信息经过压缩处理后放到网络服务器上，让浏览者一边下载一边收看、收听，而不需要等到整个多媒体文件下载完成就可以即时观看的技术。它是一种解决多媒体播放时网络带宽问题的技术。流媒体技术并不是单一的技术，它是融合很多网络技术之后所产生的技术，涉及到流媒体数据的采集、压缩、存储、传输以及网络通信等多项技术。 采用流媒体技术由于不需要将全部数据下载，因此等待时间可以大大缩短，也节省了大量的磁盘空间。流媒体作为在互联网上实时传输多媒体文件的技术，前景被一致看好。 流媒体指在Internet中使用流式传输技术的连续时基媒体，如：音频、视频或多媒体文件。流式媒体在播放前并不下载整个文件，只将开始部分内容存入内存，流式媒体的数据流随时传送随时播放。流媒体技术的核心技术是流(Streaming)技术和高压缩技术，使多媒体视音频信息以边下载，边播放的形式提供服务。流式传输，表示声音、影像或动画等媒体由视频服务器向用户计算机连续、实时地传送。 流式传输的实现需要缓存。因为Internet以包传输为基础进行断续的异步传输，对一个实时音视频源或存储的音视频文件，在传输中它们要被分解为许多包，由于网络是动态变化的，各个包选择的路由可能不尽相同，故到达客户端的时间延迟也就不等，甚至先发的数据包还有可能后到。为此，使用缓存系统来弥补延迟和抖动的影响，并保证数据包的顺序正确，从而使媒体数据能连续输出，而不会因为网络暂时拥塞使播放出现停顿。通常高速缓存所需容量并不大，因为高速缓存使用环形链表结构来存储数据：通过丢弃已经播放的内容，流可以重新利用空出的高速缓存空间来缓存后续尚未播放的内容。 流式传输的过程一般是这样的：用户选择某一流媒体服务后，Web浏览器与Web服务器之间使用HTTP/TCP交换控制信息，以便把需要传输的实时数据从原始信息中检索出来；然后客户机上的Web浏览
器启动程序，使用HTTP从WEB服务器检索相关参数。这些参数可能包括目录信息、音视频数据的编码类型或与音视频检索相关的服务器地址. 对于流媒体来说，目前比较常见的几种流媒体格式有微软的.asf，RealNetworks公司的.rm、.ra、.rmvb以及苹果公司的.mov等。
2 流媒体系统的基本结构 一个基本的流媒体系统包括编码器、服务器和播放器三部分。 编码器对原始的音、视频数据进行一定格式的压缩编码，编码的方式有实时和非实时两种，常用的音频编码器主要有MP3，常用的视频编码器主要有MPEG-4、H.261、H.263和H.264等，其中H.264视频编码器无论是在编码效率还是在图像质量上都优于其它现有视频编码器。 服务器负责将编码数据封装成RTP数据包发送到网络中。每次从节目中获取一帧数据，然后分成几个RTP数据包，并将时间戳和序列号添加到RTP包头，属于同一帧的数据包具有相同的时戳。一旦到达数据包所应播放的时间后，服务器便将这一帧的音视频数据包发送出去，然后再读取下一帧数据。 客户端每次从队列头部读取一帧的数据，从包头的时间戳中解出该帧的播放时间，然后进行音视频同步处理。同步后的数据将送入解码器进行解码，解码后的数据被送入一个循环读取的缓存中等待。一旦该帧的播放时间到达，解码数据就会从缓存中取出，送入播放模块驱动底层硬件设备进行显示或播放。
3 流媒体技术的应用 3.1 在线直播 目前在线直播（或称为网络直播）已经得到了迅猛发展，已经从实验阶段走向了实用阶段，并能够提供较满意的音、视频效果。许多高校也已提供了在线直播业务，提供的内容涵盖实时教学、校园电视、其他电视节目转播等。并且通过Multicast（多址广播）技术大大减少服务器端的负荷。当前流行的PPLive、PPStream都是在线直播的具体应用。 3.2 视频点播 视频点播技术已经不是什么新鲜的概念了，最初的VOD应用于卡拉OK点播，当时的VOD系统是半自动的需要人工参与。随着计算机的发展，VOD技术逐渐应用于局域网及有线电视网中，此时的VOD技术趋于完善，但有一个困难阻碍了VOD技术的发展，那就是音视频信息的庞大容量。此时流媒体技术出现了，在视频点播方面我们完全可以遗弃局域网而使用互联网，由于流媒体经过了特殊的压缩编码，使得它很适合在网络上传输，由于采用了先进的负载均衡技术，可对大规模的并发点播请求进行分布式处理，使其能适应大规模的点播环境。 3.3 视频会议 视频会议是流媒体技术的一个重要应用方面，通过流媒体我们还可以进行点对点的通信，最常见的例子就是可视电话和视频会议系统。只要我们有一台已经接入互联网的电脑和一个摄像头，就可以与世界任何地点的人进行音、视频的通信。此外，具有多个分校区的院校可以利用基于流技术的视频会议系统来组织跨校区的会议和讨论，从而节省大量人、财、物的开支。当然目前视频会议技术可大致分为主要由软件实现的桌面视频会议系统和主要由硬件实现的会议室型视频会议系统，两者在价格、性能和音视频效果上都有较大差别，各高校在实际采购部署中也采用了不同的方案，有纯桌面型的，有纯会议室型的，也有两者结合的，需求不同，其应用方式自然不同。 3.4 远程教育 电脑的普及、多媒体技术的发展以及网络的迅速崛起，给远程教育带来了新的机遇，世界各国都正大力开展包括网络教育在内的远程教育。 在远程教学过程中，最基本的要求是将信息从教师端传递到远程的学生端，需要传递的信息可能是多元化的，这其中包括各种类型的数据：如视频、音频、文本、图片等。将这些资料从一端传递到另一端是远程教学需要解决的问题，而如何将这些信息资料有效的组合起来以达到更好的教学效果更是我们需要思考的重要方面。由于当前网络带宽的限制，流媒体无疑是最佳的选择。 同时就目前来讲，能够在远程教学活动中进行多媒体交互教学的技术多为流媒体，像RealSystem、Flash 等技术就经常应用到远程教学中。远程教育是对传统教育模式的一次革命，它能够集教学和管理于一体，突破了传统“面授”的局限，为学习者在空间和时间上都提供了极大便利。
4 流媒体技术未来的发展趋势 4.1 IPTV 据国际电信联盟ITU在2004年9月的一份报告指出，全球的宽带用户已经在去年底首度突破1亿大
关，其中中国电信的宽带用户就超过了一千万，用户的主要接入方式是ADSL和以太网线，其实际的连接速率可以达到1Mbit/s。而且随着高性能的编码技术的采用，如H.264和最新的Windows Media视频编码器，800Kbit/s的视频流就可以接近或达到DVD质量。 在这种情况下，扩展流媒体技术用来提供电视服务也就顺理成章了。IPTV，也叫交互式网络电视，就是利用流媒体技术通过宽带网络传输数字电视信号给用户，这种应用有效地将电视、网络和PC三个领域结合在一起，具有很强的发展前景。IPTV可以采用两种不同的方式提供用户电视服务，组播或者广播方式和视频点播(VOD)方式。一个明显的优势是IPTV是基于现有互联网的方式来实现服务器和用户终端的连接，因此很容易同时提供现有的互联网的服务，将电视服务和互联网浏览、电子邮件，以及多种在线信息咨询、娱乐、教育及商务功能结合在一起。 4.2 无线流媒体 2.5G，3G以及超3G无线网络的发展也使得流媒体技术可以被用到无线终端设备上，目前中国联通公司提供CDMA 1x，用户网络带宽最多可以达到100Kbit/s，这已经足够提供QCIF大小的流媒体服务；而且随着3G 无线网络的应用，用户的网络带宽可以达到384Kbit/s。另一方面，手机设备运算能力越来越强，存储空间越来越大，不用说SMART Phone和Pocket PC等高端手机，就是一般的中档手机也能实现基本的H.264的软件解码。 面向无线网络的流媒体应用对当前的编码和传输技术提出了更大的挑战，首先，相对于有线网络而言，无线网络状况更不稳定，除去网络流量所造成的传输速率的波动外，手持设备的移动速度和所在位置也会严重地影响到传输速率，因此高效的可自适应的编码技术至关重要。其次，无线信道的环境也要比有线信道恶劣得多，数据的误码率也要高许多，而高压缩的码流对传输错误非常敏感，还会造成错误向后面的图像扩散，因此无线流媒体在信源和信道编码上需要很好的容错技术。尽管手机设备的运算能力越来越强，但是由于它是由电池供电的，因此编解码处理不能太复杂，并且最好能够根据用户设备的电池来调整流媒体的接收和处理，能源管理技术也是移动流媒体的一个研究热点。 4.3 电子家庭 现代家庭中的越来越多的设备可以用来采集、接收、发送和播放多媒体数据。如人们可以通过电视来收看电视节目，通过PC机在互联网上欣赏流媒体节目，通过自己的数字相机和摄像机来拍摄图像和视频，通过手机和其他手持设备来发送彩信，通过汽车的音响系统来欣赏音乐和广播。并且家庭中的网络连接也是多样化的，如电视连接有线电视网，PC机连接着互联网，手机连接着无线网络，而且这些设备也能在家里通过蓝牙或802.11无线网络协议连接在一起。 所有这些设备所收到的多媒体数据如何在家庭网络和设备间共享，为流媒体的发展提供了一个更大的舞台，真正实现一种无所不在、随心所至的多媒体服务，让多媒体真正地像液体一样自由流动起来。流媒体在家庭网络应用中的关键是如何使多媒体数据能够适应不同的设备的能力，如在电视和PC机中播放的视频的大小可能是标清甚至是高清，但是同样的内容就可能需要经过流媒体系统有效的转换才能成为最适合在手持设备上播放的媒体。 4.4 编码新技术 (1) 高效的编码技术