根据国际电报电话咨询委员会的定义,目前媒体可分为五大类。 (1) 感觉媒体(Perception Media) 指能直接作用于人的感官,使人能直接产生感觉的一类媒体。如:语言、音乐,声音、图形、图像
(2)表示媒体(Presentation Media) 指传输感觉媒体的中介媒体,为加工、处理和传输感觉媒体而人为研究、构造出来的一种媒体,即用于数据交换的编码,是感觉媒体数字化后的表示形式。如图像编码(JPEG、MPEG等) (3)显示媒体(Display Media)
指感觉媒体和用于通信的电信号之间转换用的一种媒体(设备)。如键盘、摄像机、显示器、喇叭 (4)存储媒体(Storage Media)
存放表示媒体的媒体。如:软硬盘、CD-ROM、磁带、唱片等。 (5) 传输媒体(Transmission Media)
指用于将表示媒体传送到其它计算机的通信载体。 多媒体的概念:
从人机交互的角度分为:视觉类媒体、听觉类媒体和触觉类媒体 等
1. 视觉类媒体:顾名思义就是眼睛所看到的内容,包括位图图像、矢量图形 、符号 、视频 2.听觉类媒体:指的是人耳所能听到的一切声音,主要包括:波形声音、语音、音乐
3. 触觉类媒体:指的是能使人接触产生感觉的媒体, 主要包括 :指点 、位置跟踪 、运动反馈 多媒体技术:是指用计算机综合处理多种媒体信息如文本、图形、图像和声音等,使这多种信息建立逻辑连接,集成为一个系统并具有交互性。
多媒体技术是融合两种以上媒体的人-机交互技术,它主要包含两层意思:一是综合性,二是交互性。 超文本是一种电子文档,
超文本技术管理的对象是纯文本,而超媒体技术的管理对象为多媒体 体多媒计算机技术定义 简单地说:
计算机综合处理声、文、图信息; 具有集成性和交互性; 多媒体应用的发展趋势
? 分布式、网络化、协同工作的多媒体系统。
? 三电(电信、电脑、电器)通过多媒体数字化技术,相互渗透融合。 ? 以用户为中心,充分发展交互多媒体和智能多媒体技术与设备。 流媒体应用领域 远程教育
宽带网视频点播 互联网直播 视频会议
媒体依人的感官可分为视觉类媒体和听觉类媒体两大类。
? 颜色的形成主要有四个要素 :
? 光源、物体、眼睛和大脑 三基色: 红绿蓝 色彩的三要素 色调 亮度 饱和度
? 图形:反映物体的局部特性,它是真实物体的模型化; ? 图像:反映物体的整体特性,是物体的真实再现。 图像与图形的区别
1
△图形一般指用计算机结合某种算法绘制的画面。
△图像则是指由输入设备捕捉的实际场景画面或以数字化形式存储的任意画面。
? 数字图像的种类:矢量图 位图 矢量图形和位图图像的区别
? 矢量图侧重于“绘制”、去创造,位图偏重于“获取”、去“复制” ? 图像处理主要包括 :
? 图像输入输出 ? 图像表示转换 ? 图像处理分析 ? 图像理解解释
? BMP文件:是Windows系统下的标准格式
? PSD文件:图像处理软件Photoshop的专用格式 ? 图像压缩的概念: 减少表示数字图像时需要的数据量
? 图像压缩的基本原理: 图像压缩是指以较少的比特有损或无损地表示原来的像素矩阵的技术,也称图像编码。 图像压缩可以是有损数据压缩也可以是无损数据压缩。
△无损数据压缩(Lossless Compression)指数据经过压缩后,信息不受损失,还能完全恢复到压缩前的原样。
△有损数据压缩方法是经过压缩、解压的数据与原始数据不同但是非常接近的压缩方法。 △多媒体关键技术 1.数据压缩
2.音频数据的压缩 3.静态图像的数据压缩 4.运动图像的数据压缩 图像编码技术的国际标准 ★★★JPEG标准 ★★★ MPEG标准
ISO:国际标准化组织 IEC :国际电工委员会 ITU:国际电信联盟
无损数据压缩(Lossless Compression)指数据经过压缩后,信息不受损失,还能完全恢复到压缩前的原样。
有损数据压缩方法是经过压缩、解压的数据与原始数据不同但是非常接近的压缩方法。 数据压缩方法是经过压缩、解压的数据与原始数据不同但是非常接近的压缩方法。 声音没有质量,也没有重量。声音不是物体,只是一个名称,声音是一种机械纵波, 声音被分为无规则的噪音和有规则的音频信号; 频率最低的音波称为基频或基音
除此之外的音波都称为泛音,其频率是基频的整数倍
? 声音特性:(一)响度(二)音调 (三)音色(四)乐音 人的声音频率在65赫(男低音)到1100赫(女高音)范围内。 把频率高于20000赫兹的声波称为“超声波”。 通常用于医学诊断的超声波频率为1~5兆赫
环绕声就是在重放中能把原信号中各声源的方向再现,是欣赏者有一种被来自不同方向的声音包围的感觉。
语音四要素:音高,音强,音长,音色
2
音频是指人类听觉所感知范围内的频率,也称声频。
? 次声波(subsonic):频率低于20Hz的信号。 ? 超声波(ultrasonic):频率高于20KHz的信号。
声卡是计算机进行声音处理的适配器。它有三个基本功能:一是音乐合成发音功能;二是混音器功能和数字声音效果处理器功能;三是模拟声音信号的输入和输出功能。
语音合成和语音识别技术是实现人机语音通信,建立一个有听和讲能力的口语系统所必需的两项关键技术。
? 根据动画反映的空间范围,动画分为:二维动画 三维动画 ? 根据播放时画面的生成途径,动画分为: 造型动画 帧动画
▲全球收视率最高的十部日本动漫:说出5部 TOP 1 机动战士高达。TOP 2 圣斗士星矢 ,TOP 3 名侦探柯南,TOP 4 棒球英豪,TOP 5 七龙珠,TOP 6 口袋妖怪,TOP 7 蜡笔小新,TOP 8 犬夜叉, TOP 9 美少女战士,TOP 10 棋魂,
▲国产经典动画片 :说出6部 1.小蝌蚪找妈妈,2.大闹天宫,3.阿凡提,4.崂山道士,5.黑猫警长, 6.葫芦兄弟,7.三个和尚。8,三毛流浪记,9猴子捞月亮等竜说出6部 视频:指0~10兆赫范围内的频率
? 数字视频的概念 : 数字视频是基于数字技术记录的,它在时间和幅度上都是离散的,可以无限次的复制,但不产生失真,并且可以通过计算机随意的编辑和再创作。 多媒体计算机中处理活动图像的适配器称为视频卡。
标准清晰度电视(SDTV: )是一种提供跟多功能数码光盘(DVD)相似图象质量的数字电视
? 视频点播的概念 把用户选择的节目,通过通信网的传输,分发到用户终端设备上。
交互式网络电视,是一种利用宽带有线电视网,集互联网、多媒体、通讯等多种技术于一体,向家庭用户提供包括数字电视在内的多种交互式服务的崭新技术。
▲超文本的结构:节点(node) 节点包含的内容 超链(hyperlink) 链源 链宿 超文本的主要特点 :
超文本不是顺序的,而是一个非线性的网状结构,它把文本按其内部固有的独立性和相关性划分成不同的基本信息块,称为节点
▲超媒体与超文本之间不同之处是:超文本主要是以文字的形式表示信息,建立的链接关系主要是文句之间的链接关系。超媒体除了使用文本外,还使用声音、图形、图像、动画和视频片段等多种媒体信息来表示信息,建立的链接关系是文本、声音、图形、图像、动画和视频片段之间的链接关系。 ▲超媒体具有如下的特点: 多种媒体信息 网络结构形式 交互特性 ▲超媒体系统的特性: 多媒体化 交互性
▲超文本与超媒体的组成要素 :节点 链 网络
超媒体系统的组成 :由创作子系统、读者子系统、支持子系统组成。 超文本与超媒体的应用 : 1.多媒体信息管理 超媒体被许多人称为“天然”的多媒体信息管理技术,这是因为对多媒体信息来说,超媒体的方式更易于反映出媒体之间的联系和关系。 2.个人学习、工作辅助与办公自动化
超媒体技术在辅助个人学习方面非常有效。 3.商业展示、产品广告和指南
4.娱乐(音乐、小说、电影)和休闲
超文本与超媒体存在的问题:超文本与超媒体是一项正在发展中的技术,虽然它有许多独特的优点,
3
但也存在许多不够完善的方面。 超文本与超媒体发展的前景 : 1. 由超文本向超媒体发展
从超文本到超媒体是技术发展的进步,也是技术发展的必然性。超文本向超媒体的转变不仅是将文本媒体扩展到其它媒体,而且还要能使系统自动地判断媒体类型,并执行对应的操作。对图像的热区,视频的热点等都能引起类似于热字的反应,多媒体的表现及基本内容的检索等。超文本向超媒体的转变,大大地增强了功能和性能,也增加了系统实现的难度。
2. 由超媒体向智能超媒体发展
在超媒体技术的研究中,有人提出智能超媒体或专家超媒体(Expertext)。这种超媒体打破了常规超媒体文献内部和它们之间严格的链的限制,在超媒体的链和节点中嵌入知识或规则,允许链进行计算和推理,使得多媒体信息的表现具有智能化。
3. 由超媒体向协作超媒体发展
超媒体建立了信息之间的链接关系,那么也可用超媒体技术建立人与人之间的链接关系,这就是协作超媒体技术。超媒体节点与链的概念使之成为支持协同性工作的自然工具。协同工作使得多个用户可以同一组超媒体数据上共同进行操作。这样未来的电子邮政、公共提示板等都可能应用到超媒体系统中。
WWW和超媒体二者之间的关系。 答:WWW就是一个超媒体系统。WWW遵循的协议HTTP全称为“超文本传输协议”;制作WWW页的语言HTML即“超文本标注语言”。 超文本与超媒体存在的问题:
超文本与超媒体是一项正在发展中的技术,虽然它有许多独特的优点,但也存在许多不够完善的方面。 1.信息组织
超文本的信息是以节点作为单位。如何把一个复杂的信息系统划分成信息块是一个较困难的问题。例如一篇文章,一个主题,又可能分成几个观点,而不同主题的观点又相互联系,而为这些联系分割开来,就会破坏文章的本身表达的思想。这样节点的组织和安排就可能要反复调整和组织。 2. 智能化
虽然大多数超文本系统提供了许多帮助用户阅读的辅助信息和直观表示。但因超文本系统的控制权完全交给了用户,当用户接触一个不熟悉的题目时,可能会在网络中迷失方向。要彻底解决这一问题,还需要研究更有效的方法,这实际上是要超文本系统具有某种智能性,而不是只能被动地沿链跳转。超文本在结构上是人工智能有着相似之处,使它们有机的结合将成为超文本与超媒体系统的必然趋势。 3. 数据转换
超文本系统数据的组织与现有的各种数据库文件系统的格式完全不一样。引入超文本系统后,如何为传统的数据库数据转换到超文本中也是一个问题。 4. 兼容性
目前的超文本系统大都是根据用户的要求分别设计的,它们之间没有考虑到兼容性问题,也没有统一的标准可循。所以要尽快制定标准并加强对版本的控制。标准化是超文本系统的一个重要问题,没有标准化,各个超文本系统之间就无法沟通,信息就不能共享。 5. 扩充性
现有的超文本系统,有待于提高检索和查询速度,增强信息管理结构和组织的灵活性,以便提供方便的系统扩充手段。 6. 媒体间协调性
4
超文本向超媒体的发展也带来了一系列需要深入研究的问题,如多媒体数据如何组织,各种媒体间如何协调,节点和链如何表示;对音频和视频这一类与时间有密切关系的媒体引入到超文本中,对系统的体系结构将产生什么样的影响,当各种媒体数据作为节点和链的内容时,媒体信息时间和空间的划分,内容之间的合理组织都是在多媒体数据模型建立时要认真解决的问题。
视频采集卡的作用:是将模拟摄像机、录像机、视盘机、电视机输出的视频信号等输出的视频数据或者视频音频的混合数据输入电脑,并转换成电脑可辨别的数字数据,存储在电脑中,成为可编辑处理的视频数据文件。
一款摄像头的分辨率为640×480,那么像素就是640×480 = 307200,即30万像素。
触摸屏基本技术特性主要包括下面四个方面:连接接口;检测与定位;透明性能:绝对坐标系统。 数字机顶盒:是一种将数字电视信号转换成模拟信号的变换设备,通过对数字化压缩的图像声音信号进行解码还原,产生模拟视频和声音信号,以提供给观众高质量的电视节目。
根据通信节点的数量,视频会议系统可分为 :点对点视频会议系统 多点视频会议系统 1. 点对点的视频会议系统:
点对点视频会议系统支持两个通信节点间视频会议通讯功能,它的主要业务是:
? 可视电话
? 台式机—台式机视频会议 ? 会议室—会议室视频会议
2.多点视频会议系统
视频会议系统允许三个或三个以上不同地点的参加者同时参与会议。
视频会议系统的结构:视频会议系统主要由视频会议终端、多点控制器、信道(网络)及控制管理软件组成。
设计一个视频会议系统要解决的问题
综合业务多媒体终端 多点控制单元MCU 信道(网络) 控制管理软件
基于内容检索的关键技术
两个关键技术:多媒体特征提取技术和匹配算法相似性检索技术。
5

