导图社区 多媒体技术教程
仅涉及学习的一些概念,具体编码技术示例不在本图展现
编辑于2020-02-14 03:03:59多媒体技术教程
基本概念
媒体
定义
承载信息的载体
分类
感觉媒体
表示媒体
显示媒体
存储媒体
传输媒体
多媒体
定义
以数字化为基础,能够对多种媒体信息进行采集、编码、存储、传输、处理和表现,综合处理多种媒体信息并使之建立起有机的逻辑联系,集成为一个系统并能具有良好交互性的技术。
关键特性
信息载体多样性
交互性
集成性
媒体与媒体技术
媒体元素
媒体种类
媒体的性质和特点
媒体技术
多媒体数据压缩
数据冗余类型
常用数据压缩编码方法
预测编码
典型
DPCM编码
ADPCM编码
变换编码
步骤
变换
变换域采样
量化
变换类型
K-L变换
DCT
DFT
WHT
HrT
统计编码
行程编码
Huffman编码
LZW编码
算术编码
分析——合成编码
混合编码
小波变换编码
性能指标
压缩比
图像质量
压缩和解压的速度
压缩标准
音频压缩标准
图像和视频压缩标准
静止图像压缩标准
视频压缩标准
多媒体软件基础
多媒体软件系统层次
多媒体驱动软件
支持多媒体的操作系统或操作环境
多媒体数据准备软件(多媒体素材制作软件)
多媒体编辑创作软件
多媒体应用软件
多媒体素材制作软件
文本编辑与录入软件
Microsoft Word
WPS
图形图像编辑与处理软件
Adobe Photoshop
CorelDraw
Freehand
音频编辑与处理软件
波形声音处理软件
Audition
GoldWave
WaveEdit
Creative WaveStudio
MIDI软件
MIDI Orchestrator
视频编辑软件
Adobe Premiere
Asymetrix DVP
会声会影
动画制作软件
平面动画制作软件
Flash MX
Animator Pro
Director
三维动画制作软件
3D Studio MAX
Maya
SoftImage
LightWave
Lightscape
多媒体著作工具
相关概念
工具的标准
类型
按创作工具分类
以图标为基础:如Micromedia Authorware
以时间为基础:如Micromedia Action
以页为基础:如ToolBook
以传统程序设计语言为基础
按创作工具的创作界面
幻灯式:Microsoft PowerPoint
书本式:ToolBook
窗口式:ToolBook
时基式:Micromedia Action
网络式
流程图式:Micromedia Authorware
总谱式:Micromedia Director
多媒体软件编程技术
MCI
MCI编程接口
命令—字符串接口
命令—消息接口
MCI命令集
分类
系统命令
需求命令
基本命令
扩展命令
常用的
Capality
Close
Info
Open
Pause
Play
Record
Resume
Seek
Set
Set
Status
Stop
命令语法:Command device_name argument
Command:MCI所使用的命令
device_name:设备类型、文件名称或别名
arguments:指令所带的参数列表
设备类型
操作
多媒体控件
Multimedia MCI
ActiveMovie
ShokewaveFlash
多媒体软件开发工具包
DirectShow
Microsoft Speech SDK
多媒体硬件环境
多媒体存储设备
多媒体光存储
典型
CD-ROM光存储系统
CD-R光存储系统
DVD光存储系统
分类
只读型光存储系统
CD-ROM
LV
一次写型光存储系统(WORM)
可重写型光存储系统(E-R/W)
磁光型
相变型
多媒体移动存储
闪存
分类
SRAM
DRAM
NOR型
比较适合频繁随机读写的场合
NAND
存储资料
应用
闪存卡
分类
SM卡
CF卡
MMC卡
SD卡
记忆棒
XD卡
微硬盘
音频接口
音频卡
功能
音频的播放与录制、编辑与合成
音频的播放
音频的录制
音频解码
合成器
语音通信
实时效果器
接口卡
CD-ROM接口
MIDI接口
CD-ROM接口
文——语转换
组成
作用
实现模拟信号和数字信号之间的转换
音乐合成和MIDI接口规范
音乐合成
方法分类
调频合成法
波表合成法
评价合成器好坏的参数
音色数目
发音数
音乐的兼容性
MIDI
MIDI乐器数字接口
MIDI接口
MIDI装置端口
MIDI In(输入口)
MIDI Out(输出口)
MIDI Thru(转发口)
视频接口
多媒体I/O设备
多媒体应用开发与系统
多媒体应用开发
应用类型
开发系统
Title
演示系统
教育培训
娱乐
专门的应用系统
开发的常用方式
平台开发
程序开发
创作系统开发
创作系统和编程语言的有机结合开发
设计过程
多媒体应用的选题
脚本设计
创意设计
人机界面设计
多媒体电子出版物
概述
定义:是把多媒体信息经过精心组织、编辑并存储在光盘上的一种电子图书
特点
存储容量大
媒体种类多
运输与携带方便
检索迅速
可长期保存
发行周期短,及时传播
价格低廉
信息量大
分类
按发行方式
电子网络出版
单行的电子书刊
按出版物的内容
教育类
娱乐类
工具类(含数据库)
按出版物的形式
联机数据库
电子报刊
电子图书
按应用
多媒体电子图书
地图与旅游
家庭应用
商业
创作流程
分析多媒体的特点,了解客户,进行环境需求分析
构思整体结构,组成项目创作小组
稿本编写
软件结构设计
采集、制作多媒体素材
产品制作
产品的调试、测试
生成产品
检验
包装上市
多媒体会议系统
发展过程
分类
结构与关键技术
结构
终端设备
传输信道
多点控制单元
数据协议模型
通信基础结构
会议控制
多点通信服务
网络传送协议
使用基础结构的应用协议
用户应用
节点控制器
关键技术
网络传输与接口技术
信息压缩技术
多点控制技术
标准化技术
国际标准
虚拟空间会议系统
目前系统的局限性
群体感知
群体成员之间的交互方式与交互深度受限
会议的空间感与真实感不强
协同工作的支持粒度不够
简介
交互视频服务系统
CSCW和群件
网络多媒体技术
多媒体网络
多媒体数据流的基本特征
比特率可变性
时间依赖性
信道对称性
通信的性能需求
吞吐量需求
可靠性需求
延迟需求
多点通信需求
同步需求
网络的服务质量
QoS参数
吞吐量
差错率
端到端延迟
延迟抖动
QoS的参数体系
QoS的管理
超媒体技术
概念
超文本
超媒体
超媒体的组成要素
节点
媒体类节点
动作与操作节点
组织型节点
推理型节点
链
分类
分类1
基本结构链
基本链
交叉索引链
节点内注释链
组织链和推理链
索引链
执行链
其他链型
自动连接
类型链
分类2
导航链
计算链
推理链
结构
链源
链宿
链的属性
热标
形式
热字
热区
热元
热点
热属性
宏节点
协议与标记语言
HTTP协议
HTML
XML
流媒体技术
概述
流媒体
流媒体文件格式
压缩媒体文件格式
流媒体文件格式
流媒体发布文件格式
流媒体传输方式
方法
顺序流式传输
实时流式传输
流媒体系统的组成
编码器
服务器
播放器
播送技术
单播与多播
点播与广播
智能流技术
技术原理:P152
应用
窄带方式
在线直播
远程教育
视频点播
多媒体新闻
e-Learning
股评分析
视频会议
宽带方式
网络电视
KTV
企业培训
多媒体IDC
无线多媒体通信技术
多媒体数据库
多媒体数据管理问题
多媒体数据库体系结构
一般结构形式
层次结构
多媒体数据类型
NF^2数据模型
面向对象数据模型
用户接口
字符数值型接口
示例型接口
用户表现接口
多媒体表现
叙事表现
多媒体内容分析与检索
基于内容检索概述
基于内容检索的过程和指标
检索过程
初始检索说明
相似性匹配
特征调整
重新检索
分割
识别分类
特征匹配
模糊值
特征值的分类和计算
特征调整
相似特征偏差
相似度及最终求值
主要指标
查全率
查准率
图像内容分析与检索
图像特征的提取与表达
考虑层次
原始数据层
采用像素矩阵对图像进行表示
特征层
考虑像素模式的特性
语义层
关心图像的含义
分类
图像物理特征的提取和表达
图像语义特征的提取
图像高维特征缩减和索引
图像相似性检索与匹配方法
利用颜色直方图进行检索
颜色直方图的相似性匹配
图像检索中的相关反馈机制
视频内容分析与检索
音频内容分析与检索
多媒体融合分析与检索