多媒体应用系统技术 第九讲 多媒体压缩技术与网络多媒体

26
多多 多多多多 多多 体统 多多多 多多 多多多多多多多多多多 体体 陆陆陆陆66134922 QQ 16085505 Email [email protected] 陆陆陆陆mingler.ccshu.org 陆陆陆陆bbs.ccshu.org

Upload: gail

Post on 19-Mar-2016

151 views

Category:

Documents


7 download

DESCRIPTION

多媒体应用系统技术 第九讲 多媒体压缩技术与网络多媒体. 陆 铭 联系电话: 66134922 QQ : 16085505 Email : [email protected] 教学网站: mingler.ccshu.org 教学论坛: bbs.ccshu.org. 第二章 多媒体压缩技术. 多媒体压缩技术是多媒体技术的最重要的组成部分之一 本章主要介绍 多媒体数据压缩的常用编码方法 音频、图像、视频数据压缩编码的国际标准. 多媒体数据压缩的基本概念. 冗余度 数据中存在的不影响人们感官的多余信息 冗余度压缩 - PowerPoint PPT Presentation

TRANSCRIPT

Page 1: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

多媒体应用系统技术第九讲 多媒体压缩技术与网络多媒体

陆 铭联系电话: 66134922 QQ: 16085505

Email: [email protected]教学网站: mingler.ccshu.org

教学论坛: bbs.ccshu.org

Page 2: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org2

第二章 多媒体压缩技术 多媒体压缩技术是多媒体技术的最重要的组成部分之一 本章主要介绍

多媒体数据压缩的常用编码方法 音频、图像、视频数据压缩编码的国际标准

Page 3: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org3

多媒体数据压缩的基本概念 冗余度

数据中存在的不影响人们感官的多余信息 冗余度压缩

利用人们感官的不敏感性,除去或减少多余信息的压缩方法 无失真压缩

压缩过程如是一种可逆过程,则称为无失真压缩 冗余数据的形式

空间冗余、结构冗余、视觉冗余 统计冗余、信息熵冗余、知识冗余

Page 4: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org4

多媒体数据压缩的分类 按压缩编码方法分类

PCM 编码、预测编码、变换编码 按压缩一致性分类

无损压缩 即无失真压缩 常用压缩算法

霍夫曼算法、 LZW 算法等 冗余压缩多用于 文本、数值数据、应用软件 的压缩 无损压缩的压缩比较低,一般为 2:1 ~ 5:1

有损压缩 压缩时会丢失部分数据,且不可恢复 常用压缩算法

预测编码、变换编码等 多用于对图像、声音、动态视频等数据的压缩 压缩比一般可达几倍到几百倍,混合编码可达 4:1 ~ 400:1

Page 5: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

多媒体数据压缩的评价标准 压缩比

压缩后文件大小与压缩前文件大小的比率 比率越大压缩效果越好

压缩质量 针对有损压缩,要求恢复后与压缩前的差异越小越好

压缩与解压缩的速度 实现压缩的算法越简单越好 压缩和解压缩的速度越快越好

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org5

Page 6: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org6

常用压缩编码—— PCM编码 PCM(Pulse Code Modulation)

脉冲调制编码 工作原理

对模拟量经过采样、量化、编码后得到数字量 压缩效果不高

采样 对模拟信号按固定的时间间隔取样

量化 将采样得到的模拟量用近似的数值表示,有量化误差

编码 用相应的二进制代码表征量化后的数值

Page 7: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org7

常用压缩编码——预测编码 有损编码,用已有的样本值对下一个样本值进行预测,得到一个预测值,计算预测值与实测值的误差,再对误差进行编码,达到数据压缩的目的 帧内预测

DPCM- 差分脉冲调制编码 P.28 图 2-3

ADPCM- 自适应查分脉冲调制编码 P.29 图 2-4

帧间预测 运动补偿的帧间预测 帧间内插法

线性预测编码 多脉冲线性预测编码、规则脉冲激励编码 编码激励线性预测、代数激励线性编码

Page 8: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org8

常用压缩编码——变换编码 变换编码为有损编码 变换编码的工作原理

将图像信号从一个域(如时间域)变换为另一个域(如频率域),然后对变换后的信号进行量化与编码 常用的变换编码方法

K-L 变换 傅里叶变换 离散余弦变换

不同的变换会有不同的压缩效果 压缩比和还原后的图像品质

Page 9: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org9

常用压缩编码——行程编码 常用统计编码

行程编码、霍夫曼编码、算术编码 行程编码是一种非常简单的无损压缩编码,又称为“运动长度编码”或“游程编码” 行程编码工作原理

将相同的连续数据值序列用一个重复次数 + 数值来表示 如: AAAAARRRRTSSSDEEEEEE 行程编码为: *5A*4RT*3SD*6E

行程编码特别适合于由计算机生成的图像

Page 10: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org10

常用压缩编码——霍夫曼编码 统计编码是根据消息出现概率的分布特性进行编码,属于无损压缩编码 霍夫曼编码是统计编码中的一种 霍夫曼编码的工作原理

根据符号概率的大小按递减次序排列 把概率最小的两个符号的概率相加,组成新符号的概率 重复前两步骤,直到最后两个符号的概率和为 1 从后往前进行编码,概率大的为 0 ,概率小的为 1(或相反)

P.32 示例 霍夫曼编码较多地应用于数字图像处理

Page 11: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org11

压缩编码国际标准——音频压缩标准 由 CCITT和 ISO 制定并推行 G 系列音频压缩编码标准

G.711 :标准 PCM ,采样频率 8kHz ,量化精度 8bit ,速率 64kbit/s G.721: ADPCM ,速率 32kbit/s, 711\721 适合 200Hz~3.4kHz 电话音频 G.722 :将音频分为高低两个子带,分别采用 ADPCM 编码,采样频率16kHz ,量化精度 14bit ,速率 224kbit/s

G.728: LD-CELP ,速率 16kbit/s G.723\G.726\G.727\G.729 等

MPEG 音频标准 1992年制定,成为 MPEG-1 ,是高保真立体声压缩标准,采样频率32kHz、 44.1kHz、 48kHz ,可分为 3 个层次

第一层:输出速率 384kbit/s ,第二层: 256~192kbit/s ,第三层: 128~112kbit/s ISO 还制定了 MPEG-2,MPEG-4、MPEG-7 等标准

Page 12: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org12

压缩编码国际标准——静态图像压缩标准 JPEG 标准

JPEG有 3 个层次 基本系统:压缩和解压图像、保持高压缩率,并能处理 4位和 16位图像 扩展系统:在基本系统基础上增加多种编码方式,用于特殊要求 特殊无损功能:解压后数据没有损失

JPEG4 中工作模式 基于 DCT 的顺序编码、基于 DCT 的累进编码、无损编码、分层编码

JPEG2000 2000年公布,提高低码率的压缩质量 2 种编码方式

基于 DCT 的编码方式:兼容 JPEG ,但有更新和改进 基于小波变换的编码方式

文件扩展名为 .J2K

Page 13: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org13

压缩编码国际标准——动态图像压缩标准 MPEG在 1988年由 ISO专家组制定,包括音频、视频和其他 MPEG-1

1992年制定,适用于传输速率为 1.5Mbit/s 的动态图像和伴音的编码 由 5 个部分组成,采用基于 DCT 的变换编码,每秒播放 30 帧

MPEG-2 1994年制定,传输速率为 3~10Mbit/s ,在 NTSC 制式下分辨率为 724*486 由 9 个部分组成,压缩原理是利用了图像的空间相关性和时间相关性

MPEG-4 1999年制定,应用于可视电话、可视电子邮件等,传输速率 4~64kbit/s ,分辨率 176*144 ,通过帧重建技术压缩和传输数据 由 6 个部分组成,支持 MPEG-1和MPEG-2所有功能

MPEG-7 1998年制定, 2001年底生效,称为“多媒体内容描述接口”,用以解决多媒体信息检索 由 7 个部分组成,是对标准化的描述

MPEG-21 2000年 6月启动,称为“多媒体框架” 主要解决多媒体网络传送、服务质量、内容展示、设备易用性等用户交互作用的关键问题

Page 14: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org14

压缩编码国际标准——视频压缩编码标准 MPEG 是音频、视频的综合标准 H.261和 H.263 是纯视频标准 H.261

1990年制定,传输速率 px64kbit/s H.263

1996年推出,目前流行的标准 主要功能

具有运动补偿能力 有 4 个可选参数改进性能 支持 5 种分辨率

Page 15: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org15

第四章 网络多媒体技术 IP 电话、视频点播、多媒体会议系统等大量的网络应用需求催生了网络多媒体技术 本章主要介绍

多媒体传输协议 多媒体通信 流媒体

Page 16: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

多媒体传输协议 RTP

用于在 Internet上针对多媒体数据流的一种传输协议 RSVP

资源预留协议,针对 IP 网络传输层不能保证QoS 和支持多点传上而提出的协议, RSVP 在业务流传送前先预留一定的网络资源,建立静态或动态的传输逻辑通路,保证每个业务都有足够的“独享”带宽 RTSP

实时流协议,工作在 RTP和 RTCP 之上的协议,控制实时数据的发送 MMS

微软媒体服务器协议,用于访问并流式接受Windows Media服务器中的 ASF 文件的一种协议 IPv6

下一代互联网协议,具有更大的地址空间,更小的路由表,更强的组播,更高的安全性 请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org16

Page 17: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

下一代网络中的多媒体通信协议 H.323协议簇

借鉴了传统电话网的形式,借助 IP 信息传输方式,可提供语音、数据和图像业务 SIP

会话初始协议,借鉴 Internet 的标准和协议设计思想,坚持简洁、开放和可扩展的原则,采用请求 / 应答模式,基于文本方式,使用简单灵活、升级扩展方便 IMS

IP Multimedia Subsystem ,支持 IP 多媒体业务,控制功能与承载能力分离、呼叫与会晤分离、应用于服务分离、业务与网络分离、移动网与互联网融合 请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org17

Page 18: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

多媒体通信服务质量 通信服务质量

服务质量 QoS 可以看做是为一项或一类网络业务而定义的一组网络性能参数,应不同的应用需要有不同的 QoS 要求, QoS通常用带宽、时延、时延抖动、分组丢失率来衡量 Qos 的关键指标

可用性 用户需要时网络即能工作的时间百分比

吞吐量 一定时间段内网上流量或带宽的度量

时延 一项服务从网络入口到出口的平均经过时间

时延变化 同一业务流中不同分组所呈现的不同时延,高频率的时延变化称为抖动,低频率的时延变化称为漂移

丢包 传输过程中的信息丢失

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org18

Page 19: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

多媒体通信系统结构P.60 图 4-1

网关 会晤器 通信终端 多点控制单元

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org19

Page 20: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

多媒体会议系统多媒体会务系统包括传统的语音传播、扩音外,还包括

会务语音双向传送 会场视频双向传送 会场场景双向传送 电子白板数据双向传送

多媒体会议系统关键技术 网络环境 多点传送技术 编解码技术 会议控制技术

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org20

Page 21: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

视频点播与交互电视传统电视用户是被动接受信息,只有频道选择权,没有视频播放控制权视频点播 /交互电视系统可以按需点播系统结构

视频服务和管理设备 机顶盒 传送网络

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org21

Page 22: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

用户接入网技术 xDSL接入

数字用户线系统, ADSL、 VDSL、 EDSL 混合光纤同轴接入

利用混合光纤同轴进行宽带数字通信的 CATV 网络 快速以太网

采用专用的无碰撞全双工光纤连接 无线接入

多路多点业务、直播卫星系统、本地多点业务 光纤接入

FTTC、 FTTZ、 FTTB、 FTTO、 FTTH

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org22

Page 23: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

流媒体基本概念和应用将连续的影像和音频,经过压缩处理后,放在视频服务器上,让用户一边下载一边观看、收听的技术与单纯下载式相比,流式方式的优点

启动延时大幅缩短 对系统缓存容量的需求大大降低 流式传输的实现有特定的实时传输协议

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org23

Page 24: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

流媒体的技术原理

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org24

在流式传输中,使用 RTP/UDP和 RTSP/TCP两种不同的通信协议与音频、视频服务器建立联系流式传输的过程

用户选择某一流媒体服务器 Web浏览器与 Web服务器之间使用 HTTP/TCP交换控制信息 客户机上的 web浏览器启动启动音频、视频 Helper 程序 使用 HTTP从Web服务器检索相关参数对 Helper 程序初始化 音频、视频 Helper 程序与音频、视频服务器运行实时控制流协议 RTSP

音视频服务器使用 RTP/UDP协议将音视频数据传输给音视频客户程序流媒体播放方式

单播、组播、点播、广播

Page 25: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

流媒体的文件格式 RM和 RA格式 ASF格式 QT格式

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org25

Page 26: 多媒体应用系统技术 第九讲  多媒体压缩技术与网络多媒体

计算中心编制

上海大学上海大学 Shanghai University

流媒体的三大平台 RealNetworks流平台 Microsoft流平台 Apple流平台

请将手机调整到静音状态,自觉遵守课堂纪律 教学网站:mingler.ccshu.org26