3D-HEVC视频系统中的深度图编码方法研究(2)

菜单

4.1.2 硬件条件 18

4.2 实验仿真 19

4.3 实验分析 21

全文总结 23

致谢 24

参考文献 25

1. 绪论

1.1 课题研究背景

在过去的30年里，随着科学技术的迅速发展，视频技术也发生了翻天覆地的变化。毫无疑问，数字媒体极大地改变并且丰富了现代社会，各种媒体都以数字的形式并且使用数字设备生产、处理、存储和编码。从20世纪的模拟视频技术到现在的数字视频乃至于高清数字视频技术，以及新兴的3D数字视频，视频技术的进步带给人们的视觉体验更加丰富刺激。

传统的二维视频仅能提供单一的视觉信息，这已不能满足现代人追求更高的视觉体验。在这种条件下，交互式多媒体系统和3D显示器的发展推动了3D视频技术的产生，这种新兴媒体技术能够给用户带来逼真的效果和强烈真实的临场感，被广泛应用于立体电影、3D电视、DVD、3D电脑游戏等方面。但是视频数据量也比通过传统技术来压缩编码视频所产生的数据量要大了很多倍，这对3D视频的存储和传输来说是一个很大的负担，同时也对视频编码压缩技术提出了更具有挑战的研究方向，在全球范围内激发了学术界和工业界的研究热情。论文网

3D 视频由于其显示系统的独特性，可以将不同视点的视频投射到用户的视网膜上，这样就可以将场景的深度信息提供给观看者。目前的3D视频主要由以下几种格式：双目立体视频(Stereo video)、多视点视频 (Multiview video)、多视点视频+深度 (Multiview video plus depth，MVD)等。其中比较先进的是多视点和多视点加深度这两种格式，可以给用户提供全新的视觉体验。多视点加深度视频格式和多视点视频格式相比，在每个视频信号增加了深度序列。它引入的深度图像不仅包含了3D场景中的几何信息，还可将有限视角的视频扩展到任意视角，给了用户自由的选择，可以观看任意位置和角度，克服了纯视频格式中的固有缺陷，例如视角固定、视角数目有限、传输压力大等，极具发展潜力。图1.1所示是纹理图，图1.2所示为深度图。把图1.1中的纹理视频和图1.2 中的深度视频合成，就是一个2 个视点的多视点加深度表示的3D 视频格式。

为了进一步发展多视点加深度视频格式，很有必要为其确立一种世界通用的标准，这种国际通用的深度增强3D视频格式，将可以适应3D影院、家用电视以及移动设备等不同类型、不同尺寸的立体显示设备。2011年4月国际三维视频编码(3D Video Coding，3DVC)标准正式发布征求提案，2012年8月明确了4类3D视频编码的研究计划，包括MVC+D、3D-ALVC、MV—HEVC以及3D-HEV．C，在后向兼容已有的H．264，AVC、H．264／MVC、HEVC标准的基础上，采用多视角视频加深度序列(Multi-view Video plus Depth,MVD)的数据形式，利用每个视角附加的深度图像序列在解码端进行自由视点的绘制，它不仅仅可以减少需要编码传输的视角数目，而且还可以使3D视频系统具有交互性和可调节性。另外，它还能根据观看者的要求生成任意视角，根据显示设备的尺寸和类型相应地调整场景的深度，提高人眼观看3D视频的舒适度。文献综述

1.2 课题研究的目的和意义

深度图表示场景中的物体和摄像机的距离，在3D 视频系统中扮演着重要角色，因此对其编码和处理研究的工作也意义重大。引入深度图像序列可以更好的对3D视频进行编码。一系列新理论、新技术正积极尝试为3DVC标准的制定做出贡献，包括视角合成预测、深度图辅助纹理图编码、纹理图辅助深度图编码以及深度视图像本身的压缩编码。这一切都为3D视频编码技术的发展注入了活力，为3D视频在未来的广泛应用奠定了坚实的基础。