一种高分辨率深度图实时提取算法与硬件实现
2012-08-10王建伟滕国伟李贺建邹雪妹
电视技术 2012年23期
关键词:深度
王建伟,滕国伟,2,李贺建,邹雪妹
(1.上海大学通信与信息工程学院,上海 200072;2.上海国茂数字技术有限公司,上海 201204)
责任编辑:哈宏疆
在多视点或自由视频3DTV实时显示系统中,包含了前端视频采集、编码传送、解码显示等部分。多视点或者自由视点视频其数据量远比单视采用H.264编码方法的数据量要大。一般而言,若考虑的多视点是9个视点,如果9个视点采用基于H.264联播方式编码,数据量就是原来的9倍。鉴于此,2009年JVT推出了MVD(多视+深度)数据模式。在该模式中,对传输的视频端除了原来视点的纹理彩色视频外,对于每个视点都附加一个与之相应的深度图视频。提出深度图的概念有2个最直观的好处:
1)深度图较平坦,对编码来说效率极高,即使采用H.264的编码方式其编码比特率也仅是彩色视频编码比特率的20%~30%。
2)通过提取具有场景几何信息的深度,可绘制出高质量的虚拟视。
综上所述,快速准确地提取深度图是实时3DTV系统的关键,也是MVD模式的核心,因此诸多学者对此从未停止探索的脚步。
就深度提取而言,现阶段的主要研究重点是对极线校正过的测试序列提取准确的深度信息,减少遮挡和误匹配点的比率,提高绘制端虚拟视频的质量,并且提高深度信息的提取速度。最常用的图像像素点的匹配方法是立体匹配算法(stereo matching),通常来说,其可分为局部算法和全局算法。全局匹配算法一般用相容性约束和平滑性约束来构成一个评价函数,再通过各种最优算法求得评价函数的最小值。……
登录APP查看全文
