娄达平 王晓东 富显祖 章联军

(宁波大学信息科学与工程学院 浙江 宁波 315211)

基于深度引导空洞填补的虚拟视点绘制方法

娄达平 王晓东 富显祖 章联军

(宁波大学信息科学与工程学院 浙江 宁波 315211)

针对单视点绘制虚拟视点图像存在的空洞问题，提出一种基于深度引导空洞修复的虚拟视点绘制方法。核心思想是通过对多个映射像素点的深度信息和空间位置信息进行加权插值操作来实现细小的空洞填充，并且分区域对大型空洞填补。在像素点插值的过程中，该方法首先考虑映射像素点的可靠性，剔除不可靠的像素点，从而减少错误的映射像素点。在填补大型空洞中，继承基于样本图像修复算法的优点，并引入深度信息来辅助空洞填补，以较为准确的方式来修复图像。实验结果表明，无论是主观视觉效果，还是客观值都要比Criminisi算法要好。

虚拟视点 基于深度图的绘制 深度 空洞填补 像素插值

0 引 言

近年来，随着计算机技术的不断发展，数字图像和视频的传输及显示技术获得了快速的进步。普通的2D视频正在逐步向3D视频进行转换[1-3]。为了从不同的视点观看都能够得到令人满意的沉浸式感受，多视点图像吸引了国内外学者的广泛关注。自由视点视频系统(FTV)作为多视点图像设备中最重要的之一，能够给用户带来全新的虚拟现实体验。其中，基于深度图像的绘制DIBR(depth-image-based rendering)技术在该系统的实现过程当中起着关键性的作用[4]。在理论上，它只要使用在发送端编码传输过来的彩色图像及其对应的深度图像，就可以在接收解码端绘制出给定任意视点的图像，并且具有绘制速度快，所需要带宽小等优点，使处于不同位置上的观众都能够体验到立体视频播放的逼真效果。……