计算机辅助设计与图形学学报

作者：侯兵, 董秀成, 杨陈成, 雍萧, 雎雅玲

关键词：深度图超分辨率, 注意力机制, 侧窗卷积, 可变卷积

针对低成本深度相机捕获的深度图中通常存在模糊和分辨率低等多种退化问题,联合同场景高分辨率彩色图像,提出一种混合多模注意力融合矫正网络.为了有效地利用彩色图像的结构信息,使用注意力机制迭代对齐及融合深度特征和彩色结构特征,并通过彩色结构特征和感知边缘图对融合特征进行矫正.首先在深度边缘感知模块,联合低分辨率深度图和彩色边缘图提取高分辨率深度边缘图;然后使用侧窗边缘保留模块提取引导彩色图像中有用的结构信息,减少多余纹理信息的影响;最后在多模注意力融合矫正模块中,利用注意力机制提取深度特征和彩色结构特征的结构注意力分布,使2种模态特征实现对齐及融合,并利用彩色结构特征和高分辨率深度边缘图的空间注意力权重增强对深度边缘的监督,减少模糊和伪影问题.在NYU v2数据集和Middlebury数据集(2005)上的实验结果表明,所提方法均方根误差平均测试结果分别为2.96和1.45,相对于次优方法分别降低了0.10和0.08;该网络能重建出边缘更加清晰和伪影更少的高分辨率深度图.

来源：2025年第12期

《计算机辅助设计与图形学学报》期刊编辑部

查看计算机辅助设计与图形学学报杂志2025年第12期