旷视研究院荣获 CVPR 2022 NTIRE RAW 图像多帧超分-真实世界数据赛道比赛第一!

近日,New Trends in Image Restoration and Enhancement (以下简称:NTIRE) 比赛结果揭晓,旷视研究院在11支参赛队伍中脱颖而出,荣获了 NTIRE 2022 Burst Super-Resolution Challenge-真实世界数据赛道比赛第一!

1

赛题介绍

在真实世界中,手机输出的高分辨率图像通常是由瞬间拍摄的多帧图像经过算法处理后得到。相对于单帧图像超分,多帧图像可以提供不同时刻场景的低分辨率亚像素信息,也就是说多帧超分方法可以从手机拍摄的多帧图像中获得不同额外的图像信息从而提升最终的超分效果以及丰富纹理。而本次赛题的目标即是从多张手机拍摄的低分辨率低质量的 RAW 图恢复出具有丰富纹理的高清图像。

在真实世界场景中,低分辨率图像是通过智能手机拍摄得到,其表现为成像质量低、噪声大、且多帧图像无对齐。此外,由于低分辨率图和高分辨图是由不同的设备捕获而来(如智能手机和单反相机),两者往往无法完美对齐并具有不同的亮度和颜色表现,使得模型训练比较困难。如下图: