万字解读首篇“人脸复原”综述!南大、中山、澳国立、帝国理工等联合发布

首页 > 科技

万字解读首篇“人脸复原”综述!南大、中山、澳国立、帝国理工等联合发布

来源:天气早知道 发布时间:2022-11-21 15:50

  新智元报道  

编纂:LRS 好困

【新智元导读】「人脸复原」技术首篇综述!

近年来,跟着深度学习的发展和大规模数据集的泛起,深度学习在许多领域也取得了进展,但其中「人脸复原」(Face Restoration)任务仍旧缺乏系统性的综述。

最近,来自南京大学、澳大利亚国立大学、中山大学、帝国理工学院和腾讯的研究者们全面回顾并总结了基于深度学习的人脸复原技术的研究进展,对人脸复原方法进行了分类,讨论了网络架构、损失函数和基准数据集,并对现有SOTA方法进行了系统性机能评测。

论文链接:https://arxiv.org/abs/2211.02831

仓库链接:https://github.com/TaoWangzj/Awesome-Face-Restoration

这篇文章也是人脸复原领域首篇综述,其主要贡献为:

1. 回顾了人脸复原任务中主要的退化模型、常用的评价指标,并总结了人脸图像显著性的特点;

2. 总结了目前人脸复原面临的挑战,对现有方法进行分类及概述。方法主要包括两大类:基于先验的深度学习复原方法和无先验的深度学习复原方法;

3. 梳理了方法中使用的基本网络架构、基本网络模块、损失函数和尺度数据集;

4. 在公共基准数据集上对现有SOTA方法进行了系统性实验评测;

5. 分析了人脸复原任务未来发展前景。

文章的整体架构

研究背景

人脸复原(Face Restoration, FR)是底层视觉中一个特定的图像复原题目,旨在从低质量的输入人脸图像中恢复出高质量的人脸图像。通常来说,退化模型可以描述为:

其中I(lq)是低质量人脸图像, D是与噪声不相关的退化函数, n是加性高斯噪声。当退化函数D不同的时候,就对应了不同的退化模型。因此,FR任务可以视为是求解上述退化模型的逆过程,它可以表示为:

其中根据退化函数不同,人脸复原任务主要可以分为以下五大类,其分别对应着不同的退化模型:

1.人脸去噪任务(Face Denoising, FDN):去除人脸图像中的噪声,恢复出高质量的人脸;

上一篇:感知随芯而动... 下一篇:基金份额卖出...
猜你喜欢
热门阅读
同类推荐