我们的服务符合学术规范和道德
专业 高端让您使用时没有后顾之忧

东北师大学报(自然科学版)2024年第02期:基于改进GFPGAN的墓室壁画盲人脸修复研究

来源:期刊VIP网 时间:


作者:赵静;玄祖兴;黄可佳;李雅馨;

单位:北京联合大学北京市信息服务工程重点实验室;北京联合大学数理与交叉科学研究院;北京联合大学考古研究院;北京联合大学智慧城市学院;

摘要:针对墓室壁画人脸破损严重、纹理模糊不清、噪声较多等问题,提出了E-GFPGAN (Efficiency-Generative Facial Prior Generative Adversarial Network, E-GFPGAN),实现了墓室壁画人脸部分的盲修复.首先用StyleGAN3网络训练生成墓室壁画人脸,为网络提供丰富的壁画人脸先验信息;然后在退化移除模块添加跳跃连接,使用两层空洞卷积代替原有卷积,实现扩大感受野,保留壁画人脸的细节信息;最后将信道分割空间特征转换层(Channel-Split Spatial Feature Transform, CS-SFT)结构的卷积改为空洞卷积降低网络参数量.在自建墓室壁画人脸数据集上进行修复的实验结果表明,NIQE指标平均降低2.2%.证明了网络在墓室壁画人脸盲修复上得到了较好的修复结果.

关键词:E-GFPGAN;;墓室壁画;;盲人脸修复;;StyleGAN3

基金资助:北京市优秀人才培养资助青年拔尖个人项目(2018000026833ZK57);; 北京联合大学人才强校优选计划(BPHR2020EZ01);北京联合大学学科团队一体化建设计划项目(ZB10202001);北京联合大学重点科研项目(ZKZD202306)