我们的服务符合学术规范和道德
专业 高端让您使用时没有后顾之忧

光学技术2024年第03期:一种结合增强对齐与多注意力融合的偏振视频超分辨方法

来源:期刊VIP网 时间:


作者:徐国明;金苗;梁栋;马健;王峰;李毅;

单位:安徽大学互联网学院;安徽大学农业生态大数据分析与应用技术国家地方联合工程研究中心;偏振光成像探测技术安徽省重点实验室;安徽文达信息工程学院智能技术研究所;

摘要:在偏振成像探测中,偏振多通道视频序列给数据传输和处理带来挑战,同时探测精度又依赖高分辨率图像,为此超分辨率计算成像就成为偏振成像探测系统的关键技术。从视频运动特征入手,提出一种结合增强对齐与多注意力融合的偏振视频超分辨率重建方法。采用三级级联结构实现特征对齐,每一级特征由上一级特征下采样两倍得到,并采用光流引导的可变形卷积进行特征对齐;在融合阶段结合包括时间注意力、空间注意力、通道注意力在内的多种注意力机制,以充分利用通道间依赖性和时空相关性来提升超分辨率重建效果。所提方法与VSR-DUF、RBPN、EDVR、RLSP、RSDN、RRN、DARN、MSAWN等视频超分辨率方法在0°、45°、90°、135°偏振角视频上进行定性和定量对比实验,该实验表明该算法峰值信噪比和结构相似度指标高于其他算法,并且视频帧的高频纹理细节的修复更加丰富,接近偏振成像系统的原始高清图像帧。

关键词:成像探测;;视频超分辨率;;深度学习;;偏振视频;;注意力机制

基金资助:国家自然科学基金(61906118,62273001);; 安徽省重大专项(202003A06020016);; 安徽省自然科学基金(1908085MF208,2108085MF230);; 陆军装备部十三五预研子课题;; 安徽省高校自然科学研究重点项目(KJ2019A0906)