频率引导的双稀疏自注意力单图像去雨算法 |
| |
引用本文: | 文渊博,高涛,陈婷,张千禧.频率引导的双稀疏自注意力单图像去雨算法[J].电子学报,2023(10):2812-2820. |
| |
作者姓名: | 文渊博 高涛 陈婷 张千禧 |
| |
作者单位: | 长安大学信息工程学院 |
| |
基金项目: | 国家自然科学基金(No.52172379,No.62001058);;长安大学中央高校基本科研业务费专项资金资助项目(No.300102242901)~~; |
| |
摘 要: | 现有基于自注意力网络Transformer的单图像去雨算法尽管在合成雨图上在取得良好效果,但却造成巨大的计算负担,且无法有效处理真实雨图.对此,本文提出一种频率引导的双稀疏自注意力单图像去雨算法(Frequency-guided Dual Sparse self-Attention TransFormer,FDSATFormer).首先,该算法利用空间稀疏因子和通道降维因子在提取准确全局信息的同时减少计算量,进而提出双稀疏自注意力特征学习网络(Dual Sparse self-attention Feature Leraning, DSFL)以解决Transformer在高分辨率雨图上难以表征自注意力的问题.其次,该算法通过探究图像去雨前后的频谱变化,提出频率引导的特征增强模块(Frequency-guided Feature Enhancer,FFE),其利用频域的全局信息指导特征编码阶段对空域特征的学习.此外,现有去雨网络的编解码结构采用相近的设计,这导致网络的整体计算负担倍增.对此,本文提出层级特征解码重建网络(Hierarchical Feature Decoding and ...
|
关 键 词: | 计算机视觉 图像去雨 自注意力网络 稀疏注意力 空间移位 频率引导学习 |
|
|