首页 | 官方网站   微博 | 高级检索  
     

融合注意力机制的双路径孪生视觉跟踪方法
引用本文:谢江,朱艳,沈韬,曾凯,刘英莉.融合注意力机制的双路径孪生视觉跟踪方法[J].数据采集与处理,2022,37(1):94-107.
作者姓名:谢江  朱艳  沈韬  曾凯  刘英莉
作者单位:昆明理工大学信息工程与自动化学院,昆明 650500;昆明理工大学云南省计算机技术应用重点实验室,昆明650500
基金项目:国家自然科学基金(61971208, 61671225, 52061020, 61702128);云南省应用基础研究计划重点项目(2018FA034);云南省中青年学术技术带头人后备人才计划(Shen Tao, 2018);云南省万人计划青年拔尖人才计划(沈韬,朱艳,云南省人社厅No.2018 73);昆明理工大学人才培养计划(KKSY201703016)。
摘    要:传统基于孪生网络的视觉跟踪方法在训练时是通过从大量视频中提取成对帧并且在线下独立进行训练而成,缺乏对模型特征的更新,并且会忽略背景信息,在背景驳杂等复杂环境下跟踪精度较低.针对上述问题,提出了一种融合注意力机制的双路径孪生网络视觉跟踪算法.该算法主要包括特征提取器部分和特征融合部分.特征提取器部分对残差网络进行改进,设计了一种双路径网络模型;通过结合残差网络对前层特征的复用性和密集连接网络对新特征的提取,将2种网络拼接后用于特征提取;同时采用膨胀卷积代替传统卷积方式,在保持一定感受视野的情况下提高了分辨率.这种双路径特征提取方式可以隐式地更新模型特征,获得更准确的图像特征信息.特征融合部分引入注意力机制,对特征图不同部分分配权重.通道域上筛选出有价值的目标图像信息,增强通道间的相互依赖;空间域上则更加关注局部重要信息,学习更丰富的上下文联系,有效地提高了目标跟踪的精度.为证明该方法的有效性,在OTB100和VOT2016数据集上进行验证,分别使用精确率(Precision)、成功率(Success rate)和平均重叠期望(Expect average overlaprate,EAO)作为评价标准.结果显示,本文算法的精确率、成功率和平均重叠期望分别为0.868、0.641和0.350;相比基准模型分别提高了5.1%、2.0%和0.9%.结果证明本文算法充分利用了不同网络的优点,在保证模型精度的同时,能够较好地适应目标外观的变化,降低相似物的干扰,取得更稳定的跟踪效果.

关 键 词:目标跟踪  孪生网络  双路径网络  注意力机制  特征融合
收稿时间:2021/3/26 0:00:00
修稿时间:2021/6/16 0:00:00

Dual-Path Siamese Network Visual Tracking Method with Attention Mechanism
XIE Jiang,ZHU Yan,SHEN Tao,ZENG Kai,LIU Yingli.Dual-Path Siamese Network Visual Tracking Method with Attention Mechanism[J].Journal of Data Acquisition & Processing,2022,37(1):94-107.
Authors:XIE Jiang  ZHU Yan  SHEN Tao  ZENG Kai  LIU Yingli
Affiliation:1.Faculty of Information Engineering and Automation, Kunming University of Science and Technology, Kunming 650500, China;2.Yunnan Key Laboratory of Computer Technologies Application, Kunming University of Science and Technology, Kunming 650500, China
Abstract:
Keywords:object tracking  Siamese network  dual-path network  attention mechanism  feature fusion
本文献已被 万方数据 等数据库收录!
点击此处可从《数据采集与处理》浏览原始摘要信息
点击此处可从《数据采集与处理》下载全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司    京ICP备09084417号-23

京公网安备 11010802026262号