Optics and Precision Engineering, Volume. 32, Issue 3, 435(2024)
Attention interaction based RGB-T tracking method
Figures & Tables(10)
Fig. 3. Framework of attention interaction based RGB-T tracking method
Fig. 5. Structure of Self-feature Enhanced Encoder（SEE） and Cross-feature Interaction Decoder（CID）
Fig. 6. Evaluation results of AIT and compared algorithms on GTOT dataset
Fig. 7. Evaluation results of AIT and compared algorithm on RGBT234 dataset
Fig. 8. Evaluation results of AIT and compared algorithms on LasHeR testing set
Table 1. [in Chinese]
View tableView in ArticleTable 1. [in Chinese]
初始化：人工或检测算法给定第一帧的目标状态，离线训练的网络参数，随机初始化FC6层 for t = 1 to T （T为视频序列总帧数） （第二帧开始由所提AIT确定目标状态） if t > 1 then 步骤1 根据上一帧得到的目标状态，采样候选图像块； 步骤2 利用卷积网络提取候选图像块的多层卷积特征； 步骤3
利用2.1节的EFI对各层卷积网络进行特征交互和增强，增强后的各层特征再经过一次EFI得到最终的融合特征； 步骤4
利用全连接层计算每个候选图像块为目标的概率，对概率最大的图像块做边框回归，并将其作为当前帧的跟踪结果； （在每一帧中初始化或者更新网络参数） 步骤5
根据当前帧的目标状态，采样正负训练样本，并添加至正负样本集，如果样本集内样本数量超过预设值，则剔除帧数最小的图像中采集的样本； 步骤6 每间隔10帧，利用训练样本集对全连接层参数进行微调训练。
Table 1. PR/SR scores of AIT and its variants on RGBT234 dataset
View tableView in ArticleTable 1. PR/SR scores of AIT and its variants on RGBT234 dataset
PR SR AIT 0.836 0.581 AIT_ch 0.822 0.579 AIT_spch 0.820 0.573 AIT_conv3 0.802 0.560 AIT_nolastEFI 0.819 0.571
Tools
Get Citation
Copy Citation Text
Wei WANG, Feiya FU, Hao LEI, Zili TANG. Attention interaction based RGB-T tracking method[J]. Optics and Precision Engineering, 2024, 32(3): 435
Paper Information
Category:
Received: Jul. 19, 2023
Accepted: --
Published Online: Apr. 2, 2024
The Author Email: TANG Zili (tang_zili@qq.com)
© Copyright 2018-2021 | Chinese Laser Press.
All Rights Reserved 沪ICP备15018463号-20