利用Transformer的多模态目标跟踪算法

摘要： 目前目标跟踪方法大多通过融合不同模态信息进行定位决策，存在信息提取不充分、融合方法简单、弱光场景无法准确跟踪目标的问题。为此，提出一种基于Transformer的多模态目标跟踪算法（Trans-RGBT）：利用伪孪生网络对可见光图像和红外图像分别进行特征提取，并在特征层面充分融合；将首帧目标信息调制到待跟踪帧的特征向量中，得到一个专用跟踪器；应用Transformer的方法对视... （共11页）