基于多模态信息融合的用户连接方法

摘要： 为弥补用户连接现有工作中存在的以下两个问题：大部分方法只考虑用户的文本和网络结构信息，忽略了图像等多模态信息；现有方法大都通过简单的特征拼接融合不同模态的信息，忽略了这些信息的互补性、关联性和异质性，提出一个基于多模态信息融合的用户连接模型MIFUIL。获取用户的文本、视觉以及异构网络的嵌入表示；利用注意力机制学习不同模态信息间的互补性、关联性和异质性，获取用户多模态信息的融合... （共8页）