一种基于共同注意网络的医学视觉问答方法

摘要： 最近很多研究提出了医学视觉问答（MVQA）的注意力模型。在医学研究中，不仅“视觉注意力”的建模至关重要，对“问题注意力”进行建模同样具有重大意义。为了在医学图像和问题的注意过程中进行双向推理，本文提出一种新的MVQA架构，称为MCAN。该架构融入一种跨模态共同注意网络FCAF，用于识别问题中的关键词和图像中的主要部分。通过元学习通道注意模块（MLCA）自适应地为每个单词和区域进... （共10页）