MSCOCO数据集

通过识别并增强视觉敏感的注意力头，中科院自动化所联合新加坡国立大学、东南大学提出了一种高效解决大模型幻觉问题的新方法VHR。该技术量化注意力头对视觉信息的敏感度，并动态强化这些视觉感知头，显著降低模型基于语言先验而产生的幻觉现象。