NeurIPS 2024|天津大学提出:面向模态缺失情形的提示学习方法
本文提出了一种新的提示学习方法,旨在解决多模态大模型在输入模态可能缺失时的问题。通过结合三种不同的提示向量策略(Correlated prompting, Dynamic prompting和Modal-common prompting),该方法能更有效地提升模型的鲁棒性和可扩展性,在多个数据集上验证了其有效性。
本文提出了一种新的提示学习方法,旨在解决多模态大模型在输入模态可能缺失时的问题。通过结合三种不同的提示向量策略(Correlated prompting, Dynamic prompting和Modal-common prompting),该方法能更有效地提升模型的鲁棒性和可扩展性,在多个数据集上验证了其有效性。
国内大模型创业公司阶跃星辰凭借万亿参数大语言模型 Step-2,在权威基准测试 LiveBench AI 中排名前十,展示了其在指令跟随任务中的出色表现。
Mistral AI平台Le Chat免费上线ChatGPT同款功能,包括Canvas、联网搜索、上传PDF等。新增的生图功能支持中文,并与绘图模型Flux合作提供在线生图服务。Pixtral Large大号版多模态模型参数量达124B,能分析高分辨率图像和表格等内容。