返回热力追踪
了解模型与研究
研究者提出 MM-SystemOneBias,用于评估多模态决策模型在选项顺序、选项标签、外部判断、图文描述、无关信息等六种配对干预下能否保持语义决策一致。该评测在九个公开数据集的 5,323 个原始实例、11 类任务场景上测试 13 个模型,并可与各模型骨干网络对比。
研究者提出 MM-SystemOneBias,用于评估多模态决策模型在选项顺序、选项标签、外部判断、图文描述、无关信息等六种配对干预下能否保持语义决策一致。该评测在九个公开数据集的 5,323 个原始实例、11 类任务场景上测试 13 个模型,并可与各模型骨干网络对比。