CMM

The Curse of Multi-Modalities (CMM) Dataset Card Dataset details Dataset type: CMM is a curated benchmark designed to evaluate hallucination vulnerabilities in Large Multi-Modal Models (LMMs). It is constructed to rigorously test LMMs’ capabilities across visual, audio, and language modalities, focusing on hallucinations arising from inter-modality spurious correlations and uni-modal over-reliance. Dataset detail: CMM introduces 2,400 probing questions… See the full description on the dataset page: https://huggingface.co/datasets/DAMO-NLP-SG/CMM.《多模态诅咒（CMM）数据集卡片》 数据集详细信息 数据集类型：CMM是一项精心编纂的基准测试，旨在评估大语言模型（LMM）在多模态（包括视觉、音频和语言模态）中的幻觉易损性。该数据集旨在严格检验LMM在跨模态伪相关和单模态过度依赖下产生的幻觉能力。 数据集详情：CMM引入了2,400个探查问题……请参阅数据集页面上的完整描述：https://huggingface.co/datasets/DAMO-NLP-SG/CMM。

搜集汇总

背景与挑战

背景概述

CMM是一个用于评估大型多模态模型幻觉漏洞的基准数据集，包含2400个探测问题，旨在测试模型在视觉、音频和语言模态中因跨模态虚假相关性和单模态过度依赖而产生的幻觉。