ArkaMukherjee/mmJEE-Eval

mmJEE-Eval是一个包含来自印度JEE Advanced考试中的1460个具有挑战性的科学推理问题的多模态和双语评估数据集，用于评估视觉语言模型在处理科学问题上的表现。mmJEE-Eval is a multimodal and bilingual benchmark dataset consisting of 1,460 challenging scientific reasoning questions from Indias JEE Advanced examination, used to evaluate the performance of vision-language models in handling scientific questions.

搜集汇总

背景与挑战

背景概述

该数据集名为mmJEE-Eval，是一个多模态和双语评估数据集，包含1460个来自印度JEE Advanced考试的具有挑战性的科学推理问题。它专门设计用于评估视觉语言模型在处理科学问题上的表现，旨在测试模型在复杂科学场景中的理解和推理能力。