asus-aics/QALM

QALM Benchmark使用了以下数据集：1. MEDQA（USMLE数据集）；2. MEDMCQA；3. BioASQ（2022）；4. HEADQA；5. ProcessBank；6. PubmedQA；7. MMLU（专注于临床和医学知识的子集）；8. BioMRC（Tiny A和B）；9. 英国皇家眼科医师学会（FRCOphth）考试；10. QA4MRE（阿尔茨海默病问题）；11. MedicationInfo；12. MedQuad；13. LiveQA数据集（用于评估MedQuad的答案排名版本）；14. MashQA；15. MEDIQA-ANS。HEADQA数据集的最新修改日期为2023年9月27日。

QALM基准测试集（QALM Benchmark）采用了如下数据集：
1. MEDQA（USMLE数据集）；
2. MEDMCQA；
3. BioASQ（2022版）；
4. HEADQA；
5. ProcessBank；
6. PubmedQA；
7. MMLU（聚焦临床与医学知识的子集）；
8. BioMRC（Tiny A和B）；
9. 英国皇家眼科医师学会（FRCOphth）考试；
10. QA4MRE（阿尔茨海默病相关问题）；
11. MedicationInfo；
12. MedQuad；
13. LiveQA数据集（用于MedQuad答案排序任务的评估版本）；
14. MashQA；
15. MEDIQA-ANS。
HEADQA数据集的最新修订日期为2023年9月27日。

原始信息汇总

数据集概述

任务类别

• 问答系统

语言

• 英语

标签

• 医疗健康自然语言处理
• 医学问答
• 生物医学问答

包含的数据集

1. MEDQA (USMLE dataset)
2. MEDMCQA
3. BioASQ (2022)
4. HEADQA
5. ProcessBank
6. PubmedQA
7. MMLU (临床和医学知识子集)
8. BioMRC (Tiny A 和 B)
9. Fellowship of the Royal College of Ophthalmologists (FRCOphth) Exams
10. QA4MRE (阿尔茨海默病问题)
11. MedicationInfo
12. MedQuad
13. LiveQA dataset (MedQuad的答案排名版本)
14. MashQA
15. MEDIQA-ANS

数据集更新信息

• HEADQA 数据集最后修改日期为2023年9月27日。