logikon/logikon-bench

Logikon Bench是一个高质量的数据集集合，用于评估大型语言模型的推理能力。与原始版本相比，这些数据集已经过一致性检查，并移除了有问题的示例。此外，英文的LogiQA数据集是对原始中文数据集的全新翻译。子数据集根据原始许可证提供，包括LSAT（MIT许可证）、LogiQA（CC BY-NC-SA 4.0许可证）和LogiQA 2.0（CC BY-NC-SA 4.0许可证）。Logikon Bench是一个高质量的数据集集合，用于评估大型语言模型的推理能力。与原始版本相比，这些数据集已经过一致性检查，并移除了有问题的示例。此外，英文的LogiQA数据集是对原始中文数据集的全新翻译。子数据集根据原始许可证提供，包括LSAT（MIT许可证）、LogiQA（CC BY-NC-SA 4.0许可证）和LogiQA 2.0（CC BY-NC-SA 4.0许可证）。

原始信息汇总

数据集概述

数据集配置

• logiqa:
  • 分割: test
  • 路径: data/AGIEval/logiqa-en.jsonl
• lsat-ar:
  • 分割: test
  • 路径: data/AGIEval/lsat-ar.jsonl
• lsat-lr:
  • 分割: test
  • 路径: data/AGIEval/lsat-lr.jsonl
• lsat-rc:
  • 分割: test
  • 路径: data/AGIEval/lsat-rc.jsonl
• logiqa2:
  • 分割: test
  • 路径: data/LogiQA20/logiqa_20_en.jsonl

许可

• 类型: other

任务类别

• 问题回答

语言

• 英语

数据集大小

• 1K<n<10K