TREC-COVID

该数据集是一个针对与COVID-19相关的信息检索系统的结构化评估数据集，它包含了主题和相关性判断。这些主题以（查询、问题、叙述）元组的形式呈现，并且数据集中还包含了用于评估检索系统的相关性判断。每个评估轮次包含30至50个主题，其任务是评估信息检索系统的性能。This dataset is a structured evaluation resource for COVID-19-related information retrieval systems, encompassing topics and relevance judgments. These topics are structured as (query, question, narrative) tuples, and the dataset further provides relevance judgments for evaluating retrieval systems. Each evaluation round contains 30 to 50 topics, with the core task being to assess the performance of information retrieval systems.

搜集汇总

背景与挑战

背景概述

TREC-COVID是一个用于信息检索和文本处理的测试集合，基于COVID-19开放研究数据集（CORD-19）构建，包含生物医学文献文章。它通过多轮社区评估和人工相关性标注，支持COVID-19相关研究，并旨在研究动态环境中的搜索系统。