遇见数据集

irds/wikiclir_es

收藏
Hugging Face2023-01-05 更新2024-03-04 收录
官方服务:

资源简介:

`wikiclir/es`数据集由`ir-datasets`包提供,包含文档、查询和相关性评估三部分数据。文档部分包含1,302,958条记录,查询部分包含781,642条记录,相关性评估部分包含2,894,807条记录。该数据集可用于文本检索任务,使用`datasets`库可以加载数据集,并提供了加载文档、查询和相关性评估的示例代码。

提供机构:
irds
原始信息汇总

数据集概述

数据集名称

wikiclir/es

数据集来源

ir-datasets 包提供。

数据集内容

  • 文档 (docs): 总数为1,302,958。
  • 查询 (queries): 总数为781,642。
  • 相关性评估 (qrels): 总数为2,894,807。

数据集使用示例

python from datasets import load_dataset

加载文档数据

docs = load_dataset(irds/wikiclir_es, docs) for record in docs: record # {doc_id: ..., title: ..., text: ...}

加载查询数据

queries = load_dataset(irds/wikiclir_es, queries) for record in queries: record # {query_id: ..., text: ...}

加载相关性评估数据

qrels = load_dataset(irds/wikiclir_es, qrels) for record in qrels: record # {query_id: ..., doc_id: ..., relevance: ..., iteration: ...}

二维码
社区交流群
二维码
科研交流群
商业服务