FeedbackQA

我们收集了一个基于检索的 QA 数据集，FeedbackQA，其中包含来自用户的交互式反馈。我们通过将基础 QA 系统部署给众包工作者来收集此数据集，然后众包工作者参与该系统并就其答案的质量提供反馈。反馈包含结构化评级和非结构化自然语言解释。检查底部的数据集浏览器以获取一些真实示例。We collected a retrieval-based QA dataset named FeedbackQA, which contains interactive feedback from users. This dataset was gathered by deploying a baseline QA system to crowd workers, who interacted with the system and provided feedback on the quality of its answers. The feedback includes both structured ratings and unstructured natural language explanations. Please check the dataset browser at the bottom for some real-world examples.

搜集汇总

背景与挑战

背景概述

FeedbackQA是一个基于检索的问答数据集，通过众包工作者与基础QA系统交互收集，包含用户对答案质量的反馈，如结构化评级和自然语言解释。该数据集由加州大学和麦吉尔大学于2022年发布，旨在提升问答系统的准确性和可解释性。