five

QTL|动物科学数据集|命名实体识别数据集

收藏
arXiv2024-02-26 更新2024-06-21 收录
动物科学
命名实体识别
下载链接:
https://github.com/liyp0095/CuPUL/tree/main
下载链接
链接失效反馈
资源简介:
QTL数据集是由爱荷华州立大学创建的一个实际应用数据集,专注于动物科学领域的命名实体识别(NER)任务。该数据集包含18706条从PubMed精心挑选的与六种物种相关的定量性状位点(QTL)研究摘要,总计有18706个句子,514176个Tokens。数据集的创建过程中,收集了来自四个领域本体专业的3884个性状名称字典,用于远距离标注过程。QTL数据集主要用于解决动物基因组学研究和育种方法中的重要任务,即识别描述性表达的性状实体。
提供机构:
爱荷华州立大学
创建时间:
2024-02-23
AI搜集汇总
数据集介绍
main_image_url
构建方式
QTL数据集通过远监督(Distant Supervision)方法构建,利用专业领域的知识库对命名实体识别(NER)任务进行自动标注。具体而言,该数据集从PubMed中收集了1,716篇与定量性状位点(QTL)研究相关的摘要,涵盖六种物种,并从四个领域本体中提取了3,884个特征名称作为标注字典。为了评估模型性能,领域专家对107篇摘要进行了人工标注,并将其分为验证集和测试集。
特点
QTL数据集的主要特点在于其专注于动物科学领域的‘特征’实体识别,这与传统的NER数据集(如人名、地名等)不同。此外,该数据集的标注过程引入了远监督的噪声问题,如假阳性、假阴性和类型错误,这使得数据集更具挑战性。数据集的验证集规模较小,仅包含21个句子,这反映了实际应用中常见的资源限制问题。
使用方法
QTL数据集可用于评估和改进远监督命名实体识别(DS-NER)方法的性能。研究者可以通过该数据集测试其模型在噪声标注环境下的鲁棒性,并探索如何通过课程学习(Curriculum Learning)等方法减少噪声对模型训练的影响。此外,数据集的标注方式和领域特性使其特别适合用于生物医学和动物科学领域的NER研究。
背景与挑战
背景概述
QTL数据集是由爱荷华州立大学的研究人员Yuepei Li、Kang Zhou、Qiao Qiao、Qing Wang和Qi Li于2024年创建的,旨在解决远监督命名实体识别(DS-NER)中的标签噪声问题。该数据集专注于动物科学领域,特别是基因型-表型数据库构建中的‘性状’实体识别,旨在推动畜牧业基因组研究和育种方法的进步。QTL数据集通过使用专业领域词典进行远监督标注,包含1,716篇来自PubMed的摘要,涵盖18,706个句子,514,176个标记。该数据集的创建为评估现有DS-NER方法在实际应用中的表现提供了新的基准,揭示了现有方法在处理标签噪声时的不足。
当前挑战
QTL数据集的构建和应用面临多重挑战。首先,远监督标注过程中产生的标签噪声,如假阳性、假阴性和类型错误,严重影响了模型的性能。其次,在实际应用中,验证集的规模较小(仅21个句子),导致超参数调优困难,可能影响模型的最终表现。此外,现有的DS-NER方法在处理标签噪声时,通常依赖于中等训练程度的模型进行噪声检测,但这种模型的训练本身也受到噪声标签的影响,可能导致检测结果存在偏差。最后,QTL数据集中的‘性状’实体多为描述性表达,而非传统NER数据集中的专有名词,这进一步增加了实体识别的复杂性。
常用场景
经典使用场景
QTL数据集在远监督命名实体识别(DS-NER)任务中被广泛使用,尤其是在处理标签噪声问题时。该数据集通过远监督方法生成标签,适用于评估现有DS-NER方法在实际应用中的表现。经典的应用场景包括使用QTL数据集来测试和改进现有的DS-NER模型,特别是在处理标签噪声(如假阳性、假阴性和类型错误)时,评估模型的鲁棒性和性能。
衍生相关工作
QTL数据集的提出催生了一系列基于课程学习的DS-NER方法,特别是CuPUL方法的提出,显著提升了模型在噪声标签环境下的表现。此外,QTL数据集还激发了对远监督方法的进一步研究,尤其是在处理标签噪声和提升模型鲁棒性方面的探索。相关工作包括对现有DS-NER方法的重新评估,以及对不同领域(如生物医学)中远监督方法的扩展应用。
数据集最近研究
最新研究方向
在命名实体识别(NER)领域,QTL数据集的最新研究方向主要集中在远监督(Distant Supervision, DS-NER)框架下的噪声标签处理。当前的研究挑战在于远监督方法生成的标签质量较低,存在假阳性、假阴性和类型错误等问题。为了应对这一挑战,研究者提出了一种基于课程学习的正无标签学习方法(Curriculum-based Positive-Unlabeled Learning, CuPUL),该方法通过从‘简单’样本开始训练,逐步过渡到‘复杂’样本,从而增强模型对噪声标签的鲁棒性。CuPUL在QTL数据集上的实验结果表明,该方法能够显著减少噪声标签的影响,并在多个基准数据集上超越现有的远监督NER方法,展示了其在实际应用中的潜力和有效性。
相关研究论文
  • 1
    Re-Examine Distantly Supervised NER: A New Benchmark and a Simple Approach爱荷华州立大学 · 2024年
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4098个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

LFW

人脸数据集;LFW数据集共有13233张人脸图像,每张图像均给出对应的人名,共有5749人,且绝大部分人仅有一张图片。每张图片的尺寸为250X250,绝大部分为彩色图像,但也存在少许黑白人脸图片。 URL: http://vis-www.cs.umass.edu/lfw/index.html#download

AI_Studio 收录

中国农村金融统计数据

该数据集包含了中国农村金融的统计信息,涵盖了农村金融机构的数量、贷款余额、存款余额、金融服务覆盖率等关键指标。数据按年度和地区分类,提供了详细的农村金融发展状况。

www.pbc.gov.cn 收录

中国气象数据

本数据集包含了中国2023年1月至11月的气象数据,包括日照时间、降雨量、温度、风速等关键数据。通过这些数据,可以深入了解气象现象对不同地区的影响,并通过可视化工具揭示中国的气温分布、降水情况、风速趋势等。

github 收录

COVID-19 Data Hub

COVID-19 Data Hub是一个全球性的COVID-19数据集,包含了来自多个国家和地区的疫情数据,涵盖了病例数、死亡数、康复数、测试数等信息。此外,数据集还包括了与疫情相关的经济、社会和政策数据。

covid19datahub.io 收录

Breast Ultrasound Images (BUSI)

小型(约500×500像素)超声图像,适用于良性和恶性病变的分类和分割任务。

github 收录