five

CMNEE|军事新闻数据集|事件抽取数据集

收藏
arXiv2024-04-18 更新2024-06-21 收录
军事新闻
事件抽取
17,000条
下载链接:
https://github.com/Mzzzhu/CMNEE
下载链接
链接失效反馈
资源简介:
CMNEE是一个基于开源中文军事新闻的大型文档级事件抽取数据集,由国防科技大学大数据与决策实验室创建。该数据集包含17,000个文档和29,223个事件,所有事件均基于预定义的军事领域模式进行手动标注,包括8种事件类型和11种论元角色类型。数据集的创建过程采用两阶段多轮标注策略,确保数据质量,并应用于情报分析和决策辅助等领域,旨在解决军事领域事件抽取的数据稀缺问题。
提供机构:
国防科技大学大数据与决策实验室
开放时间:
2024-04-18
创建时间:
2024-04-18
AI搜集汇总
数据集介绍
main_image_url
构建方式
CMNEE数据集的构建过程始于从权威军事新闻网站抓取大量文本数据,随后通过预处理步骤去除冗余信息和错误代码。数据集的标注采用两阶段多轮迭代策略,首先通过预定义的触发词字典进行事件类型的初步标注,然后由领域专家进行详细的人工标注,确保标注质量。最终,通过多轮质量评估,确保所有标注指标达到指定阈值,形成包含17,000篇高质量标注文档的数据集。
使用方法
CMNEE数据集适用于多种事件抽取模型的训练和评估,特别适合于军事领域的事件抽取研究。使用者可以通过数据集提供的训练、开发和测试子集进行模型训练和性能评估。数据集的详细标注信息,包括事件触发词、事件类型、事件参数及其角色,为模型提供了丰富的训练数据。此外,数据集的共指参数标注也为评估模型的参数抽取能力提供了更全面的视角。
背景与挑战
背景概述
事件抽取作为从非结构化文本中提取结构化信息的关键任务,在情报分析和决策辅助等应用中具有基础性作用。然而,军事领域的事件抽取面临数据稀缺问题,这阻碍了该领域事件抽取模型的研究进展。为缓解这一问题,Mengna Zhu等人于2024年提出了CMNEE,一个大规模的、基于开源中文军事新闻的文档级事件抽取数据集。该数据集包含17,000份文档和29,223个事件,所有事件均根据预定义的军事领域事件模式进行手动标注,涵盖8种事件类型和11种论元角色类型。CMNEE的构建旨在填补军事领域事件抽取数据集的空白,推动该领域的研究进展,并为下游应用提供支持。
当前挑战
CMNEE数据集在构建过程中面临多重挑战。首先,军事领域的事件抽取任务具有独特性,事件触发词和论元的识别难度较大,尤其是在文档级别的事件抽取中,事件论元常常分散在不同句子中。其次,现有的事件抽取模型大多依赖于高质量的训练数据,而军事领域的数据稀缺性限制了这些模型的性能。此外,军事文本的敏感性和保密性增加了数据获取和标注的难度。最后,CMNEE数据集中的事件类型和论元角色分布不均衡,导致模型在处理复杂文本时容易出现偏差。这些挑战表明,军事领域的事件抽取任务仍需进一步的研究和改进。
常用场景
经典使用场景
CMNEE数据集的经典使用场景在于支持大规模文档级别的事件抽取任务,特别是在军事新闻领域。通过提供丰富的标注数据,CMNEE帮助研究人员开发和评估事件抽取模型,尤其是在处理复杂文档结构和多事件共存的情况下。
解决学术问题
CMNEE数据集解决了军事领域事件抽取研究中长期存在的数据稀缺问题。通过提供大规模、高质量的标注数据,CMNEE促进了事件抽取模型在该领域的应用和发展,推动了相关学术研究的深入。
实际应用
CMNEE数据集在实际应用中具有重要价值,特别是在情报分析和决策辅助系统中。通过准确抽取军事新闻中的事件信息,CMNEE支持了军事战略规划和应急响应等关键任务,提升了相关系统的效率和准确性。
数据集最近研究
最新研究方向
在军事领域,事件抽取(Event Extraction)的研究正逐步成为情报分析和决策支持的关键技术。CMNEE数据集的提出,为这一领域的研究提供了大规模、高质量的文档级事件抽取数据。最新研究方向主要集中在利用深度学习模型提升文档级事件抽取的准确性和效率,特别是在处理多事件、长文本和重叠事件方面。此外,研究者们也在探索如何更有效地利用触发词信息和共指消解技术,以提高事件抽取的整体性能。CMNEE数据集的独特性在于其专注于军事新闻,这为开发更适用于军事领域的事件抽取模型提供了宝贵的资源和挑战。
相关研究论文
  • 1
    CMNEE: A Large-Scale Document-Level Event Extraction Dataset based on Open-Source Chinese Military News国防科技大学大数据与决策实验室 · 2024年
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能 - 构建机器生命的训练基石
数据集  93个
机构  8个
大模型
数据集  439个
机构  10个
自动驾驶
数据集  34个
机构  7个
医学影像
数据集  123个
机构  7个
空间智能
数据集  21个
机构  5个
蛋白质结构
数据集  50个
机构  8个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

China Groundgroundwater Monitoring Network

该数据集包含中国地下水监测网络的数据,涵盖了全国范围内的地下水位、水质和相关环境参数的监测信息。数据包括但不限于监测站点位置、监测时间、水位深度、水质指标(如pH值、溶解氧、总硬度等)以及环境因素(如气温、降水量等)。

www.ngac.org.cn2024-10-31 收录

Cultural Dimensions Dataset

该数据集包含了霍夫斯泰德文化维度理论(Hofstede's Cultural Dimensions Theory)的相关数据,涵盖了多个国家和地区的文化维度评分,如权力距离、个人主义与集体主义、男性化与女性化、不确定性规避、长期取向与短期取向等。这些数据有助于研究不同文化背景下的行为模式和价值观。

geerthofstede.com2024-10-29 收录

MedChain

MedChain是由香港城市大学、香港中文大学、深圳大学、阳明交通大学和台北荣民总医院联合创建的临床决策数据集,包含12,163个临床案例,涵盖19个医学专科和156个子类别。数据集通过五个关键阶段模拟临床工作流程,强调个性化、互动性和顺序性。数据来源于中国医疗网站“iiYi”,经过专业医生验证和去识别化处理,确保数据质量和患者隐私。MedChain旨在评估大型语言模型在真实临床场景中的诊断能力,解决现有基准在个性化医疗、互动咨询和顺序决策方面的不足。

arXiv2024-12-06 收录

Figshare

Figshare是一个在线数据共享平台,允许研究人员上传和共享各种类型的研究成果,包括数据集、论文、图像、视频等。它旨在促进科学研究的开放性和可重复性。

figshare.com2024-10-27 收录

HyperGlobal-450K - 全球最大规模高光谱图像数据集

HyperGlobal-450K数据集由武汉大学联合国内外多所知名高校及研究机构共同构建,是迄今为止全球规模最大的高光谱图像数据集。该数据集包含约45万张高光谱图像,规模等价于超过2000万张不重叠的三波段图像,远超现有的同类数据集。数据集涵盖了全球范围内的高光谱遥感图像,包括来自地球观测一号(EO-1)Hyperion和高分五号(GF-5B)两种传感器的图像,光谱范围从可见光到短波及中波红外,具有从紫外到长波红外的330个光谱波段,空间分辨率为30米。每幅图像经过精心处理,去除了无效波段和水汽吸收波段,保留了具有实际应用价值的光谱信息。HyperGlobal-450K数据集不仅支持高光谱图像的基础研究,还能够用于开发和测试各种高光谱图像处理方法,比如图像分类、目标检测、异常检测、变化检测、光谱解混、图像去噪和超分辨率等任务。

github2024-06-19 收录