five

wjbmattingly/gliner-bird-diet-synthetic

收藏
Hugging Face2024-06-14 更新2024-06-29 收录
下载链接:
https://hf-mirror.com/datasets/wjbmattingly/gliner-bird-diet-synthetic
下载链接
链接失效反馈
官方服务:
资源简介:
这是一个专注于鸟类学数据,特别是鸟类饮食的NER数据集。数据是完全合成的,不应视为事实。该数据集包含约2k条描述,使用Qwen2-7B-Instruct模型创建。数据集包括三个JSONL文件,分别用于训练、评估和测试。每个文件中的每一行都是一个包含两个键的字典:ner和tokenized_text。ner键映射到六个类别的潜在实体列表,包括植物性食物、动物性食物、群体行为、群体物种、进食时间和进食位置。数据集用于微调GLiNER模型,基础模型是NuNerZero Span。

这是一个专注于鸟类学数据,特别是鸟类饮食的NER数据集。数据是完全合成的,不应视为事实。该数据集包含约2k条描述,使用Qwen2-7B-Instruct模型创建。数据集包括三个JSONL文件,分别用于训练、评估和测试。每个文件中的每一行都是一个包含两个键的字典:ner和tokenized_text。ner键映射到六个类别的潜在实体列表,包括植物性食物、动物性食物、群体行为、群体物种、进食时间和进食位置。数据集用于微调GLiNER模型,基础模型是NuNerZero Span。
提供机构:
wjbmattingly
原始信息汇总

GLiNER Bird Diet Synthetic Dataset

概述

  • 任务类别: 命名实体识别 (NER)
  • 语言: 英语
  • 标签: 科学, 鸟类, 鸟类学, NER
  • 数据规模: 1K<n<10K

数据集描述

  • 文件名: train.jsonl, eval.jsonl, test.jsonl
  • 字段:
    • ner: 从鸟类饮食描述中提取的实体,使用GLiNER模型。
    • tokenized_text: 详细描述鸟类饮食习惯和模式的文本内容,使用qwew/qwen2-7b-instruct模型合成。

NER标签定义

  • plant food: 识别文本中提到的特定植物性食物。
  • animal food: 分类提到动物性食物的提及。
  • group behavior: 描述与进食相关的任何社会或群体行为。
  • group species: 记录参与与鸟类进食行为的其他物种。
  • eating time: 指定进食通常发生的时间。
  • eating location: 确定进食活动的地理或环境位置。

示例标注

json { "tokenized_text": ["Surviving", "in", "the", "vast", "grasslands", "of", "the", "Serengeti", ",", "the", "Lappet", "-", "faced", "Vulture", "primarily", "consumes", "carrion", ",", "focusing", "on", "remains", "of", "wildebeest", "and", "zebra", ".", "It", "occasionally", "forms", "a", "group", "with", "vultures", "of", "various", "species", "to", "efficiently", "locate", "and", "guard", "carcasses", ".", "The", "vulture", "is", "an", "active", "hunter", "during", "the", "daytime", ",", "specifically", "targeting", "amphibians", "and", "small", "rodents", ".", "Its", "feeding", "habits", "are", "predominantly", "observed", "in", "the", "open", "plains", "of", "Africa", "."], "ner": [[51,51,"EATING TIME"],[55,55,"ANIMAL FOOD"],[57,58,"ANIMAL FOOD"],[68,71,"EATING LOCATION"]] }

搜集汇总
数据集介绍
main_image_url
构建方式
在鸟类学与自然语言处理的交叉领域中,该数据集聚焦于鸟类饮食信息的命名实体识别任务。其构建方式完全采用合成数据生成策略,基于Qwen2-7B-Instruct模型自动生成约2000条鸟类饮食描述文本。每条描述均经过结构化处理,形成包含tokenized_text与ner两个关键字段的JSON格式。tokenized_text为分词后的文本序列,ner字段则标注了文本中出现的实体及其类别,严格遵循GLiNER框架的标注规范。数据被划分为训练集、评估集和测试集,分别存储于三个独立的JSONL文件中,为模型训练与性能评估提供了清晰的数据边界。
特点
该数据集在实体类别设计上展现出鲜明的领域针对性,共定义了六类与鸟类摄食行为密切相关的实体:植物性食物、动物性食物、群体行为、群体物种、摄食时间与摄食地点。这种分类体系不仅覆盖了食物类型的二元划分,更将社会性行为与时空信息纳入识别范围,使模型能够从多维度捕捉鸟类饮食生态的丰富细节。尽管数据为合成生成,但其标注格式与GLiNER模型完全兼容,且基于NuNerZero Span基座模型进行了微调,确保了在生态文本场景下的实用价值。
使用方法
该数据集专为基于GLiNER框架的命名实体识别任务设计,使用时可直接加载JSONL格式文件,通过解析每个样本的tokenized_text作为输入,ner字段作为标签进行模型训练或评估。用户可借助GLiNER库中的数据处理接口,将文本序列与实体标注映射为模型所需的张量格式。数据已按标准流程划分为训练、验证与测试子集,便于直接开展监督学习实验。此外,数据集也可迁移至其他序列标注框架,只需对标注格式进行适当转换,即可用于探索鸟类生态文本中的实体抽取研究。
背景与挑战
背景概述
在生态学与自然语言处理交叉领域,细粒度命名实体识别(NER)技术为解析生物多样性数据提供了崭新途径。由研究者wjbmattingly主导、依托Qwen2-7B-Instruct模型于近期构建的wjbmattingly/gliner-bird-diet-synthetic数据集,聚焦鸟类食性这一核心生态学问题,通过合成约2000条描述文本,系统标注了植物性食物、动物性食物、群体行为、伴生物种、摄食时间及摄食地点六类实体。该数据集以GLiNER格式组织,旨在推动轻量级NER模型在生态文本挖掘中的应用,其衍生模型GLiNER Ecology Diet已初步验证了合成数据微调的有效性,为自动化鸟类生态信息提取奠定了数据基础。
当前挑战
该数据集面临双重挑战。领域层面,鸟类食性描述涉及复杂的生态语义关系,如食性偏好与时空动态的关联(如“白天捕食两栖类”需同时识别时间与食物实体),而现有NER模型对这类嵌套式、跨类别实体交互的捕获能力有限。构建层面,纯合成数据依赖大语言模型生成,虽规避了人工标注成本,却引入事实偏差风险——例如文本中食性行为可能脱离真实鸟类生态习性,导致模型在真实场景下的泛化性不足;此外,约2000条样本量对于六类实体的细粒度学习仍显稀疏,尤其“群体行为”与“伴生物种”等低频类别易受数据不平衡影响,制约模型鲁棒性。
常用场景
经典使用场景
在自然语言处理与生态学交叉研究的领域中,wjbmattingly/gliner-bird-diet-synthetic数据集为命名实体识别任务提供了专注于鸟类食性信息的标注语料。该数据集涵盖约2000条合成文本,每条文本均经过精细的token化处理,并标注了六类关键实体:植物性食物、动物性食物、群体行为、群体物种、进食时间与进食地点。研究者可借此训练和评估能够从非结构化鸟类学描述中自动抽取出食性细粒度信息的NER模型,从而推动领域特定信息抽取技术的发展。
解决学术问题
该数据集直面生态学与计算语言学交叉领域中的核心瓶颈——高质量标注语料的匮乏。传统鸟类食性研究依赖专家手工整理文献,耗时且难以规模化。本数据集通过合成数据生成与GLiNER格式标注,为学术研究提供了一种低成本、可复现的解决方案,使得研究者能够训练出精准识别鸟类食性相关实体的模型,进而支撑食性网络构建、物种间生态位分析以及鸟类行为模式的自动化挖掘,极大提升了生态大数据处理的效率与准确性。
衍生相关工作
围绕该数据集衍生了多项经典工作,最直接的是基于GLiNER框架微调的gliner-ecology-diet模型,它利用NuNerZero Span作为基座模型,在合成数据上进行了针对性训练,展现了在鸟类食性NER任务上的出色性能。这一工作不仅验证了合成数据在领域稀缺标注场景下的有效性,也为后续研究提供了参考范式,催生了更多面向生态学文本的轻量级信息抽取模型,推动了生态自然语言处理(EcoNLP)这一新兴研究方向的形成与发展。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务