five

oliverkinch/danish-personas

收藏
Hugging Face2026-05-29 更新2026-05-31 收录
下载链接:
https://hf-mirror.com/datasets/oliverkinch/danish-personas
下载链接
链接失效反馈
官方服务:
资源简介:
该数据集包含5,000个合成的丹麦人物档案,用于在合成数据管道中注入多样性。每个档案基于nvidia/Nemotron-Personas-USA的种子数据,并通过大型语言模型(如Qwen3.5-397B-A17B)适应丹麦语境,包括丹麦姓名、城市、文化参考和自然的丹麦语散文。档案包含多个字段,如唯一标识符、姓名、详细人物描述、年龄、性别、职业、教育水平、兴趣爱好、城市、邮政编码和国家。数据集中性别分布为51%女性和49%男性,覆盖20个丹麦城市,年龄过滤为15岁及以上。数据集使用丹麦语,适用于文本生成任务,强调合成性、人物多样性、丹麦语境和文化参考。

5,000 synthetic Danish persona profiles generated for diversity injection in synthetic data pipelines. Each persona is grounded in a seed from nvidia/Nemotron-Personas-USA and adapted to a Danish context via an LLM: Danish name, city, cultural references, and natural Danish prose throughout.
提供机构:
oliverkinch
搜集汇总
数据集介绍
main_image_url
构建方式
丹麦语人物角色数据集(danish-personas)是基于合成数据技术构建的产物,旨在为丹麦语环境下的数据生成流程注入多样性。其构建过程始于从nvidia/Nemotron-Personas-USA数据集中随机抽取年龄≥15岁的样本,随后借助高性能大语言模型(Qwen3.5-397B-A17B)将每个样本适配至丹麦语境。这一过程涉及将职业、教育水平等属性转换为丹麦对应概念,依据20个丹麦城市的信息为兴趣与爱好提供本地化参照,并利用2024年丹麦最受欢迎的前50个名字和98个常见姓氏,结合性别信息独立采样生成完整的丹麦姓名。最终,模型以流畅的丹麦语撰写人物角色描述,形成5,000条高质量的人物画像。
特点
该数据集的核心特色在于其丹麦语语境的深度本地化与结构化的多样性设计。每条人物角色包含11个字段,涵盖唯一标识符、全名、角色描述、年龄(15至101岁,中位数为46)、性别(以丹麦语标注:Mand、Kvinde或Ikke-binær)、职业、教育水平、兴趣与爱好、城市、邮政编码及国家(固定为Danmark)。性别比例均衡,女性占比51%,男性49%。城市分布均匀,涵盖20个丹麦城市。角色描述以自然流畅的丹麦语书写,融合本地文化参照,如特定博物馆、传统菜肴或地方活动,使得每条角色都呈现出真实而鲜活的社会人物形象。
使用方法
用户可通过Hugging Face的datasets库便捷地加载该数据集。具体操作为调用load_dataset('oliverkinch/danish-personas', split='train'),即获取包含5,000条训练样本的数据集。数据集支持多种应用场景,例如随机抽取人物角色作为生成任务的输入,或在大语言模型微调过程中作为多样性注入的来源。用户可依据persona字段获取完整的丹麦语角色描述,或利用age、occupation等结构化字段进行定制化过滤与分析。数据集采用CC BY 4.0许可证,允许自由使用与分发,适用于自然语言处理、对话系统开发及丹麦语文化研究等领域的科研与工程实践。
背景与挑战
背景概述
在自然语言处理与生成式人工智能领域,高质量、多样化且具备文化特异性的合成人物角色(persona)数据是提升对话系统、文本生成等任务真实性的关键资源。由研究者Oliver Kinch在2025年创建的danish-personas数据集,以美国NVIDIA发布的Nemotron-Personas-USA数据库为种子,通过大型语言模型(Qwen3.5-397B-A17B)的跨文化适配生成,旨在填补丹麦语合成角色数据的空白。该数据集包含5000条涵盖姓名、年龄、性别、职业、教育、兴趣及哥本哈根等20个丹麦城市信息的人物画像,兼顾人口统计分布(如性别比例约51%女性、49%男性)与文化注入,为丹麦语模型的多样化注入提供了规范且可扩展的基准资源。
当前挑战
当前丹麦语人物角色数据面临的核心挑战在于平衡合成数据的多样性、真实性与文化保真度。一方面,原始美国种子数据需克服文化迁移误差,例如将教育体系、职业称谓、兴趣偏好准确映射至丹麦语境,避免刻板印象或不可表征的虚构。另一方面,构建过程中需确保20个城市的代表性均衡,并精细控制年龄分布(15-101岁)与性别非二元选项的合理覆盖,同时保证人物描述的自然流畅性。此外,从近81.7万条候选数据中筛选适配样本的过程涉及计算效率与语义一致性的权衡,而开源许可(CC BY 4.0)下的合作模式也对数据伦理与隐私保护提出了隐性要求。
常用场景
经典使用场景
在低资源语言的自然语言处理研究中,danish-personas数据集为丹麦语情境下的合成数据生成提供了坚实的人物画像基础。该数据集包含5000个精心构造的丹麦语人物档案,涵盖姓名、年龄、性别、职业、教育背景、兴趣爱好及地理位置等多维度信息,其经典使用场景在于为文本生成任务注入丰富的人口统计学多样性。研究者可将这些人物特征作为上下文提示,驱动语言模型生成符合特定丹麦人身份的对话、故事或产品评论,从而有效缓解真实丹麦语语料稀缺的问题。
衍生相关工作
围绕该数据集衍生出的经典工作包括丹麦语人物画像的跨语言迁移研究、基于大语言模型的合成数据质量评估,以及人物属性一致性验证框架。例如,研究者利用该数据集训练了丹麦语专用的角色一致性分类器,用于检测生成文本中年龄、职业与兴趣之间的矛盾。此外,该数据集催生了针对北欧语言的人物多样性度量工具,并与瑞典语、挪威语等相近语种的人物画像数据集形成对照实验,支撑了多语言个性化生成模型的泛化能力分析。
数据集最近研究
最新研究方向
在自然语言处理领域,合成数据生成正成为提升模型多样性与文化适应性的关键手段。danish-personas数据集通过将美国人口统计数据转化为丹麦背景的个性化档案,为低资源语言的数据增强开辟了新路径。该数据集与当前多语言大模型对地域化、文化敏感内容的需求紧密相连,特别是在丹麦语文本生成任务中,能够缓解真实标注数据匮乏的困境。结合合成人物画像与结构化社会属性(如教育、职业与兴趣),研究者可探索更具包容性的AI系统,推动数字服务在丹麦本土应用中的本地化与公平性。这一方向对跨文化NLP乃至全球AI伦理治理具有示范意义。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务