tulu-3-sft-personas-math

<img src="https://huggingface.co/datasets/allenai/blog-images/resolve/main/tulu-3/Tulu3-logo.png" alt="Tulu3 banner" width="400" style="margin-left:'auto' margin-right:'auto' display:'block'"/>

A filtered version of this dataset is available here: https://huggingface.co/datasets/allenai/tulu-3-sft-personas-math-filtered

### Dataset Descriptions
This dataset contains **149960** examples and is synthetically created to enhance model's capabilities to answer complex and hard math word problems.
To generate diverse math questions, we expand the methodology in [Ge et al., 2024](https://arxiv.org/pdf/2406.20094) by using personas. More details and exact prompts used to construct the dataset can be found in our [paper](https://allenai.org/papers/tulu-3-report.pdf).
- **Curated by:** Allen Institute for AI
- **Paper:** [Ai2 Tulu 3](https://allenai.org/tulu)
- **Repository:** [Ai2 Open Instruct](https://github.com/allenai/open-instruct)
- **Language(s) (NLP):** English
- **License:** ODC-BY
- **Point of Contact:** [Faeze Brahman](mailto:[e-mail])

Outputs were generated using GPT-4o and Claude 3.5 Sonnet.
Generations produced by GPT models are subject to OpenAI's [terms of use](https://openai.com/policies/row-terms-of-use).
Generations produced by Claude are subject to Anthropic's [terms of service](https://www.anthropic.com/legal/commercial-terms) and [usage policy](https://www.anthropic.com/legal/aup).

### Loading
```python
from datasets import load_dataset

dataset = load_dataset("allenai/tulu-3-personas-math")["train"]
```
### Dataset Structure
Each example in the dataset contains the standard instruction-tuning data points as follow:
- id (str): a unique identifier
- prompt (str): hard math word problems grounded in a given persona
- messages (list): message format used for supervised fine-tuning (this contains user prompt and assistant response)

## License
This dataset is licensed under ODC-BY.
It is intended for research and educational use in accordance with Ai2's [Responsible Use Guidelines](https://allenai.org/responsible-use).
This dataset includes output data generated from third party models that are subject to separate terms governing their use.

<img src="https://huggingface.co/datasets/allenai/blog-images/resolve/main/tulu-3/Tulu3-logo.png" alt="Tulu3 横幅" width="400" style="margin-left:'auto' margin-right:'auto' display:'block'"/>

该数据集的过滤版本可在此处获取：https://huggingface.co/datasets/allenai/tulu-3-sft-personas-math-filtered

### 数据集说明
本数据集共包含**149960**条样本，为合成生成的数据集，旨在提升模型解答复杂数学应用题的能力。
为生成多样化的数学题目，我们基于[Ge等人，2024](https://arxiv.org/pdf/2406.20094)提出的方法，通过引入角色（persona）进行了拓展。本数据集的构建细节与所用的精确提示词可参见我们的[研究论文](https://allenai.org/papers/tulu-3-report.pdf)。
- **整理方：** 艾伦人工智能研究所（Allen Institute for AI）
- **相关论文：** [Ai2 Tulu 3](https://allenai.org/tulu)
- **代码仓库：** [Ai2 Open Instruct](https://github.com/allenai/open-instruct)
- **所用语言（自然语言处理）：** 英语
- **授权协议：** ODC-BY
- **联系方式：** [Faeze Brahman](mailto:[e-mail])

本数据集的输出由GPT-4o与Claude 3.5 Sonnet生成。
由GPT系列模型生成的内容需遵循OpenAI的[使用条款](https://openai.com/policies/row-terms-of-use)。
由Claude生成的内容需遵循Anthropic的[服务条款](https://www.anthropic.com/legal/commercial-terms)与[使用政策](https://www.anthropic.com/legal/aup)。

### 加载方式
python
from datasets import load_dataset

dataset = load_dataset("allenai/tulu-3-personas-math")["train"]

### 数据集结构
本数据集的每条样本均包含标准的指令微调数据格式，具体如下：
- id（字符串类型）：唯一标识符
- prompt（字符串类型）：基于特定角色（persona）编写的高难度数学应用题
- messages（列表类型）：用于监督微调的消息格式（包含用户提示与助手回复）

## 授权协议
本数据集采用ODC-BY协议进行授权。
本数据集仅可用于研究与教育用途，需遵循艾伦人工智能研究所的[负责任使用指南](https://allenai.org/responsible-use)。
本数据集包含由第三方模型生成的输出数据，此类数据需遵守其各自的使用条款。

搜集汇总

背景与挑战

背景概述

该数据集包含149,960个合成示例，旨在通过基于角色的方法生成多样化数学应用题，以增强模型处理复杂数学问题的能力。它由Allen Institute for AI创建，使用GPT-4o和Claude 3.5 Sonnet生成输出，并遵循ODC-BY许可用于研究目的。