karakuri-bench-v0.1
收藏魔搭社区2025-12-05 更新2025-12-06 收录
下载链接：
https://modelscope.cn/datasets/karakuri-ai/karakuri-bench-v0.1
下载链接
链接失效反馈官方服务：
资源简介：
# karakuri-bench-v0.1
## Usage
### 準備
```sh
export OPENAI_API_KEY="<YOUR_API_KEY>"
```
### 回答生成
```sh
python src/generation/gpt4.py data/tasks/questions.csv data/answers/gpt4.csv
# python src/generation/gpt35.py data/tasks/questions.csv data/answers/gpt35.csv
```
### 生成された回答の評価
```sh
python src/evaluation/main.py data/tasks/questions.csv data/answers/gpt4.csv data/evaluation/gpt4.csv
# python src/evaluation/main.py data/tasks/questions.csv data/answers/gpt35.csv data/evaluation/gpt35.csv
```
# karakuri-bench-v0.1
## 使用方法
### 准备工作
sh
export OPENAI_API_KEY="<YOUR_API_KEY>"
### 答案生成
sh
python src/generation/gpt4.py data/tasks/questions.csv data/answers/gpt4.csv
# python src/generation/gpt35.py data/tasks/questions.csv data/answers/gpt35.csv
### 生成答案的评估
sh
python src/evaluation/main.py data/tasks/questions.csv data/answers/gpt4.csv data/evaluation/gpt4.csv
# python src/evaluation/main.py data/tasks/questions.csv data/answers/gpt35.csv data/evaluation/gpt35.csv
提供机构：
maas创建时间：
2025-10-04
搜集汇总
数据集介绍
背景与挑战
背景概述
该数据集为karakuri-bench-v0.1，基于Apache-2.0许可证，提供用于生成和评估回答的代码示例。
以上内容由遇见数据集搜集并总结生成
