ChemToolBench

该数据集旨在促进在化学任务中进行微调和评估时，有效工具的选择和精确参数的填充。它支持在链式思维（CoT）和分层进化蒙特卡洛树搜索（HE-MCTS）范式下的评估，并包含了137个外部化学工具。该数据集的任务是评估工具代理在化学领域的推理能力，包括工具的选择和执行。This dataset is designed to facilitate effective tool selection and precise parameter configuration during fine-tuning and evaluation for chemical tasks. It supports evaluation under the paradigms of Chain-of-Thought (CoT) and Hierarchical Evolutionary Monte Carlo Tree Search (HE-MCTS), and includes 137 external chemical tools. The core task of this dataset is to evaluate the reasoning capabilities of tool agents in the chemical domain, including tool selection and execution.

搜集汇总

背景与挑战

背景概述

ChemToolBench是一个专注于化学领域的数据集，旨在通过支持链式思维和分层进化蒙特卡洛树搜索评估范式，帮助用户有效选择工具和填充参数，以评估工具代理的推理能力。它包含137个外部化学工具，核心任务涉及工具的选择和执行过程。