ProstaTD
收藏资源简介：
ProstaTD是一个大规模多源手术三元组检测数据集，从21个机器人辅助前列腺切除术视频中整理而来，涵盖了多个机构的完整手术过程，包含60,529个标注帧和165,567个结构化手术三元组实例（器械-动词-目标），提供了所有器械的精确边界框定位和临床验证的时间动作边界。数据集整合了ESAD和PSI-AVA数据集，并添加了自己的注释（未使用原始数据注释）。还包括自己收集的视频。提供了7种器械类型、10种动作、10种解剖/非解剖目标和89种三元组组合（不包括背景）的实例级注释。数据集分为训练集（14个视频）、验证集（2个视频）和测试集（5个视频），注释以每秒1帧提供。
ProstaTD is a large-scale, multi-source surgical triplet detection dataset, meticulously compiled from 21 robotic-assisted radical prostatectomy videos. It encompasses comprehensive surgical procedures from multiple institutions, containing 60,529 annotated frames and 165,567 structured surgical triplet instances (instrument-verb-target). The dataset provides precise bounding box localization for all instruments and temporally validated action boundaries. The dataset integrates the ESAD and PSI-AVA datasets and adds its own annotations (without using the original data annotations). It also includes self-collected videos. It provides instance-level annotations for 7 instrument types, 10 actions, 10 anatomic/non-anatomic targets, and 89 triplet combinations (excluding the background). The dataset is divided into training set (14 videos), validation set (2 videos), and test set (5 videos), with annotations provided at a rate of one frame per second.
ProstaTD 数据集概述
基本描述
- 数据集名称: ProstaTD (Prostate Triplet Detection)
- 类型: 手术视频数据集
- 用途: 结构化手术三元组检测（instrument-verb-target）
- 数据来源: 21个机器人辅助前列腺切除术视频
- 标注范围: 全手术过程，跨多机构采集
核心数据指标
- 总标注帧数: 60,529帧
- 三元组实例数: 165,567个
- 标注频率: 1帧/秒
- 分区构成:
- 训练集: 14个视频
- 验证集: 2个视频
- 测试集: 5个视频
标注体系
-
标注维度:
- 7种器械类型
- 10种动作类型
- 10种解剖/非解剖目标
- 89种有效三元组组合（不含背景类）
-
标注格式: 10值元组（当前可用前4位）:
[triplet_id, instrument_id, verb_id, target_id, track_id, triplet_track_id, cx, cy, w, h]
数据特性
- 临床验证: 包含经临床验证的时间动作边界
- 数据连续性: 视觉连续帧（已剔除非手术场景/环境干扰帧）
- 扩展性: 整合ESAD和PSI-AVA数据集（不含原始标注）
获取方式
- 访问申请: 需填写请求表格
- 响应时效:
- 自动回复（1小时内）
- 人工处理（2个工作日内）
使用限制
- 许可类型: CC BY-NC-SA 4.0
- 使用范围: 仅限学术研究
- 商业用途: 明确禁止
- 模型输出要求: 必须包含实验数据警告提示
版本更新
- v1.1: 2025/02/06发布（GitHub）
- v1.0: 2025/05/16发布（Kaggle）
待发布内容
- 边界框标注
- 追踪ID标注
- LabelMe原始JSON文件
- 标注可视化工具
引用格式
bibtex @article{chen2025prostatd, title = {ProstaTD: A Large-scale Multi-source Dataset for Structured Surgical Triplet Detection}, author = {Chen, Yiliang and Li, Zhixi and Xu, Cheng and Liu, Alex Qinyang and Xu, Xuemiao and Teoh, Jeremy Yuen-Chun and He, Shengfeng and Qin, Jing}, journal = {arXiv preprint arXiv:2506.01130}, year = {2025} }
