MBZUAI/GranD-f

GranD-f数据集包含四个子数据集：一个高质量的人工注释数据集（在GLaMM论文中提出）和三个开源数据集（Open-PSG、RefCOCO-g和Flickr-30k），这些数据集通过OpenAI GPT4重新用于GCG任务。The GranD-f dataset consists of four subsets: one high-quality manually annotated dataset (proposed in the GLaMM paper) and three open-source datasets (Open-PSG, RefCOCO-g, and Flickr-30k), all of which were repurposed for the GCG task using OpenAI GPT-4.

原始信息汇总

🌐💬 GranD-f - Grounded Conversation Generation (GCG) Dataset

数据集概述

GranD-f数据集包含四个子数据集：

1. 高质量的人工标注数据集，源自GLaMM论文。
2. 三个开源数据集：Open-PSG、RefCOCO-g和Flickr-30k，这些数据集经过OpenAI GPT4的重新利用，适用于GCG任务。

下载方式

bash git lfs install git clone https://huggingface.co/datasets/MBZUAI/GranD-f

引用信息

bibtex @article{hanoona2023GLaMM, title={GLaMM: Pixel Grounding Large Multimodal Model}, author={Rasheed, Hanoona and Maaz, Muhammad and Shaji, Sahal and Shaker, Abdelrahman and Khan, Salman and Cholakkal, Hisham and Anwer, Rao M. and Xing, Eric and Yang, Ming-Hsuan and Khan, Fahad S.}, journal={The IEEE/CVF Conference on Computer Vision and Pattern Recognition}, year={2024} }

搜集汇总

背景与挑战

背景概述

GranD-f是一个用于Grounded Conversation Generation任务的数据集，包含四个子数据集，其中一个是高质量的人工标注数据集，另外三个是经过GPT4重新处理的开源数据集。该数据集由MBZUAI发布，相关研究发表在CVPR 2024上。