five

RaidaR|自动驾驶数据集|恶劣天气视觉感知数据集

收藏
arXiv2021-10-26 更新2024-08-06 收录
自动驾驶
恶劣天气视觉感知
下载链接:
http://arxiv.org/abs/2104.04606v3
下载链接
链接失效反馈
资源简介:
RaidaR是一个为自动驾驶研究提供支持的丰富注释图像数据集,专注于雨天街道场景。该数据集包含迄今为止最大数量的雨天街道场景图像(58,542张),其中5,000张提供语义分割,3,658张提供对象实例分割。RaidaR图像涵盖了广泛的现实雨天引起的伪影,包括雾、水滴和道路反射,有效增强现有街道场景数据集,以改善雨天天气下的数据驱动机器感知。数据集通过结合手动分割和自动化处理,采用半自动方案进行高效标注,显著减少了标注时间。RaidaR不仅提升了现有分割算法的准确性,还通过引入一种新颖的非配对图像到图像翻译算法,直接受益于其注释数据集,为自动驾驶在恶劣天气条件下的视觉感知任务提供了强有力的数据支持。
提供机构:
西蒙弗雷泽大学
创建时间:
2021-04-10
AI搜集汇总
数据集介绍
main_image_url
构建方式
RaidaR数据集的构建采用了屋顶安装的摄像头平台,在加拿大温哥华大都会地区的晴天和雨天条件下收集RGB视频。从这些视频中提取了77,437帧图像,其中包含18,895张晴天图像和58,542张雨天图像。为了确保隐私,图像中的人脸和车牌被检测并进行了模糊处理。雨天图像涵盖了多种雨天特征,如雾、水滴和道路反射。为了高效标注大量图像,开发了一种半自动标注方案,结合了手动分割和类似于交叉验证的自动处理,显著减少了标注时间。
使用方法
RaidaR数据集可用于增强现有分割算法的准确性,特别是在雨天条件下的视觉感知任务中。通过数据增强,RaidaR可以提升现有分割算法的性能。此外,该数据集还支持一种新颖的非配对图像到图像转换算法,用于添加或移除雨天特征,直接受益于RaidaR的标注数据。研究人员可以利用RaidaR进行自动驾驶系统的训练,特别是在雨天条件下的语义和实例分割任务中,提升算法的鲁棒性和准确性。
背景与挑战
背景概述
RaidaR数据集由Simon Fraser University、Beihang University和Jilin University的研究团队于2021年提出,旨在支持自动驾驶在恶劣天气条件下的研究。该数据集包含了迄今为止最大规模的雨天街景图像(58,542张),其中5,000张图像提供了语义分割标注,3,658张图像提供了实例分割标注。RaidaR涵盖了多种雨天场景中的真实天气现象,如雾、雨滴和路面反射,能够有效补充现有的街景数据集,提升雨天条件下的机器感知能力。该数据集的发布为自动驾驶领域的研究提供了重要的数据支持,尤其是在雨天条件下的图像分割和去雨算法研究方面具有显著的影响力。
当前挑战
RaidaR数据集在构建过程中面临了多重挑战。首先,雨天条件下的图像采集和处理极为复杂,雨滴、雾气和路面反射等天气现象会导致图像质量下降,增加了标注的难度。其次,数据集的标注工作量巨大,研究团队开发了一种半自动标注方案,结合手动分割和自动化处理,显著减少了标注时间,但仍需大量人工干预以确保标注的准确性。此外,雨天场景的多样性和复杂性也对算法的鲁棒性提出了更高要求,现有的图像分割和去雨算法在雨天条件下的表现往往不尽如人意,RaidaR的引入为这些算法的改进提供了重要的数据基础。
常用场景
经典使用场景
RaidaR数据集在自动驾驶研究中具有广泛的应用,尤其是在雨天场景下的视觉感知任务中。该数据集包含了大量真实的雨天街景图像,涵盖了雨滴、雾气、道路反射等多种雨天特有的视觉干扰。研究人员可以利用这些图像来训练和测试语义分割、实例分割等算法,以提升自动驾驶系统在恶劣天气条件下的感知能力。
解决学术问题
RaidaR数据集解决了自动驾驶领域中的一个关键问题,即在雨天等恶劣天气条件下,视觉感知算法的性能下降问题。通过提供大量带有语义和实例分割标注的雨天图像,RaidaR使得研究人员能够更好地理解和处理雨天场景中的视觉干扰,从而提升算法的鲁棒性和准确性。此外,该数据集还为图像去雨、雨滴去除等任务提供了丰富的训练数据,推动了相关领域的研究进展。
实际应用
RaidaR数据集的实际应用主要集中在自动驾驶系统的开发与测试中。通过使用该数据集,自动驾驶车辆可以在雨天等复杂天气条件下进行更准确的物体检测、道路识别和场景理解。此外,RaidaR还可以用于开发图像增强算法,帮助自动驾驶系统在雨天条件下生成更清晰的视觉输入,从而提高驾驶安全性。
数据集最近研究
最新研究方向
RaidaR数据集作为目前最大的雨天街景图像数据集,为自动驾驶研究提供了丰富的雨天场景数据支持。其最新研究方向主要集中在利用其大规模标注数据提升自动驾驶视觉感知算法在恶劣天气条件下的鲁棒性。通过结合语义分割和实例分割标注,RaidaR不仅能够增强现有数据集的数据多样性,还为去雨滴、去雾等图像修复任务提供了真实场景下的训练数据。此外,RaidaR还推动了基于图像到图像转换的算法研究,特别是在雨天与晴天场景之间的无监督转换方面,展示了其在数据增强和图像修复中的潜力。这些研究方向的进展不仅提升了自动驾驶系统在复杂天气条件下的感知能力,也为计算机视觉领域提供了新的研究范式。
相关研究论文
  • 1
    RaidaR: A Rich Annotated Image Dataset of Rainy Street Scenes西蒙弗雷泽大学 · 2021年
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4098个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

中国交通事故深度调查(CIDAS)数据集

交通事故深度调查数据通过采用科学系统方法现场调查中国道路上实际发生交通事故相关的道路环境、道路交通行为、车辆损坏、人员损伤信息,以探究碰撞事故中车损和人伤机理。目前已积累深度调查事故10000余例,单个案例信息包含人、车 、路和环境多维信息组成的3000多个字段。该数据集可作为深入分析中国道路交通事故工况特征,探索事故预防和损伤防护措施的关键数据源,为制定汽车安全法规和标准、完善汽车测评试验规程、

北方大数据交易中心 收录

Beijing Traffic

The Beijing Traffic Dataset collects traffic speeds at 5-minute granularity for 3126 roadway segments in Beijing between 2022/05/12 and 2022/07/25.

Papers with Code 收录

MedChain

MedChain是由香港城市大学、香港中文大学、深圳大学、阳明交通大学和台北荣民总医院联合创建的临床决策数据集,包含12,163个临床案例,涵盖19个医学专科和156个子类别。数据集通过五个关键阶段模拟临床工作流程,强调个性化、互动性和顺序性。数据来源于中国医疗网站“iiYi”,经过专业医生验证和去识别化处理,确保数据质量和患者隐私。MedChain旨在评估大型语言模型在真实临床场景中的诊断能力,解决现有基准在个性化医疗、互动咨询和顺序决策方面的不足。

arXiv 收录

CAP-DATA

CAP-DATA数据集由长安大学交通学院的研究团队创建,包含11,727个交通事故视频,总计超过2.19百万帧。该数据集不仅标注了事故发生的时间窗口,还提供了详细的文本描述,包括事故前的实际情况、事故类别、事故原因和预防建议。数据集的创建旨在通过结合视觉和文本信息,提高交通事故预测的准确性和解释性,从而支持更安全的驾驶决策系统。

arXiv 收录

Figshare

Figshare是一个在线数据共享平台,允许研究人员上传和共享各种类型的研究成果,包括数据集、论文、图像、视频等。它旨在促进科学研究的开放性和可重复性。

figshare.com 收录