five

distil-whisper/librispeech_asr-noise

收藏
Hugging Face2023-09-27 更新2024-03-04 收录
下载链接:
https://hf-mirror.com/datasets/distil-whisper/librispeech_asr-noise
下载链接
链接失效反馈
官方服务:
资源简介:
--- dataset_info: - config_name: test-pub-noise features: - name: audio dtype: audio - name: text dtype: string - name: id dtype: string splits: - name: '40' num_bytes: 2517727265.74 num_examples: 2620 - name: '35' num_bytes: 2517727265.74 num_examples: 2620 - name: '30' num_bytes: 2517727265.74 num_examples: 2620 - name: '25' num_bytes: 2517727265.74 num_examples: 2620 - name: '20' num_bytes: 2517727265.74 num_examples: 2620 - name: '15' num_bytes: 2517727265.74 num_examples: 2620 - name: '10' num_bytes: 2517727265.74 num_examples: 2620 - name: '5' num_bytes: 2517727265.74 num_examples: 2620 - name: '0' num_bytes: 2517727265.74 num_examples: 2620 - name: minus5 num_bytes: 2517727265.74 num_examples: 2620 - name: minus10 num_bytes: 2517727265.74 num_examples: 2620 download_size: 9029521258 dataset_size: 27694999923.13999 - config_name: test-white-noise features: - name: audio dtype: audio - name: text dtype: string - name: id dtype: string splits: - name: '40' num_bytes: 2517727265.74 num_examples: 2620 - name: '35' num_bytes: 2517727265.74 num_examples: 2620 - name: '30' num_bytes: 2517727265.74 num_examples: 2620 - name: '25' num_bytes: 2517727265.74 num_examples: 2620 - name: '20' num_bytes: 2517727265.74 num_examples: 2620 - name: '15' num_bytes: 2517727265.74 num_examples: 2620 - name: '10' num_bytes: 2517727265.74 num_examples: 2620 - name: '5' num_bytes: 2517727265.74 num_examples: 2620 - name: '0' num_bytes: 2517727265.74 num_examples: 2620 - name: minus5 num_bytes: 2517727265.74 num_examples: 2620 - name: minus10 num_bytes: 2517727265.74 num_examples: 2620 download_size: 15639888311 dataset_size: 27694999923.13999 - config_name: validation-pub-noise features: - name: audio dtype: audio - name: text dtype: string - name: id dtype: string splits: - name: '40' num_bytes: 2313039107.07 num_examples: 2703 - name: '35' num_bytes: 2313039107.07 num_examples: 2703 - name: '30' num_bytes: 2313039107.07 num_examples: 2703 - name: '25' num_bytes: 2313039107.07 num_examples: 2703 - name: '20' num_bytes: 2313039107.07 num_examples: 2703 - name: '15' num_bytes: 2313039107.07 num_examples: 2703 - name: '10' num_bytes: 2313039107.07 num_examples: 2703 - name: '5' num_bytes: 2313039107.07 num_examples: 2703 - name: '0' num_bytes: 2313039107.07 num_examples: 2703 - name: minus5 num_bytes: 2313039107.07 num_examples: 2703 - name: minus10 num_bytes: 2313039107.07 num_examples: 2703 download_size: 15441254231 dataset_size: 25443430177.77 - config_name: validation-white-noise features: - name: audio dtype: audio - name: text dtype: string - name: id dtype: string splits: - name: '40' num_bytes: 2313039107.07 num_examples: 2703 - name: '35' num_bytes: 2313039107.07 num_examples: 2703 - name: '30' num_bytes: 2313039107.07 num_examples: 2703 - name: '25' num_bytes: 2313039107.07 num_examples: 2703 - name: '20' num_bytes: 2313039107.07 num_examples: 2703 - name: '15' num_bytes: 2313039107.07 num_examples: 2703 - name: '10' num_bytes: 2313039107.07 num_examples: 2703 - name: '5' num_bytes: 2313039107.07 num_examples: 2703 - name: '0' num_bytes: 2313039107.07 num_examples: 2703 - name: minus5 num_bytes: 2313039107.07 num_examples: 2703 - name: minus10 num_bytes: 2313039107.07 num_examples: 2703 download_size: 15581612447 dataset_size: 25443430177.77 configs: - config_name: test-pub-noise data_files: - split: '40' path: test-pub-noise/40-* - split: '35' path: test-pub-noise/35-* - split: '30' path: test-pub-noise/30-* - split: '25' path: test-pub-noise/25-* - split: '20' path: test-pub-noise/20-* - split: '15' path: test-pub-noise/15-* - split: '10' path: test-pub-noise/10-* - split: '5' path: test-pub-noise/5-* - split: '0' path: test-pub-noise/0-* - split: minus5 path: test-pub-noise/minus5-* - split: minus10 path: test-pub-noise/minus10-* - config_name: test-white-noise data_files: - split: '40' path: test-white-noise/40-* - split: '35' path: test-white-noise/35-* - split: '30' path: test-white-noise/30-* - split: '25' path: test-white-noise/25-* - split: '20' path: test-white-noise/20-* - split: '15' path: test-white-noise/15-* - split: '10' path: test-white-noise/10-* - split: '5' path: test-white-noise/5-* - split: '0' path: test-white-noise/0-* - split: minus5 path: test-white-noise/minus5-* - split: minus10 path: test-white-noise/minus10-* - config_name: validation-pub-noise data_files: - split: '40' path: validation-pub-noise/40-* - split: '35' path: validation-pub-noise/35-* - split: '30' path: validation-pub-noise/30-* - split: '25' path: validation-pub-noise/25-* - split: '20' path: validation-pub-noise/20-* - split: '15' path: validation-pub-noise/15-* - split: '10' path: validation-pub-noise/10-* - split: '5' path: validation-pub-noise/5-* - split: '0' path: validation-pub-noise/0-* - split: minus5 path: validation-pub-noise/minus5-* - split: minus10 path: validation-pub-noise/minus10-* - config_name: validation-white-noise data_files: - split: '40' path: validation-white-noise/40-* - split: '35' path: validation-white-noise/35-* - split: '30' path: validation-white-noise/30-* - split: '25' path: validation-white-noise/25-* - split: '20' path: validation-white-noise/20-* - split: '15' path: validation-white-noise/15-* - split: '10' path: validation-white-noise/10-* - split: '5' path: validation-white-noise/5-* - split: '0' path: validation-white-noise/0-* - split: minus5 path: validation-white-noise/minus5-* - split: minus10 path: validation-white-noise/minus10-* --- # Dataset Card for "librispeech_asr-noise" [More Information needed](https://github.com/huggingface/datasets/blob/main/CONTRIBUTING.md#how-to-contribute-to-the-dataset-cards)
提供机构:
distil-whisper
原始信息汇总

数据集概述

数据集配置

配置名称:test-pub-noise

  • 特征
    • audio: 音频数据
    • text: 字符串
    • id: 字符串
  • 分割
    • 40: 2620个样本,2517727265.74字节
    • 35: 2620个样本,2517727265.74字节
    • 30: 2620个样本,2517727265.74字节
    • 25: 2620个样本,2517727265.74字节
    • 20: 2620个样本,2517727265.74字节
    • 15: 2620个样本,2517727265.74字节
    • 10: 2620个样本,2517727265.74字节
    • 5: 2620个样本,2517727265.74字节
    • 0: 2620个样本,2517727265.74字节
    • minus5: 2620个样本,2517727265.74字节
    • minus10: 2620个样本,2517727265.74字节
  • 下载大小:9029521258字节
  • 数据集大小:27694999923.13999字节

配置名称:test-white-noise

  • 特征
    • audio: 音频数据
    • text: 字符串
    • id: 字符串
  • 分割
    • 40: 2620个样本,2517727265.74字节
    • 35: 2620个样本,2517727265.74字节
    • 30: 2620个样本,2517727265.74字节
    • 25: 2620个样本,2517727265.74字节
    • 20: 2620个样本,2517727265.74字节
    • 15: 2620个样本,2517727265.74字节
    • 10: 2620个样本,2517727265.74字节
    • 5: 2620个样本,2517727265.74字节
    • 0: 2620个样本,2517727265.74字节
    • minus5: 2620个样本,2517727265.74字节
    • minus10: 2620个样本,2517727265.74字节
  • 下载大小:15639888311字节
  • 数据集大小:27694999923.13999字节

配置名称:validation-pub-noise

  • 特征
    • audio: 音频数据
    • text: 字符串
    • id: 字符串
  • 分割
    • 40: 2703个样本,2313039107.07字节
    • 35: 2703个样本,2313039107.07字节
    • 30: 2703个样本,2313039107.07字节
    • 25: 2703个样本,2313039107.07字节
    • 20: 2703个样本,2313039107.07字节
    • 15: 2703个样本,2313039107.07字节
    • 10: 2703个样本,2313039107.07字节
    • 5: 2703个样本,2313039107.07字节
    • 0: 2703个样本,2313039107.07字节
    • minus5: 2703个样本,2313039107.07字节
    • minus10: 2703个样本,2313039107.07字节
  • 下载大小:15441254231字节
  • 数据集大小:25443430177.77字节

配置名称:validation-white-noise

  • 特征
    • audio: 音频数据
    • text: 字符串
    • id: 字符串
  • 分割
    • 40: 2703个样本,2313039107.07字节
    • 35: 2703个样本,2313039107.07字节
    • 30: 2703个样本,2313039107.07字节
    • 25: 2703个样本,2313039107.07字节
    • 20: 2703个样本,2313039107.07字节
    • 15: 2703个样本,2313039107.07字节
    • 10: 2703个样本,2313039107.07字节
    • 5: 2703个样本,2313039107.07字节
    • 0: 2703个样本,2313039107.07字节
    • minus5: 2703个样本,2313039107.07字节
    • minus10: 2703个样本,2313039107.07字节
  • 下载大小:15581612447字节
  • 数据集大小:25443430177.77字节
搜集汇总
数据集介绍
main_image_url
构建方式
在语音识别系统鲁棒性评估的背景下,distil-whisper/librispeech_asr-noise数据集基于经典的LibriSpeech语料库构建而成。其核心构建思路在于通过向纯净语音样本中叠加两种不同类型的噪声——公开环境噪声与白噪声,来模拟真实世界中的声学干扰。数据集针对每个噪声类型分别设置了从40分贝到-10分贝的11个信噪比等级,以生成不同难度的测试与验证样本。每个配置下均包含数千条音频-文本对齐的语音片段,确保了评估的统计可靠性。
使用方法
在使用该数据集时,研究者可通过Hugging Face Datasets库加载指定的配置名称,例如选择test-pub-noise或validation-white-noise来获取特定噪声类型与划分的集合。每个配置下包含以信噪比数值命名的子集,用户可根据实验需求选取单个或多个信噪比等级进行模型评估。数据加载后,音频字段可直接用于语音识别模型的输入,文本字段作为参考转录,支持计算词错误率等标准指标,从而系统性地衡量模型在不同噪声条件下的鲁棒性。
背景与挑战
背景概述
在自动语音识别(ASR)领域,模型在真实嘈杂环境下的鲁棒性一直是研究的核心难题。LibriSpeech ASR噪声数据集(distil-whisper/librispeech_asr-noise)由Hugging Face团队于2023年左右创建,旨在系统评估和提升语音识别系统在面对不同类型与强度噪声时的表现。该数据集基于经典的LibriSpeech语料库,通过叠加公共环境噪声与白噪声,构建了从-10dB到40dB信噪比(SNR)的多个测试与验证子集,为研究者提供了标准化的噪声鲁棒性评测基准。其核心研究问题聚焦于量化噪声对ASR性能的退化影响,并推动抗噪语音识别技术的发展。该数据集的发布填补了现有基准在噪声多样性及强度梯度上的空白,对推动语音交互系统在真实场景中的落地具有重要影响力。
当前挑战
该数据集所解决的领域挑战在于,传统ASR模型在干净语音上表现优异,但在实际应用中常因背景噪声(如街道喧嚣、室内混响)导致识别率骤降。通过提供从极低信噪比(-10dB)到高信噪比(40dB)的精细化噪声梯度,该数据集揭示了模型性能随噪声强度变化的非线性衰减模式,尤其凸显了在低信噪比条件下模型对语音起始点检测与音素分辨能力的脆弱性。构建过程中,挑战在于确保噪声叠加的物理真实性——公共噪声需匹配真实场景的频谱特性,而白噪声则需控制其统计均匀性以避免引入额外偏差。此外,需精确对齐原始LibriSpeech的音频与文本标注,防止噪声处理导致的时序偏移,这要求对音频采样率、信噪比计算及数据分片进行严格校验,从而维护评测结果的可靠性。
常用场景
经典使用场景
在语音识别与声学建模领域,distil-whisper/librispeech_asr-noise数据集被广泛用于评估和提升自动语音识别(ASR)系统在噪声环境下的鲁棒性。该数据集基于LibriSpeech语料库,通过叠加不同信噪比(SNR)的公共噪声或白噪声,构建了从-10 dB到40 dB的梯度噪声测试与验证集。研究者利用这一资源,系统性地考察模型在嘈杂场景中的转录精度,尤其关注低信噪比下的性能衰减规律,从而为抗噪语音识别算法的设计提供标准化基准。
解决学术问题
该数据集直面声学环境噪声对ASR系统泛化能力的挑战,解决了传统干净语音评估无法反映真实应用场景的学术困境。通过提供多级别、多类型的噪声条件,它使得研究者能够定量分析模型对背景干扰的敏感度,并探索诸如数据增强、特征补偿或模型结构优化等策略的有效性。这一资源极大地推动了噪声鲁棒语音识别理论的发展,为构建在复杂声学环境中仍能保持高识别率的系统奠定了实验基础。
实际应用
在实际应用中,该数据集助力于开发适用于智能助手、语音控制设备及会议转录等场景的ASR系统。例如,在智能家居环境中,设备常处于空调、电视等背景噪声中;而在车载系统里,风噪和引擎轰鸣成为主要干扰。通过在此数据集上训练和验证,开发者能够确保语音交互产品在嘈杂的日常环境中仍能准确理解用户指令,从而提升用户体验和系统可靠性。
数据集最近研究
最新研究方向
在自动语音识别(ASR)领域,噪声鲁棒性始终是模型从实验室走向真实场景的核心挑战。distil-whisper/librispeech_asr-noise数据集通过精细化控制信噪比(从-10dB到40dB)并叠加公共噪声与白噪声,为评估和提升轻量化蒸馏模型在复杂声学环境下的表现提供了标准化基准。当前前沿研究聚焦于利用该数据集探索知识蒸馏与噪声增强的协同机制,例如在Distil-Whisper等紧凑架构中,通过多信噪比训练策略来模拟真实世界的声学多样性,从而在不显著增加参数量的前提下显著降低词错误率。这一方向不仅推动了高效ASR模型在智能家居、车载语音等嘈杂场景中的部署,更呼应了业界对绿色AI与边缘计算的需求,其构建的噪声分层评估体系已成为衡量模型泛化能力的重要标尺。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务