CAIDA UCSD Real-time Network Telescope Data (2012-01-01 to 2020-01-01)

The dataset contains near-real-time raw traces from the UCSD Network Telescope covering a fourteen-day sliding time window up to the present time. Once data slides out of the "near-real-time window", the pcap files are off-loaded to tape storage. These historical Telescope data starting from 2008 are available by additional request. These data provide opportunities to study network security-related events (DDoS attacks, worms, etc.) For more information visit http://www.caida.org/data/passive/telescope-near-real-time_dataset.xml The size of one hourly raw data pcap file is more than 75Gb. In order to enable more efficient data processing and analysis, these hourly pcap files are post-processed using Corsaro software to extract the most important packet header fields and aggregate data into FlowTuple files. The resulting Aggregated Flow data is available at https://www.impactcybertrust.org/dataset_view?idDataset=1160 .本数据集包含来自UCSD网络望远镜（UCSD Network Telescope）的近实时原始流量追踪数据，覆盖截至当前的14天滑动时间窗口。当数据超出“近实时窗口”范围后，相关pcap文件将被迁移至磁带存储介质。2008年起的历史望远镜数据需通过额外申请方可获取。此类数据为研究网络安全相关事件（如分布式拒绝服务（DDoS）攻击、蠕虫病毒等）提供了重要研究契机，更多信息可访问：http://www.caida.org/data/passive/telescope-near-real-time_dataset.xml。单条每小时原始数据pcap文件的大小可达75Gb以上。为提升数据处理与分析效率，本数据集采用Corsaro软件对每小时的pcap文件进行后处理，提取核心报文头部字段并将数据聚合为FlowTuple文件。处理后得到的聚合流量数据可通过以下链接获取：https://www.impactcybertrust.org/dataset_view?idDataset=1160。

搜集汇总

背景与挑战

背景概述

该数据集是UCSD网络望远镜捕获的实时黑洞地址空间数据，包含从2012年1月1日起持续收集的未经请求IPv4流量原始pcap文件，每小时文件大小超过75GB。它主要用于研究DDoS攻击、计算机蠕虫等网络安全事件，数据以14天滑动窗口形式提供近实时访问，并支持历史数据请求，但访问受限制且需遵守特定使用条款。