Corpora
AI 训练数据采集

PB 级 YouTube 视频与音频数据集,为 AI 训练而生

Corpora 采集 YouTube 视频、音频、字幕和结构化元数据,用于多模态 AI 训练 —— 视觉语言模型、语音模型和视频 LLM。你可以选择 1–40 Gbps 不限流量 yt-dlp 代理自建管线,也可以由我们把整理好的数据集直接交付到你的云存储。

面向多模态 AI 训练的 YouTube 视频与音频数据集采集管线
1–40 Gbps
每客户独享带宽,流量不限
PB 级
视频、音频与元数据直接交付到你的存储桶
99.9%
代理可用性,自动故障切换
我们采集什么

来自 YouTube 的多模态训练数据 —— 视频、音频、文本与元数据

从原始视频、音频流到干净的结构化元数据 —— 大规模采集、去重、整理,直接用于视觉语言、语音和视频 LLM 训练。

YouTube 视频与音频下载

全分辨率视频(最高 4K/8K)、面向语音与音乐模型的纯音频轨道,以及指定格式。可按原始容器交付,或转码为你的目标编码。

结构化元数据

标题、描述、标签、频道、发布时间、时长、播放/点赞数、分类、语言等 —— 统一规范为 JSONL 或 Parquet。

字幕与转录文本

所有可用语言的自动生成字幕与人工字幕,时间戳与视频对齐,适用于语音和多模态训练。

评论与互动数据

一级评论、回复、点赞数和回复串,适用于对话、情感分析和排序数据集。

缩略图与关键帧

全部分辨率的缩略图,并可按自定义间隔抽取关键帧,用于视觉语言预训练。

自定义采集范围

按关键词、频道列表、播放列表、主题、语言、地区、上传时间窗口或互动阈值采集。范围由你定义。

两种合作方式

自建管线,或由我们负责交付

两种方式都为持续、高吞吐的采集而设计,没有速率限制,也没有带宽上限。

自行管理

高带宽代理

为你的采集系统提供 1–40 Gbps 独享不限流量代理带宽。

  • 流量不限 —— 永不按 GB 计费
  • 每客户可从 1 Gbps 扩展到 40 Gbps
  • HTTP(S) 与 SOCKS5,兼容 yt-dlp 及自研爬虫
  • 轮换 IP 池,自动健康检查与故障切换
  • 多地区节点,覆盖地域限定内容
  • 7×24 技术支持与专属客户经理
全托管

云存储交付

告诉我们你的需求,我们负责采集、处理,并直接交付到你的存储。

  • 交付至你的 S3、GCS、Azure Blob 或私有对象存储
  • 视频、音频、字幕和元数据按你指定的目录结构组织
  • 包含去重、完整性校验和清单文件
  • 可选转码、抽帧和格式转换
  • 支持增量更新,适合持续扩充的数据集
  • 按交付 PB 数计价 —— 你无需搭建任何基础设施
元数据结构

每个视频都有干净、一致的字段

每条记录都经过校验和规范化。可按需定制字段和结构。

字段类型说明
video_idstringYouTube 视频唯一标识
title / descriptionstring原始标题及完整描述文本
channel_id / channel_namestring上传者频道标识及订阅数快照
published_atdatetime上传时间戳(UTC,ISO 8601)
duration_secinteger视频时长(秒)
view_count / like_count / comment_countinteger采集时的互动指标
tags / categoryarray / string创作者标签及 YouTube 分类
languagestring检测到的主要语言(BCP-47)
formatsarray可用分辨率、编码、码率及文件大小
subtitlesobject按语言列出的字幕轨道,区分人工与自动生成
thumbnailsarray全部分辨率的缩略图 URL 及本地路径
file_path / sha256string交付媒体在你存储桶中的位置及完整性校验值
工作流程

从需求到数据集交付

步骤 01

明确范围

告诉我们你的目标:关键词、频道、语言、地区、时间范围、格式及预估数据量。

步骤 02

样本验证

我们免费交付一批带元数据的样本,让你在正式合作前验证质量、结构和格式。

步骤 03

规模化采集

采集在 1–40 Gbps 独享带宽上运行,配有进度看板和每日报告。

步骤 04

交付与校验

数据连同清单和校验值落入你的云存储。可按计划进行增量更新。

价格

简单透明,量大优惠

按带宽付费,或按交付数据量付费 —— 哪种适合你的管线就选哪种。两种方式都有批量折扣。

高带宽代理
$2,000/ Gbps / 月

流量不限,可从 1 Gbps 扩展到 40 Gbps。

  • 不按 GB、不按请求数收费
  • HTTP(S) 与 SOCKS5,轮换 IP 池
  • 多地区接入点
  • 99.9% 可用性 SLA,7×24 支持
1–4 Gbps标准价
5–9 Gbps批量折扣
10–40 Gbps最优价 —— 请联系我们
数据集托管交付
按 PB交付量计价

按交付数据量和处理范围定价。请联系我们获取报价。

  • 包含视频、音频、字幕和元数据
  • 交付至 S3 / GCS / Azure / 私有存储
  • 去重、校验值和清单文件
  • 可选转码与抽帧
免费样本批次包含
多 PB 项目阶梯折扣
持续增量交付定制条款

所有价格均为美元。支持定制企业协议、年度合约及混合方案(代理 + 交付)—— 详情请联系销售。

常见问题

常见问题

可以。我们以 PB 级规模从 YouTube 采集全分辨率视频、纯音频轨道、字幕、缩略图和结构化元数据,并交付到你的云存储;也可以提供 1–40 Gbps 不限流量代理,由你自建采集管线。

支持。我们的 HTTP(S) 和 SOCKS5 代理完全兼容 yt-dlp、youtube-dl 及自研爬虫,流量不限,并配有轮换 IP 池。

最高 4K/8K 的视频流、音频轨道、带时间戳的人工与自动生成字幕、缩略图、抽取的关键帧、评论,以及规范化的 JSONL/Parquet 元数据 —— 适用于视觉语言、语音和视频 LLM 训练。

代理为每 Gbps 每月 $2,000,流量不限,5 Gbps 起享批量折扣。数据集托管交付按交付 PB 数计价,并免费提供样本批次。

每月 800 TB 在 100% 利用率下约为 2.5 Gbps。考虑协议开销和实际利用率,我们建议配置 4–5 Gbps 独享带宽。
联系销售

告诉我们你需要的数据集

告诉我们你的目标范围和数据量,我们会回复样本方案、时间表和报价 —— 通常在一个工作日内。