数据集 / 归档 / 2026-06-06

2026-06-06 收录的数据集(7)

本页记录当日收录项目。

Anthropic / hh-rlhf

人类偏好数据,用于RLHF训练帮助性和无害性

16.9万行 · 4.1 GB

  • 文本
  • mit · 许可标注允许商用

3年前更新

项目方资料核对

  • 提供大规模人类偏好数据用于安全对齐(safety-focused alignment)训练
  • 标注存在噪声:部分样本中 rejected 回复质量实际优于 chosen 回复,可能是人工标注失误所致

3 个来源 · 截至 2026-06-20

HuggingFaceFW / fineweb

从CommonCrawl清洗去重的英文网络文本数据

524.54亿行 · 117.4 TB

  • 多模态
  • 文本生成
  • odc-by · 许可标注允许商用

1年前更新

项目方资料核对

  • 提供 15 万亿 token 的高质量网页预训练语料,在同类规模中表现领先
  • 原始数据源自 Common Crawl,需经过大量过滤清洗才能达到可用质量

3 个来源 · 截至 2026-06-20

Open-Orca / OpenOrca

增强FLAN数据,对齐Orca论文的指令数据

294.2万行 · 63.5 GB

  • 文本
  • 文本分类
  • 序列标注
  • 表格问答
  • mit · 许可标注允许商用

1年前更新

项目方资料核对

  • 提供了一套可公开获取的 GPT-4 质量指令微调数据,降低复现 Orca 方法的门槛
  • 用该数据集训练的模型可能产生身份混淆,自称 ChatGPT 或表现出「妄想」行为

3 个来源 · 截至 2026-06-20

OpenAssistant / oasst1

多语言人类助手对话语料,含质量评级

8.9万行 · 1.6 GB

  • 多模态
  • apache-2.0 · 许可标注允许商用
  • 含中文

3年前更新

已被取代 oasst2 · oasst1 为 2023 年 4 月的中期快照,oasst2 为数据收集结束后的最终版本

项目方资料核对

  • 提供了带人工多维标注(质量、毒性、幽默、创意等)的大规模开源对话数据
  • 2023年4月发布的版本过滤了'不安全'内容,非原始完整采集数据

3 个来源 · 截至 2026-06-20

← 前一日 2026-06-05 · 后一日 2026-06-07 →