wikimedia / structured-wikipedia
英语和法语维基百科文章的结构化解析数据
4个月前更新
项目方资料核对
- 无需自行解析 wikitext，直接获取结构化 Wikipedia 内容（信息框、章节、Wikidata 实体链接），跳过正则解析层
- CC-BY-SA-4.0 许可证要求署名和相同方式共享，衍生数据集或商用场景需评估合规风险
4 个来源 · 截至 2026-06-20
2026-06-07 收录的数据集（7）
本页记录当日收录项目。
HuggingFaceFW / fineweb-edu
经教育质量分类器筛选的网页文本数据集
1年前更新
项目方资料核对
- 预训练数据构建过程不透明:多数大模型厂商不公开数据细节,该数据集完整公开了所有处理脚本
2 个来源 · 截至 2026-06-20
openbmb / Ultra-FineWeb
经验证过滤的高质量中英文网络文本数据集
3个月前更新
FreedomIntelligence / medical-o1-reasoning-SFT
基于医疗问题的推理链监督微调数据集
1年前更新
项目方资料核对
- 医疗推理 SFT 训练数据开源，附带 GPT-4o 生成的复杂思维链(Complex CoT)与答案
- 数据完全由 GPT-4o 合成生成，推理质量与医学准确性受限于生成模型，未经人工校验的合成数据可能包含幻觉或错误推理
2 个来源 · 截至 2026-06-20
gsdf / EasyNegative
针对Stable Diffusion的负面嵌入向量文件
3年前更新
项目方资料核对
- 抑制单色、重复图案及怪异输出，减少画面出现灰度化或纹理重复的问题
- 仅适用于 SD 1.5 模型，与 SDXL、Pony、Illustrious 等模型不兼容，强行使用无效
4 个来源 · 截至 2026-06-20
togethercomputer / RedPajama-Data-1T
遵循LLaMA数据集格式的开源文本数据
2年前更新
已被取代 RedPajama-Data-V2 · V2 将规模从 1.2T 扩展到 30T tokens,覆盖 84 个 CommonCrawl 快照,是官方推荐的后续版本
项目方资料核对
- 原始web数据存在HTML转文本伪影、低质量来源和内容偏差,不宜直接用于LLM训练
2 个来源 · 截至 2026-06-20
wikimedia / wikipedia
包含所有语言已清理的维基百科文章
2年前更新
项目方资料核对
- 提供无广告、无追踪、无恶意软件的干净信息获取体验
- 曾因恶意用户脚本导致全站只读锁定，存在账户安全与自动化恶意编辑风险
4 个来源 · 截至 2026-06-20