大模型训练框架导览

这套目录把当前主流的 15 个 LLM 训练框架按"预训练 / 微调 / RLHF / PEFT"四类整理。 每个框架都配套了一本 13 章的中文 tutorial 入门书，章节内容基于具体 commit 编写，所有路径 与代码引用都可在配套源码 repos/<name>/ 里直接对照。

阅读顺序建议：先扫一遍 版本基线 了解所有仓库的快照 commit； 再按下方分区选你感兴趣的框架进入对应 tutorial。每本书的章节都列在书内左侧侧边栏， 随时可以跳转。

·完整目录

本目录怎么组织

本目录的物理结构如下，所有路径都在 /Users/zjw/Documents/LLM/train/ 下：

train/
├── index.html              （当前页面）
├── VERSIONS.html           15 个仓库的 commit 基线表
├── assets/style.css        全站统一样式
├── tutorials/              15 本中文 tutorial
│   ├── 01-megatron-lm/     index.html + ch01-13 + appendix-a
│   ├── 02-deepspeed/       index.html + ch01-13
│   ├── ...
│   └── 15-peft/            index.html + ch01-13
└── repos/                  15 个仓库的浅克隆（git clone --depth=1）
    ├── megatron-lm/
    ├── deepspeed/
    └── ...

章节完成度