Stanford CS336 學習筆記

Language Modeling from Scratch — 從零開始建構語言模型

這是我挑戰 Stanford CS336 的學習紀錄。這門課要求從零實作語言模型的每個環節：Tokenizer、Transformer、分散式訓練、Scaling Law、到 Alignment。

課程資源

• 課程首頁
• GitHub
• YouTube Playlist

學習進度

先修階段（7 週）

• 從零開始挑戰 Stanford CS336：我的 LLM 自學先修攻略
• Week 1：Micrograd 深度拆解

正式課程（10 週）

即將開始...

---

最後更新：2025 年 12 月