datawhalechina

happy-llm

datawhalechina

📚 从零开始构建大模型

AI 简介

Happy-LLM 是一个面向中文学习者的系统性大语言模型(LLM)原理与实践教程。项目从 NLP 基础、Transformer 架构、预训练语言模型出发,逐步深入至 LLaMA2 模型动手实现、全流程训练(预训练、监督微调、LoRA/QLoRA 高效微调)及典型应用(RAG、Agent)。所有内容以 Jupyter Notebook 形式组织,强调原理推导与代码实操结合,配套完整中文文档与在线阅读支持。适用于高校学生、算法工程师及 AI 自学者开展 LLM 底层原理学习与工程实践。

Jupyter Notebook
Other
31.9k
Stars
3k
Forks
99
Watchers
52
Issues

Star 增长

今日0
近 7 天0
近 30 天+301
综合评分80
默认分支main