
llama2.c
karpathy
Inference Llama 2 in one file of pure C
AI 简介
该项目实现了在纯C语言中对Llama 2模型进行推理。核心功能是通过一个简洁的700行C代码文件来加载并运行经过PyTorch训练的小型Llama 2语言模型,强调了极简主义和教育意义。技术特点包括支持Meta发布的Llama 2架构,但目前仅支持fp32格式下的模型推理,对于超过7B参数的大模型可能无法高效加载。适合于对轻量级自然语言处理任务感兴趣的开发者或研究者使用,尤其是在资源受限的环境中寻求简单解决方案的场景。
C
MIT License19.6k
Stars
2.6k
Forks
204
Watchers
127
Issues
Star 增长
今日+5
近 7 天+35
近 30 天+134
综合评分87.5
默认分支master