
alpaca-lora
tloen
Instruct-tune LLaMA on consumer hardware
AI 简介
这是一个基于LoRA(低秩适配)技术对LLaMA模型进行指令微调的轻量级开源项目,旨在让大语言模型在消费级硬件(如单张RTX 4090或树莓派)上高效完成指令微调与推理。项目采用Hugging Face PEFT框架和bitsandbytes量化库,支持7B模型的快速训练与部署,提供预训练LoRA权重及开箱即用的推理脚本。适用于资源受限场景下的本地化大模型微调、教学演示、研究原型开发及边缘端轻量AI应用。
Jupyter Notebook
Apache License 2.018.9k
Stars
2.2k
Forks
150
Watchers
333
Issues
Star 增长
今日0
近 7 天0
近 30 天+1
综合评分70.1
默认分支main