mozilla-ai

llamafile

mozilla-ai

Distribute and run LLMs with a single file.

AI 简介

llamafile 是一个用于分发和运行大语言模型(LLM)的单文件解决方案。该项目基于 llama.cpp 和 Cosmopolitan Libc,将复杂的 LLM 功能整合到一个可执行文件中,无需额外安装即可在多种操作系统和 CPU 架构上本地运行。此外,它还包含了 whisperfile,这是一个基于 whisper.cpp 的单文件语音转文字工具,支持音频文件的转录与翻译。llamafile 适用于需要简化 LLM 部署流程、提高模型可用性的开发者和终端用户场景,特别是在跨平台环境中希望减少依赖管理的情况下。

C++
Other
24.9k
Stars
1.4k
Forks
201
Watchers
189
Issues

Star 增长

今日+177
近 7 天+269
近 30 天+433
综合评分119.43
默认分支main