
gzipt
nathanrs
A compression based language model
AI 简介
gzipt 是一个基于通用压缩算法 gzip 的无参数语言模型,利用数据压缩率作为概率预测依据,无需训练或神经网络即可生成文本。其核心原理是通过搜索使 gzip 压缩率最优的字节序列来实现文本续写,支持自定义语料库、提示词、生成长度及束搜索参数(如 beam-width、horizon)。技术特点是轻量、可解释、零训练开销,依赖 zlib 实现多线程并行评分。适用于低资源场景下的文本探索、压缩感知研究、基线模型对比或教学演示,尤其适合关注信息论与语言建模本质关联的研究者和开发者。
Python
89
Stars
14
Forks
82
Watchers
0
Issues
Star 增长
今日0
近 7 天0
近 30 天0
综合评分40.53
默认分支main