open-compress

claw-compactor

open-compress

14-stage Fusion Pipeline for LLM token compression — reversible compression, AST-aware code analysis, intelligent content routing. Zero LLM inference cost. MIT licensed.

AI 简介

Claw Compactor 是一个面向大语言模型(LLM)的开源上下文令牌压缩引擎,通过14阶段融合流水线实现可逆、零推理开销的高效压缩。核心功能包括AST感知的代码结构分析、智能内容路由、多策略融合压缩(如语法树精简、JSON统计采样、simhash去重),支持压缩率15–82%且完全可逆还原。技术特点涵盖不可变数据流架构、基于Tree-sitter的精准代码解析、上下文窗口优化与开发者友好的Python API。适用于LLM长上下文处理、AI Agent记忆管理、代码库摘要生成及高成本推理场景下的token成本削减。

Python
MIT License
2.2k
Stars
209
Forks
132
Watchers
5
Issues

Star 增长

今日0
近 7 天0
近 30 天+4
综合评分59.37
默认分支main