litmux4ai

litmux

litmux4ai

⚡ Unit tests for AI. Test prompts, compare models, save money.

AI 简介

Litmux 是一个面向 AI 应用的命令行测试框架,用于对提示词(prompt)和大语言模型(LLM)输出进行单元测试、回归检测与成本评估。核心功能包括基于 YAML 的声明式测试配置、多模型并行对比、断言验证(如文本包含、JSON 格式、成本阈值等)、自动化数据集生成及跨模型成本测算。技术上轻量无依赖,纯 Python 实现,支持主流 LLM API,离线可用,云同步为可选增强。适用于 AI 产品团队在开发迭代中保障提示稳定性、选型科学性与部署经济性。

Python
MIT License
105
Stars
0
Forks
1
Watchers
0
Issues

Star 增长

今日0
近 7 天0
近 30 天0
综合评分40
默认分支main