talkie

talkie 是一个基于1930年代文本训练的13B参数复古语言模型。项目提供了两种主要模型：`talkie-1930-13b-base` 和 `talkie-1930-13b-it`，后者通过特定指令调优以提高遵循指令的能力，并使用在线DPO强化学习进一步优化。此外，还有一个现代版基础模型 `talkie-web-13b-base` 用于对比研究。talkie 使用Python编写，支持通过HuggingFace下载模型并进行推理。该项目适合需要模拟或研究20世纪早期语言风格和内容的场景，如历史文献分析、复古风格写作等。