macmind

MacMind是一个完全用HyperTalk编写的单层变压器神经网络，运行于经典Macintosh系统上。该项目实现了包括词嵌入、位置编码、自注意力机制、交叉熵损失函数、全反向传播以及随机梯度下降等核心功能，所有代码均使用1987年设计的用于创建交互式卡片堆栈的脚本语言HyperTalk编写，没有依赖任何外部库或编译代码。它通过学习位反转置换（快速傅里叶变换的第一步）来展示机器学习的基本原理，适用于教育场景，帮助人们理解现代大规模语言模型背后的数学逻辑和技术基础，同时也为复古计算爱好者提供了一个有趣的实验平台。