
gpt-2
openai
Code for the paper "Language Models are Unsupervised Multitask Learners"
AI 简介
GPT-2 是一个开源的自回归语言模型,旨在验证大规模无监督预训练语言模型在多项自然语言任务上的泛化能力。项目提供完整训练代码、多规模预训练权重(117M/345M/774M/1.5B参数)及推理工具,支持文本生成、零样本迁移等典型用法;采用Transformer解码器架构,基于WebText语料训练。适用于学术研究、语言建模基准测试、可控文本生成探索等场景,但需注意其潜在偏见、事实性缺陷及安全性限制,不建议直接用于生产环境或高可靠性应用。
Python
Other25k
Stars
5.9k
Forks
612
Watchers
148
Issues
Star 增长
今日0
近 7 天0
近 30 天0
综合评分70
默认分支master