shibing624

MedicalGPT

shibing624

MedicalGPT: Training Your Own Medical GPT Model with ChatGPT Training Pipeline. 训练医疗大模型,实现了包括增量预训练(PT)、有监督微调(SFT)、RLHF、DPO、ORPO、GRPO。

AI 简介

MedicalGPT 是一个面向医疗领域的开源大语言模型训练框架,支持从基础模型出发完成端到端的医疗大模型定制化训练。核心功能涵盖增量预训练(PT)、有监督微调(SFT)、RLHF(含奖励建模与PPO)、DPO、ORPO及OPD等多种主流对齐与优化方法,并提供工具调用(Function Calling)微调能力。技术上兼容Llama、Qwen等主流基座模型,支持LoRA、DeepSpeed ZeRO-3等高效训练策略。适用于医疗机构、医学研究团队或AI开发者开展专业医学问答、临床辅助决策、健康咨询等垂直场景的模型训练与迭代。

Python
Apache License 2.0
5.6k
Stars
765
Forks
39
Watchers
5
Issues

Star 增长

今日0
近 7 天0
近 30 天+41
综合评分68.75
默认分支main