metaflow

Metaflow 是一个面向数据科学家与工程师的端到端 AI/ML 系统开发框架，用于构建、管理与部署生产级机器学习流水线。它提供 Python 原生 API，支持本地快速原型开发（含 Notebook 集成）、实验追踪与版本控制、分布式任务调度（CPU/GPU）、云平台（AWS/Azure/GCP）弹性扩缩容、模型与数据资产统一管理，并具备故障恢复与检查点能力。核心特点包括人类优先设计、无缝衔接研运流程、内置对生成式 AI 和大模型训练/推理（LLM）的支持，以及 Kubernetes 原生编排能力。适用于需要从实验快速过渡到高可靠、可复现、可审计的 ML 生产环境的中大型团队。