great_expectations

Great Expectations 是一个开源数据质量验证框架，用于对数据管道中的数据进行可重复、可解释的自动化校验。它通过定义“期望（Expectations）”——即类单元测试的数据断言（如列非空、值在指定范围内、分布相似性等）——实现数据质量的声明式管控；支持自动文档生成、结果可视化与集成CI/CD流程；底层基于Python，兼容多种数据源（SQL、Spark、Pandas等）和MLOps平台。适用于数据工程、分析与机器学习团队在ETL/ELT流水线、特征工程、模型监控等场景中保障数据可信度与合规性。