spark-ai-copilot

Spark AI Copilot 是一个面向数据工程师的轻量级 AI 辅助工具，用于诊断 Spark 作业性能问题、管理数仓资产及优化 SQL 资源消耗。核心功能包括自动识别 7 类 Spark 数据倾斜场景并提供可落地的 SQL 改写与参数调优建议；基于本地知识库与图谱增强的数仓口径查询与血缘探查；以及结合计算指标的 SQL 降本评审。采用 Next.js 14 + TypeScript 构建，通过流式 Chat API 对接本地推理逻辑，知识库以 JSON/Markdown 静态文件形式托管。适用于 Spark 数仓运维、ETL 作业调优及成本敏感型大数据平台日常巡检场景。