crawlie

crawlie 是一款面向技术 SEO 与地域化（GEO）优化的开源网络爬虫工具，专为网站健康诊断与搜索引擎友好性评估设计。它支持本地运行，提供 CLI 命令行、MCP 服务接口及桌面应用，可自动检测断链、重定向、元数据缺失、结构化数据问题等 40+ 类技术 SEO 和生成式引擎（如 AI 搜索）适配项，并附带通俗易懂的修复指引。适用于 SEO 工程师、内容运营、开发者及自动化代理（agents）在网站上线前审查、定期巡检或集成到 CI/CD 流程中。