acon

Acon 是一个为任何网页抓取工具提供智能层的项目，旨在与Scrapling、Playwright或httpx等工具配合使用，以实现更高效的爬虫。其核心功能包括自动映射网站结构，通过Topology Orchestrator对站点进行分类和采样，并在完全理解站点架构后停止不必要的请求，从而大幅减少数据抓取过程中的资源消耗。根据实际测试，在多个不同类型的网站上，Acon能够显著降低页面请求量（最高可达97%），节省大量时间。适用于需要高效精准地从复杂或大规模网站中提取信息的场景，如价格监控、电子商务智能分析等领域。