trawl

TRAWL 是一个自托管的 Web 爬虫引擎，专为绕过现代反爬机制设计，可原生处理 Cloudflare（含 Turnstile）、reCAPTCHA、hCaptcha 和 GeeTest 等 JS 挑战与验证码。核心采用 Camoufox（定制化 Firefox）实现高保真浏览器指纹伪装，支持四层自适应执行策略（HTTP → 缓存会话 → 本地挑战求解 → 住宅代理），结果缓存于 Redis，重复请求响应快至约 500ms。完全兼容 FlareSolverr v2 API，开箱即用集成 Prowlarr、Jackett、Radarr 等 *arr 生态工具。适用于需要稳定、隐私优先、无外部依赖的私有化爬取场景，如媒体索引、内容聚合与自动化数据采集。