Scraperr

Scraperr 是一个强大的自托管网页抓取解决方案。它支持XPath精准定位页面元素、队列管理多个抓取任务、域名爬虫功能以抓取同一域名下的所有页面，以及添加自定义请求头等功能。此外，Scraperr还提供了媒体下载、结果可视化展示和多种格式的数据导出选项，并且可以通过不同渠道发送任务完成通知。此项目使用TypeScript编写，基于Docker、Helm等技术栈部署，适用于需要从网站上自动提取信息而不希望手动编写代码的场景。无论是个人用户还是企业级应用，只要遵守相关网站的服务条款及法律规范，都可以利用Scraperr来简化数据采集流程。