
webpull
Dhravya
instantly pull a website down as a clean directory locally
AI 简介
webpull 是一个用于将公共文档网站快速下载并转换为本地 Markdown 文件的工具。其核心功能包括通过多种方式发现页面、并行抓取网页内容、使用无头 Chromium 渲染单页应用、智能地将 HTML 转换为带有元数据的 Markdown 文件,并保持原始 URL 结构。该工具利用了 TypeScript 编写,支持自定义输出目录和最大抓取页面数等选项,非常适合需要离线访问在线文档或进行进一步处理(如生成静态站点)的场景。
TypeScript
MIT License218
Stars
19
Forks
196
Watchers
1
Issues
Star 增长
今日0
近 7 天+1
近 30 天+13
综合评分45.7
默认分支main