Dhravya

webpull

Dhravya

instantly pull a website down as a clean directory locally

AI 简介

webpull 是一个用于将公共文档网站快速下载并转换为本地 Markdown 文件的工具。其核心功能包括通过多种方式发现页面、并行抓取网页内容、使用无头 Chromium 渲染单页应用、智能地将 HTML 转换为带有元数据的 Markdown 文件,并保持原始 URL 结构。该工具利用了 TypeScript 编写,支持自定义输出目录和最大抓取页面数等选项,非常适合需要离线访问在线文档或进行进一步处理(如生成静态站点)的场景。

TypeScript
MIT License
218
Stars
19
Forks
196
Watchers
1
Issues

Star 增长

今日0
近 7 天+1
近 30 天+13
综合评分45.7
默认分支main