0xMassi

webclaw

0xMassi

Fast, local-first web content extraction for LLMs. Scrape, crawl, extract structured data — all from Rust. CLI, REST API, and MCP server.

AI 简介

webclaw 是一个快速、本地优先的网页内容提取工具,专为大型语言模型设计。它能够从网页中抓取、爬取并提取结构化数据,支持生成Markdown、JSON等格式,便于AI代理和检索增强生成(RAG)管道使用。项目采用Rust编写,提供了命令行界面(CLI)、REST API及MCP服务器等多种接入方式,具有高效稳定的特点。适用于需要自动化处理网页信息并将其转换为可直接利用的数据格式的各种场景,如构建知识库、内容分析与汇总等。

Rust
GNU Affero General Public License v3.0
1.3k
Stars
150
Forks
10
Watchers
0
Issues

Star 增长

今日+24
近 7 天+66
近 30 天+195
综合评分104.54
默认分支main