grubcrawler

具备反检测、视觉回退和点对点网状网络的智能体网络爬虫。 端点 · 网状网络 · 反检测 · Ghost Protocol · 实时流 · MCP 工具 · 快速开始 · 基准测试 · 架构 全栈网络爬取引擎，具备 JavaScript 渲染、Camoufox 反检测浏览器、按请求代理路由和自主智能体循环。通过原生 Rust 提取引擎将页面转换为干净的 markdown。当标准爬取被 Cloudflare、CAPTCHA 或 JavaScript 墙阻止时，Ghost Protocol 会截取屏幕截图并通过视觉 AI（Claude、GPT-4o 或 Ollama）提取内容。支持在单个会话中...