文档抓取服务是 wolfyy970 开发的 MCP 服务器:一个基于Bun的模型上下文协议(MCP)服务器,用于抓取和爬取文档页面,支持静态抓取和可选Puppeteer渲染。接入两步走:见官方 README,再把下文配置粘进客户端 mcpServers 段重启即可。
它是干什么的
先把话说清楚:文档抓取服务不是又一个大模型,而是一个标准的 MCP 服务器。装好之后,你的 AI 客户端多出一组新工具,模型可以按需调用。一个基于Bun的模型上下文协议(MCP)服务器,用于抓取和爬取文档页面,支持静态抓取和可选Puppeteer渲染
| 项目 | 数据 |
|---|---|
| 开发者 | wolfyy970 |
| Star | 7 |
| 收藏 | 0 |
| 质量等级 | A |
| 平台分类 | 开发效率 |
| 部署标签 | 本地部署、文档抓取、网页爬虫 |
| 仓库 | docs-fetch-mcp |
核心能力
- Fast static fetch path with axios
- Optional Puppeteer rendering for client-rendered or thin pages
- Markdown extraction with headings, lists, code blocks, tables, blockquotes, and links
- Real crawl depth semantics:
- Crawl scoping by same origin and optional pathPrefix
- Partial results with explicit per-page failures
- Runtime argument validation shared with the advertised tool schema
适合谁用
两类人最该装:一是天天在 Claude Desktop、Cursor 里写代码,想让 AI 直接帮你跑命令、改仓库、读文件的人;二是已经在用 MCP 生态、想按需拼装能力的折腾型用户。反过来,如果你只需要偶尔手动用它背后的服务,直接开网页就行,不必上 MCP。
完整安装配置步骤
动手前确认环境齐了:
- 一个支持 MCP 的客户端:Claude Desktop、Cursor、Cline、Windsurf 任选其一。
第 1 步:安装文档抓取服务
安装命令随版本更新较频繁,以 官方 README 顶部 Installation 一节为准。
第 2 步:按官方说明写入配置
文档抓取服务的 README 没给标准 mcpServers JSON,配置入口见 官方文档 的 Usage/Configuration 章节。原则不变:客户端配置文件里加 mcpServers 条目,重启生效。
第 3 步:重启并验证
完全退出客户端再打开(是托盘里真正退出,不是关窗口)。工具列表里出现文档抓取服务的工具即接入成功;调用报错的话,先查下面的坑点清单。
容易踩的坑
- 改了配置没反应:客户端只重启了窗口没退进程。macOS 按 Cmd+Q,Windows 检查托盘。
- JSON 报错打不开客户端:多半是最后多个逗号。粘进任何 JSON 校验器里查一遍再保存。
常见问题
文档抓取服务免费吗?
代码在 GitHub(https://github.com/wolfyy970/docs-fetch-mcp)开放获取。个别功能依赖第三方服务时费用另算,看仓库 LICENSE 和定价页。
文档抓取服务能用在 Cursor / Cline 吗?
能。MCP 是通用协议,同一份 mcpServers 配置在这些客户端之间基本通用,只是配置文件位置不同。
需要外网或代理吗?
拉包和调用官方 API 需要能访问 GitHub 与对应服务域名,内网环境先测 git ls-remote 和接口连通性。
