网页内容抓取服务器是 modelcontextprotocol 开发的 MCP 服务器:一个模型上下文协议服务器,提供网页内容抓取功能,将HTML转换为Markdown以便于处理。接入两步走:pip install mcp-server-fetch,再把下文配置粘进客户端 mcpServers 段重启即可。
它是干什么的
一句话定位:一个模型上下文协议服务器,提供网页内容抓取功能,将HTML转换为Markdown以便于处理 它以 MCP 服务器形式存在,AI 客户端连上它就能直接调用这些能力。
| 项目 | 数据 |
|---|---|
| 开发者 | modelcontextprotocol |
| Star | 68,302 |
| 收藏 | 221 |
| 质量等级 | A |
| 平台分类 | 开发效率 |
| 部署标签 | 本地部署、可托管、网页抓取 |
| 仓库 | servers |
核心能力
- fetch - Fetches a URL from the internet and extracts its contents as markdown.
适合谁用
两类人最该装:一是天天在 Claude Desktop、Cursor 里写代码,想让 AI 直接帮你跑命令、改仓库、读文件的人;二是已经在用 MCP 生态、想按需拼装能力的折腾型用户。反过来,如果你只需要偶尔手动用它背后的服务,直接开网页就行,不必上 MCP。
完整安装配置步骤
动手前确认环境齐了:
uv(Python 3.10+):pip install uv。装完跑一下uvx --version确认可用。- Python 3.10+ 与 pip(个别仓库要求 3.11+,以 README 为准)。
- Node.js 18 或更高版本(旧版 npx 跑不动一部分新版 MCP 包)。
- 一个支持 MCP 的客户端:Claude Desktop、Cursor、Cline、Windsurf 任选其一。
第 1 步:安装网页内容抓取服务器
终端里任选一条(不同安装方式,效果等价):
pip install mcp-server-fetch
npx @modelcontextprotocol/inspector uvx mcp-server-fetch
npx @modelcontextprotocol/inspector uv run mcp-server-fetch第一次用 uvx 启动会现场拉依赖,慢是正常的,别急着 Ctrl+C。
第 2 步:写入 MCP 配置
Claude Desktop 的配置文件路径:macOS 在 ~/Library/Application Support/Claude/claude_desktop_config.json,Windows 在 %APPDATA%\Claude\claude_desktop_config.json;Cursor 则是 ~/.cursor/mcp.json(或项目级 .cursor/mcp.json)。把下面这段并进 mcpServers 段(注意是并进外层大括号,别整个文件替换):
方式 1(任选一份):
{
"fetch": {
"command": "uvx",
"args": [
"mcp-server-fetch"
]
}
}方式 2(任选一份):
{
"fetch": {
"command": "docker",
"args": [
"run",
"-i",
"--rm",
"mcp/fetch"
]
}
}方式 3(pip 安装走这份):
{
"fetch": {
"command": "python",
"args": [
"-m",
"mcp_server_fetch"
]
}
}方式 4(任选一份):
{
"fetch": {
"command": "uvx",
"args": [
"mcp-server-fetch"
],
"env": {
"PYTHONIOENCODING": "utf-8"
}
}
}方式 5(pip 安装走这份):
{
"fetch": {
"command": "python",
"args": [
"-m",
"mcp_server_fetch"
],
"env": {
"PYTHONIOENCODING": "utf-8"
}
}
}改完保存。Windows 用户注意:如果 command 写 npx 起不来,换成 npx.cmd 再试。
第 3 步:重启并验证
完全退出客户端再打开(是托盘里真正退出,不是关窗口)。工具列表里出现网页内容抓取服务器的工具即接入成功;调用报错的话,先查下面的坑点清单。
容易踩的坑
- 改了配置没反应:客户端只重启了窗口没退进程。macOS 按 Cmd+Q,Windows 检查托盘。
- JSON 报错打不开客户端:多半是最后多个逗号。粘进任何 JSON 校验器里查一遍再保存。
- 走错了仓库:这个项目的文档在 monorepo 子目录里,Issue 和示例要看子目录的 README,别看主仓库那份。
- 首次调用超时:
uvx冷启动要装依赖,第一次可能超过客户端默认超时。再调一次,通常第二次就快了。
常见问题
网页内容抓取服务器免费吗?
代码在 GitHub(https://github.com/modelcontextprotocol/servers/tree/main/src/fetch)开放获取。个别功能依赖第三方服务时费用另算,看仓库 LICENSE 和定价页。
网页内容抓取服务器能用在 Cursor / Cline 吗?
能。MCP 是通用协议,同一份 mcpServers 配置在这些客户端之间基本通用,只是配置文件位置不同。
需要外网或代理吗?
拉包和调用官方 API 需要能访问 GitHub 与对应服务域名,内网环境先测 git ls-remote 和接口连通性。
