🌐
Fetch
网页抓取 搜索与效率工具安装命令
npx clawhub@latest install fetch
安装说明
1
确认环境
确保已安装 Node.js 22+ 和 OpenClaw。在终端运行 openclaw --version 确认 OpenClaw 正常工作。
2
执行安装
在终端中运行上方安装命令,ClawHub 会自动下载并安装 Fetch 到 ~/.openclaw/skills/ 目录。
3
验证安装
运行 openclaw skills list 查看已安装技能列表,确认 Fetch 已出现在列表中。
4
配置参数(可选)
根据下方介绍中的配置说明,在 ~/.config/openclaw/openclaw.json5 中添加技能的配置项。
手动安装方式:将 Skill 文件夹复制到
~/.openclaw/skills/ 或项目目录下的 skills/ 文件夹,确保文件夹中包含 SKILL.md 文件。
抓取网页并转换为Markdown
支持HTML/JSON/纯文本格式
可配置请求头和代理
详细介绍
Fetch MCP Server 是 Anthropic 官方提供的 MCP 参考实现,让 AI 能够获取网页内容并转换为适合大语言模型处理的格式。
核心功能
- 网页抓取:获取任意 URL 的网页内容,自动提取正文并去除无关元素
- 格式转换:将 HTML 内容转换为 Markdown 格式,也支持返回原始 HTML、JSON 或纯文本
- 灵活配置:支持自定义 User-Agent、请求头、代理设置和内容长度限制
配置说明
{
"mcpServers": {
"fetch": {
"command": "uvx",
"args": ["mcp-server-fetch"],
"env": {
// 可选:设置代理
"HTTP_PROXY": "http://proxy:8080"
}
}
}
}
使用场景
- 让 AI 读取网页文档并回答相关问题
- 抓取 API 文档内容作为编码参考
- 获取在线数据表格进行分析
- 将网页内容转换为结构化文档