🌐
Fetch
웹 크롤링 검색 및 생산성설치 명령어
npx clawhub@latest install fetch
설치 안내
1
환경 확인
Node.js 22 이상과 OpenClaw가 설치되어 있는지 확인하세요. 터미널에서 openclaw --version을 실행하여 확인할 수 있습니다.
2
설치 실행
위의 설치 명령어를 터미널에서 실행하세요. ClawHub가 자동으로 Fetch을(를) ~/.openclaw/skills/ 디렉토리에 다운로드하고 설치합니다.
3
설치 확인
openclaw skills list를 실행하여 설치된 스킬 목록을 확인하고, Fetch이(가) 목록에 표시되는지 확인하세요.
4
매개변수 설정 (선택사항)
아래 소개의 설정 안내에 따라 ~/.config/openclaw/openclaw.json5에 스킬 설정 항목을 추가하세요.
수동 설치 방법: Skill 폴더를
~/.openclaw/skills/ 또는 프로젝트의 skills/ 디렉토리에 복사하세요. 폴더에 SKILL.md 파일이 포함되어 있어야 합니다.
웹페이지 크롤링 후 Markdown 변환
HTML/JSON/일반 텍스트 형식 지원
요청 헤더 및 프록시 설정 가능
상세 소개
Fetch MCP Server는 Anthropic이 공식 제공하는 MCP 레퍼런스 구현으로, AI가 웹페이지 콘텐츠를 가져와 대규모 언어 모델 처리에 적합한 형식으로 변환할 수 있게 해줍니다.
핵심 기능
- 웹페이지 크롤링: 임의 URL의 웹페이지 콘텐츠를 가져오고, 본문을 자동 추출하며 불필요한 요소를 제거
- 형식 변환: HTML 콘텐츠를 Markdown 형식으로 변환하며, 원본 HTML, JSON 또는 일반 텍스트 반환도 지원
- 유연한 설정: 사용자 정의 User-Agent, 요청 헤더, 프록시 설정 및 콘텐츠 길이 제한 지원
설정 방법
{
"mcpServers": {
"fetch": {
"command": "uvx",
"args": ["mcp-server-fetch"],
"env": {
// 선택사항: 프록시 설정
"HTTP_PROXY": "http://proxy:8080"
}
}
}
}
사용 시나리오
- AI가 웹 문서를 읽고 관련 질문에 답변
- API 문서 콘텐츠를 크롤링하여 코딩 참고 자료로 활용
- 온라인 데이터 테이블을 가져와 분석
- 웹페이지 콘텐츠를 구조화된 문서로 변환