🕷️
Decodo Scraper
クローラー ブラウザ・自動化インストールコマンド
npx clawhub@latest install decodo
インストール手順
1
環境確認
Node.js 22以上とOpenClawがインストール済みであることを確認してください。ターミナルでopenclaw --versionを実行して確認できます。
2
インストール実行
上記のインストールコマンドをターミナルで実行します。ClawHubが自動的にDecodo Scraperを~/.openclaw/skills/ディレクトリにダウンロード・インストールします。
3
インストール確認
openclaw skills listを実行してインストール済みスキル一覧を確認し、Decodo Scraperが表示されていることを確かめてください。
4
パラメータ設定（任意）
下記の紹介にある設定手順に従い、~/.config/openclaw/openclaw.json5にスキルの設定項目を追加してください。
手動インストール方法：Skillフォルダを
~/.openclaw/skills/またはプロジェクトのskills/ディレクトリにコピーしてください。フォルダ内にSKILL.mdファイルが必要です。
アンチスクレイピング回避
IPローテーション
構造化抽出
詳細紹介
Decodo Scraper はエンタープライズグレードのウェブコンテンツスクレイピングスキルで、Decodo Web Scraping API を通じて高信頼性のデータ収集を実現します。
コア機能
- スマートスクレイピング：JavaScript レンダリング、CAPTCHA、Cloudflare 防護を自動処理
- IP ローテーション：グローバルプロキシプールで IP を自動ローテーションし、ブロックを回避
- 構造化抽出：ウェブコンテンツを構造化データ（JSON、CSV）に変換
- バッチ収集：URL リストの並列スクレイピングに対応
- キャッシュ管理：取得済みコンテンツをスマートキャッシュし、重複リクエストを削減
設定方法
{
skills: {
decodo: {
apiKey: "xxx",
outputFormat: "markdown",
javascript: true,
proxy: "residential"
}
}
}
使用シーン
- 複雑なアンチスクレイピング防護のあるサイトからのデータ収集
- EC サイトの価格モニタリングと競合分析
- 検索結果ページのコンテンツの一括取得
- ニュースサイトのコンテンツ集約とアーカイブ