Web Scraper MCPを使ってAIでウェブの構造化データを取得する方法

エージェントがこのMCPを使用して、ウェブのエンドポイントから生のJSONまたはJSON-LDを取得します。これにより、整理されていないHTMLではなく、すぐに利用可能な機械読み取り可能なデータが得られます。

1. 01

   エンドポイントの特定

   エージェントが対象となる特定のURLを特定し、リクエストの準備を行います。

   read_json
2. 02

   生のJSONを取得

   AIがウェブのエンドポイントから直接JSONデータを取得します。

   read_json
3. 03

   スキーマの抽出

   エージェントがページ内に埋め込まれたJSON-LDを探し、構造化されたメタデータを抽出します。

   extract_jsonld
4. 04

   利用形式への整形

   AIが取得したデータを、現在の会話の流れに最適な形式に整理します。

   read_jsonextract_jsonld

Web Scraper Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_YmTaAx3VdeRzHJqckaOgMTVnBzECnxTL8z7QeMgb/mcpコピー

Claude Desktop

以下の手順で数秒で接続できます。

1. 1In Claude Desktop, open Settings → Connectors.
2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
3. 3Click Add and start a new chat — Web Scraper capabilities are ready to use.

設定 · claude_desktop_config.jsonコピー

{
  "mcpServers": {
    "web-scraper-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_YmTaAx3VdeRzHJqckaOgMTVnBzECnxTL8z7QeMgb/mcp"
    }
  }
}

• Claude
• ChatGPT
• Cursor
• VS Code
• Windsurf
• Claude Code
• JetBrains
• Cline

リンクを一つ接続するだけでMCPが連携します。認証情報は当社のシステム内で暗号化され、詳細な手順はコネクタのページで確認できます。

• 01

  AIはどんなウェブサイトでもスクレイピングできますか？

  いいえ。エンドポイントを通じてアクセス可能なJSONまたはJSON-LDデータを提供しているサイトのみが対象です。

• 02

  AIがウェブサイト上のデータを書き換えることはありますか？

  いいえ。このMCPはデータの読み取りのみを行います。対象サイトのデータを変更または削除することはできません。

• 03

  一般的なHTMLページでも動作しますか？

  いいえ。このツールはJSONやJSON-LDなどの構造化データに特化しています。汎用的なHTMLスクレイパーではありません。

• 04

  Claudeで使用できますか？

  はい。MCPを接続すれば、ClaudeやCursorなど、MCPに対応しているあらゆるクライアントで使用可能です。

• 05

  AIがデータをファイルとして保存してくれますか？

  いいえ。AIはデータをチャットのコンテキスト内に取得します。データの保存やエクスポートは、ご自身で行う必要があります。

• Web Scraperについてさらに質問がありますか？ Web Scraper MCPの全機能を見る