AIでウェブサイトから構造化JSONデータを抽出する方法 Scrapfly MCP

AIがScrapflyを使用してURLから生のHTMLを取得し、その内容を指定したJSONスキーマにマッピングします。スプレッドシートやデータベースですぐに使える、クリーンで予測可能なデータが得られます。

1. 01

   ページの取得

   エージェントが対象のウェブサイトにアクセスし、ボット対策が施されているサイトであっても、HTMLコンテンツ全体を取得します。

   web_scrape
2. 02

   モデルの選択

   AIが利用可能な抽出ツールを確認し、提供されたサイトの複雑さに最適なモデルを決定します。

   list_extraction_models
3. 03

   コンテンツの解析

   エージェントが指定された特定のフィールドを特定し、複雑なマークアップの中から必要な情報を抜き出します。

   ai_data_extraction
4. 04

   JSON形式への変換

   最終ステップとして、特定された情報を有効なJSONオブジェクトへと変換します。

   ai_data_extraction

Scrapfly Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_ljGoukAFL719yEB20GwskucKcjiXnKMhir5d1j7S/mcpコピー

Claude Desktop

以下の手順で数秒で接続できます。

1. 1In Claude Desktop, open Settings → Connectors.
2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
3. 3Click Add and start a new chat — Scrapfly capabilities are ready to use.

設定 · claude_desktop_config.jsonコピー

{
  "mcpServers": {
    "scrapfly-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_ljGoukAFL719yEB20GwskucKcjiXnKMhir5d1j7S/mcp"
    }
  }
}

• Claude
• ChatGPT
• Cursor
• VS Code
• Windsurf
• Claude Code
• JetBrains
• Cline

一度接続するだけで、AIクライアントとScrapflyのツールが連携します。認証情報はVinkius側で暗号化され、安全に管理されます。

• 01

  AIはCAPTCHAを自動的に回避できますか？

  スクレイピングツールが保護されたサイトへのアクセスを強力にサポートしますが、AI自体がCAPTCHAを解読するわけではありません。

• 02

  AIがウェブサイトの内容を書き換えることはありますか？

  いいえ。AIはデータの読み取りと抽出のみを行います。公開されているウェブサイトの内容を変更、削除、または操作することはできません。

• 03

  抽出に使用するAIモデルを選択できますか？

  はい。利用可能なツールを使用して、タスクに最適な抽出モデルを確認し、選択することができます。

• 04

  AIはデータを私のコンピュータに保存しますか？

  いいえ。AIはJSONデータをチャットインターフェース上に直接表示します。データをローカルファイルやデータベースに保存するには、手動でコピーする必要があります。

• 05

  ウェブサイトのレイアウトが変わった場合はどうなりますか？

  レイアウトが大幅に変更された場合、抽出に失敗したり、フィールドが空になったりすることがあります。その際は、プロンプトやスキーマを更新する必要があります。

• Scrapflyについてさらに詳しく知りたいですか？ Scrapfly Connectorの全機能を見る