AIでウェブサイトのスクレイピングとデータ抽出を自動化する方法

ターゲットとなるウェブサイトと、使用するApifyのアクターをエージェントに指示するだけです。エージェントがスクレイパーを起動し、実行完了を待ってから、得られたJSONデータを直接チャットに持ち帰ります。コードを書く必要はありません。

1. 01

   スクレイパーの起動

   指定されたURLとパラメータを使用して、エージェントが特定のアクターを実行します。

   run_actor
2. 02

   進捗の追跡

   スクレイピングが実行中か、あるいは正常に完了したかをエージェントが監視します。

   get_run
3. 03

   結果の取得

   タスクが完了すると、エージェントがデータセットから特定の項目を抽出します。

   get_dataset_items
4. 04

   同期スクレイピング

   よりシンプルで迅速なタスクの場合、エージェントはアクターを実行し、そのまま結果を待機して取得します。

   run_actor_sync

Apify Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_kyOCHu4Rvz1CsEZ7ViQMTOM5deCOQwTatWoMs4PP/mcpコピー

Claude Desktop

以下の手順で数秒で接続できます。

1. 1In Claude Desktop, open Settings → Connectors.
2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
3. 3Click Add and start a new chat — Apify capabilities are ready to use.

設定 · claude_desktop_config.jsonコピー

{
  "mcpServers": {
    "apify-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_kyOCHu4Rvz1CsEZ7ViQMTOM5deCOQwTatWoMs4PP/mcp"
    }
  }
}

• Claude
• ChatGPT
• Cursor
• VS Code
• Windsurf
• Claude Code
• JetBrains
• Cline

Vinkiusのインターフェース経由でApifyにログインし、アカウントを連携します。認証情報は暗号化され、安全に保護されます。

• 01

  AIはどんなウェブサイトでもスクレイピングできますか？

  いいえ。選択した特定のアクターが対応しているウェブサイトのみ、スクレイピングが可能です。

• 02

  AIがApifyの実行料金を自動で支払うことはありますか？

  いいえ。AIは既存のApifyアカウントとクレジットを使用します。AIが決済を行ったり、支払い設定を変更したりすることはありません。

• 03

  AIはデータをGoogle スプレッドシートに保存できますか？

  いいえ。AIができるのはApifyからデータを取得することまでです。スプレッドシートに貼り付けられる形式で出力するよう指示し、取得したデータを自分でコピーしてください。

• 04

  AIはウェブサイトのCAPTCHA（画像認証）に対応していますか？

  いいえ。サイトのナビゲーションや、サイトに備わっているアンチボット対策への対応は、すべてApifyのアクターに依存します。

• 05

  時間がかかるスクレイピングの進捗を確認できますか？

  はい。エージェントがツールを使用して、データが準備できるまで実行ステータスを確認できます。

• Apifyに関するその他の質問 Apify Connectorの全機能を見る