• 実行
  • 監視
  • データ
  • 確認

AIを使ってウェブサイトのデータをオンデマンドで抽出する方法

Browse AIをエージェントに接続すれば、あらゆるウェブサイトを構造化データのソースに変えられます。接続後はURLを伝えるだけで、エージェントがデータの抽出をすべて代行します。

このページについてAIに聞く

すぐに答え

AIでどのようにスクレイピングを行うのですか?

エージェントにURLと、特定のロボットを実行するよう指示を出すだけです。エージェントがスクレイピングを開始し、データが準備できるまで監視します。複雑なHTMLではなく、整理された構造化データを受け取ることができます。

得られる結果

データの活用フロー

エージェントが抽出の全プロセスを管理します。

実行

ロボットの即時起動

エージェントがタスクに最適なロボットを選択し、すぐに実行を開始します。ブラウザを開いたり、メニューをクリックしたりする必要はありません。

監視

ステータスのリアルタイム追跡

エージェントがバックグラウンドでスクレイピングの進捗を監視します。データの抽出完了や、実行エラーの有無を正確に把握します。

データ

構造化された出力

抽出された情報は、きれいに整理されたデータとして届きます。そのまま次のプロンプトに利用したり、スプレッドシートに流し込んだりできます。

確認

人間による管理

ロボットが失敗したり、サイトのレイアウトが変わったりした場合はエージェントが通知します。ロボットの設定を手動で調整するかどうかは、あなたが判断できます。

ワークフロー

スクレイピング要求時にAIが行うこと

エージェントは、チャットインターフェースとスクレイピングロボットの橋渡し役となります。

  1. ロボットの特定

    エージェントは、設定済みのスクレイピングロボットのリストから、リクエストに合致するものを探します。

    list_robots
  2. 抽出の開始

    適切なツールが見つかると、エージェントは指定されたURLに対してスクレイピングプロセスを開始します。

    trigger_robot_run
  3. 進捗の追跡

    エージェントはジョブの状態を確認し、データの収集が継続中か、あるいは完了したかをチェックします。

    get_run_status
  4. 結果の提供

    実行が完了すると、エージェントはステータスを確定させ、最終的なデータにアクセスできるようにします。

    get_run_status

試してみる

以下のプロンプトをコピーして開始してください。

これらのプロンプトを使って、最初のスクレイピングを実行しましょう。

出発点

括弧内のテキストを、実際のウェブサイト名やロボット名に書き換えてください。

Browse AI Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_8ifM296qnDSBuyeexdFi1mrBAqngOMvNnCKhA6mx/mcp

Claude Desktop

以下の手順で数秒で接続できます。

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Browse AI capabilities are ready to use.
設定 · claude_desktop_config.jsonコピー
{
  "mcpServers": {
    "browse-ai-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_8ifM296qnDSBuyeexdFi1mrBAqngOMvNnCKhA6mx/mcp"
    }
  }
}
チャットにコピー04
  • https://www.amazon.com/dp/B08N5WRWJ5 でAmazon商品スクレイパーを実行して

  • 前回のウェブスクレイピングの実行ステータスを確認して、完了したか教えて

  • 設定済みのスクレイピングロボットを一覧表示して

  • 不動産ロボットを使って、このURLから最新の物件情報を抽出して: https://www.zillow.com

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

ここから始める

Browse AIを一度接続すれば、あとは指示するだけです。

リンクをクリックして接続を承認してください。認証情報は暗号化されて保護されます。接続後は、お使いのAIクライアントからすぐにスクレイピングを開始できます。

Browse AIをAIに接続する

FAQ

スクレイパーの動作について

  • 01

    AIが新しいスクレイピングロボットを作成することはできますか?

    いいえ。あらかじめBrowse AI側でロボットを作成し、設定しておく必要があります。AIができるのは、作成済みのロボットを起動したり、リストを表示したりすることだけです。

  • 02

    AIがウェブサイトのレイアウトを変更することはできますか?

    いいえ。AIは既存のレイアウトからデータを抽出するだけです。ウェブサイトの外観や機能を変更することはできません。

  • 03

    スクレイピングが失敗した場合はどうすればいいですか?

    エージェントがステータスを確認します。実行に失敗した場合は、エージェントがチャットを通じてその旨を報告します。

  • 04

    どんなウェブサイトでもスクレイピングできますか?

    Browse AIのアカウントに、対象サイト用のロボットが設定されていれば、そのサイトのスクレイピングが可能です。

  • 05

    AIは抽出したデータを保存しますか?

    AIは質問に答えるためにコネクター経由でデータにアクセスしますが、データの主な保存先はBrowse AIとなります。

  • Browse AIについてさらに詳しく知りたいですか? Connectorのページで回答しています。 Browse AI Connectorの全機能を見る

『Browse AI』を Claude、Cursor、ChatGPT などに接続