AIでウェブサイトの構造をマップ化する方法

AIがFirecrawlを使用してドメインをクロールし、すべての内部URLを特定します。これにより、ページがどのように整理され、リンクされているかが明確になります。サイト全体のアーキテクチャを構造化されたリストとして取得可能です。

1. 01

   ドメインのクロール

   指定されたURLから開始し、すべての内部リンクを辿ることで、ページの漏れを防ぎます。

   map_website_structure
2. 02

   リンクの抽出

   発見した各ページのHTMLから、特定のURL文字列を抽出します。

   map_website_structure
3. 03

   マップの構築

   抽出したリンクを、フォルダパスやサブディレクトリに基づいて論理的なツリー構造に整理します。

   map_website_structure
4. 04

   構造の要約

   サイトの深さや広がりについて、全体像を要約して提示します。

   map_website_structure

Firecrawl Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_VUpOJRFVTRGTwbzAMeVqIv4t7KoCrITMFS6MmDGP/mcpコピー

Claude Desktop

以下の手順で数秒で接続できます。

1. 1In Claude Desktop, open Settings → Connectors.
2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
3. 3Click Add and start a new chat — Firecrawl capabilities are ready to use.

設定 · claude_desktop_config.jsonコピー

{
  "mcpServers": {
    "firecrawl-extended-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_VUpOJRFVTRGTwbzAMeVqIv4t7KoCrITMFS6MmDGP/mcp"
    }
  }
}

• Claude
• ChatGPT
• Cursor
• VS Code
• Windsurf
• Claude Code
• JetBrains
• Cline

FirecrawlアカウントをVinkiusに連携させるだけです。認証情報は暗号化して保持されるため、すぐにAIによるサイトクロールを開始できます。

• 01

  AIは外部サイトをクロールできますか？

  いいえ。このツールは、指定されたドメイン内の内部URLの特定とマップ作成のみを行います。

• 02

  AIがウェブサイトの構造を変更することはありませんか？

  いいえ。AIは既存の構造を読み取り、マップ化するだけです。サイト内のファイルやページを移動、削除、編集することはできません。

• 03

  クロールの深さはどの程度ですか？

  AIは発見したすべての内部リンクを辿りますが、指定されたドメインの範囲内に留まります。

• 04

  作成したマップをCSVで書き出せますか？

  AIはURLリストをコピー可能なCSV形式のテキストとして出力できますが、直接ダウンロード可能なファイルを作成することはできません。

• 05

  パスワード保護されたサイトでも動作しますか？

  いいえ。このツールは、指定されたURLからパブリックにアクセス可能なページのみにアクセスできます。

• Firecrawlについてさらに詳しく知りたいですか？ Firecrawl Connectorの全機能を見る