• CARTE
  • DONNÉES
  • AUDIT
  • HUMAIN

Analyser tout un site web avec votre IA et Spider

Connectez Spider à votre agent pour qu'il parcourt un domaine en suivant les liens internes. Une fois connecté, votre agent peut cartographier l'intégralité de la structure du site.

Demandez à l'IA à propos de cette page

Réponse rapide

Comment faire pour que mon IA analyse un site entier ?

Utilisez le connecteur Spider pour permettre à votre agent de suivre les liens internes à partir d'une URL de départ. Cela permet de créer une carte complète du contenu et de la structure du site. Vous trouverez les plans de site et les analyses de données ci-dessous.

Les résultats obtenus

Où arrivent les données

L'agent traite le domaine et organise ses découvertes selon ces formats spécifiques.

CARTE

Plans de structure

L'agent suit chaque lien pour construire une carte structurelle du domaine. Vous visualisez clairement comment les pages sont reliées.

DONNÉES

Contenu extrait

L'agent extrait le texte de chaque page découverte. Ces informations sont directement intégrées au contexte de votre chat.

AUDIT

Analyse des lacunes

En parcourant tout le site, votre agent identifie les informations manquantes et souligne les points faibles du contenu.

HUMAIN

Révision manuelle

L'agent signale les pages spécifiques qui nécessitent votre attention. Vous décidez quel contenu doit être traité par un humain.

Le flux

Ce que fait votre IA une fois l'URL reçue.

L'agent gère la navigation et la collecte de données sur l'ensemble du domaine.

  1. Découverte

    L'agent part de l'URL fournie et identifie tous les liens internes de la page.

    spider_crawl

  2. Navigation

    Il parcourt le site en suivant ces liens, accédant à chaque sous-page du domaine.

    spider_crawl

  3. Cartographie

    L'agent construit une carte logique de la hiérarchie et de la structure des liens du site.

    spider_crawl

  4. Synthèse

    L'agent compile les données collectées dans un format utilisable directement dans votre chat.

    spider_crawl

Essayez

Copiez ces commandes pour démarrer.

Utilisez ces prompts pour lancer un crawl immédiatement.

Points de départ

Remplacez les adresses web par celles que vous souhaitez analyser.

Spider Connector

Tout est prêt. Choisissez votre client MCP et suivez les instructions de configuration.

Lien du connecteurhttps://edge.vinkius.com/vk_preview_HkRQy811uAcIjdwDKzB8QPk0TYPSWj05dtnMKf3x/mcp

Claude Desktop

Suivez les étapes ci-dessous pour vous connecter en quelques secondes.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Spider capabilities are ready to use.
Configuration · claude_desktop_config.jsonCopier
{
  "mcpServers": {
    "spider-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_HkRQy811uAcIjdwDKzB8QPk0TYPSWj05dtnMKf3x/mcp"
    }
  }
}
Copiez dans le chat04

  • Crawl https://example.com et donne-moi la liste de toutes les sections principales.

  • Cartographie toute la structure de https://docs.example.com pour que je puisse voir la hiérarchie.

  • Suis tous les liens internes de https://blog.example.com et résume les sujets abordés.

  • Crawl https://shop.example.com pour trouver toutes les catégories et sous-catégories de produits.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Commencez ici

Connectez Spider une fois, puis posez vos questions.

Cliquez sur le lien pour connecter le MCP à votre client. Vos identifiants restent cryptés et vous pouvez lancer le crawl immédiatement.

Connecter Spider à votre IA

FAQ

Fonctionnement du crawler

  • 01

    L'IA peut-elle crawler des sites externes ?

    Non. L'outil suit uniquement les liens internes au domaine que vous fournissez.

  • 02

    L'IA va-t-elle modifier mon site web ?

    Non. Le crawler se contente de lire et de suivre les liens. Il ne peut ni éditer ni supprimer de contenu sur votre site.

  • 03

    Jusqu'où le crawl va-t-il ?

    L'agent suit tous les liens internes qu'il trouve, cartographiant ainsi tout le domaine accessible.

  • 04

    L'IA peut-elle ajouter de nouvelles pages sur mon site ?

    Non. Ce MCP sert à lire et à cartographier le contenu, pas à le créer ou à le publier.

  • 05

    L'IA stocke-t-elle les données de mon site ?

    L'IA utilise les données pour répondre à vos questions durant la session actuelle. Elle n'enregistre pas les données de votre site dans une base de données permanente.

  • D'autres questions sur Spider ? Voir toutes les capacités du connecteur Spider

Connectez Spider à Claude, Cursor, ChatGPT et d'autres