AIでウェブページをMarkdownに変換する方法｜ScrapingAnt MCP

AIがScrapingAntを使用してページを取得し、不要なHTMLを除去します。RAGやナレッジベースですぐに使える、構造化されたクリーンなMarkdownが得られます。仕組みは以下の通りです。

1. 01

   HTMLの取得

   エージェントが対象のURLにアクセスし、ページのソース全体を取得します。

   scrape_to_markdown
2. 02

   不要な要素の除去

   テキストの邪魔になるスクリプト、スタイル、ナビゲーション要素をツールが取り除きます。

   scrape_to_markdown
3. 03

   Markdownへの変換

   HTML構造が、クリーンなMarkdown構文へと書き換えられます。

   scrape_to_markdown
4. 04

   テキストの出力

   最終的なMarkdownがチャットを通じてエージェントから提供されます。

   scrape_to_markdown

ScrapingAnt Connector

準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。

コネクタリンクhttps://edge.vinkius.com/vk_preview_33Dot1d9KwKHOM5nwGJBcqvtDcVz7zuJ1ZYiAUS8/mcpコピー

Claude Desktop

以下の手順で数秒で接続できます。

1. 1In Claude Desktop, open Settings → Connectors.
2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
3. 3Click Add and start a new chat — ScrapingAnt capabilities are ready to use.

設定 · claude_desktop_config.jsonコピー

{
  "mcpServers": {
    "scrapingant-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_33Dot1d9KwKHOM5nwGJBcqvtDcVz7zuJ1ZYiAUS8/mcp"
    }
  }
}

• Claude
• ChatGPT
• Cursor
• VS Code
• Windsurf
• Claude Code
• JetBrains
• Cline

一度クリックするだけでMCPをクライアントに接続できます。ログイン情報は暗号化され、すぐにツールを使用できます。

• 01

  AIはウェブサイトの内容を書き換えることはできますか？

  いいえ。このツールはページの読み取りとMarkdownへの変換のみを行います。元のサイトを修正することはできません。

• 02

  ログインが必要なサイトでも動作しますか？

  いいえ。このツールはURLを通じて公開されているウェブページにアクセスするためのものです。

• 03

  ページ内の画像はダウンロードされますか？

  いいえ。テキストと構造要素をMarkdownに変換しますが、画像ファイル自体をダウンロードすることはありません。

• 04

  出力されたMarkdownはRAGに適していますか？

  はい。HTMLのノイズが除去されているため、ベクトル埋め込みに非常に適した形式です。

• 05

  ページの一部だけをスクレイピングするように指示できますか？

  はい。ツールがMarkdownを提供した後、エージェントに対して特定のセクションのみを要約したり抽出したりするように指示できます。

• ScrapingAntについて他に質問がありますか？コネクターのページで確認できます。 ScrapingAntコネクターの全機能を見る