- PRODUCT
- ARTICLE
- FORUM
- HUMAN
すぐに答え
AIを使ってウェブページを構造化データにするには?
AIエージェントがDiffbotを活用してページの種類を判別し、商品のスペックやフォーラムの投稿といった特定の項目を抽出します。生のHTMLではなく、整理されたデータとして取得可能です。以下に、抽出されたデータの活用例をまとめました。
データの出力先
抽出されたデータの活用先
AIはウェブ上の要素を解析し、以下の形式へと変換します。
PRODUCT
整理された商品カタログ
ECサイトのページを特定し、価格、商品名、スペックを抽出します。スプレッドシートですぐに使えるリストが作成できます。
ARTICLE
整理されたニュースフィード
広告やサイドバーを除去し、見出し、著者、本文のみを抽出します。乱雑なブログ記事を、きれいなテキストブロックへと変換します。
FORUM
構造化されたディスカッション
フォーラムのスレッドを個々の投稿やユーザーメタデータに分解します。会話の内容を簡単に分析できるようになります。
HUMAN
手動での確認が必要な場合
ページが既知のパターンに一致しない場合、AIがフラグを立てて通知します。標準的なスキーマに当てはまらない例外的なケースは、人間が判断できます。
ワークフロー
URLが入力された際、AIが行うプロセス
AIは以下のステップを経て、生のHTMLを構造化されたインテリジェンスへと変換します。
ページを特定する
まずAIがHTMLを解析し、それがショップなのか、ブログなのか、あるいは掲示板なのかを判別します。
analyze_page_type商品詳細を抽出する
ショッピングサイトの場合、AIは価格やSKUといった特定の属性を取得します。
extract_product_data記事を解析する
ニュースやブログの場合、AIは周囲のノイズから主要なコンテンツのみを分離します。
extract_article_dataフォーラムのスレッドを整理する
コミュニティ内の議論を、投稿と返信の論理的なシーケンスとして整理します。
extract_forum_thread
試してみる
以下のプロンプトをコピーして開始
Diffbotを接続した後、これらのプロンプトを使用できます。
出発点
括弧内の情報は、実際のURLや取得したい具体的なデータに合わせて書き換えてください。
Diffbot Connector
準備完了です。MCPクライアントを選択し、セットアップ手順に従ってください。
https://edge.vinkius.com/vk_preview_5HEsQ3kHnUpmnDG46R4fceuP7Qbytx3PkQCCCPhX/mcpClaude Desktop
以下の手順で数秒で接続できます。
- 1In Claude Desktop, open Settings → Connectors.
- 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
- 3Click Add and start a new chat — Diffbot capabilities are ready to use.
{
"mcpServers": {
"diffbot-alternative-mcp": {
"url": "https://edge.vinkius.com/vk_preview_5HEsQ3kHnUpmnDG46R4fceuP7Qbytx3PkQCCCPhX/mcp"
}
}
}このURLからすべての商品詳細を抽出してください: [URL]
この記事の要点をまとめてください: [URL]
このフォーラムスレッド内のすべての投稿をリストアップしてください: [URL]
この商品ページの価格データを分析してください: [URL]
Claude
ChatGPT
Cursor
VS Code
Windsurf
Claude Code
JetBrains
Cline
ここから始める
Diffbotを一度接続すれば、あとは指示するだけです。
リンクに沿ってアカウントを接続してください。認証情報は暗号化されて保護されるため、すぐにプロンプトによる指示を開始できます。
DiffbotをAIに接続するFAQ
機能に関する詳細
- 01
AIが元のウェブサイトの内容を書き換えることはありますか?
いいえ。AIはデータの読み取りと抽出のみを行います。訪問したウェブページの内容を修正したり削除したりすることはできません。
- 02
抽出したデータは自動的にデータベースに保存されますか?
いいえ。AIはデータを抽出してチャット上に表示します。データを保存するには、手動でコピーするか、他のツールを使用する必要があります。
- 03
ログインが必要なウェブサイトにはアクセスできますか?
いいえ。AIはウェブ上で一般に公開されているページにのみアクセス可能です。
- 04
画像からデータを抽出することはできますか?
いいえ。このツールはHTML構造を解析するように設計されており、画像に対してOCR(光学文字認識)を行う機能はありません。
- 05
AIが自律的にウェブをブラウジングすることはありますか?
いいえ。AIはプロンプトで指定された特定のURLにのみアクセスします。
Diffbotについてさらに詳しく知りたいですか? Diffbotコネクターの全機能を見る
『Diffbot』を Claude、Cursor、ChatGPT などに接続
