Sitemap から llms.txt AI 変換ツール

任意の sitemap.xml を AI を使って構造化された llms.txt 形式に変換します。このワークフローは、サイトマップから URL を取得し、その内容を取得・処理し、AI エージェントを活用して AI トレーニングやナレッジインジェストに適した最適化された llms.txt ファイルを生成します。

Thumbnail for Video
AIフローの仕組み - Sitemap から llms.txt AI 変換ツール

フロー

AIフローの仕組み

ウェルカムメッセージの表示.
チャットが開かれた際に、ユーザー案内や操作方法を示すメッセージを表示します。
ユーザーがサイトマップの URL を入力.
ユーザーが sitemap.xml の URL をチャットインターフェースに送信します。
URL とコンテンツの取得.
提供されたサイトマップからすべての URL を取得し、それらの Web コンテンツを取得します。
AI エージェントによるコンテンツ変換.
AI エージェントが取得したコンテンツを解析し、重要度を判断し、llms.txt 形式に構造化します。
生成された llms.txt の出力.
生成された llms.txt ファイルをユーザーに表示し、ダウンロードやさらなる利用ができるようにします。

このフローで使用されるプロンプト

以下は、このフローでその機能を実現するために使用されるすべてのプロンプトの完全なリストです。プロンプトは、AIモデルに応答を生成させたりアクションを実行させるために与えられる指示です。これらはAIがユーザーの意図を理解し、関連する出力を生成するのを導きます。

AI エージェント

ウェブページの内容が与えられた際に、詳細なプロンプトと例をもとに sitemap.xml を llms.txt にフォーマットする AI エージェント。「goal」フィールドにカスタムプロンプトを記載。...

                You are an AI assistant that formats sitemap.xml into llms.txt .
Below is the full text content of a webpage, including the page title and body.
Your task:
- Identify the title (either from the first line or a heading).
- convert the content of the xml sitemap into an llms.txt SIMILAR TO THE EXAMPLE GIVEN BELOW.
-YOU CAN DECIDE WHICH PAGES ARE MORE IMPORTANT AND PUT THEM AT THE START AND OTHER THINGS LIKE CATEGORIES AND TAGS CAN COME AND THE VERY END.
this is an example from langfuse:

**example of llms.txt**

**YOUR OUTPUT SHOULD LOOK AND HAVE A VERY SIMILAR FORMAT TO SOMETHING LIKE THE EXAMPLE ABOVE.**

このフローで使用されるコンポーネント

以下は、このフローでその機能を実現するために使用されるすべてのコンポーネントの完全なリストです。コンポーネントは、すべてのAIフローの構成要素です。様々な機能を接続することで複雑な相互作用を作成し、タスクを自動化することができます。各コンポーネントは、ユーザー入力の処理、データ処理、外部サービスとの統合など、特定の目的を果たします。

チャット開始トリガー

Chat Opened Triggerコンポーネントは、チャットセッションが開始された瞬間を検知し、ユーザーがチャットを開いたと同時にワークフローが即座に反応できるようにします。最初のチャットメッセージでフローを開始するため、レスポンス性の高いインタラクティブなチャットボット構築に不可欠です。

見る チャット開始トリガー

メッセージウィジェット

Message Widgetコンポーネントは、ワークフロー内にカスタムメッセージを表示します。ユーザーへの歓迎、指示の提供、重要な情報の表示に最適で、Markdown形式に対応しており、セッションごとに1回だけ表示する設定も可能です。

見る メッセージウィジェット

チャット出力

FlowHuntのChat Outputコンポーネントを使って、柔軟で複数構成のチャットボット応答を仕上げましょう。シームレスなフロー完了や高度なインタラクティブAIチャットボット構築に不可欠です。

見る チャット出力

チャット入力

FlowHuntのChat Inputコンポーネントは、Playgroundからのメッセージを受け取ることでユーザーとのやり取りを開始します。これはフローの出発点となり、ワークフローがテキストとファイルベースの入力の両方を処理できるようにします。

見る チャット入力

URLリトリーバー

URLリトリーバーコンポーネントでワークフローにウェブコンテンツを取り込みましょう。あらゆるURLリスト（ウェブ記事、ドキュメントなど）からテキストやメタデータを簡単に抽出・処理できます。画像のOCR、高度なメタデータ抽出、カスタマイズ可能なキャッシュなどのオプションをサポートし、知識豊富なAIフローや自動化の構築に最適です。

見る URLリトリーバー

AIエージェント

FlowHuntのAIエージェントコンポーネントは、ワークフローに自律的な意思決定とツール使用の能力を与えます。大規模言語モデルを活用し、さまざまなツールと連携してタスクを解決し、目標を達成し、知的な応答を提供します。高度な自動化や対話型AIソリューションの構築に最適です。

見る AIエージェント

GoogleSearchコンポーネント

FlowHuntのGoogleSearchコンポーネントは、検索拡張生成（RAG）を活用し、Googleから最新の知識を取得することでチャットボットの正確性を高めます。言語や国、クエリプレフィックスなどのオプションで結果をコントロールし、的確で関連性の高い出力を実現します。

見る GoogleSearchコンポーネント

フローの説明

目的と利点

このワークフローは、ウェブサイトの sitemap.xml を構造化された AI 向けの llms.txt 形式に変換するプロセスを自動化します。AI エージェントと取得ツールを活用し、サイトの内容を大規模言語モデル（LLM）やその他 AI アプリケーション向けに準備する作業を効率化します。以下は、そのステップと構成要素の詳細な内訳です。

1. ユーザー体験とエントリーポイント

  • チャットオープン時のウェルカムメッセージ
    ユーザーがチャットを開くと、メッセージウィジェットがフレンドリーな案内を表示します:

    🗂️ sitemap.xml の URL を下にドロップしてください！
    クリーンな llms.txt 形式に変換します。AI モデルへの取り込みに最適です 🤖📄

    これにより、明確な期待値が設定され、正しい入力を促します。

2. ユーザー入力の処理

  • チャット入力ノード
    ユーザーは自分の sitemap.xml ファイルの URL をチャットインターフェースに貼り付けます。
  • ワークフローのトリガー
    入力された URL は自動的に次のステップへ渡され、処理が開始されます。

3. サイトマップ URL の取得と処理

  • URL 取得（メイン）
    このワークフローは URL コンテンツ取得ノードを利用して以下を行います:

    • 提供された sitemap.xml URL から内容を取得
    • 抽出戦略の適用（例: 見出しや段落からの抽出）
    • 効率化のための結果キャッシュ
    • トークンやヘッダー戦略によるコンテンツ制限（例: H1 から開始、最後のヘッダーをスキップ）
    • 必要に応じてメタデータ（商品データなど）の処理

  • 高度な設定

    • 1 ドキュメントあたり最大 300,000 トークンまで対応
    • 様々な HTML 要素（H1～H6、段落など）からのコンテンツ取得が可能
    • 厳格なホワイトリスト、キャッシュ（2週間）、ロード戦略対応
    • 画像ベースのコンテンツに OCR を統合可能（デフォルトは無効）

4. 外部知識による補強

  • Google 検索ツール
    AI エージェントは Google 検索ツールを搭載しており、必要に応じて：

    • 追加の文脈や関連ドキュメントを検索可能
    • 検索結果数の制限（デフォルト: 3）、国・言語指定
    • 効率化のためキャッシュ結果を利用

  • サブ URL 取得ノード
    必要に応じて、Google 検索で見つかった URL からさらにコンテンツを取得し、AI エージェントの知識ベースを拡充できます。

5. AI エージェントによるコンテンツ変換

  • AI エージェントノード
    このワークフローの中核である AI エージェントは、次の設定で構成されています:
    • ゴール:
      sitemap.xml の内容を、例に従い構造化された llms.txt に変換
    • 背景と役割:
      llms.txt ファイル生成のスペシャリストとして設定
    • ツール:
      Google 検索と URL 取得ツールを併用し、サイト／ウェブの内容へアクセス
    • 動作:
      エージェントは以下を行います：
      • 取得したすべてのページ内容を読み取る
      • タイトルと構造を特定
      • 重要なページを優先してリストアップ
      • 重要度の低いページ（カテゴリやタグなど）は末尾に配置
      • 厳密なフォーマットを順守し、LLM 用 llms.txt の要件を満たす出力に

6. 出力とユーザーフィードバック

  • チャット出力ノード
    AI エージェントがフォーマットした（llms.txt の）出力がチャット上に表示され、そのまま AI トレーニングやインジェストに利用できます。

ワークフロー構成（プロセス概要）

ステップコンポーネント目的
1チャットオープントリガーウェルカム／案内メッセージを表示
2メッセージウィジェットユーザーに sitemap.xml URL の入力を案内
3チャット入力ユーザーが sitemap.xml URL を送信
4URL 取得サイトマップから URL やコンテンツを取得・解析
5Google 検索ツール（任意）ページの追加情報・文脈取得
6URL 取得（Google）（任意）Google で見つかった URL からコンテンツ取得
7AI エージェントすべてのページデータをフォーマット済み llms.txt に変換
8チャット出力フォーマット済み llms.txt をユーザーに提示

このワークフローが役立つ理由

  • スケーラビリティ
    面倒な手作業を自動化し、技術知識がなくても任意サイトのサイトマップを LLM 向けに変換できます。

  • 品質と一貫性
    厳密なフォーマットに合わせて出力し、AI トレーニングデータの品質を向上

  • 拡張性
    知識ソース追加や高度な抽出ロジックへのカスタマイズも可能

  • 効率性
    キャッシュやトークン制限を統合し、大規模サイトでも高速・確実に処理

  • AI 主導の判断
    重要ページの優先順位付けや構造化も自動で、手動では煩雑な作業をインテリジェントに実現

利用例

  • サイト全体を 1 つの構造化ドキュメントとして AI に取り込む準備
  • ナレッジベースやドキュメントシステム向けのコンテンツ自動収集
  • ドメイン特化サイト内容での LLM ファインチューニング用データセット作成のスケールアップ

このワークフローなら、ウェブサイトのサイトマップを AI 最適化テキストファイルに手早く確実に変換可能。手作業の時間を大幅に削減し、高品質な構造化データを AI モデルに提供できます。

あなた専用のAIチームを構築させてください

私たちは、あなたのような企業がスマートチャットボット、MCPサーバー、AIツール、またはその他の種類のAI自動化を開発し、組織内の反復的なタスクで人間を置き換えるお手伝いをします。

デモを予約する 今すぐ試す