Conversor de Sitemap para llms.txt com IA

Transforme qualquer sitemap.xml em um formato llms.txt bem estruturado usando IA. Este fluxo busca URLs de um sitemap, recupera e processa seus conteúdos, e utiliza um agente de IA para gerar um arquivo llms.txt otimizado, adequado para treinamento de IA ou ingestão de conhecimento.

Thumbnail for Video
How the AI Flow works - Conversor de Sitemap para llms.txt com IA

Flows

How the AI Flow works

Exibir Mensagem de Boas-Vindas.
Mostra uma mensagem de boas-vindas ou instruções quando o chat é aberto para guiar o usuário.
Usuário Insere a URL do Sitemap.
O usuário envia a URL do sitemap.xml pela interface do chat.
Recuperar URLs e Conteúdo.
Busca todas as URLs do sitemap fornecido e recupera o conteúdo web delas.
Agente de IA Converte o Conteúdo.
Um agente de IA analisa o conteúdo recuperado, determina a importância e o estrutura no formato llms.txt.
Exibir llms.txt Gerado.
Mostra o arquivo llms.txt gerado ao usuário para download ou uso posterior.

Prompts used in this flow

Agente de IA

Agente de IA que formata o sitemap.xml em llms.txt usando um prompt detalhado e exemplo, dado o conteúdo da página. Prompt personalizado fornecido no campo 'goa...

You are an AI assistant that formats sitemap.xml into llms.txt .
Below is the full text content of a webpage, including the page title and body.
Your task:
- Identify the title (either from the first line or a heading).
- convert the content of the xml sitemap into an llms.txt SIMILAR TO THE EXAMPLE GIVEN BELOW.
-YOU CAN DECIDE WHICH PAGES ARE MORE IMPORTANT AND PUT THEM AT THE START AND OTHER THINGS LIKE CATEGORIES AND TAGS CAN COME AND THE VERY END.
this is an example from langfuse:

**example of llms.txt**

**YOUR OUTPUT SHOULD LOOK AND HAVE A VERY SIMILAR FORMAT TO SOMETHING LIKE THE EXAMPLE ABOVE.**

Components used in this flow

Below is a complete list of all components used in this flow to achieve its functionality. Components are the building blocks of every AI Flow. They allow you to create complex interactions and automate tasks by connecting various functionalities. Each component serves a specific purpose, such as handling user input, processing data, or integrating with external services.

Gatilho de Chat Aberto

O componente Gatilho de Chat Aberto detecta quando uma sessão de chat é iniciada, permitindo que fluxos de trabalho respondam instantaneamente assim que um usuário abre o chat. Ele inicia fluxos com a mensagem inicial do chat, tornando-se essencial para a criação de chatbots responsivos e interativos.

See Gatilho de Chat Aberto

Widget de Mensagem

O componente Widget de Mensagem exibe mensagens personalizadas dentro do seu fluxo de trabalho. Ideal para dar boas-vindas aos usuários, fornecer instruções ou mostrar qualquer informação importante, ele suporta formatação Markdown e pode ser configurado para aparecer apenas uma vez por sessão.

See Widget de Mensagem

Saída do Chat

Descubra o componente Saída do Chat no FlowHunt—finalize as respostas do chatbot com saídas flexíveis e em múltiplas partes. Essencial para conclusão de fluxos e criação de chatbots de IA avançados e interativos.

See Saída do Chat

ChatInput

O componente Chat Input no FlowHunt inicia as interações do usuário capturando mensagens do Playground. Ele serve como ponto de partida para os fluxos, permitindo que o workflow processe entradas baseadas em texto e arquivos.

See ChatInput

Recuperador de URL

Desbloqueie conteúdo da web em seus fluxos de trabalho com o componente Recuperador de URL. Extraia e processe facilmente o texto e os metadados de qualquer lista de URLs—including artigos da web, documentos e muito mais. Suporta opções avançadas como OCR para imagens, extração seletiva de metadados e cache personalizável, tornando-o ideal para construir fluxos e automações de IA ricos em conhecimento.

See Recuperador de URL

Agente de IA

O componente Agente de IA no FlowHunt potencializa seus fluxos de trabalho com capacidades autônomas de tomada de decisão e uso de ferramentas. Ele aproveita grandes modelos de linguagem e se conecta a várias ferramentas para resolver tarefas, seguir objetivos e fornecer respostas inteligentes. Ideal para construir automações avançadas e soluções de IA interativas.

See Agente de IA

Componente GoogleSearch

O componente GoogleSearch do FlowHunt aprimora a precisão do chatbot usando Geração Aumentada por Recuperação (RAG) para acessar conhecimento atualizado do Google. Controle os resultados com opções como idioma, país e prefixos de consulta para obter respostas precisas e relevantes.

See Componente GoogleSearch

Flow description

Purpose and benefits

Este fluxo automatiza o processo de conversão do sitemap.xml de um site em um formato llms.txt estruturado e amigável para IA. O fluxo utiliza agentes de IA e ferramentas de recuperação para facilitar a preparação do conteúdo do seu site para uso em grandes modelos de linguagem (LLMs) e outras aplicações de IA. Abaixo está um detalhamento das etapas e componentes.

1. Experiência do Usuário & Ponto de Entrada

  • Mensagem de Boas-Vindas ao Abrir o Chat
    Quando o usuário abre o chat, um widget de mensagem exibe um aviso amigável:

    🗂️ Cole abaixo a URL do seu sitemap.xml!
    Vou convertê-lo em um formato limpo de llms.txt, perfeito para alimentar modelos de IA 🤖📄

    Isso define expectativas claras e guia o usuário para enviar o input correto.

2. Manipulação do Input do Usuário

  • Nó de Entrada do Chat
    O usuário cola a URL do arquivo sitemap.xml na interface do chat.
  • Disparo do Fluxo de Trabalho
    A URL inserida é passada automaticamente para o próximo passo de processamento.

3. Recuperação e Processamento das URLs do Sitemap

  • Recuperador de URL (Primário)
    O fluxo usa um nó de Recuperador de Conteúdo de URL para:

    • Buscar o conteúdo a partir da URL do sitemap.xml fornecida.
    • Aplicar estratégias de extração (ex: extração de títulos, parágrafos).
    • Fazer cache dos resultados para eficiência.
    • Limitar conteúdo usando estratégias de tokens e cabeçalhos (ex: iniciar do H1, pular último cabeçalho).
    • Processar opcionalmente metadados (como dados de produtos).

  • Configurações Avançadas

    • Manipula até 300.000 tokens por documento.
    • Pode incluir conteúdo de diversos elementos HTML (H1–H6, parágrafos).
    • Suporta whitelisting rigoroso, cache (2 semanas) e estratégias de carregamento.
    • Pode integrar OCR para conteúdo baseado em imagens (desativado por padrão).

4. Enriquecendo com Conhecimento Externo

  • Ferramenta de Busca Google
    O agente de IA está equipado com uma ferramenta de busca Google, permitindo:

    • Pesquisar contexto adicional ou documentação relacionada, se necessário.
    • Limitar resultados (padrão: 3), especificar país/idioma.
    • Usar resultados em cache para eficiência.

  • Recuperador de URL Secundário
    Um nó recuperador adicional pode ser configurado para buscar conteúdo de URLs encontradas via busca Google, enriquecendo ainda mais a base de conhecimento do agente de IA, se necessário.

5. Agente de IA para Conversão de Conteúdo

  • Nó de Agente de IA
    O núcleo do fluxo é um agente de IA configurado com:
    • Objetivo:
      Transformar o conteúdo do sitemap.xml em um llms.txt bem estruturado, conforme exemplo fornecido.
    • História & Papel:
      O agente é posicionado como especialista em gerar arquivos llms.txt.
    • Ferramentas:
      Utiliza as ferramentas de Busca Google e Recuperador de URL para acessar conteúdo do site e da web.
    • Operação:
      O agente:
      • Lê todo o conteúdo das páginas recuperadas.
      • Identifica o título e a estrutura.
      • Decide quais páginas são mais importantes, listando-as primeiro.
      • Posiciona páginas menos críticas (ex: categorias, tags) ao final.
      • Segue formato rigoroso para garantir que a saída atenda aos requisitos de ingestão do llms.txt para LLM.

6. Saída e Feedback ao Usuário

  • Nó de Saída do Chat
    A saída formatada do agente de IA (o conteúdo do llms.txt) é exibida ao usuário no chat, pronta para ser utilizada em treinamento ou ingestão por IA.

Estrutura do Fluxo de Trabalho (Visão Geral do Processo)

EtapaComponenteFinalidade
1Gatilho de Chat AbertoMostra mensagem de boas-vindas/instrução
2Widget de MensagemGuia o usuário a inserir a URL do sitemap.xml
3Entrada do ChatRecebe a URL do sitemap.xml fornecida pelo usuário
4Recuperador de URLBusca e analisa URLs/conteúdo do sitemap
5Ferramenta de Busca Google(Opcional) Busca contexto adicional para páginas
6Recuperador de URL (Google)(Opcional) Busca conteúdo das URLs encontradas no Google
7Agente de IAConverte todos os dados das páginas para llms.txt formatado
8Saída do ChatApresenta o llms.txt formatado ao usuário

Por Que Este Fluxo é Útil?

  • Escalabilidade:
    Automatiza um processo manual demorado, permitindo converter qualquer sitemap de site em formato utilizável para LLMs sem necessidade de conhecimento técnico.

  • Qualidade e Consistência:
    Garante que a saída siga um formato rígido, melhorando a qualidade dos dados de treinamento de IA.

  • Extensibilidade:
    Pode ser customizado para incluir fontes adicionais de conhecimento ou aplicar lógica mais avançada de extração.

  • Eficiência:
    Integra cache e limites de tokens para lidar mesmo com sites grandes de forma rápida e confiável.

  • Decisões Orientadas por IA:
    O agente pode priorizar páginas importantes e estruturar a saída de forma inteligente — algo trabalhoso ou sujeito a erros se feito manualmente.

Exemplos de Uso

  • Preparar todo o seu site como um único documento bem estruturado para ingestão por IA.
  • Automatizar curadoria de conteúdo para bases de conhecimento ou sistemas de documentação.
  • Escalar a criação de datasets para ajuste fino de LLMs com conteúdo de sites de nicho.

Este fluxo torna fácil, rápido e confiável converter sitemaps de sites em arquivos de texto otimizados para IA, economizando horas de trabalho manual e garantindo que seus modelos de IA recebam insumos estruturados e de alta qualidade.

Learn more

Conversor de Sitemap para LLM.txt AI
Conversor de Sitemap para LLM.txt AI

Conversor de Sitemap para LLM.txt AI

Transforme o sitemap.xml do seu site em um formato de documentação compatível com LLM automaticamente. Este conversor alimentado por IA extrai, processa e estru...

2 min read
AI Documentation +4
llms.txt
llms.txt

llms.txt

O arquivo llms.txt é um arquivo padronizado em Markdown projetado para otimizar como Modelos de Linguagem de Grande Porte (LLMs) acessam e processam o conteúdo ...

8 min read
AI LLMs +3