• VERSÕES
  • ANÁLISE
  • AUDITORIA
  • HUMANO

Como comparar versões de prompts com sua IA

Conecte o Langfuse ao seu cliente de IA para acessar o histórico de prompts. Depois, peça ao seu agente para analisar como diferentes versões de um template alteram os resultados.

Pergunte à IA sobre esta página

Resposta rápida

Como posso comparar diferentes versões dos meus prompts?

Sua IA usa a conexão com o Langfuse para buscar templates específicos e suas versões anteriores. Com isso, você pode pedir ao seu agente que identifique mudanças nas instruções e como elas afetam a resposta final.

Os resultados.

O que você ganha ao comparar versões.

A IA cuida da busca dos dados para você focar apenas na lógica.

VERSÕES

Rastreie mudanças de instruções

A IA busca versões específicas dos seus templates. Você verá exatamente o que mudou entre as instruções antigas e as novas.

ANÁLISE

Compare mudanças no output

Seu agente analisa como um ajuste no prompt alterou a resposta do modelo. Isso ajuda a detectar regressões na hora.

AUDITORIA

Inspecione o histórico

Você pode consultar todo o histórico de um template para ter uma linha do tempo clara da evolução do seu prompt engineering.

HUMANO

Decida o vencedor

A IA apresenta as diferenças, mas você decide qual versão performa melhor para o seu caso de uso específico.

O fluxo

O que sua IA faz quando recebe o pedido.

A IA funciona como uma ponte entre sua interface de chat e os dados do Langfuse.

  1. Buscar templates

    A IA localiza os templates de prompt que você deseja dentro do Langfuse.

    list_prompts

  2. Recuperar versões

    Ela extrai as iterações históricas desses templates para preparar a comparação.

    list_prompts

  3. Identificar diferenças

    Seu agente compara o texto das diferentes versões para encontrar mudanças nas instruções.

    list_prompts

  4. Resumir impacto

    A IA explica como essas mudanças de instrução podem gerar comportamentos diferentes no modelo.

    list_prompts

Teste

Copie estes comandos para começar.

Use estes prompts para iniciar sua comparação.

Pontos de partida

Estes são apenas exemplos. Substitua os nomes dos templates pelos que você realmente usa no Langfuse.

Langfuse Connector

Tudo pronto. Escolha seu cliente MCP e siga as instruções de configuração.

Link do conectorhttps://edge.vinkius.com/vk_preview_sTXOynCd5hRTA7WbjY0nBUsTjmjwRIVY989VA7VU/mcp

Claude Desktop

Siga os passos abaixo para conectar em segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Langfuse capabilities are ready to use.
Configuração · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "langfuse-llm-tracing-evals-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_sTXOynCd5hRTA7WbjY0nBUsTjmjwRIVY989VA7VU/mcp"
    }
  }
}
Copie no chat04

  • Liste meus templates de prompt no Langfuse para eu ver o que está disponível.

  • Compare a versão mais recente do prompt 'customer_support_v2' com a sua versão anterior.

  • Mostre o histórico do 'summarizer_template' e me diga o que mudou nas últimas três atualizações.

  • Encontre o prompt 'data_extractor' e explique como as novas instruções diferem das antigas.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Comece aqui

Conecte o Langfuse uma vez e pronto.

Basta fornecer suas credenciais do Langfuse. A conexão é criptografada e você pode começar a consultar seu histórico de prompts imediatamente.

Conectar Langfuse à sua IA

FAQ

Como funciona esta tarefa.

  • 01

    A IA pode alterar meus prompts no Langfuse?

    Não. A IA só pode ler e listar seus templates e versões de prompts existentes.

  • 02

    A IA pode excluir versões antigas de prompts?

    Não. A IA não tem capacidade para excluir ou modificar seus dados no Langfuse.

  • 03

    Preciso exportar meus prompts manualmente primeiro?

    Não. Uma vez conectado, sua IA pode buscar os dados diretamente usando a ferramenta list_prompts.

  • 04

    A IA pode realizar uma avaliação desses prompts?

    Não. A IA apenas recupera o texto e as versões dos prompts para que você possa inspecioná-los.

  • 05

    Como a IA sabe qual versão é qual?

    Ela utiliza os dados de versionamento fornecidos pelo Langfuse para distinguir as diferentes iterações do mesmo template.

  • Mais dúvidas sobre o Langfuse? Veja tudo o que o MCP do Langfuse pode fazer

Conecte Langfuse ao Claude, Cursor, ChatGPT e outros