An astronaut overseeing a futuristic data hub
Baixar PDFVersão em Markdown

Conecte LLM Rouge Bleu Evaluator ao ChatGPT, Claude e Gemini

Configure uma vez e funcione no ChatGPT, Claude, Cursor e em qualquer outro cliente que você goste. Tudo roda com segurança em segundo plano, para você relaxar e focar no que realmente importa. Obtenha resultados determinísticos para validar a qualidade do seu modelo.

Pergunte à IA sobre este Connector

Desenvolvido, mantido e hospedado pela Vinkius.

MCP VERIFICADO · PRONTO PARA PRODUÇÃO · GARANTIA VINKIUS

Waiting for input…

Works with modern AI clients that support MCP, including ChatGPT, Claude, Cursor, and more.

ChatGPTClaudeCursorPerplexityGeminiMicrosoft CopilotRaycastMeta AI

A sua IA faz o trabalho. A gente cuida com segurança.

Nenhuma outra ferramenta de IA te dá isso. O seu workflow roda no cliente que você já ama, a sua conta fica protegida, e você decide o que o agente pode e não pode fazer. É a razão completa para mudar de vez.

Cada Connector vive dentro da nossa infraestrutura, no mesmo lugar onde o seu workflow roda. As três coisas abaixo já fazem parte dele, trabalhando silenciosamente em segundo plano para que você nunca precise pensar nelas. Nada para adicionar, nada para configurar, nada com que se preocupar.

A futuristic MCP client docking bay
V8 Isolate01

Cada Connector roda dentro do seu próprio ambiente lacrado.

Cada Connector roda em seu próprio runtime V8 lacrado — sem acesso aos seus arquivos, ao seu sistema ou a outros servidores. Um Connector nunca enxerga além da sua própria requisição.

Kill Switch02

Um interruptor para todos os agentes. Na hora.

Uma única ação desativa todos os Connectors, revoga todos os tokens e encerra todas as sessões de uma vez. A Governança de IA guarda o registro.

FinOps por usuário03

Limites de gastos que pausam em vez de assustar.

Cada usuário tem suas próprias conexões e credenciais, isoladas das dos demais. O que ultrapassar o seu limite de gastos fica aguardando a sua aprovação, em vez de ser cobrado.

Três controles, embutidos na camada pela qual sua IA se conecta.

Conjunto curado · 1 capacidade

Entregamos só as ações que importam.

Conjunto de capacidades01 / 01

01

1 capacidade neste conjunto.

Parte de 1 disponível através de Native V8.

  1. 01

    Calcular scores ROUGE e BLEU

    Calcula pontuações de sobreposição aproximadas de BLEU e ROUGE para avaliação de textos de NLP.

Trabalho real

O que as equipes executam de verdade

01

RAG Optimization

Compare generated answers against a gold-standard document to see if your retrieval is working.

02

Prompt Engineering

Test two different prompts against the same reference to see which one produces more accurate text.

03

Model Benchmarking

Quantify the improvement in text quality after a fine-tuning run.

04

Summarization Testing

Check how closely an AI-generated summary matches a human-written version.

Automatize uma tarefa

Coloque Native V8 para trabalhar em uma coisa.

Automações passo a passo que sua IA executa por este Connector: o fluxo, os prompts para começar e as capabilities exatas por trás de cada passo.

Um connector, todas as IAs

Native V8 funciona com os clientes de IA mais populares.

Estes são os clientes mais populares, cada um com um guia passo a passo: um link, configurado uma vez, com governança e visibilidade embutidas. E como tudo roda no padrão MCP, a mesma conexão também funciona em qualquer outro cliente compatível — nada para reconstruir.

ClaudeClaudeChatGPTChatGPTGeminiGeminiPerplexityPerplexityGrokGrokMicrosoft CopilotMicrosoft CopilotCursorCursorVS CodeVS CodeWindsurfWindsurfJetBrainsJetBrainsClineClineLangChainLangChainVercel AI SDKVercel AI SDKLovableLovableZ.aiZ.aiRaycastRaycastQwen CodeQwen CodeKimi CodeKimi CodeLe ChatLe Chat

Construindo o seu próprio app? O connector é seu para usar.

Você não precisa de um cliente para colocar Native V8 para trabalhar: a mesma conexão hospedada entra nas suas aplicações e no código do seu agente, com a mesma governança em cada pedido. Construa com ele, converse com ele — uma conexão para os dois.

Observada, não estimada

Média de 820ms. Rápida em produção.

Native V8 é verificado diariamente contra o serviço em produção.

Média diáriaPico de 1055ms
3 de out.Hoje
Dia mais rápido
608ms
Dia mais lento
1055ms
Tendência de 14 dias
Estável-4%

Conecte seu cliente

Uma URL. Todos os clientes.

Ative o Connector, copie seu link e cole no cliente que você já usa. 1 capacidade chega pronta para rodar.

Acesso de prévia · não é autenticação no provedor

O token vk_preview_* pertence à infraestrutura de prévia da Vinkius. Ele permite que o Claude descubra e exiba as capacidades de Native V8, para você ver a experiência dentro da sua IA.

Ele não autentica a sua conta com Native V8. Ações que exigem credenciais ou dados reais da conta podem não ser executadas até que você ative o Connector e autorize o serviço.

Native V8 Connector

Tudo pronto. Escolha seu cliente MCP e siga as instruções de configuração.

Link do conectorhttps://edge.vinkius.com/vk_preview_z0q7gwUAfzM0N3ZK3eZQCz4jX1vB3r37FG9LvR3T/mcp

Claude Desktop

Siga os passos abaixo para conectar em segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Native V8 capabilities are ready to use.
Configuração · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "llm-rouge-bleu-evaluator-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_z0q7gwUAfzM0N3ZK3eZQCz4jX1vB3r37FG9LvR3T/mcp"
    }
  }
}
  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Instruções passo a passo para cada cliente estão no guia. Como conectar

Configuração guiada para o Claude? Configurar Native V8 no Claude e outras IAs

Veja todos os clientes de IA com quem este connector funciona ↑

Para quem é

Feito para o trabalho que quem usa Native V8 delega.

Profissionais que desenvolvem e otimizam modelos de linguagem e sistemas de recuperação de informação.

  • 01

    Engenheiro de ML

    Necessita de métricas determinísticas para validar o fine-tuning de modelos.

  • 02

    Desenvolvedor de IA

    Trabalha na construção de sistemas RAG e precisa medir a precisão da recuperação de contexto.

  • 03

    Cientista de Dados

    Utiliza padrões acadêmicos de NLP para avaliar a sobreposição de texto entre máquinas e humanos.

FAQ

Perguntas de quem usa Native V8.

  • 01

    Why not just ask the LLM to grade the text?

    LLMs are probabilistic and prone to hallucinating scores. This MCP uses deterministic math to ensure the scores are accurate and repeatable.

  • 02

    What is the difference between BLEU and ROUGE?

    BLEU focuses on precision, while ROUGE focuses on recall. This MCP provides both to give a full picture of text overlap.

  • 03

    Which AI clients can use this MCP?

    You can use this with any MCP-compatible client, including Claude, Cursor, and Windsurf.

  • 04

    Do I need to host the math engine myself?

    No. Vinkius hosts the MCP and manages everything. You just connect and use the capabilities.

  • 05

    Can I use this for RAG evaluation?

    Yes. It is specifically useful for checking how well your RAG system's output matches your ground truth documents.

  • 06

    What does BLEU measure?

    BLEU (Bilingual Evaluation Understudy) measures precision: how many of the words generated by the AI actually appeared in the human reference text.

  • 07

    What does ROUGE measure?

    ROUGE measures recall: how much of the original human reference text was successfully captured and reproduced by the AI's generated summary.

  • 08

    Can it evaluate RAG prompts?

    Yes! By keeping your expected answer as the reference, you can automatically score how well your RAG pipeline retrieved and generated the facts.

Explore

Mais em Developer Tools

Sugestões

Conecte Native V8 ao Claude, Cursor, ChatGPT e outros