• VERSIONAMENTO
  • DADOS
  • VALIDAÇÃO
  • HUMANO

Como automatizar testes de modelos com sua IA

Conecte o Modelbit ao seu cliente de IA uma única vez. Depois, basta usar texto simples para disparar inferências em tags específicas de modelos.

Pergunte à IA sobre esta página

Resposta rápida

Como posso automatizar testes de modelos com minha IA?

Você envia payloads JSON para versões ou tags específicas de modelos via seu cliente de IA. Isso permite validar como diferentes iterações lidam com seus dados sem sair da interface de chat. Você recebe os resultados exatos de cada versão na hora.

Resultados dos testes

O que você recebe em cada teste

A IA cuida da execução técnica para você focar apenas nos resultados.

VERSIONAMENTO

Tags de modelos direcionadas

A IA acessa exatamente a versão ou tag que você especificar. Isso garante que você não teste a iteração errada do modelo.

DADOS

Formatação JSON automática

Seu agente converte sua linguagem natural no JSON necessário para a chamada. Você não precisa escrever código bruto para rodar um teste.

VALIDAÇÃO

Comparação direta de saída

Você recebe a resposta do modelo direto no chat. Isso facilita identificar regressões ou mudanças de comportamento.

HUMANO

Decisão final

A IA executa os testes, mas você decide qual versão do modelo está pronta para produção. Você mantém o controle total do ciclo de implantação.

O fluxo

O que sua IA faz quando chega um pedido de teste.

Seu agente atua como a interface entre suas instruções e o modelo implantado.

  1. Estruturar o payload

    Seu agente pega sua descrição de teste e a transforma em um objeto JSON válido.

    get_inference

  2. Roteamento para a tag

    A IA usa a tag do modelo que você forneceu para garantir que a requisição vá para a versão correta.

    get_inference

  3. Disparar inferência

    O agente executa a chamada para o endpoint do Modelbit usando os dados estruturados.

    get_inference

  4. Entregar resposta

    A IA traz o resultado do modelo de volta para sua janela de chat para sua revisão.

    get_inference

Teste

Copie estes exemplos para começar.

Use estes prompts para realizar seus primeiros testes.

Pontos de partida

Substitua as tags de modelo e os objetos JSON pelos seus próprios casos de teste específicos.

Modelbit Connector

Tudo pronto. Escolha seu cliente MCP e siga as instruções de configuração.

Link do conectorhttps://edge.vinkius.com/vk_preview_U02S7R70GaoTP6dztOIIMDtmgDyuN2GTH3Or66r0/mcp

Claude Desktop

Siga os passos abaixo para conectar em segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Modelbit capabilities are ready to use.
Configuração · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "modelbit-ml-model-deployments-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_U02S7R70GaoTP6dztOIIMDtmgDyuN2GTH3Or66r0/mcp"
    }
  }
}
Copie no chat04

  • Execute uma inferência na tag 'v2-beta' usando este JSON: {"prompt": "Summarize this text"}

  • Teste a tag 'production-stable' com este payload: {"input": "test_case_01"}

  • Verifique como a tag 'experimental-v3' lida com este JSON: {"query": "extract entities"}

  • Envie um pedido de teste para a tag 'legacy-model' com estes dados: {"text": "classify this"}

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Comece aqui

Conecte o Modelbit uma vez e depois é só pedir.

Conecte sua conta para dar acesso aos seus modelos implantados para sua IA. Seu login permanece criptografado em nosso sistema.

Conectar Modelbit à sua IA

FAQ

Como funcionam os testes

  • 01

    A IA pode implantar novos modelos para mim?

    Não. A IA só pode executar inferências em modelos que já estão implantados.

  • 02

    Posso alterar as tags dos modelos pelo chat?

    Não. A IA só pode usar tags existentes para rotear requisições; ela não pode modificar sua configuração no Modelbit.

  • 03

    Preciso escrever o JSON manualmente?

    Não. Seu agente cuida da formatação do JSON com base nas suas instruções em linguagem natural.

  • 04

    A IA pode deletar uma versão de um modelo?

    Não. A IA tem permissão apenas para executar inferências, não para gerenciar ou deletar suas implantações.

  • 05

    Posso testar várias tags de uma vez?

    Sim. Você pode pedir ao seu agente para rodar o mesmo payload em diferentes tags sequencialmente.

  • Mais dúvidas sobre o Modelbit? Veja tudo o que o conector Modelbit pode fazer

Conecte Modelbit ao Claude, Cursor, ChatGPT e outros