• AUTOMATIZADO
  • ORGANIZADO
  • HUMANO
  • PRONTO

Como criar conjuntos de dados de validação com sua IA

Conecte o Arize AI ao seu agente para transformar comandos de chat em conjuntos de avaliação estruturados. Após a conexão, basta descrever os dados que você precisa.

Pergunte à IA sobre esta página

Resposta rápida

Como posso automatizar a criação de conjuntos de dados para avaliação?

Você descreve o conjunto de dados que deseja em linguagem natural e seu agente usa o Arize AI para construí-lo. Isso elimina a necessidade de coletar e carregar dados manualmente. Você recebe conjuntos de validação prontos para uso através de um simples chat.

Os resultados

Onde seus dados ficam

Seu agente cuida da parte técnica para que você foque apenas nos testes.

AUTOMATIZADO

Novos conjuntos prontos

A IA constrói seus conjuntos de validação diretamente no Arize AI. Você recebe o conjunto de dados sem precisar mexer em nenhum dashboard.

ORGANIZADO

Verificação de inventário

Seu agente verifica o que você já possui. Isso evita que você crie conjuntos duplicados por engano.

HUMANO

Revisar e refinar

Você confere o conteúdo para garantir a qualidade. A IA cuida da estrutura, mas você valida se os dados estão corretos.

PRONTO

Início da avaliação

Assim que a IA confirma a criação, o conjunto de dados fica disponível. Você pode começar as avaliações do modelo imediatamente.

O fluxo

O que sua IA faz quando você pede um conjunto de dados.

O agente traduz sua intenção em chamadas de API específicas para o Arize AI.

  1. Verificar dados existentes

    O agente analisa seu ambiente atual no Arize AI para ver quais conjuntos de dados já existem. Isso evita a criação acidental de conjuntos repetidos.

    list_datasets

  2. Construir o novo conjunto

    O agente interpreta sua descrição e executa o comando para gerar o novo conjunto de dados de validação, cuidando de toda a configuração técnica.

    create_dataset

  3. Verificar a criação

    O agente consulta a lista novamente para confirmar que o novo conjunto está visível e com o nome correto. Isso garante que a tarefa foi concluída.

    list_datasets

  4. Reportar conclusão

    O agente informa o nome do novo conjunto de dados e confirma que ele está pronto para a avaliação. Aí você pode seguir com seus testes.

    list_datasets

Teste

Copie estes comandos para começar.

Use estes prompts para acionar o conector MCP do Arize AI.

Pontos de partida

Substitua o texto entre colchetes pelos nomes ou critérios específicos do seu conjunto de dados.

Arize AI Connector

Tudo pronto. Escolha seu cliente MCP e siga as instruções de configuração.

Link do conectorhttps://edge.vinkius.com/vk_preview_wCwq9adpwddtNPc4Bp17r5LJCv19cGsWZBiDUv4U/mcp

Claude Desktop

Siga os passos abaixo para conectar em segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Arize AI capabilities are ready to use.
Configuração · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "arize-ai-alternative-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_wCwq9adpwddtNPc4Bp17r5LJCv19cGsWZBiDUv4U/mcp"
    }
  }
}
Copie no chat04

  • Crie um novo conjunto de dados no Arize AI chamado 'customer_support_v1'.

  • Liste todos os meus conjuntos de dados atuais para eu ver o que está disponível.

  • Crie um conjunto de dados de validação chamado 'llm_safety_test' no Arize AI.

  • Mostre os conjuntos de dados que tenho no Arize AI para verificar duplicatas.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Comece aqui

Conecte o Arize AI uma vez e depois é só pedir.

Siga o link para autorizar a conexão. Suas credenciais ficam criptografadas e seguras, permitindo que você comece a conversar com seu agente imediatamente.

Conectar Arize AI à sua IA

FAQ

Como a tarefa funciona

  • 01

    A IA pode excluir meus conjuntos de dados existentes?

    Não. O conector possui apenas ferramentas para listar e criar conjuntos de dados. Ele não pode excluir ou modificar dados existentes.

  • 02

    A IA decide quais dados entram no conjunto de dados?

    A IA segue suas instruções específicas. Você deve dizer qual será o nome do conjunto e qual será a finalidade dele.

  • 03

    Posso usar isso para editar o conteúdo de um conjunto de dados?

    Não. As ferramentas atuais permitem apenas a criação de novos conjuntos ou a listagem dos que já existem.

  • 04

    Preciso usar o dashboard web do Arize AI?

    Você não precisa dele para criar ou listar conjuntos de dados, já que a IA realiza essas tarefas através do conector.

  • 05

    A IA consegue ver minhas métricas de desempenho do modelo?

    Não. Este conector é limitado a tarefas de gerenciamento de conjuntos de dados, como criar e listar.

  • Mais dúvidas sobre o Arize AI? Veja tudo o que o conector MCP do Arize AI pode fazer

Conecte Arize AI ao Claude, Cursor, ChatGPT e outros