• NOVOS DADOS
  • INVENTÁRIO
  • AUDITORIA
  • HUMANO

Como gerenciar datasets de avaliação com sua IA

Conecte o Arize AI ao seu agente para automatizar a criação e organização de dados de validação. Com a conexão feita, sua IA assume o trabalho pesado de gerenciar os datasets.

Pergunte à IA sobre esta página

Resposta rápida

Como posso usar minha IA para gerenciar datasets de avaliação?

Sua IA utiliza o Arize AI para criar novos datasets e listar os existentes para validação de modelos. Isso permite transformar dados brutos em conjuntos de avaliação organizados por meio de comandos simples no chat. Você terá uma forma estruturada de acompanhar o desempenho de novas versões de modelos contra benchmarks específicos.

Os resultados do seu pedido.

Onde seus dados param.

Dependendo do que você pedir, sua IA produzirá um destes resultados.

NOVOS DADOS

Datasets prontos para uso

A IA usa a ferramenta de criação para construir um conjunto específico de dados para sua tarefa de validação atual. Você recebe um dataset limpo e pronto para testes.

INVENTÁRIO

Visão geral dos datasets

Sua IA busca uma lista de todos os seus datasets atuais no Arize AI. Você verá exatamente o que está disponível para suas execuções de avaliação.

AUDITORIA

Prontidão para validação

A IA organiza os dados para que você possa comparar versões de modelos. Isso garante que seu ambiente de teste permaneça consistente e confiável.

HUMANO

Revisão manual necessária

A IA cuida da movimentação dos dados, mas você decide quais datasets têm qualidade suficiente para produção. Você mantém o controle total da seleção final.

O fluxo

O que sua IA faz ao pedir o gerenciamento de datasets.

A IA atua como uma ponte entre sua interface de chat e seu ambiente Arize AI.

  1. Escanear dados existentes

    Sua IA verifica sua conta no Arize AI para ver quais datasets você já tem armazenados.

    list_datasets

  2. Criar novos conjuntos

    Ao descrever os dados de que precisa, a IA gera um novo dataset para a sua versão específica de modelo.

    create_dataset

  3. Organizar para testes

    A IA usa a ferramenta de criação para estruturar dados especificamente para fluxos de trabalho de validação.

    create_dataset

  4. Verificar disponibilidade

    A IA confirma se os novos ou existentes datasets foram colocados corretamente em sua conta.

    list_datasets

Teste

Copie estes comandos para começar.

Use estes prompts para acionar ações no Arize AI.

Pontos de partida

Substitua o texto entre colchetes pelos nomes reais dos seus datasets ou requisitos específicos da versão do modelo.

Arize AI Connector

Tudo pronto. Escolha seu cliente MCP e siga as instruções de configuração.

Link do conectorhttps://edge.vinkius.com/vk_preview_wKJSgGsb2EgJmks5PzM3V0jknb7nFZgbwB0CaRFP/mcp

Claude Desktop

Siga os passos abaixo para conectar em segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Arize AI capabilities are ready to use.
Configuração · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "arize-ai-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_wKJSgGsb2EgJmks5PzM3V0jknb7nFZgbwB0CaRFP/mcp"
    }
  }
}
Copie no chat04

  • Liste todos os meus datasets atuais no Arize AI.

  • Crie um novo dataset chamado [Nome do Dataset] para a minha versão mais recente do modelo.

  • Mostre-me os datasets disponíveis para a avaliação do [Nome do Modelo].

  • Crie um dataset de validação usando os parâmetros de [Fonte de Dados Específica].

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Comece aqui

Conecte o Arize AI uma vez e depois é só pedir.

Basta vincular sua conta uma única vez. Suas credenciais ficam criptografadas e seguras, permitindo que você comece a gerenciar dados imediatamente pelo seu cliente de IA preferido.

Conectar Arize AI à sua IA

FAQ

Como esta tarefa funciona.

  • 01

    A IA pode excluir meus datasets existentes?

    Não. A IA possui apenas ferramentas para listar e criar datasets. Ela não pode excluir ou sobrescrever seus dados.

  • 02

    A IA decide qual versão do modelo é melhor?

    Não. A IA gerencia os datasets usados no teste, mas você deve realizar a avaliação e a tomada de decisão real.

  • 03

    Posso ver o conteúdo de um dataset através da IA?

    Não. A IA pode listar os datasets e criar novos, mas não possui uma ferramenta para ler as linhas ou entradas individuais dentro de um dataset.

  • 04

    Como sei se um dataset foi criado com sucesso?

    A IA confirmará a ação assim que a ferramenta de criação terminar. Você também pode pedir para ela listar seus datasets para verificar se ele está lá.

  • 05

    A IA pode se conectar aos meus arquivos locais para criar datasets?

    Não. A IA só pode interagir com o Arize AI usando as ferramentas fornecidas. Ela não consegue puxar dados do seu disco rígido local ou de outros aplicativos externos.

  • Mais dúvidas sobre o Arize AI? A página do Connector responde. Veja tudo o que o Arize AI Connector pode fazer

Conecte Arize AI ao Claude, Cursor, ChatGPT e outros