• DATOS
  • RANKING
  • INSIGHT
  • HUMANO

Cómo comparar métricas de experimentos con tu IA

Conecta DVC a tu cliente de IA para analizar el historial de experimentos. Una vez conectado, puedes pedirle a tu agente que revise las ejecuciones anteriores y elija la mejor.

Pregunta a la IA sobre esta página

Respuesta rápida

¿Cómo puedo comparar métricas de experimentos con IA?

Tu IA utiliza el conector MCP de DVC para extraer los arrays de métricas de tu historial de experimentos. Luego, compara estos valores para identificar qué versión funcionó mejor según tus criterios. Obtendrás un desglose claro de las ejecuciones con mejor rendimiento.

Resultados de tu análisis

Qué obtienes de la comparación

Al realizar esta tarea, obtendrás estos resultados específicos.

DATOS

Arrays de métricas extraídos

La IA extrae los valores métricos específicos de tus experimentos en DVC. Recibes un conjunto de datos limpio y listo para analizar.

RANKING

Mejor versión identificada

El agente compara las métricas de todas las ejecuciones disponibles y te señala directamente la versión más exitosa del modelo.

INSIGHT

Análisis de tendencias

Tu IA busca patrones en la evolución de las métricas a lo largo del tiempo para confirmar si tu modelo realmente está mejorando.

HUMANO

Validación manual necesaria

La IA identifica al ganador, pero tú decides si los resultados tienen sentido. Mantienes el control total sobre la selección final del modelo.

El flujo

Lo que hace tu IA al recibir los datos.

La IA se encarga del trabajo pesado de revisar todo tu historial de experimentos.

  1. Obtener historial de experimentos

    El agente escanea tu repositorio DVC para localizar todas las ejecuciones de experimentos registradas.

    list_experiments
  2. Extraer valores métricos

    Extrae los arrays de métricas específicos asociados a cada ejecución encontrada en el historial.

    list_experiments
  3. Comparar rendimiento

    La IA compara los diferentes conjuntos de métricas para hallar los valores más altos o más bajos.

    list_experiments
  4. Reportar el ganador

    Tu agente resume qué versión del experimento alcanzó tus métricas objetivo.

    list_experiments

Pruébalo

Copia estos ejemplos para empezar.

Usa estos prompts para iniciar tu análisis.

Puntos de partida

Estos son ejemplos iniciales. Cambia los nombres de las métricas o las rutas del repositorio para que coincidan con tu configuración.

DVC Connector

Todo listo. Elige tu cliente MCP y sigue las instrucciones de configuración.

Enlace del conectorhttps://edge.vinkius.com/vk_preview_Myft115Qe8hEZoVFuhiTYRKEW5euUlsOR2XqjK69/mcp

Claude Desktop

Sigue los pasos siguientes para conectarte en segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — DVC capabilities are ready to use.
Configuración · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "dvc-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_Myft115Qe8hEZoVFuhiTYRKEW5euUlsOR2XqjK69/mcp"
    }
  }
}
Copia en el chat04
  • Lista todos mis experimentos de DVC y dime cuál tuvo la mayor precisión.

  • Compara las métricas de pérdida de mis últimas cinco ejecuciones de experimentos en DVC.

  • Encuentra el modelo con mejor rendimiento en mi repo de DVC basado en el F1 score.

  • Muéstrame una comparación de los arrays de métricas para los experimentos con la etiqueta 'production' en DVC.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Empieza aquí

Conecta DVC una vez y luego pregunta.

Solo tienes que vincular tu cuenta de DVC una vez. Tus credenciales permanecen cifradas y podrás empezar a consultar los datos de tus experimentos con tu IA de inmediato.

Conectar DVC a tu IA

FAQ

Preguntas comunes

  • 01

    ¿Puede la IA modificar mis datos de experimentos en DVC?

    No. La IA solo puede leer el historial de experimentos para realizar comparaciones.

  • 02

    ¿La IA elige el modelo que se debe desplegar?

    No. La IA identifica la versión con mejor rendimiento, pero tú debes tomar la decisión final de desplegarla.

  • 03

    ¿Puedo comparar métricas de diferentes repositorios DVC?

    La IA solo puede acceder a los repositorios que hayas conectado mediante el conector MCP de DVC.

  • 04

    ¿Cómo sabe la IA qué métrica debe buscar?

    Tú le indicas qué métrica utilizar en tu prompt, como la precisión o la pérdida.

  • 05

    ¿Puede la IA crear nuevos experimentos por mí?

    No. Este flujo de trabajo específico es para leer y comparar datos de experimentos ya existentes.

  • ¿Tienes más dudas sobre DVC? La página del conector tiene todas las respuestas. Ver todo lo que puede hacer el conector MCP de DVC

Conecta DVC a Claude, Cursor, ChatGPT y más