• DATOS
  • ANÁLISIS
  • VISIÓN
  • HUMANO

Compara métricas de experimentos con tu IA

Conecta Comet ML con tu agente para extraer datos de ejecuciones específicas. Una vez conectado, puedes pedirle a tu IA que realice comparaciones directas del rendimiento de tus modelos.

Pregunta a la IA sobre esta página

Respuesta rápida

¿Cómo puedo comparar métricas de experimentos con mi IA?

Tu agente utiliza las herramientas de Comet ML para obtener valores numéricos de diversas ejecuciones. Después, puedes pedirle que identifique tendencias, calcule diferencias o encuentre la mejor ejecución. Este desglose muestra cómo los datos pasan de Comet ML a tu chat.

Los resultados

Lo que obtienes de estas comparaciones

La IA gestiona la extracción de datos para que tú te centres en los resultados.

DATOS

Extracción directa de métricas

La IA extrae los números exactos de pérdida, precisión o métricas personalizadas de tus ejecuciones. Obtienes datos limpios sin exportaciones manuales.

ANÁLISIS

Comparación entre ejecuciones

Pide a tu agente que compare dos experimentos específicos. Calcula automáticamente las diferencias en las métricas de rendimiento.

VISIÓN

Identificación de tendencias

La IA analiza múltiples experimentos para verificar si cambios en hiperparámetros específicos mejoraron tus resultados.

HUMANO

Toma de decisiones

La IA presenta los números y las diferencias. Tú decides qué versión del modelo está realmente lista para el despliegue.

El flujo

Lo que hace tu IA cuando llegan los datos.

El agente actúa como puente entre tu panel de Comet ML y tu interfaz de chat.

  1. Localizar experimentos

    El agente identifica las ejecuciones de entrenamiento específicas que quieres analizar revisando el historial de tu proyecto.

    list_experiments
  2. Extraer datos numéricos

    Una vez identificadas las ejecuciones, el agente extrae los valores de las métricas que solicitaste.

    get_experiment_metrics
  3. Calcular diferencias

    El agente compara los valores entre las ejecuciones seleccionadas para hallar mejoras o retrocesos.

    get_experiment_metrics
  4. Resumir hallazgos

    El agente presenta una comparación clara de las métricas directamente en tu ventana de chat.

    get_experiment_metrics

Pruébalo

Copia estos ejemplos para empezar.

Usa estos prompts para iniciar tu análisis.

Puntos de partida

Sustituye los nombres de los experimentos y las claves de las métricas por tus datos reales de Comet ML.

Comet ML Connector

Todo listo. Elige tu cliente MCP y sigue las instrucciones de configuración.

Enlace del conectorhttps://edge.vinkius.com/vk_preview_C2PxqYqwffQi3V41WE8jlPynFSP048sA8SVR1PFT/mcp

Claude Desktop

Sigue los pasos siguientes para conectarte en segundos.

  1. 1In Claude Desktop, open Settings → Connectors.
  2. 2Click “Add custom connector” and paste the connector link above as the remote MCP server URL.
  3. 3Click Add and start a new chat — Comet ML capabilities are ready to use.
Configuración · claude_desktop_config.jsonCopiar
{
  "mcpServers": {
    "comet-ml-mcp": {
      "url": "https://edge.vinkius.com/vk_preview_C2PxqYqwffQi3V41WE8jlPynFSP048sA8SVR1PFT/mcp"
    }
  }
}
Copia en el chat04
  • Compara la métrica de precisión entre el experimento 'run_v1' y 'run_v2'.

  • Lista todos los experimentos de mi proyecto actual y dime cuál tuvo la pérdida de validación más baja.

  • ¿Cuál fue la diferencia en el tiempo de entrenamiento entre mis últimas tres ejecuciones?

  • Busca el experimento con el F1 score más alto en mi historial de entrenamiento reciente.

  • Claude
  • ChatGPT
  • Cursor
  • VS Code
  • Windsurf
  • Claude Code
  • JetBrains
  • Cline

Empieza aquí

Conecta Comet ML una vez y luego pregunta.

Una sola conexión vincula tu agente con tus datos de Comet ML. Tus credenciales se mantienen cifradas y seguras en nuestro sistema.

Conecta Comet ML con tu IA

FAQ

Cómo funciona esta tarea

  • 01

    ¿Puede la IA cambiar la configuración de mis experimentos?

    No. La IA solo puede leer métricas y listar experimentos. No puede modificar tus ejecuciones de entrenamiento ni cambiar los hiperparámetros.

  • 02

    ¿Puede la IA eliminar experimentos antiguos?

    No. Las herramientas solo permiten la lectura de datos. La eliminación de experimentos debe hacerse manualmente en Comet ML.

  • 03

    ¿Necesito exportar archivos CSV primero?

    No. La IA extrae los datos directamente de Comet ML utilizando las herramientas proporcionadas.

  • 04

    ¿Puede comparar métricas de dos proyectos distintos?

    Sí, siempre que el agente tenga acceso a ambos proyectos mediante la herramienta list_experiments.

  • 05

    ¿Sugerirá la IA nuevos hiperparámetros?

    La IA puede identificar qué hiperparámetros dieron mejores métricas, pero no puede ejecutar nuevas sesiones de entrenamiento por ti.

  • ¿Tienes más dudas sobre Comet ML? La página del conector tiene todas las respuestas. Ver todo lo que puede hacer el conector de Comet ML

Conecta Comet ML a Claude, Cursor, ChatGPT y más