Nuevo en Claude Code: Evaluación de Plugins

Nuevo en Claude Code: Evaluación de Plugins

Ahora puedes ver qué beneficios reales aporta tu plugin y si necesita mejoras.

Cómo Funciona

1. Crea Casos de Prueba: Ejecuta el plugin o habilidad, evalúa los resultados y luego vuelve a ejecutar cada prueba sin el plugin y compara la diferencia.

2. Inicialización: Comienza en la carpeta de tu plugin y ejecuta:

   BASH

   Скопіювати

   claude plugin eval init
   

   Explicas a Claude cómo se ve un buen y un mal resultado, y proporcionas varios prompts reales. Claude genera casos de prueba y verificaciones por sí mismo, realiza una prueba del conjunto y te informa cuánto costará una ejecución completa.

3. Evaluación: Luego ejecuta:

   BASH

   Скопіювати

   claude plugin eval
   

   En la terminal, verás la evaluación de cada caso de prueba con tu plugin y sin él, además recibirás un informe HTML con todos los detalles. Si tu cuenta lo soporta, el informe también se publica como un artefacto privado.

Puntos Importantes

• Las verificaciones invocan el modelo, por lo que consumen tokens, y los resultados pueden variar de ejecución a ejecución. Antes de una ejecución completa, primero haz una ejecución de prueba con:

  BASH

  Скопіювати

  --runs 1
  

• Los hooks y servidores MCP de tu plugin se ejecutan en tu nombre, así que solo verifica los plugins en los que confías.

Prueba la Nueva Función

Para probar la función, ejecuta:

claude update

Documentación