Novidade no Claude Code: Avaliação de Plugins

Novidade no Claude Code: Avaliação de Plugins

Agora é possível visualizar os benefícios reais que seu plugin traz e determinar se ele precisa de melhorias.

Como Funciona

1. Crie Casos de Teste: Execute o plugin ou a habilidade, avalie os resultados e, em seguida, reexecute cada teste sem o plugin para comparar as diferenças.

2. Inicialização: Comece na pasta do seu plugin e execute:

   BASH

   Скопіювати

   claude plugin eval init
   

   Explique ao Claude o que constitui um resultado bom e ruim, fornecendo vários prompts reais. O Claude gera casos de teste, verifica por conta própria, executa um conjunto de testes piloto e informa quanto custará uma execução completa.

3. Avaliação: Em seguida, execute:

   BASH

   Скопіювати

   claude plugin eval
   

   No terminal, você verá a avaliação de cada caso de teste com e sem o seu plugin, além de receber um relatório HTML com todos os detalhes. Se sua conta suportar, o relatório também será publicado como um artefato privado.

Pontos Importantes

• As verificações invocam o modelo, portanto consomem tokens, e os resultados podem variar de uma execução para outra. Antes de uma execução completa, faça primeiro uma execução piloto com:

  BASH

  Скопіювати

  --runs 1
  

• Os hooks e servidores MCP do seu plugin são executados em seu nome, então verifique apenas plugins nos quais você confia.

Experimente a Nova Funcionalidade

Para testar o recurso, execute:

claude update

Documentação