Новое в Claude Code: оценка плагинов

Новое в Claude Code: оценка плагинов

Теперь можно посмотреть, какую пользу на самом деле приносит ваш плагин и не требует ли он доработки.

Как это работает

1. Создайте тестовые случаи: прогоните плагин или навык, оцените результаты, а затем повторно запустите каждый тест без плагина и сравните разницу.

2. Инициализация: начните в папке вашего плагина и выполните:

   BASH

   Скопіювати

   claude plugin eval init
   

   Вы объясняете Claude, как выглядит хороший и плохой результат, и даёте несколько реальных промтов. Claude сам набрасывает тестовые случаи и проверки, делает пробный прогон набора и сообщает, сколько будет стоить полный запуск.

3. Оценка: затем выполните:

   BASH

   Скопіювати

   claude plugin eval
   

   В терминале вы увидите оценку каждого тестового случая с вашим плагином и без него, а также получите HTML-отчёт со всеми подробностями. Если ваш аккаунт это поддерживает, отчёт также публикуется как приватный артефакт.

Важные моменты

• Проверки вызывают модель, поэтому расходуют токены, а результаты могут отличаться от запуска к запуску. Перед полным прогоном сначала сделайте пробный запуск через:

  BASH

  Скопіювати

  --runs 1
  

• Хуки и MCP-серверы вашего плагина выполняются от вашего имени, поэтому проверяйте только те плагины, которым доверяете.

Попробуйте новую функцию

Чтобы попробовать функцию, выполните:

claude update

Документация