skill-judge

Инструмент для проверки Agent Skills на соответствие официальным спецификациям и паттернам, основанный на более чем 17 примерах.

Суть

Что это за skill и зачем он нужен

Skill Judge позволяет автоматически оценивать навыки агента, сравнивая их с официальными спецификациями и проверенными паттернами. Инструмент анализирует содержимое файла SKILL.md, выделяя экспертный контент, активационный материал и избыточные фрагменты, а затем присваивает баллы по заранее определённым критериям. Это помогает поддерживать высокую токен‑эффективность, гарантировать, что навык действительно добавляет ценность, и упрощает процесс аудита навыков в больших репозиториях.

Установка

Как установить

npx skills add https://github.com/softaworks/agent-toolkit --skill skill-judge

Сценарии

Когда использовать

Подходит

Необходимо проверить новый навык перед его загрузкой в продакшн‑агента.
Требуется оценить токен‑эффективность существующего навыка.
Необходимо убедиться, что навык соответствует официальным паттернам и примерам.
Проводится аудит набора навыков в репозитории.
Нужно выявить избыточные или дублирующие секции в SKILL.md.

Не подходит

Для выполнения действий в реальном времени (инструменты bash, read_file и т.п.).
Для отладки кода или тестирования бизнес‑логики.
Когда требуется проверка безопасности исполняемого кода, а не описания навыка.
Для оценки навыков, не использующих формат SKILL.md.

Похожие