eval-audit
Аудит пайплайна LLM eval для выявления проблем: отсутствия анализа ошибок, непроверенных судей и vanity metrics. Используйте при наследовании eval-системы или если не уверены в её надёжности. Не применяйте для создания нового оценщика с нуля.
AIhamelsmu
official
Разработка
★ 1.7k
Что делает навык
Аудит пайплайна LLM eval для выявления проблем: отсутствия анализа ошибок, непроверенных судей и vanity metrics. Используйте при наследовании eval-системы или если не уверены в её надёжности. Не применяйте для создания нового оценщика с нуля.
Как подключить
1Скачать навык
# возьмите папку навыка «eval-audit» из репозитория:
# https://github.com/hamelsmu/evals-skills
2Положить папку с
SKILL.md к навыкам ассистента# положите папку навыка туда, где ассистент ищет skills:
cp -r eval-audit/ ~/.claude/skills/eval-audit/
Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.