validate-evaluator
Калибрует LLM-судью по человеческим меткам с использованием долей данных, TPR/TNR и коррекции смещения. Применяйте после написания промпта (write-judge-prompt) для проверки соответствия перед использованием. Не подходит для кодовых оценщиков.
AIhamelsmu
official
Разработка
★ 1.7k
Что делает навык
Калибрует LLM-судью по человеческим меткам с использованием долей данных, TPR/TNR и коррекции смещения. Применяйте после написания промпта (write-judge-prompt) для проверки соответствия перед использованием. Не подходит для кодовых оценщиков.
Как подключить
1Скачать навык
# возьмите папку навыка «hamelsmu-validate-evaluator» из репозитория:
# https://github.com/hamelsmu/evals-skills
2Положить папку с
SKILL.md к навыкам ассистента# положите папку навыка туда, где ассистент ищет skills:
cp -r hamelsmu-validate-evaluator/ ~/.claude/skills/hamelsmu-validate-evaluator/
Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.