langsmith-evaluator
Создаёт пайплайны оценки для LangSmith: генерирует оценщики (LLM-as-Judge, кастомный код), определяет функции для захвата траекторий агента и запускает оценки локально через evaluate() или автоматически. Использует CLI langsmith.
AIlangchain-ai
official
Разработка
★ 159
Что делает навык
Создаёт пайплайны оценки для LangSmith: генерирует оценщики (LLM-as-Judge, кастомный код), определяет функции для захвата траекторий агента и запускает оценки локально через evaluate() или автоматически. Использует CLI langsmith.
Как подключить
1Скачать навык
# возьмите папку навыка «langsmith-evaluator» из репозитория:
# https://github.com/langchain-ai/langsmith-skills
2Положить папку с
SKILL.md к навыкам ассистента# положите папку навыка туда, где ассистент ищет skills:
cp -r langsmith-evaluator/ ~/.claude/skills/langsmith-evaluator/
Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.