AIKraft/Skills/huggingface Оценки сообщества

huggingface Оценки сообщества

Run evaluations for Hugging Face Hub models using inspect-ai and lighteval on local hardware. Use for backend selection, local GPU evals, and choosing between vLLM / Transformers / accelerate. Not for HF Jobs orchestration, model-card PRs, .eval_results publication, or community-evals automation.

AIhuggingface official Другое

Что делает навык

Запуск оценок для моделей Hugging Face Hub с использованием inspect-ai и lighteval на локальном оборудовании. Используется для выбора бэкенда, локальных GPU-оценок и выбора между vLLM / Transformers / accelerate. Не предназначен для оркестрации HF Jobs, PR карточек моделей, публикации .eval_results или автоматизации community-evals.

Как подключить

1Скачать навык

# возьмите папку навыка «huggingface-community-evals» из репозитория: # https://github.com/huggingface/skills

2Положить папку с SKILL.md к навыкам ассистента

# положите папку навыка туда, где ассистент ищет skills: cp -r huggingface-community-evals/ ~/.claude/skills/huggingface-community-evals/

Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.