AIKraft/AI/Войти
AIKraft/Skills/Оценка клинической ASR для цифрового здравоохранения

Оценка клинической ASR для цифрового здравоохранения

Stage 3 of Clinical ASR Flywheel. Score a NeMo manifest, produce the five-section KER leaderboard (by-ipa_source diagnostic). Not for ASR auth (/riva-asr).

nvidia official Другое

Что делает навык

Навык выполняет этап 3 (Оценка) клинического цикла ASR: транскрибирует аудио из манифеста NeMo через ASR NIM, оценивает четыре метрики и формирует лидерборд из пяти разделов. Он определяет, следует ли перейти к дообучению, вернуться к сбору данных или остановить процесс.

Когда применять

  • Оценка качества транскрипции клинических аудиозаписей с использованием манифеста NeMo.
  • Генерация лидерборда KER (diagnostics by-ipa_source) для сравнения моделей ASR.
  • Принятие решения о маршрутизации процесса: переход к /digital-health-clinical-asr-finetune или возврат к /digital-health-clinical-asr-build.
  • Анализ результатов оценки для выявления необходимости усиления этапа оценки (harden the eval).

Как работает

  1. Проверить наличие и заполненность манифеста manifest.jsonl формата NeMo; если он отсутствует или пуст, направить пользователя к /digital-health-clinical-asr-build.
  2. Предупредить пользователя о том, что аудиофайлы и эталонный текст покидают среду и отправляются во внешнюю службу NVIDIA, прежде чем вызывать первый ASR-запрос.
  3. Транскрибировать WAV-файлы из манифеста с помощью выбранного ASR NIM.
  4. Оценить результаты транскрипции по четырем метрикам.
  5. Сформировать лидерборд из пяти разделов (диагностика by-ipa_source).
  6. Прочитать дерево решений для определения следующего шага: переход к дообучению, возврат к сбору данных или остановка для усиления оценки.

Примеры запросов агенту

Выполни оценку клинического манифеста NeMo и сформируй лидерборд KER.
Проанализируй результаты транскрипции из manifest.jsonl и определи, нужно ли переходить к дообучению.
Запусти этап 3 Clinical ASR Flywheel для текущего манифеста и покажи метрики оценки.

Что понадобится

  • Манифест manifest.jsonl в формате NeMo.
  • Доступ к внешнему сервису NVIDIA для ASR NIM.
  • Инструменты для транскрипции WAV-файлов и расчета метрик (ASR NIM).

Описание составлено по SKILL.md навыка, сверено 05.10.2026.

Как подключить

1Скачать навык
# возьмите папку навыка «digital-health-clinical-asr-eval» из репозитория: # https://github.com/nvidia/skills
2Положить папку с SKILL.md к навыкам ассистента
# положите папку навыка туда, где ассистент ищет skills: cp -r digital-health-clinical-asr-eval/ ~/.claude/skills/digital-health-clinical-asr-eval/

Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.