AIKraft/Skills/cost-trend

cost-trend

Анализирует файлы docs/benchmarks/runs/*.json для выявления дрейфа показателей: win rate, latency, escalation rate и стоимости LLM-baseline. Полезно для мониторинга стабильности и эффективности моделей во времени.

ruvnet official Данные ★ 74k

Что делает навык

Анализ файлов docs/benchmarks/runs/*.json для выявления дрейфа показателей (win rate, latency, стоимость) во времени. Позволяет обнаруживать регрессии, которые пропускает бинарный smoke gate (например, постепенное снижение win rate с 100% до 85%).

Когда применять

  • Перед релизом для проверки, что ускорение (speedup) не дрейфовало.
  • После расширения корпуса (corpus) для проверки, что старые запуски (runs) достигают того же win rate на новом корпусе.
  • После обновления agent-booster для выявления изменений в latency или стратегии.

Как работает

  1. Перейти в корень проекта (project root).
  2. Запустить скрипт трендов: node plugins/ruflo-cost-tracker/scripts/trend.mjs.
  3. Скрипт читает все сохраненные запуски (persisted runs) из docs/benchmarks/runs/*.json.
  4. Анализатор вычисляет дельты от первого к последнему запуску (first→last deltas).
  5. Формируется серия по каждому запуску (per-run series) с флагом регрессий в win rate или latency.

Примеры запросов агенту

Проанализируй дрейф показателей в docs/benchmarks/runs/*.json перед релизом.
Проверь, не изменилась ли latency после обновления agent-booster, используя trend.mjs.
Выяви регрессии win rate за время, запустив анализ трендов в проекте.

Что понадобится

  • Node.js (для выполнения команды node)
  • Проект ruflo с установленным плагином ruflo-cost-tracker
  • Наличие файлов в docs/benchmarks/runs/*.json

Описание составлено по SKILL.md навыка, сверено 08.10.2026.

Как подключить

1Скачать навык
# возьмите папку навыка «cost-trend» из репозитория: # https://github.com/ruvnet/ruflo
2Положить папку с SKILL.md к навыкам ассистента
# положите папку навыка туда, где ассистент ищет skills: cp -r cost-trend/ ~/.claude/skills/cost-trend/

Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.