cost-trend
Анализирует файлы docs/benchmarks/runs/*.json для выявления дрейфа показателей: win rate, latency, escalation rate и стоимости LLM-baseline. Полезно для мониторинга стабильности и эффективности моделей во времени.
AIruvnet
official
Данные
★ 74k
Что делает навык
Анализ файлов docs/benchmarks/runs/*.json для выявления дрейфа показателей (win rate, latency, стоимость) во времени. Позволяет обнаруживать регрессии, которые пропускает бинарный smoke gate (например, постепенное снижение win rate с 100% до 85%).
Когда применять
- Перед релизом для проверки, что ускорение (speedup) не дрейфовало.
- После расширения корпуса (corpus) для проверки, что старые запуски (runs) достигают того же win rate на новом корпусе.
- После обновления agent-booster для выявления изменений в latency или стратегии.
Как работает
- Перейти в корень проекта (project root).
- Запустить скрипт трендов: node plugins/ruflo-cost-tracker/scripts/trend.mjs.
- Скрипт читает все сохраненные запуски (persisted runs) из docs/benchmarks/runs/*.json.
- Анализатор вычисляет дельты от первого к последнему запуску (first→last deltas).
- Формируется серия по каждому запуску (per-run series) с флагом регрессий в win rate или latency.
Примеры запросов агенту
Проанализируй дрейф показателей в docs/benchmarks/runs/*.json перед релизом.
Проверь, не изменилась ли latency после обновления agent-booster, используя trend.mjs.
Выяви регрессии win rate за время, запустив анализ трендов в проекте.
Что понадобится
- Node.js (для выполнения команды node)
- Проект ruflo с установленным плагином ruflo-cost-tracker
- Наличие файлов в docs/benchmarks/runs/*.json
Описание составлено по SKILL.md навыка, сверено 08.10.2026.
Как подключить
1Скачать навык
# возьмите папку навыка «cost-trend» из репозитория:
# https://github.com/ruvnet/ruflo
2Положить папку с
SKILL.md к навыкам ассистента# положите папку навыка туда, где ассистент ищет skills:
cp -r cost-trend/ ~/.claude/skills/cost-trend/
Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.