От хаоса к структуре: что такое AREX-Skill
Команда VectorSpaceLab представила AREX-Skill с модулем DisCo (Distillation of Coding Skills) — систему, которая автоматизирует извлечение «операционных знаний» из тысяч репозиториев GitHub. В отличие от простого суммирования кода, AREX-Skill создает самодостаточные единицы знаний, упакованные в формат SKILL.md. Каждая такая единица содержит не только код, но и контекст: когда применять метод, как валидировать результат и что делать при сбое эксперимента.
Архитектура включает роутер, который сужает поиск из более чем 5 000 проверенных навыков, собранных из 1 000+ популярных репозиториев, до конкретной ветки, необходимой для текущей задачи. Это позволяет AI-агентам (таким как Codex, Claude Code и Pi) избегать бесконечного перебора и сразу переходить к воспроизводимым решениям.
Результаты бенчмарков: разрыв с базовыми моделями
Ключевое преимущество AREX-Skill проявляется в сложных автономных исследовательских задачах. При фиксированном бюджете вычислений и настройках агента использование навыков привело к значительному росту метрик. Наибольший скачок наблюдается в инженерии ML, где агенту нужно решать задачи уровня Kaggle.
| Бенчмарк | Сценарий | Метрика | Codex (база) | Codex + AREX-Skill | Прирост |
|---|---|---|---|---|---|
| MLE-bench | ML инженерия (75 соревнований Kaggle) | Any Medal rate (%) | 31.11 | 72.89 | +134.3% |
| PaperBench | Воспроизведение статей (20 papers) | Replication score | 29.45 | 39.59 | +34.4% |
| FrontierCS | Оптимизация алгоритмов (188 задач) | Score | 70.63 | 77.14 | +9.2% |
| PassNet | Оптимизация компилятора (200 сэмплов) | AS Score | 1.343 | 1.531 | +14.0% |
Как это работает технически
Процесс создания навыков (Distillation) состоит из четырех этапов: определение границ, привязка к доказательствам, построение графа навыков и верификация. Структура навыка выглядит так:
SKILL.md: описание области применения, роутинга, рабочего процесса и валидации.references/: специфические инструкции и источники.scripts/: исполняемые помощники, диагностика и проверки.
Роутер использует прогрессивное раскрытие информации: сначала он определяет область (например, Computer Vision или LLM), затем конкретный репозиторий и, наконец, загружает только нужную ветку инструкций. Это экономит контекстное окно агента и снижает вероятность галлюцинаций.
Интеграция и запуск
AREX-Skill совместим с популярными coding-агентами. Установка требует Node.js >=22.19.0 и выполняется через npm или curl-скрипт. После установки модуля DisCo в режиме Researcher агент автоматически получает доступ к библиотеке. Пользователи могут экспортировать выбранные навыки в директории агентов (например, ~/.agents для Codex или ~/.claude для Claude Code), что позволяет интегрировать проверенные рабочие процессы в существующие пайплайны разработки.
Источник: Github ↗