Релиз модели17 октября 2026 г., 07:20 МСК🤖 Auto

Meta Muse Spark Open: 816B MoE с 1M контекстом и запуском на Mac

Meta выпустила открытую версию модели Muse Spark Open (816B параметров). Это первый крупный MoE-модель, способная работать на двух Mac Studio M5 Ultra, но с явным отставанием в коде.

Баннер новости 9872

Архитектура и возможности

Muse Spark Open — это мультимодальная модель архитектуры Mixture-of-Experts (MoE) от Meta Superintelligence Labs. Модель содержит 816 миллиардов параметров, но при генерации текста активирует только 42 миллиарда (из 256 экспертов, выбираются топ-8). Это обеспечивает высокую эффективность при сохранении мощной базы знаний.

Ключевые технические характеристики:

  • Контекстное окно: 1 000 000 токенов (1M).
  • Мультимодальность: Принимает текст, изображения, видео и аудио. Выдает только текст.
  • Визуальный энкодер: Отдельная подмодель на 1.8B параметров.
  • Языки: Обучение на данных более чем на 100 языках.

Производительность: Агенты против Кода

Meta позиционирует модель как лидера среди открытых решений США, особенно в задачах агентов (tool use). Однако в программировании она уступает китайским конкурентам. Ниже приведено сравнение с ключевыми аналогами на максимальном уровне рассуждений (reasoning effort: xhigh).

Метрика / Модель Muse Spark Open Kimi K3 GLM 5.3 Qwen3.8
MCP-Atlas (Агенты) 89.2 82.3 84.2 84.5
JobBench (Задачи) 61.8 — 61.4 —
Terminal-Bench 2.1 (Код) 76.4 85.0 83.9 82.0
AA Intelligence Index 39 44 45 40

Железо: Запуск на Mac Studio

Самое интересное для разработчиков — возможность запуска на потребительском оборудовании. Meta оптимизировала модель для платформы MLX.

  • Desktop Setup: Модель в квантованном формате NVFP4 (около 530 ГБ весов) запускается на двух Mac Studio с чипом M5 Ultra (по 512 ГБ памяти каждый), соединенных через Thunderbolt 5 с поддержкой RDMA. Тензорное параллелизм MLX распределяет слои между машинами.
  • Data Center: Для NVFP4 требуется 4 GPU Blackwell Ultra или 8 H200. Для BF16 (1.6 ТБ весов) нужно 2 ТБ VRAM.
  • Workstation: Через Unsloth 2-bit GGUF модель можно запустить на системах с ~300 ГБ памяти.

Лицензия и доступность

Модель доступна на Hugging Face в форматах BF16 и NVFP4. Лицензия Muse Model License разрешает использование, дообучение и дистилляцию. Основные условия:

  1. Продукты должны содержать маркировку «Built with Muse Spark Open».
  2. Провайдеры Model-as-a-Service с выручкой более $20 млн за 12 месяцев обязаны заключить отдельное соглашение с Meta.

API уже доступно на Baseten, Fireworks AI, Groq, Modal, Nebius, OpenRouter и Together AI. Цена на OpenRouter: $1.25 за 1M входных токенов и $4.25 за 1M выходных.

Бенчмарки

БенчмаркMuse Spark OpenGLM 5.3Kimi K3Qwen3.8
MCP-Atlas89.2%84.2%82.3%84.5%
Terminal-Bench 2.176.4%83.9%85%82%
JobBench61.8%61.4%——
HLE-Diamond26.1%—22.2%—
ZeroBench50%—41%—

Жирным — лучший результат в строке. Источник цифр — официальная публикация.

Источник: MarkTechPost ↗