Новости про Qwen3 30B A3B
6 материалов с упоминанием Qwen3 30B A3B: релизы, бенчмарки, изменения цен. Полные характеристики, провайдеры и сравнения — в карточке модели.
-
Prime Intellect выпустил Prime Mega MoE: ускорение обучения MoE до 3.11x
Prime Intellect добавила обратный проход (backward pass) к ядру DeepSeek Mega MoE, сделав его пригодным для обучения. На моделях Qwen3 ускорение достигает 3.11x для прямого прохода и до 55% для полного шага обучения.
-
MoE-оптимизация: почему 4% токенов решают всё
Исследование Zhiyuan Wang показывает, что сокращение экспертов при префилле MoE-моделей убивает точность ответов. Ключ к балансу скорости и качества — сохранение полных экспертов для первых 8–32 токенов промпта.
-
Tencent Hy-Memory 2.0: 30B模型超Opus5,全栈开源记忆方案
腾讯混元发布 Hy-Memory 2.0,开源模型、框架与应用三层架构。其专用模型 Hy-Memory-30B-A3B 在记忆基准测试中超越闭源 Opus5,并在腾讯内部业务中显著提升多跳召回率。
-
StepFun Step 5 Preview: 600B MoE за $1/1M токенов
StepFun представила флагманскую модель Step 5 Preview для агентных задач. Это 600B-параметровая MoE-архитектура с 1M контекстом, предлагающая высокую эффективность при значительно более низкой цене, чем у конкурентов.
-
RBS-Attention: Ускорение LLM в 20 раз без потери точности
Исследователи представили RBS-Attention — метод разреженного префилла, ускоряющий обработку длинных контекстов (128K) в 20.65 раза на NVIDIA H100 с минимальной потерей качества.
-
Lemonade 11.9: AMD HRX бэкенд для локального AI с приростом 50%
Вышла версия Lemonade 11.9 с экспериментальной поддержкой нового стека AMD HRX в Llama.cpp, обещающего значительный рост скорости генерации на видеокартах RDNA3.