modelscope/FunASR

Исправлена работа онлайн-фронтенда без LFR, исправлен токенайзер SentencePiece и улучшена обработка пустых входных данных в VAD.

• Fixed: Исправлена инициализация курсора кадров для онлайн-фронтенда при отсутствии LFR и устранено создание лишних пустых чанков VAD.
• Fixed: Исправлена семантика токенизации: теперь ids2tokens корректно возвращает список строк для SentencePiece, а конвертация в текст выполняется через tokens2text.
• Fixed: Улучшена обработка пустых и коротких входных данных в офлайн-модуле VAD, а также исправлено потребление кэша при пустом знаке препинания.
• Added: Выпущены отдельные пакеты funasr-onnx версии 0.4.9 и funasr-torch версии 0.1.6 с соответствующими исправлениями.

Исправлена передача merge_length_s в generate(), улучшена динамика VAD, добавлена поддержка CMVN и исправлен hotword batching.

• Fixed: Параметр merge_length_s, передаваемый в generate(), теперь имеет приоритет над значениями, заданными при инициализации.
• Fixed: Динамическое расписание тишины в VAD теперь оценивается для каждого кадра на основе текущей длительности сегмента речи.
• Fixed: Исправлена обработка пустых и неполных файлов CMVN, а также улучшено декодирование пакетов в ContextualParaformer и SeacoParaformer.
• Fixed: Выпущены обновления для hotword batching в funasr-onnx (0.4.7) и funasr-torch (0.1.5), а также фикс парсера CMVN в funasr-onnx (0.4.8) и funasr-torch (0.1.6).

Исправление ошибок в пунктуации и VAD, а также обновление runtime-сборок llama.cpp для различных платформ.

• Fixed: Исправлена работа потоковой пунктуации: пустые или пробельные фрагменты теперь возвращают пустой результат без изменения кэша.
• Fixed: Исправлена модель Fsmn_vad: теперь она возвращает список сегментов для каждого входного элемента.
• Added: Выпущена отдельная версия funasr-onnx 0.4.6 с исправлениями для мульти-входного ONNX VAD.
• Added: Добавлены готовые runtime-сборки llama.cpp для Linux, macOS и Windows, включая поддержку CUDA Blackwell.

Исправлены ошибки импорта спикеров, улучшена работа ONNX VAD и Paraformer, обновлены зависимости и документация.

• Fixed: Исправлена ошибка NameError при импорте опциональных моделей спикеров; теперь корректно генерируется ImportError.
• Fixed: Улучшена обработка коротких чанков и потоков в модели Fsmn_vad_online для ONNX.
• Fixed: Исправлена обработка стриминговых чанков Paraformer, не содержащих признаков.
• Fixed: Восстановлена работа CLI-утилит оценки и корректный выбор GPU-устройств.
• Added: Обновлены версии пакетов funasr-onnx (0.4.4, 0.4.5) и Torch runtime (0.1.4).

Исправлена работа Paraformer с пустыми токенами, добавлена настройка лимита спикеров и валидация JSON-передач в реальном времени.

• Fixed: Paraformer теперь корректно сохраняет пустые токены и синхронизирует таймстампы в пакетной обработке.
• Fixed: В автоматическую кластеризацию спикеров добавлена возможность явного ограничения их количества.
• Fixed: Реализована валидация и передача JSON-объектов через параметр --hf_overrides в сервере реального времени.
• Fixed: Исправлена логика ONNX-версии Paraformer: корректная обработка нулевого размера чанка и финальных пустых результатов.

Исправлена логика hotword для смешанных скриптов, синхронизация таймстемпов и выравнивание VAD-чунков.

• Fixed: Исправлена ошибка замены горячих слов при смешанных скриптах (например, китайский текст больше не получает латинский префикс).
• Fixed: Устранено смещение таймстемпов при фильтрации специальных токенов; теперь генерируется ошибка вместо молчаливого сдвига.
• Fixed: Сохранено корректное выравнивание границ токенов VAD для текстов предложений, таймстемпов и назначения спикеров.

Исправлены архивы исходников, обновлена документация по MOSS-Transcribe-Diarize и добавлены руководства по развёртыванию.

• Fixed: Исправлены проблемы с архивами исходного кода для Git archive и установки из исходников.
• Added: Обеспечена доступность MOSS-Transcribe-Diarize в моделях, документации по развёртыванию и сервисам.
• Added: Добавлены актуальные руководства по развёртыванию в реальном времени и промышленных условиях.
• Added: Предоставлены кроссплатформенные бинарные файлы runtime-llamacpp-v0.2.6 и контрольные суммы SHA256SUMS.

Выпуск FunASR 1.4.11: исправление маркеров SentencePiece и автоматизация сборки пакетов, добавлены бинарники llama.cpp для всех платформ.

• Fixed: Исправлено выравнивание маркеров слов в SentencePiece для работы auto-model.
• Added: Добавлены готовые бинарные сборки llama.cpp для Linux, macOS и Windows (включая CUDA Blackwell и Vulkan).
• Added: Автоматизировано прикрепление Python-пакетов к релизам через CI.
• Обновлена версия до 1.4.11, доступна установка через PyPI.

Исправлено разбиение длинных китайских предложений на субтитры с учётом пауз и лексики; обновлён runtime llama.cpp.

• Fixed: Улучшено формирование границ субтитров для длинных китайских предложений: теперь учитываются длительность, пунктуация и границы слов Jieba, а не только лимит в 42 символа.
• Fixed: Исправлена проблема #3539, связанная с нарушением длительности и длины cue при обработке смешанных китайско-корейских аудиодорожек.
• Added: В релиз включены проверенные архивы runtime llama.cpp для Linux, macOS и Windows с поддержкой CPU, Vulkan, CUDA и Blackwell.

Вышла версия v1.4.9.

Исправлена загрузка весов в Vulkan для FunASR llama.cpp; добавлены бинарники для SenseVoice, Paraformer и Nano.

• Fixed: Исправлена загрузка весов с хоста на устройство в Vulkan, обеспечивая корректное копирование тензоров перед выполнением графа.
• Added: Добавлены готовые самодостаточные бинарники для FunASR llama.cpp / GGUF с поддержкой SenseVoice, Paraformer и Fun-ASR-Nano.
• Added: Предоставлены скрипты для автоматической загрузки квантованных моделей через Hugging Face CLI.
• Добавлена поддержка AVX2/FMA/F16C/BMI2 для повышения производительности на совместимых CPU.
• Выпущены сборки для Linux, macOS и Windows с поддержкой Vulkan и CUDA (архитектура 86).

Исправлено прерывистое появление пустых транскриптов SenseVoiceSmall при использовании F16 GGUF-весов.

• Fixed: Устранена ошибка, вызывавшая пустые транскрипты SenseVoiceSmall при работе с F16 GGUF-моделями.
• Fixed: Корректная декодировка эмбеддингов в зависимости от типа тензора (F16/F32) и валидация ширины.
• Fixed: Запрет чтения F16-хранилища через float * и отсечение недопустимых ID токенов.
• Исправление не затрагивает проблему краха AMD Vulkan на Windows (issue #3479).

Исправлены ошибки в timestamp, рентайме и Vulkan, улучшена группировка субтитров и добавлена трассировка SenseVoice.

• Fixed: Исправлена ошибка IndexError при обработке пустых сегментов в timestamp_sentence_en.
• Fixed: Устранены ложные таймауты keepalive в режиме реального времени под нагрузкой.
• Fixed: Добавлена защита от сбоев инициализации бэкенда Vulkan.
• Added: В CLI реализована группировка читаемых субтитровых подсказок.
• Added: Добавлена трассировка этапов бэкенда SenseVoice для улучшенной диагностики.

Улучшена диагностика этапов загрузки и выполнения моделей SenseVoice, Paraformer и Nano в runtime llama.cpp.

• Added: Расширена диагностика этапов инициализации бэкенда, загрузки модели, выделения графа и начала вычислений.
• Added: Добавлены четкие границы статусов (backend ready, model ready, graph allocated, compute starting) для точной локализации сбоев.
• Fixed: Подготовлен пакет Windows Vulkan для повторного тестирования на Radeon 780M и RX 9070 XT.
• Релиз не устраняет критический сбой AMD Windows 0xC0000005, а лишь улучшает отладку.
• Android/Mali остается вне списка официально поддерживаемых и проверяемых платформ.

Исправлена критическая ошибка инициализации бэкендов CUDA/Vulkan, улучшено логирование ошибок, добавлены бинарники для Windows с Vulkan.

• Fixed: Исправлена ошибка разыменования нулевого указателя при сбое инициализации бэкендов CUDA или Vulkan.
• Added: Улучшено логирование: добавлены четкие границы вывода в stderr для точной диагностики этапов инициализации.
• Added: Готовы пакеты Windows с поддержкой Vulkan для тестирования на Radeon 780M и RX 9070 XT.
• Релиз собран по коммиту 05be4863, все девять платформ успешно прошли сборку.