Приватность и локальный AI
AutoSubs — это приложение с открытым исходным кодом, которое полностью работает на стороне пользователя (local-first). В отличие от многих облачных сервисов, оно не отправляет аудио или видеофайлы на серверы третьих лиц. Приложение доступно для macOS (Apple Silicon/Intel), Windows (Vulkan/DirectML) и Linux (Debian/Ubuntu, Fedora/openSUSE). Установка возможна через нативные установщики, Homebrew или пакетные менеджеры.
Новые возможности в версии 3.5
Версия 3.5 приносит значительные улучшения в области транскрипции и пользовательского интерфейса. Ключевые нововведения включают:
- Обнаружение активности голоса (VAD): Улучшено определение начала и конца речевых фрагментов.
- Диаризация спикеров: Алгоритм теперь точнее идентифицирует и размечает разных говорящих, что позволяет применять к ним индивидуальное форматирование.
- Редактирование: Добавлено свободное редактирование субтитров с авто-таймингом, история транскриптов и 6 новых языков интерфейса.
- Интеграция с DaVinci Resolve: Появилась система пресетов, анимированные макросы с подсветкой слов по ключевым кадрам (markers) и мгновенное обнаружение конфликтов таймингов.
Поддерживаемые модели и точность
AutoSubs использует семейство локальных моделей, загружаемых через встроенный менеджер. Точность оценивается в относительных единицах от 1 до 4 звезд. Ниже приведена сводка доступных моделей, их размера и требований к оперативной памяти:
| Семейство моделей | Пример модели | Размер | RAM | Языки | Точность |
|---|---|---|---|---|---|
| Whisper (OpenAI) | large-v3 | 3.1 GB | 10 GB | Мультиязычный | ★★★★ |
| Whisper (OpenAI) | large-v3-turbo | 1.6 GB | 6 GB | Мультиязычный | ★★★ |
| Parakeet (NVIDIA) | parakeet | 700 MB | 2 GB | 25 языков (EU + RU + UK) | ★★★★ |
| Cohere | cohere | 2 GB | 4 GB | 14 языков (вкл. RU, EN, DE) | ★★★★ |
| Canary (NVIDIA) | canary | 1 GB | 3 GB | 25 языков + перевод | ★★★★ |
| SenseVoice (Alibaba) | sense-voice | 230 MB | 1 GB | CJK + EN | ★★★ |
| Moonshine | moonshine-tiny-ja | 120 MB | 1 GB | Японский | ★★★ |
Интеграция с видеоредакторами
AutoSubs работает не только как самостоятельное приложение для экспорта в SRT, но и как плагин для профессиональных NLE. В Adobe Premiere Pro и After Effects субтитры импортируются как дорожки титров или текстовые слои. В DaVinci Resolve используется Lua-сервер и Fusion-макросы для прямой отправки стилизованных субтитров на таймлайн. Важно отметить, что версия из Mac App Store не поддерживает интеграцию с DaVinci Resolve — для этой функции требуется установка редактора с официального сайта Blackmagic Design.
Источник: Github ↗