AiKraft

bilibili/Index-Translate

Семья многоязычных мультимодальных моделей перевода

Мультимодальные⭐ 1 741Python
Открыть на GitHub ↗Сайт проекта ↗

Что это за инструмент

Index-Translate — семейство мультимодальных моделей перевода на базе Qwen3.5, поддерживающих текст, изображения и аудио на 150 языках.

Зачем нужен

Инструмент решает задачи перевода с учетом сложных инструкций (терминология, форматирование), а также обеспечивает синхронизацию аудио (дубляж) и перевод длинных документов. Он полезен для создания локальных или облачных сервисов перевода, требующих высокой точности и контроля над результатом.

Что можно реализовать

  • Перевод изображений с текстом (OCR не требуется) с сохранением верстки.
  • Кросс-языковой дубляж видео с сохранением голоса оригинального спикера (Index-Echo).
  • Адаптация перевода под точное количество слогов для тайминга в дубляже (Index-Homura).
  • Перевод длинных документов с сохранением единообразия имен и терминов (Index-NativeLong).

Ключевые возможности

  • Поддержка 150 языков и мультимодальность (текст, изображения, аудио).
  • Нативная работа с изображениями без внешних OCR-библиотек.
  • Гибкое следование инструкциям (instruction following) по стилю и формату.
  • Доступность через бесплатный публичный API (совместим с OpenAI) и локальное развертывание через GGUF, FP8, NVFP4.
  • Наличие квантованных версий (GGUF для llama.cpp, FP8/NVFP4 для vLLM) для оптимизации ресурсов.

👤 Кому подойдёт: разработчики, исследователи, создатели контента (видео/игры), бизнес (локализация)

Релизы

Релизы ещё не отслежены — появятся после ближайшего опроса.