Что такое Mundo 1.1
Mundo 1.1 — это модель генеративного видео, разработанная командой Mundo World Model. Её ключевая особенность — способность работать с реальными фотографиями мест (real places) и генерировать новые виды вдоль заданного пути камеры. В отличие от абстрактных генеративных моделей, Mundo сохраняет геометрию и детали оригинальной сцены.
Как это работает
Алгоритм выполняет два основных этапа:
- Восстановление 3D-прокси: На основе 1–12 входных изображений модель реконструирует пространственную структуру сцены, устанавливая отношения между объектами.
- Генерация новых ракурсов: Используя этот 3D-прокси как основу, Mundo генерирует новые кадры вдоль заданного пути камеры, сохраняя layout, внешний вид и видимые детали оригинала.
Ключевые возможности
| Параметр | Значение / Описание |
|---|---|
| Количество входных изображений | От 1 до 12 |
| Тип входных данных | Реальные фотографии мест (real places) |
| Метод реконструкции | Создание 3D-прокси для сохранения пространственных отношений |
| Гибкость камеры | Генерация по нескольким путям камеры из одного набора входных данных |
| Обработка невидимых зон | Инференс областей, не захваченных исходными камерами |
Почему это важно
Традиционные методы генерации видео часто теряют пространственную согласованность при движении камеры. Mundo 1.1 решает эту проблему, используя входные изображения как «якоря» (anchors) для наблюдаемых частей сцены. Это позволяет модели не только генерировать новые кадры, но и корректно заполнять области, которые не были видны на исходных фото, обеспечивая физически правдоподобное движение камеры.
Где найти
Проект доступен на GitHub и официальном сайте Mundo World Model. Модель позиционируется как инструмент для создания иммерсивных визуальных контентов с высокой степенью контроля над камерой.
Источник: Github ↗