Новая функция: от музыки к движению
Платформа для генерации видео Wan Video (доступная по адресу create.wan.video) анонсировала обновление, позволяющее создавать танцевальные ролики. Пользователи могут загрузить аудиофайл, и нейросеть сгенерирует видео, в котором виртуальный аватар или персонаж выполняет движения, синхронизированные с ритмом и темпом музыки.
Как это работает
Процесс генерации через интерфейс платформы включает несколько шагов:
- Пользователь получает доступ к инструменту через веб-интерфейс.
- Загружается целевой музыкальный трек (аудио).
- Настройка параметров персонажа или сцены (если доступно).
- Генерация видео, где движения тела и конечностей строго соответствуют аудиодорожке.
Значение для индустрии
Эта функция знаменует важный шаг в развитии генеративного видео, смещая фокус с простого создания статичных или слабо анимированных сцен на сложную кинематику. Синхронизация движений с аудио — одна из самых сложных задач для ИИ, требующая понимания ритма, фазы и биомеханики. Успешная реализация этой функции в Wan Video указывает на прогресс в моделировании временных зависимостей и пространственной согласованности.
Доступность
Функция доступна через официальный сайт Wan Video. Для использования требуется регистрация аккаунта, которая может быть выполнена через Google, GitHub или стандартную форму регистрации. Платформа также предлагает помощь пользователям через раздел Help.
Источник: Wan ↗