alembics/disco-diffusion

Vision⭐ 7 395Jupyter Notebookпоследний релиз: v5.4.0
Открыть на GitHub ↗

Что это за инструмент

Disco Diffusion — это Colab-ноутбук для генерации AI-арта и анимаций, объединяющий модели диффузии, CLIP и различные техники трансформации изображений.

Зачем нужен

Инструмент решает задачу создания сложных визуальных эффектов, анимаций и 3D-видео на основе текстовых промптов или входных видео. Он полезен тем, что предоставляет готовую среду с оптимизированными параметрами для быстрого получения качественных результатов без глубокой настройки инфраструктуры.

Что можно реализовать

  • Создание анимаций с использованием 3D-режима и оценки глубины (MiDaS, AdaBins)
  • Генерация видео с эффектом плавного перехода кадров через Warp mode (optical flow)
  • Создание VR-контента с поддержкой виртуальной реальности
  • Применение специализированных моделей для портретов, пиксель-арта или акварельного стиля
  • Использование видео-инициализации (video_init) для продолжения или трансформации существующих видео

Ключевые возможности

  • Поддержка множества режимов: 3D-анимация, VR, Warp, видео-инпут
  • Интеграция OpenCLIP и кастомных моделей (Pixel Art, Watercolor, Pulp SciFi)
  • Возможность сохранения настроек, прерывания и возобновления генерации (resume run)
  • Гибкое управление ключевыми кадрами (keyframing) и параметрами масштабирования/поворота
  • Кроссплатформенная поддержка и упрощенный процесс разработки через colab-convert

👤 Кому подойдёт: художники, создающие AI-арт, разработчики, интересующиеся диффузионными моделями, и энтузиасты генеративного видео

Релизы

v5.4.0minor
🕐 51 мес назад · релиз на GitHub ↗

В Disco Diffusion v5.4.0 добавлен режим Warp для плавных видео на основе оптического потока и поддержка пользовательских моделей.

  • Added: Режим Warp: генерация видео с плавными переходами за счёт оценки оптического потока и смешивания кадров.
  • Added: Поддержка пользовательских моделей: возможность использовать собственные модели вместо стандартных.