Генеративная VFX, а не просто «свет»
Разработчик FuzzPuppy представил Black Magic — специализированный IC-LoRA адаптер для видео-модели LTX-2.3 22B. В отличие от традиционных алгоритмов повышения яркости (low-light enhancement), эта модель не пытается восстановить исходный оптический сигнал. Вместо этого она интерпретирует, что может скрываться в «сломанных» тенях, создавая визуально богатую и временнó согласованную реконструкцию сцены.
Ключевая особенность: модель генерирует правдоподобные детали там, где информации недостаточно. Это делает её инструментом для креативных VFX-задач, а не для криминалистики или научной обработки.
Технические характеристики и обучение
Модель обучена на базе трансформера LTX-2.3 с использованием архитектуры IC-LoRA (rank 32, alpha 32). Для обучения использовались два источника: синтетически затемненные видео с платформы Pexels и реальные пары «свет/тьма» из датасета BVI-RLV (CC BY 4.0). Чекпоинт сохранен на шаге 450.
| Параметр | Значение / Описание |
|---|---|
| Базовая модель | LTX-2.3 22B (Lightricks) |
| Тип адаптера | IC-LoRA (video-to-video) |
| Ранг / Альфа | Rank 32, Alpha 32 |
| Рекомендуемая сила LoRA | 1.0 – 1.25 |
| Разрешение вывода | 1280×704 (16:9) |
| Количество шагов (Phase 1) | 8 distilled Euler steps |
| Лицензия весов | LTX-2 Community License |
Как использовать: Промптинг и настройки
Для работы требуется ComfyUI с официальными нодами Lightricks. В workflow заложена двухфазная обработка. Ключевой элемент управления — текстовый промпт. Система ожидает стандартный префикс, за которым следует краткое описание сцены, чтобы направить генерацию теней.
- Базовый префикс: "Restore this underexposed video to a natural, well-exposed version with realistic colors and recovered shadow detail."
- Добавка: Описание объекта (например, "A tiger in a forest"). Чем короче описание, тем сильнее модель держится за видимые контуры; длинный промпт может изменить стиль на «нарисованный».
- CFG и Seed: Phase two использует CFG, seed 43 и специфические сигмы (0.85, 0.7250, 0.4219, 0).
Ограничения и сфера применения
Black Magic не предназначена для восстановления доказательств или точной реконструкции. Если в кадре полностью черная область, модель «придумает» контент, который может не соответствовать реальности. Идеальные сценарии использования: ночные концерты, съемки животных в дикой природе, фестивали и любые кадры, где важна эстетика, а не документальная точность.
Файл модели: black-magic-ic-lora-450.safetensors. Загрузок на Huggingface на момент публикации: 127.
Источник: Huggingface ↗