Что такое Freefield и почему это важно
Разработчики представили Freefield — проект, который воссоздает экосистему проприетарной платформы Higgsfield в формате open-source. В отличие от закрытых сервисов, Freefield позволяет запускать 117 приложений для генерации изображений, видео, VFX и звука локально или через облачные GPU (например, Modal). Ключевая особенность: каждое приложение — это папка с манифестом app.json и рабочим процессом ComfyUI, а все модели имеют открытые веса (open weights).
Архитектура построена на Comfy SDK и ComfyUI (версия e3bee7f/0.42.0). Пользователю не нужно писать код: веб-интерфейс динамически генерируется на основе манифестов, автоматически загружает нужные модели, управляет VRAM и передает задачи в ComfyUI через API.
Структура и масштаб проекта
В репозитории представлено 120 приложений, из которых 119 готовы к использованию. Они разделены на категории:
- 39 приложений с уникальными рабочими процессами (workflows).
- 5 приложений IC-LoRA (Genjutsu, Reframe, SDR-HDR, Mixed Media, Dub), использующих продвинутые техники контроля.
- 72 шаблонных приложения, созданных автоматически на базе базовых пайплайнов.
- 2 smoke-приложения без моделей для тестирования инфраструктуры.
Все примеры в интерфейсе сопровождаются метриками реальных GPU-запусков: временем выполнения и пиковым потреблением VRAM, что позволяет точно оценить требования к железу.
Технические характеристики и производительность
Проект прошел строгое тестирование: 48 лабораторных запусков на GPU L40S и H100 в период с 20 по 26 октября. Из 733 тестовых кейсов успешно прошли 710. Ниже приведены примеры потребления ресурсов для ключевых приложений на видеокарте с 24 ГБ VRAM:
| Приложение | Основная модель | Статус VRAM (24GB) | Примечание |
|---|---|---|---|
| create-image | FLUX 3 Image Klein (int8) | 17.8 GB (влезает целиком) | 17 фото-стилей, поддержка JSON-лейаута |
| z-image | Z-Image Turbo (int8) | 12.2 GB (влезает целиком) | Быстрые черновики |
| cinema-video | LTX-2.5 + FLUX 3 | 44.3 GB (пик на L40S) | Требует Modal/мощный GPU, генерация видео с движением камеры |
| video-t2v | LTX-2.5 22B (int8) | 21.5 GB (пиковая фаза) | Генерация видео с аудио |
| h3-video | MiniMax H3 (int8) | 27.1 GB (текстовый энкодер) | Требует Modal, генерация видео с речью |
| mixed-media | FLUX 3 + LTX-2.5 | 22.1 GB (пиковая фаза) | Комбинирование стилей и видео |
Как это работает для разработчика
Создание нового приложения сводится к добавлению папки в каталог apps/ с файлом app.json и workflow в формате API. Система автоматически:
- Генерирует веб-интерфейс (формы, меню).
- Составляет карту VRAM для каждой фазы выполнения.
- Проверяет совместимость через CI/CD (валидатор манифестов, тесты ComfyUI).
Проект также включает инструменты для импорта существующих ComfyUI-воркфлоу (tools/import_workflow.py) и сборки приложений из официальных шаблонов. Это делает Freefield не просто набором моделей, а полноценной платформой для быстрого прототипирования AI-инструментов.
Источник: Github ↗