AIKraft/Skills/gemini-omni

gemini-omni

Генерирует и редактирует короткие видео (3-10 с, 720p) через Gemini Omni Flash. Используйте для итеративных правок по запросу, создания клипов с аудио и текстом, привязки референсов через <FIRST_FRAME>/<IMAGE_REF_N> или редактирования загруженных видео. Доступно через tool gemini_omni_video.

calesthio official Дизайн ★ 64.9k

Что делает навык

Skill генерирует и редактирует короткие видео (3-10 с, 720p) через Gemini Omni Flash с возможностью синтетического аудио. Его ключевая особенность — stateful conversational editing, позволяющая вносить правки в существующий клип без полной перегенерации.

Когда применять

  • Итеративные правки видео по запросу пользователя с использованием previous_interaction_id
  • Создание клипов с синтезированным аудио и текстом
  • Редактирование загруженных видео или привязка референсов через <FIRST_FRAME>/<IMAGE_REF_N>
  • Генерация видео из текста (T2V) или изображения (I2V) через нативный API Google

Как работает

  1. Вызвать инструмент gemini_omni_video для генерации видео или применения правок
  2. Получить от модели interaction_id, идентифицирующий текущую сессию редактирования
  3. Для внесения изменений отправить следующий запрос с указанием previous_interaction_id
  4. Использовать теги <FIRST_FRAME> или <IMAGE_REF_N> для привязки визуальных референсов
  5. При отсутствии прямого доступа к Google API использовать альтернативные маршруты (fal.ai, Runway, ComfyUI) с учетом их ограничений

Примеры запросов агенту

Сгенерируй видео 5 секунд, 720p, с синтезированным аудио, где кот играет на пианино
Возьми предыдущее видео и добавь к нему текст 'Hello World' в нижнем углу
Создай клип по референсу <IMAGE_REF_1>, изменив освещение на вечернее

Что понадобится

  • Инструмент gemini_omni_video (или альтернативные вызовы: gemini_omni_fal, runway_video, comfyui_video)
  • Действующий GOOGLE_API_KEY / GEMINI_API_KEY для использования нативного маршрута
  • Оплата тарифа (Paid tier only, ~$0.10 за секунду видео)

Описание составлено по SKILL.md навыка, сверено 08.10.2026.

Как подключить

1Скачать навык
# возьмите папку навыка «gemini-omni» из репозитория: # https://github.com/calesthio/openmontage
2Положить папку с SKILL.md к навыкам ассистента
# положите папку навыка туда, где ассистент ищет skills: cp -r gemini-omni/ ~/.claude/skills/gemini-omni/

Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.