Жест как интерфейс: от VR к физическому объекту
Программист и энтузиаст Hank опубликовал видео, демонстрирующее бесшовную интеграцию виртуальной реальности и физического производства. Используя шлем Meta Quest 3, пользователь создает 3D-модель, а затем совершает жест «броска» в сторону принтера. Система распознает действие, передает файл на печать, а сам Hank отметил, что «никогда не чувствовал себя более как Тони Старк».
Железо: связка Meta Quest 3 и Bambu Lab P2S
В основе эксперимента лежит комбинация двух популярных устройств. Принтер Bambu Lab P2S оснащен системой мульти-материалов AMS 2, что позволяет печатать сложными объектами без ручной замены филаментов. Шлем Meta Quest 3 выступает в роли интерфейса ввода. Ранее эти устройства не имели официальной интеграции, но энтузиаст создал собственное решение.
| Компонент | Модель/Версия | Роль в системе |
|---|---|---|
| Шлем VR | Meta Quest 3 | Интерфейс захвата жестов и отображения 3D-модели |
| 3D-принтер | Bambu Lab P2S | Физическое воспроизведение объекта |
| Система материалов | AMS 2 | Автоматическая подача нескольких типов пластика |
| ИИ-модель | OpenAI GPT-6 Astra | Генерация кода для связки (vibe coding) |
Техническая магия: API и «вайб-кодинг»
Ключ к успеху — открытое API Bambu Lab, позволяющее управлять принтером локально. Hank развернул веб-сервер на ПК, который выступает мостом между Android-приложением (или VR-сессией) и принтером. Весь код для этой связки был сгенерирован с помощью OpenAI GPT-6 Astra в стиле «вайб-кодинга» (vibe coding) — подхода, где ИИ пишет код на основе текстовых описаний намерений, а не строгих спецификаций.
- Архитектура: Android App/VR -> PC Web Server -> Bambu Lab Printer (via API).
- Инструмент: GPT-6 Astra использовалась для реверс-инжиниринга логики и написания скриптов.
- Статус: Код пока не опубликован на GitHub, но автор готов выложить его после доработки при наличии интереса сообщества.
Контекст: Эра VR-гейминга и кастомизации
Это не единственный проект Hank в сфере VR. В том же твиттере он упоминает, что с помощью той же модели GPT-6 Astra заставил работать декомпилированную версию Super Smash Bros. Melee на Meta Quest 3 с поддержкой VR-контроллеров. Это демонстрирует тренд: пользователи все чаще используют ИИ для создания кастомных решений, объединяющих разрозненные технологии в единый рабочий процесс.
Источник: Tom's Hardware ↗