Використання ШІ для прискорення розробки XR та прототипування WebXR
Використання ШІ для XR-розробки покращує досвід розробників та прискорює прототипування WebXR
XR-розробка традиційно вимагає широкого спектра навичок, що створює високий бар’єр для входу і уповільнює цикли прототипування. Однак з новинкою Canvas у веб-додатку Gemini, Android XR команда дослідила, як зробити іммерсивні технології доступними для розробників та широкого загалу користувачів.
Щоб оцінити ефективність цього підходу, команда Google розробила іммерсивну біологічну симуляцію. Генеративна модель обчислювала складні взаємодії між клітинами крові і візуально відображала їх, використовуючи WebGL і Three.js. Перші результати “нагадували ілюстрацію живого підручника”, заявили у Google. Проте, перенесення цього контенту у формат XR з використанням WebXR APIs кардинально змінило картину, розкриваючи можливості Gemini для створення інтерактивних XR-вражень.
Ручне створення середовищ займає значну кількість часу розробників. Завдання, на яке старшому інженеру з XR потрібен цілий день, Canvas з допомогою ШІ може виконати менше ніж за хвилину. Прискорення цього процесу дозволяє архітекторам швидше перевіряти концепції перед інвестуванням у повний цикл виробництва.
Випускний продукт стає веб-посиланням, яке розробники можуть поділитися з будь-ким. Використання стандартних веб-посилань спрощує їх розповсюдження і уникнення проблем з розгортанням, зв’язаних із компільованими пакетами додатків. Ці інструменти дозволяють командам створювати складні 3D-прототипи та інтерактивні моделі швидше за традиційні методи.
Вимоги до обладнання та реалізація системи
Для тестування цих середовищ потрібне специфічне обладнання підприємницького класу. Розробникам знадобиться XR-гарнітура Samsung Galaxy і доступ до Gemini 3 Pro.
Інтеграція починається в інтерфейсі веб-додатку Gemini. Платформні інженери можуть почати з готового відеоблоку XR або створити індивідуальну версію, завантажуючи “ультра-підказку” XR-Blocks. Ця підказка надає Gemini розширені можливості сприйняття для реалістичних AR-фізичних властивостей.
Конфігурація вимагає визначення системної персони. Користувачі завантажують файл у новий видуманий блок Gemini і додають опис, наприклад: “Ви є провідним архітектором просторових обчислень, що спеціалізується на високопродуктивному рендерингу WebGL, ефективній оптимізації активів та безпечній візуалізації даних підприємства.”
Встановлення цього контексту дозволяє Geminiai інтерпретувати зорову сцену та використовувати інструменти генерації зображень, щоб створювати 3D текстури. Для запуску досвіду користувачі відкривають Gemini у Chrome на комфортному XR та починають чат з блоком XR Gem, обираючи Canvas.
Ітеративний розвиток за допомогою ШІ у XR
Після входу у середовище розробники створюють інтерактивні компоненти за допомогою простих текстових команд. Наприклад, можна створити кульбабку, що реагує на дотик. Система приймає команди на кшталт “створити сніжне середовище” для моментальної зміни оточення або “додати там леопарда” для додавання конкретних об’єктів.
Інженери можуть наділити персонажів передісторією та роллю у сцені. Якщо результат потребує коригування, розробники можуть спробувати знову або накласти прості ідеї один на одного для створення складності.
Для ще більш швидкої ітерації користувачі можуть надавати вказівки Gemini вбудувати Gemini Live всередині досвіду. Така установка дозволяє розробникам спілкуватися безпосередньо з Gemini або навіть продовжувати створення, не виходячи з іммерсивної сесії.
Використовуючи WebXR APIs замість пропрієтарних ігрових движків, корпоративні команди зберігають нейтралітет постачальників та дотримуються відкритих стандартів вебу. Усунення горловини 3D-візуалізації дозволяє командам розробників приділяти 100 відсотків свого часу на логіку додатку та безпеку даних.
