XR-Anwendungen zu bauen war bisher Spezialistensache: 3D-Engines, Spatial Computing SDKs, Physik-Simulationen. Vibe Coding XR von Google Research ändert das. Ein natürlichsprachlicher Prompt - etwa „Erstelle eine Pusteblume, die beim Anfassen wegfliegt" - wird in unter 60 Sekunden zu einer funktionierenden, physikbasierten Android XR-App.

Gemini als XR-Ingenieur

Das System nutzt Googles XR Blocks-Framework - eine Open-Source-Bibliothek auf Basis von WebXR und three.js - und kombiniert es mit spezialisierten System-Prompts für Gemini. Das Sprachmodell übernimmt dabei die Rolle eines erfahrenen XR-Entwicklers: Es versteht räumliche Logik, konfiguriert Szenen mit korrekter Physik und generiert interaktive Anwendungen, die auf Android-XR-Headsets wie dem Samsung Galaxy XR laufen.

Der Workflow ist dabei denkbar einfach: Prompt eingeben, Gemini plant und implementiert die XR-Erfahrung, dann per Pinch-Geste direkt im Headset testen. Iterationen erfolgen in Echtzeit - eine neue Anweisung, ein neues Ergebnis.

Vom Physiklabor bis zum Chrome-Dino-Game

Google demonstriert die Vielseitigkeit mit konkreten Beispielen: Ein Mathe-Tutor, der Eulers Theorem als interaktive 3D-Geometrien visualisiert. Ein Physiklabor, in dem Nutzer Gewichte auf eine Waage legen. Ein Chemie-Experiment, bei dem Methan- und Ethylen-Flammen in Mixed Reality brennen - gefahrlos und interaktiv. Und eine XR-Version des legendären Chrome-Dino-Games, generiert in Minuten statt Stunden.

In einer internen Evaluation mit 60 Prompts erreichte das System eine Erfolgsquote von über 70 % beim ersten Versuch - Tendenz steigend nach elf Framework-Releases in sechs Monaten. Das Framework und eine Live-Demo sind quelloffen verfügbar.

🎯 Was das für die Praxis bedeutet

1. XR-Prototyping ohne Fachkenntnisse: Designer, Lehrer und Produktmanager können räumliche Erfahrungen beschreiben und sofort testen - ohne eine Zeile Code.

2. Bildung profitiert am stärksten: Interaktive 3D-Experimente in Physik, Chemie oder Geometrie lassen sich in Minuten erstellen. Das senkt die Schwelle für immersives Lernen massiv.

3. Android XR bekommt ein Entwickler-Ökosystem: Google löst das Henne-Ei-Problem neuer Plattformen: Wenn jeder Apps bauen kann, gibt es schneller genug Inhalte, damit sich Hardware lohnt.

Dieser Artikel enthält eingebettete Inhalte externer Anbieter, etwa Videos oder Social-Media-Beiträge. kiwoche.com ordnet diese Inhalte redaktionell ein, übernimmt sie jedoch nicht als eigene Inhalte. Die Rechte daran verbleiben bei den jeweiligen Rechteinhabern; für die externen Inhalte sind die jeweiligen Anbieter verantwortlich. Eingebettete Inhalte können vollständig oder teilweise mit KI erstellt oder bearbeitet worden sein.

Software ist tot von Markus M. Kirchmair

Anzeige · Buch und Angebot von Markus Kirchmair

Noch ein Tool. Oder endlich weniger Arbeit?

Prüfen Sie mit No More Tools, welche Software und Abläufe Ihr Unternehmen tatsächlich braucht. Im Workshop entsteht ein priorisierter Fahrplan.

📰 Quellen
Google Research Blog ↗ @GoogleResearch auf X ↗ XR Blocks GitHub ↗ XR Blocks Gem ↗
Teilen: