XR-Anwendungen zu bauen war bisher Spezialistensache: 3D-Engines, Spatial Computing SDKs, Physik-Simulationen. Vibe Coding XR von Google Research ändert das. Ein natürlichsprachlicher Prompt — etwa „Erstelle eine Pusteblume, die beim Anfassen wegfliegt" — wird in unter 60 Sekunden zu einer funktionierenden, physikbasierten Android XR-App.

Gemini als XR-Ingenieur

Das System nutzt Googles XR Blocks-Framework — eine Open-Source-Bibliothek auf Basis von WebXR und three.js — und kombiniert es mit spezialisierten System-Prompts für Gemini. Das Sprachmodell übernimmt dabei die Rolle eines erfahrenen XR-Entwicklers: Es versteht räumliche Logik, konfiguriert Szenen mit korrekter Physik und generiert interaktive Anwendungen, die auf Android-XR-Headsets wie dem Samsung Galaxy XR laufen.

Der Workflow ist dabei denkbar einfach: Prompt eingeben, Gemini plant und implementiert die XR-Erfahrung, dann per Pinch-Geste direkt im Headset testen. Iterationen erfolgen in Echtzeit — eine neue Anweisung, ein neues Ergebnis.

Vom Physiklabor bis zum Chrome-Dino-Game

Google demonstriert die Vielseitigkeit mit konkreten Beispielen: Ein Mathe-Tutor, der Eulers Theorem als interaktive 3D-Geometrien visualisiert. Ein Physiklabor, in dem Nutzer Gewichte auf eine Waage legen. Ein Chemie-Experiment, bei dem Methan- und Ethylen-Flammen in Mixed Reality brennen — gefahrlos und interaktiv. Und eine XR-Version des legendären Chrome-Dino-Games, generiert in Minuten statt Stunden.

In einer internen Evaluation mit 60 Prompts erreichte das System eine Erfolgsquote von über 70 % beim ersten Versuch — Tendenz steigend nach elf Framework-Releases in sechs Monaten. Das Framework und eine Live-Demo sind quelloffen verfügbar.

🎯 Was das für die Praxis bedeutet

1. XR-Prototyping ohne Fachkenntnisse: Designer, Lehrer und Produktmanager können räumliche Erfahrungen beschreiben und sofort testen — ohne eine Zeile Code.

2. Bildung profitiert am stärksten: Interaktive 3D-Experimente in Physik, Chemie oder Geometrie lassen sich in Minuten erstellen. Das senkt die Schwelle für immersives Lernen massiv.

3. Android XR bekommt ein Entwickler-Ökosystem: Google löst das Henne-Ei-Problem neuer Plattformen: Wenn jeder Apps bauen kann, gibt es schneller genug Inhalte, damit sich Hardware lohnt.

Dieser Artikel enthält eingebettete Inhalte Dritter (z. B. Videos, Social-Media-Beiträge). kiwoche.com berichtet über diese Inhalte, macht sie sich jedoch nicht zu eigen. Die Rechte und die Verantwortung liegen beim jeweiligen Urheber bzw. Plattformbetreiber.

📰 Quellen
Google Research Blog ↗ @GoogleResearch auf X ↗ XR Blocks GitHub ↗ XR Blocks Gem ↗
Teilen: