Google hat WebGPU in XR Blocks integriert, und seine eigene räumliche UI kann es noch nicht nutzen

Google hat WebGPU in XR Blocks integriert, und seine eigene räumliche UI kann es noch nicht nutzen

Google's XR Blocks erreichte am 10. Oktober Version 0.22.0, und die wichtigste Neuerung ist, dass der three.js-WebGPURenderer jetzt im Desktop-Simulator der Bibliothek läuft. In denselben Anmerkungen schreibt Google, dass „die räumliche UI vom WebGPURenderer noch nicht unterstützt wird“ und nennt dies „anfängliche Simulator-Unterstützung, keine Ende-zu-Ende-Abdeckung“. Die Panels, Karten und Textfelder, die eine XR-Blocks-Oberfläche ausmachen, bleiben vorerst beim alten Renderer.

Eine Passthrough-Ansicht einer Bürolounge mit einem Strom aus roten, gelben, grünen und blauen virtuellen Bällen, die auf den Boden fallen, und einer Hand, die oben am Strahl eine Pinch-Geste macht.

Eine Aufnahme aus dem XR-Blocks-Ballpit-Beispiel, veröffentlicht in Googles eigenem Repository, mit virtuellen Bällen, die in einen echten Raum fallen, und einer Hand, die oben am Strahl eine Pinch-Geste macht. Bild: Google

XR Blocks ist Googles WebXR- und KI-Prototyping-Bibliothek, daher ist das, was sie liefert, ein lesbarer Leitfaden dafür, was Google von einem Headset- oder Brillen-Browser erwartet. Das v0.22.0-Release wurde am 10. Oktober um 00:26:54 UTC getaggt und erreichte npm um 00:46:25 UTC. Die vorherige Veröffentlichung war 0.21.1 am 25. August, daher ist dies das erste Release seit mehr als sechs Wochen. Beide Datensätze wurden am 10. Oktober um 21:37 UTC gelesen; zu diesem Zeitpunkt wies das Repository 484 Sterne auf.

Google bringt einen Gemma-4-Assistenten auf das Gerät selbst

Das Release fügt einen On-Device-Gemma-4-Assistenten mit „räumlichem Szenenkontext und Markdown-Antworten“, On-Device-Superauflösung und eine EfficientSAM-Demo für die Kreissuche hinzu. Die objects3d-Pipeline ist von SlimSAM auf EfficientSAM-Ti mit LiteRT umgezogen. Außerdem gibt es räumliche Offline-Beschriftungen und Übersetzung, interaktives Training mit Teachable Machines, Foto-zu-3D-Rekonstruktion und „weltausgerichtete metrische Tiefe aus einem einzigen Kamerafoto“.

Nichts davon kommt mit einer Zahl daher. Google veröffentlicht keine Bildrate, keine Latenzzahl, keinen Genauigkeitswert und keine Liste von Headsets oder Brillen, die die Demos tatsächlich ausführen können. Daher ist „on-device“ das Wort aus den Versionshinweisen und keine Messung. Gemma 4 und die hier genannten Gemini-Modelle sind bestehende Releases, keine neuen.

Das Standard-Gemini-Modell ist umgezogen, und three.js auch

Gemini-Aufrufe im gesamten SDK und in jedem Beispiel sind von generateContent zur Interactions API migriert, und das Standard-Flash-Modell ist jetzt gemini-3.8-flash. three.js wurde auf r186 aktualisiert, der Build ist von Rollup zu Rolldown umgezogen, das Linting von ESLint zu Oxlint mit TypeScript 7, und acht npm-Dependabot-Sicherheitswarnungen wurden behoben.

Die räumliche UI selbst erhält Scrollansichten, bearbeitbare Textfelder und Karten, die sich an ihren Ecken skalieren lassen, wobei Icon-Formen pro Füllfarbe zu einem Mesh zusammengeführt werden, um Draw Calls zu reduzieren. Der Simulator erhält Tages- und Nachtbeleuchtung sowie einen eigenständigen Chrome-Profiler mit HTML-Berichten. Roomcraft, das Raum-Bau-Beispiel der Bibliothek, erhält geräteübergreifende Zusammenarbeit, die den Wiederverbindungsstatus und eingehende Sprache über Sitzungen hinweg beibehält.

Zwei der neuen Beispiele zeigen, worauf Google abzielt. Eines ermöglicht es Nutzern, „KI-generierte Objekte auf die Flächen um Sie herum herbeizurufen“, was ein generatives Modell und einen Szenenverständnis-Durchlauf in denselben Kreislauf bringt. Das andere ergänzt ArUco-Tag-Tracking, die in Robotiklaboren verwendeten gedruckten Schwarz-Weiß-Marker, gebunden an die objects3d-Pipeline mit selbstauflösenden Gerätekameraprofilen. Der Simulator erhält ein Anleitungs-Panel für den jeweils aktiven Modus, und die Navigation im Handmodus erfolgt jetzt über die linke Umschalttaste zum Bewegen und einen Rechtsklick zum Umschauen.

Dies ist ein getaggtes Library-Release und keine Google-Produktankündigung, und es steckt kein Blogbeitrag dahinter. Im selben Zeitraum sind zwei weitere XR-Entwickler-Releases erschienen: Metas Immersive Web SDK erreichte Version 1.0 mit Blick-und-Pinch-Eingabe, und der zweite Release Candidate des Android XR SDK. Für XR Blocks ist der WebGPU-Pfad derjenige, den man im Auge behalten sollte, und nach Googles eigener Aussage kann die räumliche UI derzeit noch nicht darauf zeichnen.

Kommentar schreiben

Ihre E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert