Metas Ray-Ban-Display-Toolkit fügt Sprachsteuerung für Web-Apps hinzu, standardmäßig deaktiviert

Metas Ray-Ban-Display-Toolkit fügt Sprachsteuerung für Web-Apps hinzu, standardmäßig deaktiviert

Meta hat Entwickleranweisungen veröffentlicht, um Ray-Ban-Display-Web-Apps für Meta AI ansprechbar zu machen, sodass ein Träger eine App bedienen kann, indem er mit dem Assistenten spricht, statt sich durch sie zu klicken. Die 291 Zeilen lange Anleitungsdatei wurde am 1. Oktober um 20:52 UTC in einem Commit auf facebook/meta-wearables-webapp veröffentlicht, und sie stellt unmissverständlich fest: Die Funktion ist „standardmäßig deaktiviert und wird pro Gerät aktiviert, per Developer Mode oder per Rollout“.

Mark Zuckerberg auf der Bühne bei der Meta-Connect-2026-Keynote

Auf der Bühne bei Meta Connect 2026. Bild: Meta

Der Mechanismus ist eine Browser-Schnittstelle namens WebMCP. Entwickler registrieren Tools auf document.modelContext, das laut Meta vom Browser installiert wird, bevor die Seitenskripte ausgeführt werden, und Metas Anleitung fasst das Ergebnis in einem Satz zusammen: „Der Träger spricht mit Meta AI, Meta AI ruft Ihre Tools auf, die App aktualisiert sich. Kein SDK, keine Spracherkennung, kein Aktivierungswort: Der Browser stellt die Oberfläche bereit.“

Dies ist ein Toolkit-Update und keine Funktion, die jeder einfach einschalten kann. Das Repository, das Meta als „KI-gestütztes Entwicklungs-Toolkit zum Erstellen von Webanwendungen auf Meta-Ray-Ban-Display-Brillen“ bezeichnet, ergänzt, dass die Berechtigung „einmal beim Start der App festgelegt wird und sich für den Rest dieser Sitzung nicht ändert“, sodass das Aktivieren von WebMCP mitten in der Sitzung nichts bewirkt, bis die App neu gestartet wird.

Meta sagt, das D-Pad muss weiter funktionieren

Die Anweisung an Entwickler ist unmissverständlich: „Das ist additiv. Die App muss vollständig per D-Pad bedienbar bleiben, ganz ohne Assistent.“ Meta fordert sie außerdem auf, die App ausschließlich per D-Pad gesteuert zu testen, und erneut in einem Build, in dem die Sprachoberfläche fehlt.

Sprache wird als Ebene über einer App behandelt, die auch ohne sie funktionieren muss, was man von einer Funktion erwarten würde, die Geräte per Rollout erreicht und nicht über ein Store-Update.

Meta liefert das Toolkit als Plugins für vier KI-Coding-Tools aus: Muse Code, Claude Code, Codex und Cursor. Der Commit hebt diese Manifeste auf Version 128.1.0 an. Das Repository wurde am 8. Mai erstellt und hatte 206 Sterne, als wir es am 2. Oktober um 21:20 UTC gelesen haben.

Die Parameterregeln sind streng und scheitern still

Der größte Teil von Metas Anleitung dreht sich darum, was fehlschlägt. Tool-Parameter werden nur als Boolean, Integer, Number oder String unterstützt: „Es gibt keinen Array- oder Objekt-Parametertyp“, und wer dennoch einen deklariert, erhält den Wert als JSON-kodierten String, der „sofort fehlschlägt, wenn das, was ankommt, kein gültiges JSON des deklarierten Typs ist“.

Schema-Einschränkungen sind weniger wert, als sie scheinen. Meta schreibt, dass „enum“, „items“, „minimum“, „maximum“, „default“ und verschachtelte Schemas „verworfen und nie durchgesetzt werden“. Entwickler sollen diese Grenzen deshalb stattdessen in die Beschreibung aufnehmen und die Argumente im Tool selbst validieren, für das es laut Meta „eine 10-Sekunden-Frist für vom Assistenten stammende Aufrufe“ gibt.

Es gibt auch keine Möglichkeit für ein Tool, einen Fehlschlag zu melden. „Ein erfülltes Ergebnis wird immer als Erfolg gemeldet, und isError wird verworfen“, sagt Meta, sodass eine App eine erfolglose Anfrage mit einem normalen Ergebnis beantworten muss, dessen Inhalt das Problem beschreibt. Tool-Namen dürfen 128 Zeichen lang sein, aber Meta AI registriert jeden innerhalb eines Budgets von 64 Zeichen neu, wobei 57 übrig bleiben, und Meta warnt, dass zwei Namen, die so weit übereinstimmen, ohne Fehler kollidieren – „das Tool erreicht Meta AI dann einfach nie“.

Der Rollout hat kein Datum, und die Dokumentationsseite ist gesperrt

Meta hat nicht gesagt, wann WebMCP die Träger erreicht. Die zugehörige Entwickler-Dokumentationsseite ist ebenfalls nicht öffentlich: In Metas Commit-Nachricht heißt es, sie sei „noch gesperrt und wird daher von hier aus nicht verlinkt“, mit der Anweisung, den Link hinzuzufügen, „wenn die Sperre aufgehoben wird“. Im Repository steht nicht, welche Apps WebMCP erhalten, wie viele Träger im Rollout sind oder wann er ausgeweitet wird.

Für Käufer sind die Brillen selbst weiter als das Toolkit. Die Meta Ray-Ban Display kommt im Vereinigten Königreich für 749 £ in den Handel, in Deutschland am 13. Oktober für 899 €, und Meta hat in den Brillen zunehmend Sprache in eigene Funktionen integriert, darunter Hologramm-Anrufe auf WhatsApp, die über Ihre Stimme statt über Ihr Gesicht gesteuert werden. Drittanbieter-Apps, die auf denselben Assistenten reagieren, sind vorerst eine Reihe von Regeln auf GitHub und eine Funktion, die laut Meta „standardmäßig deaktiviert“ ist.

Kommentar schreiben

Ihre E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert