visionOS 27: Apple öffnet Vision Pro für externe Hardware

Apple rüstet die Vision Pro mit künstlicher Intelligenz auf und öffnet das System erstmals für externe Hardware-Hersteller. Das gab der Konzern auf der Entwicklerkonferenz WWDC bekannt.

Die neue Betriebssystemversion visionOS 27 bringt eine grundlegend überarbeitete Siri mit räumlicher Intelligenz. Der Sprachassistent erscheint künftig als dreidimensionales Objekt im Raum und lässt sich allein durch den Blick auf eine schwebende Kugel aktivieren – ein Sprachbefehl ist nicht mehr nötig.

Siri mit visuellem Verständnis

Anzeige: Mit visionOS 27 öffnet Apple die Hardware-Schnittstellen der Vision Pro für externe Entwickler. Erfahren Sie in diesem Leitfaden, wie Sie Spatial Accessories über das neue API-Framework anbinden – inklusive erster Kits von DFRobot und MIKROE. Jetzt kostenlosen Entwickler-Leitfaden anfordern

Im Zentrum der Neuerungen stehen Apple Foundation Models, die in Zusammenarbeit mit Google entwickelt wurden. Die KI kann nun Objekte im Sichtfeld des Nutzers erkennen und analysieren. Ein Beispiel: Der Nutzer blickt auf einen Koffer und fragt, ob er als Handgepäck geeignet ist – Siri liefert die Antwort inklusive der Airline-Richtlinien. Auch Nährwertangaben von Lebensmitteln oder technische Spezifikationen von Geräten kann der Assistent abrufen.

Darüber hinaus verfasst und bearbeitet Siri Texte. Nutzer können Tonhöhe, Geschwindigkeit und Stimmung der Stimme individuell anpassen.

Drittanbieter erhalten Zugang zur Spatial-Technik

Der bedeutendste strategische Schritt: Apple öffnet die Hardware-Schnittstellen der Vision Pro für externe Entwickler. Ein neues API-Framework ermöglicht die Anbindung sogenannter „Spatial Accessories“ – also räumlicher Zubehörgeräte.

Die Technik basiert auf Infrarot-LED-Mustern, Bewegungssensoren und Bluetooth. Apple unterscheidet zwei Kategorien:

• Aktive räumliche Zubehörgeräte: Controller oder Spezialwerkzeuge mit eigener Sensorik. Sie unterstützen Abtastraten von 90 Hertz, in Spitzen bis zu 120 Hertz.
• Verfolgbare Objekte: Passive Gegenstände wie Lenkräder oder Globen, die über 3D-Modelle oder kleine Sender geortet werden.

Für die Entwicklung hat Apple Partnerschaften mit DFRobot und MIKROE geschlossen. Erste Hardware-Kits für Entwickler sollen noch dieses Jahr erscheinen. Die Geräte lassen sich systemweit registrieren und bleiben über verschiedene Anwendungen hinweg nutzbar.

Neue Oberfläche und schnellere Verbindungen

Auch die Benutzeroberfläche wurde überarbeitet. Safari, Freeform und Apple TV Multiview unterstützen jetzt gebogene Fenster – das soll die ergonomische Betrachtung verbessern. Panorama-Fotos lassen sich in vollständig immersive 3D-Umgebungen verwandeln.

Weitere Neuerungen:

• Blickgesteuerte Benachrichtigungen: Ein Blick genügt, um Mitteilungen zu öffnen.
• Neue Umgebung: Die isländische Landschaft Thórsmörk steht als immersiver Hintergrund bereit.
• Schnelleres WLAN: Software-Optimierungen sollen die Geschwindigkeit verdreifachen.
• Produktivitäts-Tools: Ein neues Widget für den Mac Virtual Display sowie extrakleine Widgets für die Startansicht.

Anzeige: Sie entwickeln Zubehör für AR/VR? Das neue API-Framework für visionOS 27 ermöglicht die Anbindung aktiver und passiver Geräte mit bis zu 120 Hz Abtastrate. Dieser Leitfaden zeigt Ihnen die konkreten Schritte zur Integration. Entwickler-Leitfaden jetzt sichern

Verfügbarkeit und EU-Start

Die Entwickler-Beta von visionOS 27 ist ab sofort verfügbar. Eine öffentliche Beta folgt im Juli, der offizielle Launch ist für den Herbst geplant.

Während einige Apple-Intelligence-Funktionen auf anderen Plattformen regional verzögert starten, sollen die Siri-AI-Funktionen für die Vision Pro in der Europäischen Union pünktlich zur Markteinführung erscheinen. Die KI-Features laufen zunächst als englischsprachige Beta. Kompatibel ist das Update mit aktuellen Vision-Pro-Modellen auf Basis der M2- und M5-Chips.

de | wissenschaft | 69511406 |