Nach Jahren der Spekulation steigt Apple in großem Umfang in VR und AR ein. Auf seiner Keynote zur Entwicklerkonferenz WWDC 2023 stellte das Unternehmen Vision Pro vor, ein XR-Headset, das virtuelle und erweiterte Realität kombiniert. Es ist Apples erste große Hardware-Kategorie seit der Veröffentlichung der Apple Watch im Jahr 2015. Sie wird nächstes Jahr bei 3.499 US-Dollar starten und auf Apple.com und in US-Einzelhandelsgeschäften erhältlich sein. Es wird jetzt gezeigt, um Entwickler einzubeziehen.
Das Headset besteht aus einem einzigen Stück Verbundglas mit einer „großen Auswahl an Kameras und Sensoren“. Der Rahmen enthält eine Taste für Fotos und Videos sowie eine Digitalkamera zum Umschalten zwischen AR- und VR-Stufen. Der Rahmen des Vision Pro verfügt über ein thermisches Design, das Luft durch Löcher im System ansaugt, um es kühl zu halten. Es versteht sich von selbst, dass es sich nicht um ein lüfterloses Design handelt, obwohl Apple sagt, dass es im Betrieb „nahezu geräuschlos“ ist.
Apple bezeichnet es als „das fortschrittlichste persönliche Elektronikgerät überhaupt“ und sagt, dass es auf über 5.000 Patenten basiert.
Die Lichtdichtung ist in mehreren Größen erhältlich und passt sich Ihrem Gesicht an. Aus dem Rahmen ragen Riemen mit „Audio Pods“ heraus, um räumlichen Klang zu liefern. Das Stirnband ist ein gerippter 3D-Druck, der sich mit einem ansteckbaren Mechanismus dehnt. Mit einem Einstellrad können Sie während des Gebrauchs kleine Anpassungen vornehmen.
Brillenträger verwenden Einsätze von Zeiss, die an den Gläsern befestigt werden. Die Kosten für dieses Zubehör für ein ohnehin schon teures Headset wurden nicht erwähnt.
Apple verspricht zwei Stunden Akkulaufzeit mit einer Ladung (er kann aber im angeschlossenen Zustand länger genutzt werden). Zur Hardware gehört ein mit dem Headset verbundener Akku, den Sie dann in einen Gürtel oder eine Tasche stecken.
Ein externes Display zeigt Ihre Augen, sodass die Leute erkennen können, ob Sie in die VR eintauchen oder nicht, und verhindern, dass sich die Leute isoliert fühlen.
Auf der WWDC konnten wir das Design aus einiger Entfernung sehen. Es ist Weltraumzeitalter und das reflektierende Glas an der Vorderseite ist überraschend einladend. Es ist ein sehr attraktives Gerät, aber das Tragen ist immer noch ein Rätsel. Apple hat dafür gesorgt, dass diese Modelle nicht berührt wurden, aber wir haben einen genaueren Blick auf den Akku geworfen, der an der Seite des Geräts hängt.
Technik in Apple Vision Pro
Vision Pro wird einige beeindruckende Spezifikationen vorweisen können. Es passen 64 Pixel auf den Platz eines einzelnen iPhone-Pixels. Es verfügt über 23 Millionen Pixel auf zwei Panels für eine Auflösung von mehr als 4K. Laut Apple unterstützt es einen hohen Dynamikbereich und ermöglicht scharfen Text.
Apple setzt beim Vision Pro auf ein Dual-Chip-Design, mit M2 und einem neuen Chip namens R1. R1 ist für die Eingabe von 12 Kameras, fünf Sensoren und sechs Mikrofonen ausgelegt. M2 ermöglicht Leistung, während R1 darauf ausgelegt ist, Erlebnisse immersiv zu gestalten.
Das 1.499 US-Dollar teure Quest Pro von Meta verfügt über zwei LCD-Panels mit 1800 x 1920 Pixeln und einem behaupteten horizontalen Sichtfeld von 106 Grad und einem vertikalen Sichtfeld von 96 Grad. (Letzte Woche kündigte Meta Meta Quest 3 an, lieferte jedoch keine vollständigen Spezifikationen für eine vollständige Markteinführung später in diesem Jahr.) Und ja, außen gibt es einen Bildschirm, der Ihre Augen zeigt.
Die Audio Pods versorgen Ihren Raum mit Ton, um ihn individuell an Sie anzupassen. Apple nennt dies „Audio-Raytracing“. Es gibt unzählige Scanner, einschließlich LiDAR, für die 3D-Verfolgung. Es gibt IR-Kameras und LEDs, um Ihre Augen zu verfolgen, sodass Sie keine „umständlichen Hardware-Controller“ benötigen.
Für FaceTime erstellt Apple eine digitale Version Ihres Gesichts. Nach dem Scannen durch die Frontkameras erstellt Apple mithilfe eines neuronalen Netzwerks einen 3D-Avatar, der in FaceTime-Anrufen verwendet werden kann. Wenn jemand in einem anderen Vision Pro mit Ihnen chattet, wird dies in 3D angezeigt.
Das neue Betriebssystem heißt visionOS und unterstützt das iOS-Framework, ein neues Echtzeit-Subsystem, eine Foveated-Rendering-Pipeline und eine Multi-App-3D-Engine, um mehrere Apps in derselben Simulation laufen zu lassen.
Aus Sicherheitsgründen verwendet Apple Optic ID, eine neue Version von Funktionen wie Face ID und Touch ID. Ihr Iris-Scan wird auf dem Gerät in der sicheren Enklave gespeichert. Laut Apple werden Augeneingaben in einen speziellen Hintergrundprozess aufgeteilt, sodass Websites oder Apps nicht sehen können, wohin Sie schauen. Es werden nur Fingertipps registriert.
Verwendung von Apple Vision Pro
Apples Betriebssystem für AR und VR wird Nutzern von iOS und iPadOS mit einem Homescreen mit neu anordenbaren App-Symbolen und Widgets einigermaßen bekannt vorkommen. In Ihrem Raum gibt es eine Home-Ansicht mit Apps, die angezeigt werden, während sie in Ihrem Raum schweben. Sie reagieren auf Licht und werfen Schatten auf Ihr Zuhause. Sie können Apps skalieren und an der gewünschten Stelle in Ihrem Raum platzieren.
Der Wechsel zwischen AR und VR ist hier entscheidend. Apple setzt auf einen Mix aus beidem, damit sich Nutzer des Headsets nicht völlig von der Welt abgeschottet fühlen. Mit dem Zifferblatt, ähnlich der digitalen Krone der Apple Watch, können Sie zwischen AR- und VR-Modus wechseln.
Das Headset ist ausschließlich auf Ihre Augen, Hände und Stimme angewiesen. Es gibt keinen Controller. Grafische Elemente auf dem Bildschirm reagieren auf Ihren Blick, und ein Fingertipp genügt, um auszuwählen. Sie können mit den Händen scrollen, um zu scrollen.
Apple verwendet den Spitznamen „EyeSight“, um anderen in Ihrer Nähe Ihre Augen auf einem externen Bildschirm zu zeigen. Das Unternehmen sagt, dass Sie dadurch nicht von anderen isoliert werden und andere wissen lassen, ob Sie in VR eintauchen oder in AR sehen können.
Für mehr Produktivität erhalten Sie eine „Leinwand für Apps“. Sie können Ihre Apps an einer beliebigen Stelle auf dem Bildschirm platzieren. Es sieht aus wie eine schwebende Version des Mac, mit Web-Browsing und anderen Produktivitäts-Apps im Weltraum. Sie können Ihren Kopf drehen, um von App zu App zu wechseln, oder sogar 3D-Objekte vor sich platzieren und sie aus jedem Winkel betrachten.
Vision Pro funktioniert mit dem Magic Trackpad, Magic Keyboard und anderem Bluetooth-Zubehör. Sie können Ihren Mac auch verwenden, um den Bildschirm Ihres Mac auf das Headset zu legen und so eine riesige 4K-Anzeige zu erhalten.
Es gibt auch eine Version von FaceTime, mit der Sie digitale Versionen anderer Personen in Einzelgesprächen sehen können. Wenn neue Leute hinzukommen, schweben sie vor Ihnen. Während eines Anrufs können Sie Apps mit anderen teilen.
Apple zeigte es als Multimedia-Gerät für den Einsatz, wenn Sie nicht arbeiten. Fotos schweben in der Luft und vom iPhone aufgenommene Panoramen umhüllen Sie. Mit einem Tastendruck am Gerät können Sie Bilder oder Videos aufnehmen, um sie später in 3D anzusehen. Vision Pro blinkt, damit andere sehen können, dass Sie Bilder aufnehmen.
Vision Pro funktioniert auch als persönliches Kino. Sie können die Größe Ihres Raums anpassen und das Betriebssystem dimmt automatisch den umgebenden Bereich und fügt gleichzeitig räumlichen Klang hinzu. Sie können sogar eine „Umgebung“ hinzufügen, um als riesiges Kino zu arbeiten, das größer als Ihr Zuhause ist. Ein spezialisiertes Kino soll sich auf den Film und nichts anderes konzentrieren. Sie können auch „räumliche“ 3D-Filme ansehen. Apple präsentierte Avatar: The Way of the Water.
Sie können den Vision Pro auch zum Spielen von Apple Arcade-Spielen mit Gamecontroller-Unterstützung verwenden. Apple verspricht am Starttag Hunderte von Titeln.
Bob Iger, CEO von Disney, traf sich auf der WWDC mit Tim Cook, CEO von Apple, und präsentierte Disney Plus, einschließlich angepasster Versionen von Shows wie Der Mandalorianer, sowie benutzerdefinierte ESPN-Spielansichten, die Wiederholungen in 3D zeigen. Wenn auch a angezeigt wird Marvel: Was wäre, wenn? Spiel, das Sie in die Lage eines Superhelden zu versetzen scheint. Apple hat eindeutig Partner für dieses Headset – Disney Plus wird an einem Tag der Markteinführung fertig sein, sagte Iger.
Entwicklung für Apple Vision Pro
Einige Entwickler haben Vision Pro bereits in die Hände bekommen. Apple hat beispielsweise ein schlagendes 3D-Herz sowie das Design eines Alfa Romeo F1-Autos vorgeführt. Diese ähneln denen, die wir bei anderen Headsets und sogar bei Microsofts HoloLens gesehen haben.
Aber andere klingen einzigartiger, wie eine räumliche Schnittstelle für DJs und ein Himmelsführer, um Vision Pro in ein Planetarium zu verwandeln. Und Microsoft hat seine Office-Apps einsatzbereit, ebenso wie eine Reihe von Videokonferenzsoftware-Unternehmen.
Die gleichen Frameworks in iOS und iPadOS sind in visionOS integriert, was bedeutet, dass viele bestehende Apps mit den integrierten Steuerelementen größtenteils sofort funktionieren sollten.
Apple hat mit Unity zusammengearbeitet und sagt, dass Spiele und andere Apps, die auf Unity basieren, mit geringfügigen Änderungen funktionieren können. Es wird einen brandneuen App Store geben, in dem Sie alles sehen können, was für Vision Pro entwickelt wurde, sowie alle anderen kompatiblen Apps.