Die ganze Geschichte von Apples problematischem Mixed-Reality-Headset wurde enthüllt

Eine Reihe von Berichten in The Information zeichnet ein detailliertes Bild der Fortschritte, Richtlinien und Herausforderungen, mit denen Apples Plan zur Entwicklung eines Virtual-, Augmented- oder Mixed-Reality-Headsets konfrontiert war, seit die Initiative im Jahr 2015 an Dynamik gewonnen hat.

Unter Berufung auf mehrere Personen, die mit dem Produkt vertraut sind, darunter auch diejenigen, die direkt daran gearbeitet haben, beschreiben die Berichte einen Wettstreit der Wünsche über die Richtung des Geräts. Die Konfrontation fand zwischen Apples Mixed-Reality-Produktentwicklungsteam (als „Technologieentwicklungsteam“ bezeichnet) und dem berühmten Apple-Designer Jony Ive und seinem Industriedesign-Team statt. Der Bericht gibt Aufschluss über die Ausrichtung von Apple für das Gerät, das laut Bloomberg kürzlich kurz vor der Veröffentlichung steht.

Apples Mixed-Reality-Bemühungen begannen fast zufällig, als das Unternehmen ein deutsches AR-Startup namens Metaio erwarb, um einen Teil seiner Technologie in Project Titan, seinem selbstfahrenden Autoprojekt, einzusetzen, sagen Quellen von The Information. Ein weiterer wichtiger Meilenstein war die Einstellung von Mike Rockwell, Leiter des AR/VR-Projektteams, von Dolby Laboratories. Ab 2015 baute Rockwell ein Team auf, dem Metaio-Mitbegründer Peter Meyer und Apple Watch-Manager Fletcher Rothkopf angehörten.

Im Jahr 2016 wurden Apple-Vorstandsmitgliedern mehrere Demonstrationen von Augmented Reality gezeigt. In einem davon wuchs ein winziger Triceratops vor den Augen der Vorstandsmitglieder zur Lebensgröße heran. In einem anderen Fall ist der Raum zu einem immersiven Blattwerk geworden. Aber der Vorstand war nicht Rockwell, sondern das bedeutendste Hindernis für das Unternehmen. Den Informationen zufolge war es Ive, der die Teams für Industriedesign und Benutzeroberfläche bei Apple leitete.

Ive und sein Team lehnten den VR-Helm ab, weil sie glauben, dass die virtuelle Realität Benutzer von den Menschen und der Welt um sie herum trennt und Virtual-Reality-Helme unmodern aussehen. Aber das Technologieentwicklungsteam holte sich die Hilfe des Industriedesignteams, indem es ein Konzept einführte: einen nach außen gerichteten Bildschirm auf der Vorderseite des Headsets, der den Menschen in seiner Umgebung die Mimik und Augen des Trägers anzeigte. Über den externen Kamerakanal konnte der Besitzer die umliegenden Menschen sehen.

Rockwell und Kollegen entwickelten und veröffentlichten 2017 ARKit, eine App-Entwicklungssuite, die es Entwicklern ermöglichte, Augmented-Reality-Apps für das iPhone und iPad zu erstellen und dabei Technologien und Techniken zu nutzen, die später für das Headset angepasst werden konnten.

Die Entscheidung, das Headset zu einem eigenständigen Gerät zu machen, verursachte Berichten zufolge große Probleme. Einige waren beispielsweise der Meinung, dass der beste Weg, damit es gut funktioniert, darin bestünde, mehr Funktionen auf einem einzigen Chip unterzubringen. Da die Siliziumarbeiten jedoch bereits erledigt waren, mussten sie Wege finden, mit der Latenz umzugehen, die mit der Kommunikation mehrerer Chips in einem Gerät verbunden ist. Sie erstellten die Software auch in der Annahme, dass der Basisstationsplan verwirklicht werden würde.

Allerdings befindet sich das Gerät in der Endphase der Entwicklung. Bloomberg sagte letzte Woche, dass dem Vorstand von Apple kürzlich eine verbesserte Version des Produkts vorgestellt wurde und dass Apple die Entwicklung der Headset-Software „beschleunigt“ hat, bei der es sich um einen Ableger von iOS namens rOS handelt. (R steht für „Realität“.)

Ein Bericht von The Information enthüllt viele Details zum kommenden Headset. Es wird eine Auflösung von mindestens 4K pro Auge haben, was nach Ansicht des Teams das Minimum ist, um zu verhindern, dass Benutzer das Bild im Gegensatz zu den meisten aktuellen VR-Headsets für Verbraucher als verpixelt wahrnehmen. Sein eingebetteter Prozessor wird eng mit dem M2-Prozessor verwandt sein, der voraussichtlich in den kommenden Monaten auf Macs und iPads erscheinen wird.

Aufgrund der begrenzten Rechenleistung des M2-Chips in einem Headset ohne angebundene Basisstation (die abgekündigte Basisstation soll über ein Super-Hochleistungs-M1 Ultra verfügen) werden die Avatare cartoonhaft aussehen. Die Informationsquellen sagen auch, dass Versuche unternommen wurden, fotorealistischere Avatare zu erstellen, als die Basisstation Teil des Plans war, aber das unheimliche Tal war ein Problem.

Apple hatte ursprünglich geplant, das Headset im Jahr 2019 auf den Markt zu bringen, aber jetzt sieht es so aus, als ob es entweder später in diesem Jahr oder 2023 angekündigt werden könnte. Darüber hinaus plant Apple, als nächstes Produkt weitere natürliche Augmented-Reality-Brillen einzuführen, aber dieses Gerät könnte noch Jahre dauern bevor es versendet wird.