Meta Reality Lab setzt seine Vision für Mixed Reality in der Zukunft

Meta hatte 2022 ein hartes Jahr, als die Skepsis bezüglich seiner großen Wette auf das Metaverse zunahm und die Schwäche im Kerngeschäft dazu zwang, 11.000 Mitarbeiter zu entlassen. Das Unternehmen bleibt jedoch seiner Vision von Mixed Reality verpflichtet, basierend auf einer Reihe von Blog-Beiträgen, die heute veröffentlicht wurden.

Andrew „Boz“ Bosworth, CTO von Meta, räumte in einem Beitrag ein, dass es schwieriger war, die Vision für die Zukunft zum Leben zu erwecken, als das Unternehmen erwartet hatte.

Meta erlitt letzte Woche einen Schlag, als Wunderkind-Berater John Carmack aus dem Unternehmen ausschied, nachdem er seit 2013 an seiner Virtual-Reality-Technologie gearbeitet hatte. Und das Unternehmen hat viel Spott von Investoren und anderen erlitten, die es für verrückt halten, rund 3 Milliarden Dollar pro Quartal zu verlieren in seiner Abteilung Meta Reality Lab, die Virtual-Reality- und Augmented-Reality-Produkte wie Meta Quest 2 und Meta Quest Pro herstellt.

„Wirtschaftliche Herausforderungen auf der ganzen Welt, kombiniert mit dem Druck auf das Kerngeschäft von Meta, erzeugten einen perfekten Sturm der Skepsis gegenüber den Investitionen, die wir tätigen“, sagte Bosworth. „Das sind die Momente, die den Glauben der Menschen an die Zukunft wirklich auf die Probe stellen. In Boomzeiten ist es einfach, große und ehrgeizige Investitionen in das zu tätigen, was als nächstes kommt. Aber wenn sich die wirtschaftlichen Bedingungen ändern, ist es genauso einfach, sich in die andere Richtung zu drehen: Reduzieren Sie Ihre Ambitionen, halten Sie sich an das, was heute am sichersten und rentabelsten ist, und holen Sie so viel wie möglich daraus heraus.“

Doch Mark Zuckerberg, CEO von Meta, bleibt bei seiner Stange, indem er stärker in Mixed Reality – Technologien wie VR und AR – investiert als so ziemlich jedes andere Unternehmen der Welt. Bosworth sagte, dass das Versäumnis, in die Zukunft zu investieren, andere Unternehmen geplagt habe. Und VR hatte 2022 ein ziemlich spektakuläres Wachstumsjahr in Bezug auf den Verkauf von Software und Hardware.

„Wir alle haben die katastrophalen Folgen dieser Art kurzfristigen Denkens gesehen: ausgehöhlte Unternehmen, die vor langer Zeit aufgegeben haben, innovativ zu sein, und sich damit begnügen, ein bestehendes Unternehmen so lange an der Kurbel zu drehen, bis es nicht mehr funktioniert“, sagte Bosworth. „Ich bin hier aufgewachsen und meiner Erfahrung nach neigt das Silicon Valley dazu, diese Art von Kurzfristigkeit abzulehnen, was einer von vielen Gründen ist, warum Amerika beim Aufbau neuer Technologien weltweit führend ist.“

Aber Bosworth sagte, das Unternehmen habe sich angepasst – was durch harte Anrufe wie die Entlassungen belegt wird.

„Aber ich kann mit Zuversicht sagen, dass Meta nach einem der schwierigsten Jahre in der Geschichte des Unternehmens unserer Zukunftsvision genauso verpflichtet bleibt, wie wir es an dem Tag waren, als wir sie bekannt gegeben haben. Unsere Überzeugungen hier werden durch einige Faktoren gestützt, von denen wir glauben, dass sie von vielen unserer größten Skeptiker missverstanden werden“, sagte Bosworth.

Er merkte an, dass das Unternehmen in den Ergebnissen des dritten Quartals im Oktober dieses Jahres berichtete, dass seine täglich aktiven Nutzer auf Facebook ein Allzeithoch erreichten, mit positiven Engagement-Trends. Instagram hat mehr als zwei Milliarden monatliche Aktivitäten, während WhatsApp zwei Milliarden tägliche Aktivitäten hat.

„Wir lenken weiterhin den Großteil unserer Investitionen in unsere App-Familie, da wir glauben, dass die Stärke im Kern eine ehrgeizige Agenda für die Zukunft unterstützen kann“, sagte er.

Er merkte an, dass die Ergebnisse des dritten Quartals auch zeigten, dass etwa 80 % der Gesamtinvestitionen von Meta das Kerngeschäft unterstützen, während die anderen 20 % in Reality Labs fließen.

„Dieses Investitionsniveau ist unseres Erachtens sinnvoll für ein Unternehmen, das sich verpflichtet hat, an der Spitze einer der wettbewerbsfähigsten und innovativsten Branchen der Welt zu bleiben“, sagte Bosworth. „Die gute Nachricht ist, dass wir glauben, dass 2022 langfristig als ein Jahr in Erinnerung bleiben wird, in dem grundlegende Technologien, die unsere Vision für die Zukunft ermöglichen, zum ersten Mal in die Hände von Entwicklern und Benutzern gelangten.“

Er verwies auf die Einführung des Mixed-Reality-Headsets Meta Quest Pro im Wert von 1.500 US-Dollar im Oktober als eine wichtige Errungenschaft auf dem Weg, High-End-VR in Unternehmen zu bringen. Das Headset ist vollgepackt mit Sensoren, AR-Technologie, Eye-Tracking- und Face-Tracking-Technologie, die der Schlüssel für zukünftige Anwendungen sein werden.

„Wir werden noch Jahrzehnte von den Vorteilen dieser Arbeit leben“, sagte Bosworth. „Das unmittelbare Potenzial von Mixed Reality – Ihre physische Umgebung mit digitalen Objekten vermischt zu sehen – wird bereits von Entwicklern wie Overlay demonstriert, die Figmin XR entwickelt haben, eine erstaunliche App zum Erstellen virtueller Objekte und Räume in Mixed Reality, die Ihnen einen Einblick gibt die zukünftige AR-Vision, für die wir bauen.“

Er sagte, dass es bei Mixed Reality um mehr geht, als nur um die Anzeige eines Live-Video-Feeds Ihrer Umgebung im Headset. Damit es richtig funktioniert, muss das Headset Ihren Raum als 3D-Raum verstehen, die Oberflächen und Objekte um Sie herum erkennen und wie sie mit digitalen Objekten interagieren können, sagte er.

Er wies darauf hin, dass Technologien wie räumliche Anker erforderlich sind, die es virtuellen Dingen ermöglichen, feste Räume in der physischen Welt zu besetzen, sowie Szenenverständnis für die virtuelle Rekonstruktion physischer Räume sowie stereoskopisches Farb-Passthrough, um die physische Welt zu erfassen und genau darzustellen das Headset mit einem Gefühl von Tiefe für mehr Komfort.

Und er glaubt, dass wir VR-Headsets für die Arbeit als Alternative zu Laptops und Desktop-Computern verwenden werden. Er denkt, dass wir virtuelle Bildschirme und Schnittstellen an unseren Schreibtischen oder in unseren Händen verwenden werden. Ich kenne diese Vorhersage nicht, da es ziemlich schwer ist, länger als eine Stunde mit einem schweren Headset auf dem Kopf zu arbeiten.

„Es wird nicht lange dauern, bis ein VR-Headset in der Lage ist, ein leistungsstarkes Heimcomputer-Setup von einem Gerät zu emulieren, das in einen Rucksack passt und überall verwendet werden kann“, sagte Bosworth. „Der Weg zu dieser Art von Gerät hat dieses Jahr mit Quest Pro einen großen Schritt nach vorne gemacht. Eye- und Face-Tracking bietet eine ähnliche Kombination von Möglichkeiten, sowohl heute als auch in der Zukunft. Im Moment liefert es ausdrucksstärkere Avatare auf Meta Quest Pro, wodurch das digitale Selbst der Menschen ihren realen Gesichtsausdrücken besser entsprechen kann.“

Natürlich haben diese Avatare noch keine Beine. Aber sie arbeiten daran.

„Dies ist einer von vielen Schritten, die wir unternehmen, um ein Avatar-System zu schaffen, das die Qualität der Kommunikation, des Ausdrucks und der Verbindung in virtuellen Räumen verbessern kann – und wir werden 2023 noch viel mehr darüber zu berichten haben“, sagte Bosworth. „Aber die längerfristigen Möglichkeiten, die durch Augen- und Gesichtsverfolgungstechnologie freigesetzt werden, gehen weit über Avatare hinaus. Unsere Vision für echte AR-Brillen wird Jahre des Fortschritts erfordern, um unsere Geräte schlanker, leichter, schneller und leistungsfähiger zu machen, während sie gleichzeitig viel weniger Batterieleistung verbrauchen und viel weniger Wärme erzeugen.“

Ein großer Effizienzgewinn wird sich ergeben, wenn Geräte intelligent genug sind, um die Grafiken mit der höchsten Auflösung nur in dem kleinen Bereich zu rendern, in den ein Benutzer tatsächlich schaut.

„In diesem Oktober haben wir diese Fähigkeit zum ersten Mal dank der Eye-Tracking-Technologie von Quest Pro demonstriert, und sie wird den Fortschritt in VR und AR für viele kommende Jahre vorantreiben“, sagte Bosworth. „Wir haben auch gelernt, dass die visuelle Qualität eines VR-Geräts von einer Reihe von Technologien abhängt, die über die typischen Metriken hinausgehen, die wir bei der Beschreibung der Anzeigen auf einem Computer, Fernseher oder Telefon verwendet haben.“

Neben der Bildschirmauflösung spielen Faktoren wie Systemauflösung, Schärfe, Kontrast und Farbbereich jeweils eine wichtige Rolle, sagte er. Das gilt auch für den optischen Stapel selbst, bei dem Linsen, Beschichtungen und Filme jeweils einen großen Unterschied machen.

„Wir haben kürzlich mehr Details darüber mitgeteilt, wie diese in Metas InfiniteDisplay-System für VR-Optiken zusammenkommen, das Ergebnis jahrelanger Investitionen in Forschung und Entwicklung für VR- und AR-Technologien“, sagte er. „Diese Forschung und Entwicklung wird sich noch lange in der Zukunft auszahlen, und Anfang dieses Jahres haben wir einige der Forschungsprototypen vorgestellt, die wir gebaut haben, um diese Anzeigetechnologien der nächsten Generation zu demonstrieren. Während diese frühen Einblicke in die Zukunft von VR wichtig sind, ist die blühende Community von VR-Entwicklern, -Erstellern und -Anwendern, die es bereits heute gibt, noch wichtiger.“

Er stellte fest, dass Spieleentwickler und Benutzer selbst Apps und Spiele erstellt haben, die zu einer neuen Community von Entwicklern auf den Meta-Plattformen führen. Dieser Selbstausdruck von Benutzern an Orten wie Horizon Worlds gedeiht, sagte er, und Meta wird ihm helfen, im Jahr 2023 zu gedeihen.

„VR befindet sich jetzt in einem ganz besonderen Moment – ​​grundlegende neue Teile des Hardware- und Technologie-Stacks kommen zum ersten Mal auf den Markt, und eine Gemeinschaft von Entwicklern und Benutzern erschließt ihr Potenzial auf neue Weise, von schrottreifen Software-Startups bis hin zu Top- Tier-Game-Studios, Entwickler und Künstler“, sagte Bosworth. „Wir glauben, dass es erst 2023 besser wird.“

Er wies auf Fortschritte in der Revolution des maschinellen Lernens hin, die sich in den letzten zehn Jahren vollzogen haben und in diesem Jahr einen Siedepunkt erreicht haben.

„Bei Meta profitieren unsere größten Prioritäten als Unternehmen derzeit von mehr als einem Jahrzehnt Investitionen in KI“, sagte er.

Bei Reality Labs hängen Technologien wie Meta Reality oder Presence Platform stark von fortschrittlicher KI ab, um zu funktionieren.

„Meta ist bei weitem nicht das einzige Unternehmen, das daran arbeitet, hier die Grenzen zu erweitern, und wir erwarten, dass sich uns im nächsten Jahr neue Wettbewerber anschließen werden, um AR und VR zu entwickeln“, sagte er. „Wenn neue Geräte auf den Markt kommen, glauben wir, dass unsere Branche in eine neue Ära des Wachstums und des Wettbewerbs eintreten wird, die den Benutzern und der Entwicklergemeinschaft enorme Vorteile bringen wird. Und Meta wird eigene neue Geräte zum Teilen haben, einschließlich des Nachfolgers von Meta Quest 2, unserem meistverkauften VR-Gerät aller Zeiten. Sie werden es lieben. Und Sie werden das Meta Quest Gaming Showcase im Frühjahr definitiv lieben, wo wir wieder einmal einige der fantastischen neuen Spiele des nächsten Jahres präsentieren werden.“

Er sagte, das Unternehmen finde Wege, effizienter zu arbeiten, aber er sagte, die Vision und die langfristigen Forschungsbemühungen würden sich nicht ändern.

„Der Bau echter AR-Brillen erfordert eine Vielzahl von Durchbrüchen und Erfindungen in allen möglichen Bereichen, von Linsen und Miniaturdisplays bis hin zu leichten Materialien und KI-gestützten Schnittstellen“, sagte er. „Während unsere VR-Geräte und -Software die meiste öffentliche Aufmerksamkeit erhalten, leiten wir etwa die Hälfte unserer Betriebskosten für Reality Labs in unsere Initiativen.“

Er fügte hinzu: „Dies beinhaltet heute eine der ehrgeizigsten F&E-Operationen der Welt, die sich auf den Aufbau einer wirklich revolutionären neuen Art von Computerplattform konzentriert. Jedes Mal, wenn ich unsere Forschungslabors besuche und die frühen Versionen dieser Technologien vorführen kann, bin ich überwältigt und kann es kaum erwarten, dass die Welt die Ergebnisse der Dinge sieht, die wir dort bauen. Die VR-Hardware und -Software, die wir bisher veröffentlicht haben, ist nur die Spitze des Eisbergs, und die besten Tage liegen noch vor uns.“

Meta gab auch ein Update zu seinen Fortschritten bei der Herstellung seines Infinite Displays und fortschrittlicher VR-Technologien sowie seiner Fortschritte gemischte Realität. Es stellte fest, dass Meta über mehr als 350 Patente auf optische Technologien verfügt und viele der neuen Technologien in zukünftigen Headsets verwenden wird.