Startseite > Hardware > Sony stellt Lösung für immersives Engineering vor

XR Head-Mounted Display und Controller

Sony stellt Lösung für immersives Engineering vor

18. Januar 2024, 8:09 Uhr | Diana Künstler

Sony hat die Entwicklung eines Systems zur Erstellung immersiver räumlicher Inhalte bekannt gegeben. Dieses umfasst ein XR Head-Mounted Display mit 4K-OLED-Mikrodisplay und Video-See-Through-Funktion sowie zwei Controller, die für die Interaktion mit 3D-Objekten und präzisem Zeigen optimiert sind.

Das neue System soll Kreative bei der Erstellung anspruchsvoller 3D-Inhalte unterstützen. Sony plant die Zusammenarbeit mit Entwicklern von 3D-Produktionssoftware in verschiedenen Bereichen, wie etwa Unterhaltung und Industriedesign. Zum Launch arbeitet das Unternehmen exklusiv mit Siemens zusammen, um eine neue Lösung für immersives Design und kollaborative Produktentwicklung einzuführen, bei der Software aus der offenen digitalen Business-Plattform Siemens Xcelerator zum Einsatz kommt.

Das neue System werde im Laufe des Jahres 2024 verfügbar sein. Sony und seine Partner werden nach eigener Aussage zu gegebener Zeit weitere Details bekannt geben, etwa zu technischen Daten, dem Termin und den Regionen für die Markteinführung, Preisen, Vertriebskanälen und der Softwarekompatibilität.

Ausgestattet mit einem XR Head-Mounted Display mit 4K-OLED-Mikrodisplays und der proprietären Rendering-Technologie von Sony ermögliche es das neue System, Texturen von 3D-Objekten und menschliche Mimik in Echtzeit hochauflösend und realistisch zu rendern. Neben einer Video-See-Through-Funktion und räumlicher Erkennung mit insgesamt sechs Kameras und Sensoren verfügt das System über einen Ring-Controller, mit dem die Benutzer:innen Objekte im virtuellen Raum intuitiv bewegen können, sowie einen Pointing-Controller, der präzises Zeigen ermöglicht. So sollen Kreative mit Controllern und Tastaturen im virtuellen Raum arbeiten können, während sie das Head-Mounted Display tragen. Dabei können sie nicht nur auf dem hochauflösenden Display 3D-Modelle in einer Extended Reality (XR)-Umgebung in realem Maßstab sehen, sondern in dieser Umgebung auch 3D-Modelle erstellen und verändern. Dank Integration mit Drittanbieter-Anwendungen zur 3D-Erstellung unterstützt das System auch Echtzeit-Fernüberprüfungen zwischen verschiedenen Standorten. Kreativen steht damit ein intuitives und immersives Tool zur Verfügung, das den gesamten Prozess der Erstellung räumlicher Inhalte abdeckt. Das System arbeitet mit dem Snapdragon XR2+ Gen 2.

„Wir haben unseren Snapdragon XR2+ Gen 2 Prozessor darauf ausgelegt, 4K-Displayauflösung, hochmoderne Grafik und eine unvergleichliche Leistung zu unterstützen, damit Kreative innovative räumliche Inhalte erstellen können, die alle Sektoren positiv verändern werden“, sagt Said Bakadir, Senior Director, Product Management, Qualcomm Technologies. „Es ist spannend zu sehen, wie Sony mit seinem System zur Erstellung räumlicher Inhalte in den Enterprise-Bereich geht und die Snapdragon XR-Technologien nutzt, um realistischere, detailliertere und präzisere Mixed Reality-/Virtual Reality-Erlebnisse zu ermöglichen, die Entwickler*innen und Kreativen helfen werden, eine noch immersivere Zukunft voranzutreiben.“

Matchmaker+ Anbieter zum Thema

zu Matchmaker+

Enablement für immersives Engineering

Sony hat bereits eine Reihe von Technologien eingeführt, die die Arbeitsabläufe und Ergebnisse bei der Erstellung räumlicher Inhalte verbessern und den Einsatz von 3D-Computergrafik in verschiedenen kreativen Bereichen erleichtern. Das mobile Motion-Capture-System „mocopi“, das hauseigene Technologien von Sony nutzt, ermöglicht mithilfe kleiner, leichter Sensoren und einer speziellen Smartphone-App eine vollständige Erfassung von Körperbewegungen. Spatial Reality-Displays liefern bei der Content-Erstellung und -Überprüfung hochrealistische, dreidimensionale Inhalte, ohne spezielle Brillen oder Virtual Reality (VR)-Headsets zu erfordern. Mit der Einführung des neuen Systems und der Zusammenarbeit mit Anbietern von 3D-Design-Software möchte Sony den Entwickler:innen räumlicher Inhalte zusätzlich helfen, die Grenzen zwischen der physischen und der virtuellen Welt zu überwinden, um noch intensivere kreative Erlebnisse zu schaffen.

„Siemens arbeitet mit Sony zusammen, um immersives Engineering zu ermöglichen, ein wichtiger Baustein für das industrielle Metaverse. Gemeinsam schaffen wir eine Umgebung, in der es möglich sein wird, die Realitäten der Physik ohne die Grenzen der Zeit zu erleben, um die Arbeitsweise und Zusammenarbeit unserer Kunden grundlegend zu verbessern", so Cedrik Neike, Mitglied des Vorstands der Siemens AG und CEO von Siemens Digital Industries.

Die wichtigsten Merkmale

Das Head-Mounted Display verfügt über große 1,3-Zoll OLED-Mikrodisplays mit 4K-Auflösung und einem großen Farbbereich, der bis zu 96 Prozent des DCI-P3-Farbraums abdecken soll. Dank detailliertem, realistischem Rendering von Texturen von 3D-Objekten und menschlicher Mimik könnten Entwickler:innen mit dem Head-Mounted-Display den gesamten Prozess von der Modellierung bis zur Überprüfung durchlaufen. Das System unterstützt Split-Rendering, bei dem die Rendering-Last auf Computer und Head-Mounted-Display verteilt wird. Dadurch sollen auch große 3D-Modelle stabil und hochauflösend gerendert werden können.

Dank seiner Kooperation mit Qualcomm Technologies ist Sony eines der ersten Unternehmen, die die neueste Snapdragon XR2+ Gen 2 Platform einsetzen. Dieser Prozessor schöpfe die Leistung der 4K-OLED-Mikrodisplays aus, um eine atemberaubende Bildqualität sicherzustellen. Zudem ermögliche die On-Chip-KI ein verbessertes Benutzer- und räumliches Tracking für nahtlose XR-Erlebnisse, bei denen physische und digitale Räume verschmelzen, um eine einfache Navigation und intuitive Interaktion innerhalb der XR-Kreativräume zu gewährleisten.

Controller, Usability und 3D-Disgn-Software

Zum System gehört ein Ring-Controller, mit dem die Benutzer:innen Objekte im virtuellen Raum intuitiv bewegen können. Außerdem ist ein Pointing-Controller vorhanden, der stabiles, genaues Zeigen im virtuellen Raum ermöglicht und hinsichtlich Form und Tastenlayout für eine effiziente und präzise Bedienung optimiert ist. Wenn die Benutzer:innen das Head-Mounted Display tragen, den Pointing-Controller in der Führungshand halten und den Ring-Controller an den Fingern der anderen Hand anbringen, können sie mit den beiden Controllern und einer Tastatur 3D-Objekte modellieren.

Bei der Gestaltung des Head-Mounted Displays seien laut Sony sein Schwerpunkt sowie das Design und Material der direkt am Kopf anliegenden Polster exakt abgestimmt worden, um den Komfort und die Stabilität zu gewährleisten, die für eine längere kreative Nutzung erforderlich sind. Darüber hinaus ermögliche der Mechanismus zum Hochklappen des Display-Teils ein leichtes und nahtloses Wechseln zwischen physischen und virtuellen Räumen, ohne dass das Gerät immer wieder abgenommen und anschließend neu kalibriert werden muss.

Sony strebt die Zusammenarbeit mit verschiedenen Entwicklern von 3D-Produktionssoftware an, sowohl im Entertainment-Bereich als auch im Industriedesign. Zum Launch wird Sony exklusiv mit Siemens zusammenarbeiten, um durch Integration mit der neuen NX Immersive Designer-Software – einer Produktentwicklungslösung aus dem Siemens Xcelerator-Portfolio für Industriesoftware – innovative immersive Engineering-Funktionen für die Fertigungsindustrie bieten zu können. Die Integration von leistungsfähiger Hardware und Software ermögliche die Bereitstellung immersiver Tools für Design, Prüfvorgänge und Kollaboration, um Entwickler:innen in den Bereichen Industriedesign und Produktengineering wirksam zu unterstützen.