Was ist volumetrische Erfassung und wie funktioniert sie?

Haben Sie schon von volumetrischer Erfassung gehört? Es wird verwendet, um "Hologramme" und andere dreidimensionale Modelle zu erstellen, die für lebensechte Augmented- und Virtual-Reality-Anwendungen sowie Desktop-Anwendungen verwendet werden können. Während einige davon ziemlich verrückt klingen, können sogar die meisten Mobiltelefone AR-Erlebnisse mit Hologrammen ausführen, was Motion Capture in Unterhaltung und Werbung immer beliebter macht.

Hier werden wir darüber sprechen, was volumetrische Erfassung ist, wie sie sich von anderen Arten der Bildproduktion unterscheidet und wie sie verwendet wird.

Was ist volumetrische Erfassung?

"Volumetrische Erfassung" (auch als "volumetrisches Video" bekannt) bezieht sich auf die Aufnahme eines physischen Ortes, Objekts, einer Person oder sogar eines Ereignisses in einer Weise, die den Anschein erweckt, als ob sie einen dreidimensionalen Raum einnehmen würde. Im Falle einer Aufnahme eines Objekts oder einer Person ermöglicht dies einem Betrachter, sich um das Enderlebnis zu drehen oder zu bewegen. Wenn Sie über andere räumliche Aufnahme- und Anzeigetechnologien gelesen haben, hört sich die volumetrische Erfassung möglicherweise nicht so besonders an.

VERBUNDEN: Lichtfeldfotografie: Was ist das und wie funktioniert es?

Beispielsweise kann die Lichtfeldfotografie eine Szene auf eine Weise erfassen, die Tiefe zu haben scheint, aber ein Benutzer kann nicht überzeugend durch die Szene navigieren. LiDAR- und ToF-Sensoren (Time of Flight) auf Geräten wie Mobiltelefonen können beide räumliche Modelle aus Objekten und Szenen erstellen, die in drei Dimensionen navigiert werden können. Im Gegensatz zu diesen Systemen kann die volumetrische Erfassung jedoch räumliche Modelle von sich bewegenden Objekten und Personen in Echtzeit erstellen.

Aber wie?

Wie funktioniert die volumetrische Erfassung?

Mit LiDAR und ToF kann der Rekorder durch Bewegung eine volumetrische Erfassung einer stationären Szene oder eines Objekts erstellen um diese Szene oder dieses Objekt herum und erfasst im Wesentlichen viele zweidimensionale Daten von vielen verschiedenen Winkel. Stellen Sie sich das so vor, als würden Sie von jeder Seite eines Würfels ein Foto machen und die Fotos dann zu einer Würfelform zusammenkleben. Sie haben jetzt ein räumliches Modell, das aus zweidimensionalen Darstellungen der realen Sache erstellt wurde.

VERBUNDEN: ToF vs. LiDAR: Was ist der Unterschied?

Die volumetrische Erfassung funktioniert mit einer ganzen Reihe von Kameras aus einer ganzen Reihe verschiedener Winkel, die alle gleichzeitig filmen. Dann fügen Computeralgorithmen die Ansichten aus diesen Winkeln zusammen, um volumetrische Bilder zu erstellen. Mixed Reality Capture Studio von Microsoft, einer der größten Player in der volumetrischen Erfassung, nennt diese "Hologramme". Aber wer würde ein Hologramm brauchen und wofür?

Wofür wird volumetrische Erfassung verwendet?

Die volumetrische Erfassung wird derzeit hauptsächlich in der Werbung und Unterhaltung verwendet. In der Werbung bieten Hologramme Verbrauchern Zugang zu Informationen, Produkten und Sprechern in immersiven Möglichkeiten zur Markenbindung, die sie von überall aus erleben können.

In ähnlicher Weise wird volumetrische Erfassung zunehmend in der Unterhaltung für Dinge wie Remote-Konzerte verwendet. Darsteller können wie gewohnt eine Live-Performance durchführen und ihre Hologramme an die Fans in der Umgebung senden die Welt in einem Erlebnis erleben, das eindringlicher ist, als ein Konzert live auf einer Plattform wie zu sehen oder zu hören Youtube.

Einige Anwendungsfälle nutzen ein ganzes Studio, wie z. B. diejenigen, die sich auf Initiative von Microsoft auf der ganzen Welt befinden. Sie sind jedoch nicht der einzige Name im Spiel. TetaVi setzt tragbare volumetrische Erfassungsgeräte ein, die "vor Ort" eingesetzt werden können.

Die Zukunft der volumetrischen Erfassung

Wie die meisten Mixed-Reality-Anwendungen und -Technologien hat die volumetrische Erfassung viel Potenzial, das noch nicht realisiert wurde. Da die Technologie jedoch kleiner, benutzerfreundlicher und erschwinglicher wird, gibt es viele Anwendungen, die in naher Zukunft realisiert werden könnten.

Das volumetrische Erfassungssystem von TetaVi besteht beispielsweise aus vier Tiefenkameras und acht RGB-Kameras. Stellen Sie sich vor, es wäre so einfach und kostengünstig, diese in einem Raum zu installieren, wie die Installation von Mikrofonen. Konzerte, Theaterstücke, Treffen und gesellschaftliche Veranstaltungen könnten alle volumetrisch erfasst und an ein größeres Publikum übertragen oder für zukünftige Historiker aufbewahrt werden.

Darüber hinaus gibt es bereits einige Anwendungsfälle mit großem Wachstumspotenzial, wie Spiele- und Social-Media-Anwendungen. Im Fall von Spielen wird volumetrische Erfassung hauptsächlich verwendet, um Inhalte für VR-Erlebnisse zu erstellen, die es dem Benutzer ermöglichen, Gehen Sie um eine volumetrische Erfassung einer physischen Person, eines Objekts oder eines Ortes in einem virtuell erstellten oder nachgebildeten Umgebung.

Haben Sie Erfahrung mit volumetrischer Erfassung?

Im Moment sind die Chancen, dass Sie eine volumetrische Erfassung erlebt oder sogar gemacht haben, ziemlich gering. Es ist jedoch sehr wahrscheinlich, dass Sie dies in Zukunft tun werden. Volumetrische Erfassung ist noch nicht jedermanns Sache, aber es ist nichts falsch daran, etwas frühzeitig zu verstehen.

Microsoft stellt seine Mesh-Mixed-Reality-Plattform vor, und es ist ziemlich cool

Holoportation und immersive Erlebnisse? Ja bitte.

Weiter lesen

Über den Autor