Lernen Sie die Virtual Reality-Plattform der nächsten Generation von Google kennen

Werbung

Gestern zeigte Google auf der IO-Konferenz von Google die Zukunft der virtuellen Realität - und sie besteht nicht nur aus Pappe. Dies ist überraschend, da Googles frühere Unternehmungen in diesem Bereich ein wenig halbherzig waren.

Verstehen Sie mich nicht falsch: Google Cardboard, a minimalistische VR-Shell für Smartphones ist zweifellos ordentlich - aber seine Grenzen sind klar. Es ist eines der berühmten 20% -Projekte von Google - eine Liebesarbeit einer Handvoll Mitarbeiter, und es zeigt sich. Karton hat ein enges Sichtfeld, Bewegungsunschärfe, keine Positionsverfolgung und eine krankmachende Latenz. Es ist ein Rezept für schlechtes Eintauchen und VR-Krankheit.

Google Cardboard hat kein Stirnband und das ist kein Versehen. Ohne Kopfgurt müssen Benutzer ihn an ihre Gesichter halten und müssen sich mit dem Oberkörper drehen. Das verlangsamt sie mit einer spürbaren Verzögerung. Und das ist okay - wir sprechen von einem Headset aus Pappe. Es ist immer noch ein wertvolles Werkzeug, um Leute in die VR zu bringen, aber es ist kein Game Changer.

All das beginnt sich zu ändern. Google beschäftigt einen nicht zu vernachlässigenden Teil der weltweiten Gehirnleistung und hat auf der diesjährigen IO-Konferenz damit begonnen, einen Teil dieser Möglichkeiten im VR-Bereich zu nutzen. Die Ankündigungen sind dreifach.

• Erstens wurde das Cardboard-Headset erheblich verfeinert.
• Zweitens gibt es eine VR-Kamera, die für ein nahtloses 3D-Erlebnis ausgelegt ist.
• Schließlich gibt es noch Tango VR, eine neue VR / AR-Plattform, die auf Googles rätselhaftem 3D-Sensing-Tablet basiert.

Bereit? Lassen Sie uns eintauchen.

Neues Karton-Headset

Das neue Design für Google Cardboard ist eine deutliche Verbesserung - es bietet Unterstützung für größere Telefone (bis) bis sechs Zoll), beinhaltet iOS-Unterstützung und fügt einen kleinen physischen Hebel an der Seite des Headsets für hinzu Eingang. Es soll außerdem einfacher zu bauen und zu steuern sein.

Abgesehen davon ist es fast die gleiche Geschichte: kleine handelsübliche Linsen, eine Pappschale und viel Reisekrankheit, wenn Sie sie zu lange verwenden. Dies ist eine deutliche Verbesserung, aber wir sind ziemlich nahe an der Grenze für Schalen im Kartonstil, und Google befindet sich in einem Warteschleifenmuster, bis sie anfangen können, etwas Nützlicheres zu bauen.

VR-Kamera

Die in Zusammenarbeit mit GoPro entwickelte neue Kamera heißt Springen. Es besteht aus 16 GoPro-Kameras (Gesamtkosten ca. 10.000 USD), die auf einer kreisförmigen Kunststoffhalterung angeordnet sind. So weit, so banal: ähnliche Reittiere für VR-Video produzieren Samsung und Oculus kündigen die mobile VR-Plattform "Gear VR" anFührungskräfte von Samsung und Oculus CTO John Carmack standen auf der Bühne, um endlich über ein geheimes Projekt namens "Gear VR" zu sprechen, an dem sie im letzten Jahr gearbeitet haben. Weiterlesen sind bereits auf dem Markt. Wo es richtig cool wird, ist der sogenannte "Jump Assembler", eine von Google entwickelte Software zum Schneiden von VR-Artefakten.

Um diese Software zu verstehen, müssen Sie das Problem verstehen, das sie zu lösen versucht. John Carmack von Oculus spricht über die Probleme mit der 3D-Panoramaaufnahme.

"Was sie am Ende tun, ist, dass Sie Schnitte von mehreren Kameras erhalten haben, also ist es geradeaus die richtige Stereoanlage […] und dann hier drüben ist es für diesen [Winkel] richtig. Das bedeutet jedoch, dass wenn Sie das betrachten, was für die Augen hier richtig war, aber Sie hier aus dem Augenwinkel schauen, […] es nicht die richtige Ungleichheit für die Augen ist. Und noch schlimmer, wenn Sie [den Kopf rollen], wird alles schlecht, weil es nur für die Augen geradeaus eingerichtet ist. “

Jump ist ein Weg, um dies zu beheben. Google verwendet die Bildverarbeitungstechnologie, um die Bilder miteinander zu vergleichen und die 3D-Geometrie der Szene zu ermitteln. Die Software verwendet diese Rekonstruktion, um eine saubere, stichfreie Perspektive mit perfekter Stereoanlage aus jedem Blickwinkel zu erstellen.

Google plant, die Anzeige dieser Art von Inhalten über YouTube mithilfe von Google Cardboard zuzulassen. Es gibt jedoch noch kein Wort über die Unterstützung anspruchsvollerer VR-Headsets wie Oculus Rift.

Das ist schon ein großer Gewinn. Mit der Technologie kann jedoch mehr erreicht werden - viel mehr. Während der Demo zeigt Google, wie sich die virtuelle Kamera im Ring bewegt und die Perspektive reibungslos aktualisiert. Derzeit backt Google die 3D-Daten in Stereopanoramen. Die Illusion funktioniert bei jeder Drehung, bricht jedoch zusammen, wenn Sie den Kopf rollen oder sich bewegen.

In Zukunft könnte Google Ihnen die rekonstruierte 3D-Geometrie jedoch direkt anzeigen und Ihnen ein umfassendes VR-Videoerlebnis bieten. Möglicherweise eine, die jede Rotationsachse sowie einen signifikanten Grad an Positionsverfolgung unterstützt. Dies ist noch nicht implementiert, aber es ist eine verlockende Möglichkeit für einen großen Fortschritt in VR-Videos.

Tango VR

Google Cardboard hat viele Probleme, aber auch das beste Beispiel für mobile VR. Samsung Gear VR-Headset Samsung und Oculus kündigen die mobile VR-Plattform "Gear VR" anFührungskräfte von Samsung und Oculus CTO John Carmack standen auf der Bühne, um endlich über ein geheimes Projekt namens "Gear VR" zu sprechen, an dem sie im letzten Jahr gearbeitet haben. Weiterlesen hat immer noch einen großen Nachteil - keine Positionsverfolgung.

Rotationsverfolgung ist ziemlich einfach. Sie können Gyroskope verwenden, um festzustellen, wie stark sich Ihr Kopf dreht, und die Erdmagnetpole bieten eine bequeme Referenz, um ein Abdriften zu verhindern. Dies entspricht Sensoren im Wert von ein paar Dollar, die in den meisten Smartphones bereits vorinstalliert sind.

Die Positionsverfolgung ist eine ganz andere Platte aus Poutine. Verschiedene Unternehmen haben das Problem auf unterschiedliche Weise angegangen. Oculus verwendet eine externe Kamera, die mit der Verfolgung von Punkten auf dem Headset gekoppelt ist, sodass diese mithilfe der Bildverarbeitung verfolgt werden kann.

HTC und Valve nehmen ein anderer Ansatz für ihr Vive-Headset Valve & HTC kündigen neues VR-Headset für Weihnachten 2015 anDas neue VR-Headset von Valve ist das beste, das die Welt je gesehen hat. Hat Oculus eine Chance? Weiterlesen Verwenden Sie viele „Lighthouse“ -Basisstationen mit rotierenden Trommeln, um den gesamten Raum mit Laserlicht zu fegen. Die Tracker am Headset und an den Controllern sind mit Lichtsensoren abgedeckt, die (mit äußerst genauem Timing) erkennen können, wann sie von diesem Laser getroffen werden. Durch Überprüfen des genauen Timings und Durchführen einiger grundlegender geometrischer Berechnungen können drei beliebige Sensoren verwendet werden kann zusammenarbeiten, um die genaue Position des Geräts im Raum relativ zur Basis zu bestimmen Stationen.

Beide Ansätze haben Vorteile, und wir können ihre relativen Vorzüge diskutieren. Beide haben jedoch einen Nachteil, der in der mobilen Welt von entscheidender Bedeutung ist: Sie benötigen externe Hardware, um das Headset zu verfolgen.

Dies ist natürlich ein Problem für ein mobiles Headset. Der springende Punkt bei mobiler VR ist es, sich von den Kabeln und der Infrastruktur zu befreien, die für High-End-Desktop-Erlebnisse erforderlich sind. Was können wir dagegen tun? Zumindest laut Google besteht die Antwort darin, eine Technologie namens „Visual SLAM“ (Gleichzeitiger Standort und Zuordnung) in Verbindung mit einem Tiefensensor, um Punkte in der Welt zu verfolgen. Damit wird ein 3D-Netz der Umgebung erstellt, um zu bestimmen, wo sich das Gerät relativ zu seiner Startposition im Raum befindet.

Google hat bereits einige frühe Hardware mit dieser Funktionalität in Form der ausgeliefert Tangotablette Google möchte eine 3D-Kamera auf Ihr Smartphone setzen - hier ist der Grund dafürGoogles Project Tango bringt 3D-Sensoren auf mobile Geräte. Folgendes wissen wir bisher. Weiterlesen , auf die wir hier bereits eingegangen sind. Google glaubt, dass der Sensor die Art und Weise, wie wir mit Geräten interagieren, revolutionieren könnte. Wie Entwickler Johnny Lee es im Video unten ausdrückt,

„Anstatt unser ganzes Leben in dieses sehr kleine Rechteck [eines Smartphone-Bildschirms] zu zwingen, Project Tango entwickelt die Technologien, damit alles und jeder genau versteht, wo sie sind sind. Irgendwo. Nicht nur dort, wo es eine gute GPS-Abdeckung gibt, sondern auch eine gute WIFI-Abdeckung […] Die Geräte, die wir verwenden, werden unser Verständnis des Weltraums teilen. “

Diese Technologie hat aufregende Anwendungen in der virtuellen Realität, und seit kurzem zeigt Google sie.

Dieses Zeug ist beeindruckend, aber es ist auch noch früh. Valve verwendet ein handelsübliches Holster für seine VR-Erfahrung zusammen mit ehrlichen NERF-Waffen. Das Tablet selbst ist nicht für VR ausgelegt - es ist schwer, hat eine hohe Latenz und die Ergonomie ist schrecklich.

Trotzdem ist es möglicherweise die beeindruckendste mobile VR-Demo, die die Welt je gesehen hat - allein aufgrund der Positionsverfolgung, die sie bietet. Mit dem Headset können Sie sich frei in Innenräumen bewegen (vorausgesetzt, die Kamera kann genügend Licht sehen). Dies eröffnet einige spannende Möglichkeiten für Mixed-Reality-Anwendungen.

Viele der Nachteile werden sich bald verbessern: Google hat außerdem bekannt gegeben, dass es eine Partnerschaft mit dem Prozessorhersteller Qualcomm eingegangen ist, und ein Smartphone entwickelt, das die gesamte Tango-Prozessorsuite des Projekts sowie die dafür erforderliche Hardware enthält. Diese Smartphones werden Referenzdesigns für zukünftige Tango-kompatible Smartphones sein, die für VR-Anwendungen viel besser geeignet sein sollten.

Die Positionsverfolgung selbst sieht glatt aus. Aber was auf einem Computerbildschirm gut aussieht, kann sich anders anfühlen, wenn Sie sich darin befinden. HoloLens von Microsoft Fünf Fragen zu Microsofts "Project HoloLens"Das neue Augmented Reality-Headset von Microsoft ist sehr aufregend - aber können sie die grundlegenden Probleme von AR lösen? Weiterlesen verwendet eine ähnliche Technologie, um sich zu positionieren, und weist merkliche Störungen in seiner Stabilität auf.

In seinem Vortrag erwähnt Johnny Lee, dass die Verfolgung unter guten Bedingungen auf „einige Millimeter oder einen Zentimeter“ genau ist. Das ist beeindruckend, entspricht aber nicht ganz dem Sub-Millimeter-Standard für virtuelle Realität. Es hört sich so an, als würde es noch ein oder zwei Generationen dauern, bis das Tracking gut genug ist, um der angebundenen Desktop-VR einen Run für ihr Geld zu geben.

Die Zukunft, Powered by Google

Wenn Sie all dies zusammen nehmen, können Sie in zwei oder drei Jahren die Form von etwas Interessantem erkennen. Stellen Sie sich für einen Moment vor, dass in einigen Jahren neue Smartphones mit Tango-Hardware, einem VR-Holster und einer für VR mit geringer Latenz optimierten Android-Version ausgestattet sind. In dieser Zukunft wäre es nicht ungewöhnlich, Menschen zu sehen, die selbstbewusst die Straße entlang stolzieren, das Telefon auf ihr Gesicht geklebt und in ihre eigene Augmented Reality eingetaucht.

In dieser Zukunft gibt es überall VR-Kameras, und Sie können sofort von überall auf der Erde in VR-Videos springen. VR ist billig, VR ist allgegenwärtig und VR ist eine durchweg komfortable, umfassende Erfahrung, die Millionen von Menschen zur Verfügung steht. Das ist der Traum, und Google hat ihn der Realität auf verlockende Weise nahe gebracht.

Was denken Sie? Interessieren Sie sich für VR-Video? Können Sie sich vorstellen, ein mobiles VR-Headset zu kaufen? Lass es uns in den Kommentaren wissen!