Microsoft zeigt auf der Build Conference neue HoloLens-Demos

Werbung

Das kommende HoloLens-Headset von Microsoft ist das erste High-End-Augmented-Reality-Gerät, das der Öffentlichkeit gezeigt wird. Leider war Microsoft so nervös, dass wir nicht wirklich viel darüber wissen.

Heute um Microsoft Build Developer Conference In San Francisco erhielten wir einen weiteren spannenden Einblick in die Technologie. Die Demo selbst ist glänzend, aber nicht sehr informativ. Wir können jedoch einige wichtige Details herausfinden, indem wir zwischen den Zeilen lesen. In diesem Fall ist das, was Microsoft nicht angezeigt hat, informativer als das, was sie getan haben.

Die Demo

Einige der HoloLens-Ingenieure kamen auf die Bühne, um einige der neuen Demos zu zeigen, die sie für die Hardware entwickelt haben. Eine Demo findet als Nachbildung einer bedrückend spärlichen Wohnung eines Ingenieurs statt und bedeckt die Wände und den Boden mit virtuellen Apps und Spielzeugen. Ein anderer bringt einige Ärzte hinzu, um ein Modell eines menschlichen Körpers zu zeigen, und nimmt es dann auseinander. Schließlich baut ein Kit-Roboter einen ausdrucksstarken, virtuellen Oberkörper auf und entfaltet ein großes Statusfeld, sodass es in Echtzeit optimiert werden kann.

Der Teufel, die Details

So weit, so beeindruckend - aber viele meiner Initialen Fragen zur HoloLens Fünf Fragen zu Microsofts "Project HoloLens"Das neue Augmented Reality-Headset von Microsoft ist sehr aufregend - aber können sie die grundlegenden Probleme von AR lösen? Weiterlesen unbeantwortet bleiben. Schauen wir uns das etwas genauer an.

Okklusion

Fühlt sich die Demo für Sie etwas inszeniert an? Beobachten Sie die Kamerabewegungen genau. Es ist nicht nur die übliche Unbeholfenheit auf Messen. Sehen Sie sich die Demo noch einmal an und suchen Sie nach Momenten, in denen ein Mensch vor einem virtuellen Objekt vorbeikommt.

Das nennt man Okklusionund es ist ein schwieriges Problem in der Augmented Reality. Um dieses Phänomen korrekt wiederzugeben, muss die HoloLens die Welt schnell und genau genug abbilden, um die Silhouette der Person aus dem virtuellen Bild herauszuschneiden. Andernfalls tritt ein Tiefenkonflikt auf: Ihre Stereovision zeigt an, dass sich das virtuelle Objekt hinter der Person befindet, es wird jedoch darüber angezeigt. Wie wir aus der virtuellen Realität gelernt haben, stören diese Art von Konflikten und zerstören die Illusion, dass die Objekte, mit denen Sie interagieren, greifbare Teile der Welt sind.

Die Demo ist sehr umfangreich, um dies zu verhindern. Sie können sehen, wie der Kameramann reagiert, wenn sich eine der Personen auf der Bühne auf ein virtuelles Objekt zubewegt, um zu verhindern, dass sich diese überlappen. Die gesamte Demo ist aufwendig choreografiert. Wenn der Typ auf der Bühne in der ersten Demo vom Stuhl aufsteht, tritt er vor einen virtuellen Roboter - und die Kamera ist genau in diesem Moment auf eine andere Stelle gerichtet.

Sie bringen es nur ein paar Mal durcheinander. Während der Roboterdemo geht der Roboter kurz vor einigen virtuellen Punkten auf dem Boden vorbei und einer der Moderatoren tritt darauf. In beiden Fällen liegt ein Tiefenkonflikt vor: Sie sehen weiterhin die virtuellen Punkte durch die realen Objekte, was bedeutet, dass Microsoft noch keine Lösung für dieses Problem hat.

Weitere Beweise dafür finden Sie in derselben Demo, wenn eine Visualisierung der Umgebungskarte des Headsets angezeigt wird. Wenn Sie Bild für Bild durch die Karte schauen und genau hinschauen, können Sie feststellen, dass die Karte in mehrfacher Hinsicht falsch ist: Der Tisch befindet sich auf einer erhöhten Plattform, was zu einer vagen Ausbuchtung in der Karte wird. Der Roboter ist ebenfalls auf der Karte sichtbar, jedoch nur als kleiner Klumpen. Die Kanten des Schreibtisches fehlen. Sie können diese Probleme wahrscheinlich auf die begrenzte Auflösung des Kinect-Tiefensensors im Headset zurückführen. In beiden Fällen reicht die Genauigkeit hier nicht aus, um virtuelle Objekte korrekt zu verschließen.

Lassen Sie uns hier klar sein: Dies könnte ein Showstopper sein. Der Zweck der HoloLens ist es, reale und virtuelle Objekte auf überzeugende Weise nahtlos zu kombinieren. Okklusion ist ein notwendiger Teil der Illusion. Okklusion ist ein so starker Tiefenhinweis, dass das Hinzufügen einer einzelnen weißen Linie zu einem Video selbst einen leistungsstarken 3D-Effekt erzeugen kann.

Microsoft ist sich dessen klar bewusst. Sie zeigen Okklusion in ihren Werbematerialien. Aus ihren Demos geht jedoch nicht hervor, dass sie dies tatsächlich tun können. Wenn Microsoft dieses Problem nicht lösen kann, gibt es kein Produkt. Benutzer leben nicht in aufwändig choreografierten Demos in leeren Häusern. Sie tolerieren keine konstanten, immersionsbrechenden Rendering-Fehler. Ich bin ehrlich gesagt erstaunt, dass mehr Fachpresse nicht über dieses Problem spricht. Ich bin sehr gespannt, ob Microsoft Pläne zur Lösung dieses Problems hat.

Benutzeroberfläche

Jedes Mal, wenn ich mir ein Video ansehe, das die HoloLens-Benutzeroberfläche zeigt, ging mir immer wieder der Satz durch den Kopf: "Werden wir das wirklich wieder tun?"

Mit jeder neuen Computerplattform, sowohl dem PC als auch den Smartphones, durchlaufen wir einen Zyklus schlechter Benutzeroberfläche, bevor wir es herausfinden. Das Problem ist, dass die fehlerhaften Benutzeroberflächen genauso fehlerhaft sind und dass die HoloLens-Benutzeroberfläche schlecht ist. Ich wünschte, wir könnten einmal das Muster erkennen und zum guten Teil übergehen. Folgendes macht die HoloLens (und jede neue Plattform) falsch:

• Erstens versuchen sie, alte Paradigmen neu zu erschaffen, anstatt neue zu erschaffen. Denken Sie an die alten Treo-Smartphones, die um eine physische Tastatur und einen Maus-emulierenden Stift herum gebaut wurden. Die HoloLens ist genau die gleiche: Verwenden Sie Ihren Kopf, um eine Maus zu emulieren, und Ihren Finger, um zu klicken. Heck, irgendwann "schleppt" der Ingenieur ein Fenster, indem er es an seinem Kopf verriegelt, etwas, das der Oculus VR Best Practices-Leitfaden warnt ausdrücklich davor. Die HoloLens ist kein PC, und der Versuch, eine PC-Benutzeroberfläche zu verwenden, funktioniert nicht.
• Zweitens werden sie in die glänzenden Teile der Benutzeroberfläche eingewickelt und erzeugen verzierte, nutzlose Flusen. Erinnerst du dich an Clippy? Microsoft Bob? Das Kunstleder auf der alten iOS Notes App? Dieses Zeug ist nutzlose visuelle Unordnung. Der virtuelle Hund und die Fischschale und der Roboter sind genau dasselbe. Wie oft müssen wir das tun, bevor wir erkennen, dass Minimalismus die einzig gute Idee ist?

Während wir gerade dabei sind, sind die "Hologramme" selbst visuell ein Chaos. Sie können sich nicht entscheiden, ob es sich um saubere Scheiben oder doofe Cartoon-Blobs handelt. Die Elemente der Benutzeroberfläche sind viel zu groß und erfordern umfangreiche Gesten, bis hin zum physischen Herumlaufen, was aus vielen Gründen ein schlechtes Design ist.

Wenn es so aussieht, als wäre ich darüber verärgert, dann deshalb, weil immersive Benutzeroberflächen eines Tages wirklich, wirklich cool sein werden. Die bisher gezeigte HoloLens-Benutzeroberfläche ist ein komplettes Durcheinander, und das ist eine Schande. Eine gute Benutzeroberfläche ist der Unterschied zwischen dem Treo und dem iPhone - zwischen einem IBM-Mainframe und dem ursprünglichen Maus-Tastatur-PC. Es ist der Unterschied zwischen einem Spielzeug für Nerds und einer weltverändernden Innovation.

Formfaktor

Es gibt eine wichtige gute Nachricht. Microsoft brachte „Hunderte“ von HoloLens-Geräten zur Show und zeigt sie den Teilnehmern. Als Microsoft das letzte Mal Demos machte, wurden die Leute in sperrige kabelgebundene Headsets geschnallt. Die auf der Bühne verwendeten Headsets waren Requisiten, die nur ein Schwarzweißbild mit niedriger Auflösung anzeigen konnten. Der Moderator stellt jedoch klar fest, dass die Headsets „genau wie die sind, die Sie heute auf der Bühne gesehen haben“. In anderen Mit anderen Worten, Microsoft hat die HoloLens-Hardware erfolgreich miniaturisiert, um sie in einen tragbaren Formfaktor zu integrieren, was großartig ist Nachrichten.

Hier ist ein Entwickler Erfahrung mit der neuen Hardware:

„Ich bin auf die Baustelle gegangen und sie haben die Blaupausen an der Wand überlagert. Dann konnte ich sehen, wie eine Tür aussehen würde und feststellen, dass ein Balken im Weg war. Wir bewegten die Tür weg und fügten dann eine Schicht mit Elektro- und Sanitärinstallationen hinzu und sahen, dass jetzt ein Rohr im Weg war. Ich habe auf die Pfeife geschaut und Luft geklickt und dem Klempner eine Sprachnotiz hinterlassen, um die Pfeife wegzubewegen.

Dann kam ich in die Rolle des Klempners zurück und holte meine Notiz (sie hing dort), schaute und klickte und hörte meine eigene aufgenommene Stimme.

Das Tragen des Geräts ist gewöhnungsbedürftig. Es war nicht super gut eingestellt und drückte ein wenig auf meine Nase. Aber ich denke, ich kann es rechtzeitig besser einstellen.

Der holographische Bereich ist weniger umfangreich als ich dachte. Es ist ein Rechteck vor Ihren Augen, aber wenn Sie eine gute Seitensicht haben (wie ich), ist es etwas beunruhigend, da das Hologramm abgeschnitten wird, wenn Sie den Kopf bewegen.

Alles in allem ist es äußerst beeindruckend und ich kann es kaum erwarten, mich dafür zu entwickeln. "

Während der Autor feststellt, dass das Gerät immer noch ein geringes Sichtfeld hat, scheint er von der Hardware insgesamt beeindruckt zu sein, was ein vielversprechendes Zeichen ist. Schließlich wird AR ein leistungsfähigerer und flexiblerer Ersatz für VR sein - was bereits der Fall ist eine erstaunliche Technologie Warum Virtual Reality-Technologie Sie in 5 Jahren umhauen wirdDie Zukunft der virtuellen Realität umfasst Kopf-, Augen- und Ausdrucksverfolgung, simulierte Berührung und vieles mehr. Diese erstaunlichen Technologien werden Ihnen in 5 Jahren oder weniger zur Verfügung stehen. Weiterlesen . Die große Frage ist - wie weit sind wir entfernt?

Entwicklerunterstützung

Obwohl dies im Ankündigungsvideo nicht erwähnt wurde, gab Microsoft dies auch über die Partnerschaft mit bekannt Unity, es wird auch volle Unterstützung für die HoloLens in Unity geben, eines der am häufigsten verwendeten Tools für Indie-Spiele Entwicklung. Die Unterstützung umfasst die Möglichkeit, über die HoloLens zu rendern und auf verschiedene Weise Eingaben vom Gerät zu erhalten. Sowohl Unity Free als auch Unity Pro erhalten kostenlosen HoloLens-Support. Während die Integration noch nicht abgeschlossen ist, gibt Microsoft bereits kurze Kurse im Build Konferenz mit dem Prototyp Unity-Integrationen, um Entwicklern einen ersten Einblick in die Codierung für AR zu geben wird sein wie.

Dies ist ein willkommener, aber kein überraschender Schritt. Jede neue Plattform lebt oder stirbt von der Qualität ihrer Startinhalte, und die HoloLens wird keine Ausnahme sein. Außerdem hat Microsoft war schon immer den Entwicklerbeziehungen verpflichtet.

Prototyp Fieber

Die HoloLens nähert sich langsam der kommerziellen Realität. Ich habe tiefe Vorbehalte gegen einige der Einschränkungen der Hardware, aber Das Gerät ist unbestreitbar cool 8 reale Anwendungen für Microsoft HoloLensHoloLens von Microsoft ist cool, aber wofür werden Sie es tatsächlich verwenden? Wir haben die aufregendsten Möglichkeiten. Weiterlesen und so etwas wird eines Tages sehr nützlich sein. Freust du dich auf die HoloLens?Haben Sie die Gelegenheit bekommen, einen auf der Konferenz auszuprobieren? Willst du nur eine virtuelle Fischschale? Lass es uns in den Kommentaren wissen!