Lume Pad 2: KI-gestütztes 3D-Tablet ist erstaunlich und seltsam

Die Beschreibung des Lume Pad 2 klingt, als hätte jemand eine Reihe von Schlagworten zusammengeworfen: Es handelt sich um ein KI-gestütztes 3D-Tablet!

Aber was bedeutet das überhaupt? Was die KI betrifft, so verfügt sie sowohl über eine On-Device-KI zum Analysieren von Fotos und Videos und deren anschließende Konvertierung in 3D als auch über generative Cloud-KI zum Erstellen von 3D-Szenen aus Textaufforderungen. Und der 3D-Teil? Das stimmt auch: Es handelt sich um eine brillenlose 3D-Anzeige. Echtes, echtes 3D, mit einem einzigartigen Bild, das auf jedes Auge übertragen wird.

Dies ist das Lume Pad 2 von einer Firma namens Leia (ja, wie die Star Wars-Prinzessin). Es ist das Einzigartigste und Faszinierendste, was ich seit langem gesehen habe, aber ich bin nicht davon überzeugt, dass es einen Markt gibt, der über eine Handvoll spezialisierter Branchen hinausgeht.

Brillenlose 3D-Anzeige

Das Herzstück des Geräts ist eine einzigartige proprietäre Anzeigetechnologie („Light Field“), die eine Einzelbetrachter, um unterstützte Anwendungen in einer echten 3D-Ansicht ohne zusätzliche Brille o. ä. anzuzeigen Headset. Wie es genau funktioniert, wird nicht bekannt gegeben, aber es handelt sich wahrscheinlich um eine Variante von Lentikularlinsen – die Art, die man als Kind in Müslipackungen bekam. Wenn Sie die Szene verschieben, lenkt das durchscheinende Prisma auf der Vorderseite einen anderen Teil des Hintergrundbilds auf Ihre Augen, wodurch der Eindruck entsteht, dass sich die Szene verändert. Das Lume Pad 2 zeigt jederzeit zwei Bilder an, aber die spezielle Bildschirmschicht in Kombination mit zwei nach vorne gerichteten Kameras für Kopf- und Augenverfolgung stellt sicher, dass jedes Auge nur eines sieht. Wenn Ihr Gehirn sie kombiniert, können Sie eine 3D-Szene sehen.

Es kann ziemlich magisch sein, es persönlich zu sehen („Whhhaaaaaaat“, rief mein Sohn, „Papa, es kommt aus dem Bildschirm.“ Was? Wie? Was?!")

Darüber hinaus ist das Lume Pad 2 ein Android-Tablet voller individueller Software, mit der Sie 3D-Bilder und -Videos aufnehmen oder mithilfe von KI vorhandene Videos in 3D umwandeln können.

Die Hardware

Das Lume Pad 2 verfügt über ein 12,4-Zoll-IPS-Display mit einer Bildwiederholfrequenz von 120 Hz und 2560 x 1600 Pixeln, einer Pixeldichte von 244 PPI und einem Verhältnis von 16:10. Im 3D-Modus kann jedoch davon ausgegangen werden, dass sich die Auflösung halbiert.

Wenn wir das ganze schicke 3D-Zeug für einen Moment vergessen und ich es einfach als Android-Tablet bewerten würde, wäre ich größtenteils beeindruckt. Es ist ein schönes, solides Metallgehäuse, fühlt sich gut an und es gibt ein angenehmes haptisches Feedback beim Tippen. Die optionale Hülle rastet magnetisch ein und ermöglicht mehrere Lesewinkel.

Die Benutzeroberfläche von Android 12 ist flott und abgesehen von der vorinstallierten Software handelt es sich um ein Standard-Android-Tablet von Google, an dem nicht allzu viele Anpassungen vorgenommen wurden.

Kurz gesagt: Es ist ein schönes Tablet – sicherlich eines der besten Android-Tablets, mit denen ich bisher gespielt habe. Sie können es jedoch vergessen, es im Freien zu verwenden. Mit einer maximalen Helligkeit von 450 Nits im 2D-Modus und 300 Nits im 3D-Modus ist dies nur für den Innenbereich geeignet.

Außerdem finden Sie zwei 16-MP-Rückkameras, mit denen Sie 3D-Fotos und -Videos direkt auf dem Gerät aufnehmen können. Im Gegensatz zu den meisten 3D-Kameras haben sie keinen Abstand voneinander, wie es beim menschlichen Auge der Fall wäre. Die meisten Kameras, die einen 3D-Effekt für das menschliche Auge aufzeichnen sollen, verfügen über Objektive mit einem Abstand von etwa 63 mm Abgesehen davon – genau wie bei einem durchschnittlichen Menschen – wird sichergestellt, dass ein präziser 3D-Effekt wie beabsichtigt wahrgenommen wird Zuschauer. Aber beim Lume Pad 2 gibt es eine geräteinterne Zauberei, die die Tiefe in Echtzeit extrapoliert.

Angetrieben wird das Tablet vom Qualcomm Snapdragon 888-Chipsatz mit 8 GB RAM und 128 GB UFS 3.1-Speicher. Sie können über einen microSD-Steckplatz mit Karten bis zu 2 TB erweitern, was Sie schnell tun möchten, wenn Sie die Kamera optimal nutzen oder Ihre eigenen Medien offline wiedergeben möchten.

Die Software

Abgesehen vom magischen 3D-Bildschirm ohne Brille liegt der wahre Wert des Lume Pad 2 in der integrierten benutzerdefinierten Software.

LeiaPlayer ist ein All-in-One-Medienbetrachter für Ihre eigene 3D-Kamerarolle und eine schöne Sammlung von Beispielbildern. Tippen Sie außerdem auf die Registerkarte „Leia-Link“ und Sie können auf Inhalte zugreifen, von denen Sie hochgeladen haben ein normales Smartphone mit der Leia Link-App, in das sich ihre Software dann auf magische Weise verwandeln kann 3D. Meistens funktioniert es, aber nur bei Szenen, bei denen die Tiefe offensichtlich ist. Ich habe es mit einem Familienfoto versucht, auf dem man in einigen Go-Karts sitzt, aber die Tiefe stimmte überhaupt nicht. Leia Player kann Videos im VR180- und Side-by-Side-Format (SBS) wiedergeben, obwohl Sie dies häufig angeben müssen. Ich habe versucht, ein SBS-formatiertes Video anzuschauen, aber ehrlich gesagt war die Tiefe sehr schwach und es gab keinen Ton. Ich vermute, dass es Codec-Probleme gab. LeiaPlayer ist sicherlich nicht auf dem gleichen Niveau wie VLC, wenn es um zufällige Codecs geht, also war das ein kleiner Fehlschlag. Selbst wenn es einen Ton hätte, hätte ich mich nicht darum gekümmert. Ich denke, ein VR-Headset zum halben Preis würde einen weitaus besseren Job machen.

LeiaPix ist eine soziale Netzwerk-App zum Teilen und Anzeigen von 3D-Fotos anderer. Wenn Sie sich einen bestimmten Hashtag oder ein bestimmtes Thema genauer ansehen, werden Sie feststellen, dass der Inhalt spärlich ist, aber es ist eine einfache Möglichkeit, einfach zufällige 3D-Bilder anzuzeigen. Die Qualität variiert, daher ist es möglich, dass diese mit der älteren Version des Lume Pads aufgenommen wurden.

LeiaChat ermöglicht es Ihnen, in 3D mit anderen Lume Pad 2-Benutzern zu chatten, und zwar in 3D, wenn Standard-Zoom-Anrufe einfach nicht mehr ausreichen. Natürlich benötigen beide Enden ein Lume Pad.

LeiaDream ist eine generative 3D-Kunst-App. Ich gehe davon aus, dass es sich um eine angepasste Version von StableDiffusion handelt, aber es könnte auch völlig proprietär sein. In beiden Fällen können Sie eine Textaufforderung eingeben und ein benutzerdefiniertes 3D-Bild erhalten. Es ist nicht annähernd so realistisch wie Midjourney, und da es sich um einen Cloud-Dienst handelt, reicht Ihr Konto aus, um etwa 250 Bilder zu generieren – danach müssen Sie mehr Credits kaufen.

LeiaViewer ist ein 3D-Modell-Viewer mit einer Handvoll enthaltener Modelle und einer Integration mit Sketchfab, wenn Sie mehr oder mehr anzeigen möchten Ihre eigenen Kreationen (obwohl nur eine standardmäßige Sketchfab-E-Mail-Anmeldung unterstützt wird, nicht, wenn Sie sich über ein soziales Netzwerk angemeldet haben Anbieter). Dies ist wahrscheinlich der überzeugendste Anwendungsfall für das Lume Pad 2, da 3D-Modelle offensichtlich hervorragend zur brillenlosen Display-Technologie passen. Sie können neigen, drehen, zoomen usw. und die Tiefe des 3D-Effekts steuern.

LeiaTube ist ein YouTube- und Vimeo-Zuschauer. Öffnen Sie es und Sie sehen eine Auswahl an Inhalten, obwohl selbst der native SBS 3D-formatierte Inhalt den KI-Konvertierungsalgorithmus durchlaufen muss. Sie können ein Video auch direkt aus der Standard-YouTube-App hier teilen und es wird automatisch für die Anzeige in 3D konvertiert. Ich habe es mit einer meiner eigenen Rezensionen versucht und ehrlich gesagt war es nicht so toll. Der Effekt war bei weitem nicht so ausgeprägt und auch nicht so genau, wie ich gehofft hatte; Es gab sicherlich hier und da ein paar Störungen, mit unscharfen Kanten um Objekte herum, wo man erkennen konnte, wie tief die Tiefe sein sollte.

Das sind viele integrierte Apps, und es gibt auch eine Leia App Store. Allerdings ist es mit vielleicht vier Spielen insgesamt etwas spärlich. Realistisch gesehen ist es unwahrscheinlich, dass Sie für einen so kleinen Markt viele Entwickler gewinnen werden, es sei denn, es handelt sich um einen Erstanbietertitel von Leia Inc. Sie können nicht einfach bestehende Spiele nehmen und sie in 3D umwandeln. Die beiden kostenlosen Spieledemos, die auf unserem Gerät vorinstalliert waren, waren zwar faszinierende Demos, konnten meine Aufmerksamkeit aber letztendlich jeweils nicht länger als jeweils fünf Minuten fesseln.

Obwohl es viele integrierte Apps gibt, sollten Sie nicht erwarten, dass etwas anderes die 3D-Funktionalität unterstützt. Sie können beispielsweise VLC nicht öffnen und einen SBS-codierten Film abspielen, und Call of Duty erhält auch nicht plötzlich eine dritte Dimension. Um die einzigartige 3D-Technologie nutzen zu können, muss eine App das Leia SDK unterstützen. Andere Android-Apps werden problemlos ausgeführt, diese werden jedoch nur in normalem 2D angezeigt.

Wie ist der Tiefeneffekt?

Ich war skeptisch gegenüber der brillenlosen Display-Technologie, die in diesem Test zum Einsatz kommt, aber unter den richtigen Bedingungen kann sie ziemlich beeindruckend sein. Obwohl es unmöglich ist, es auf Video zu zeigen, kann ich über die subjektive Qualität des 3D-Effekts und des Bildschirms im Allgemeinen sprechen.

Erstens variiert der Grad des Tiefeneffekts erheblich je nach App und Art der angezeigten Inhalte.

Den besten Effekt erzielen Sie mit 3D-gerenderten Objekten. Wenn Sie beispielsweise die LeiaViewer 3D-App öffnen und sich die enthaltene Cyberpunk-Stadt (einschließlich animierter Autos) ansehen Wenn Sie herumzoomen, werden Sie feststellen, dass der höchste Turm fast 6 Zoll aus der Oberfläche herausragt Tablette. Das ist unglaublich.

Dies gilt auch für die Spieldemos, und im Dungeon-Spiel sind auch die Head-Tracking-Funktionen deutlich zu erkennen. Die Kerkerwände erwachen nicht nur in herrlichem 3D zum Leben, sondern wenn Sie das Tablet neigen oder bewegen, sehen Sie zuvor verborgene Winkel. Es ist eine einzigartige Erfahrung, die ich bisher nur in VR gemacht habe.

Wenn es um Bilder oder Videos geht, ist der Effekt jedoch nicht annähernd so ausgeprägt – so weit, dass ich mir nicht die Mühe machen würde, mir 3D-Filme darauf anzusehen; Im Vergleich dazu, dasselbe im virtuellen VR-Kino zu tun, ist es einfach nicht überzeugend. Dies könnte einfach ein „Realismusfaktor“ sein. Gerenderte 3D-Inhalte sehen immer beeindruckender aus als eine echte Szene, denn Letzteres sind wir im wirklichen Leben so gewohnt.

Tracking und visuelle Qualität

Im Allgemeinen schien die Gesichts- und Augenverfolgung gut zu funktionieren, solange ich mich nicht in einem zu stumpfen Winkel befand. Ich habe nicht viele Pannen erlebt, bei denen es wieder in den reinen 2D-Modus zurückgesprungen ist, außer als mein Sohn beschloss, sein Gesicht reinzustecken und zu sehen, worum es bei der ganzen Aufregung ging. Es kann nicht mehr als eine Person gleichzeitig verfolgen und es dauert manchmal ein oder zwei Sekunden, bis man erkennt, dass es einen neuen Betrachter gibt. Dann rastet alles wie von Zauberhand in der 3D-Ansicht ein.

Das Display ist allerdings alles andere als perfekt; Zwei Punkte beeinträchtigen das Gesamterlebnis.

Erstens gibt es auf dem Bildschirm ein leichtes, gepunktetes Netz, das an eine Fliegengittertür erinnert. Vermutlich ist das ein Teil der Linsenschicht, die das Bild für jedes Auge trennt. Dies ist am deutlichsten zu erkennen, wenn es im 3D-Modus aktiviert ist. Während die Tablet-Hardware ansonsten sehr gut und reaktionsschnell ist wie bei einem generischen Android-Tablet, kann die Bildschirmqualität frustrierend sein.

Zweitens gibt es auch ein ziemlich offensichtliches Ghosting-Problem. Dies bedeutet, dass jedes Auge das für das andere Auge bestimmte Bild sehen kann, wenn auch nur sehr schwach. Im obigen Beispiel ist das Nachbild auf der Rückseite der Flügel auch bei der 3D-Betrachtung vorhanden und nicht nur ein Ergebnis des Filmens.

Dabei handelt es sich nicht so sehr um eine Kritik an diesem speziellen Tablet, sondern um einen Fehler in der zugrunde liegenden Technologie, und er betrifft auch nicht nur brillenlose Displays. Wenn Sie sich jemals passive 3D-Filme angesehen haben (bei denen eine dünne Brille zum Einsatz kam), neigen auch diese dazu, einiges an Geisterbildern zu zeigen. Das liegt daran, dass es fast unmöglich ist, das Licht perfekt in eine bestimmte Richtung zu lenken. Sie können es gut genug hinbekommen, um den 3D-Effekt zu erzielen, aber wenn Sie innehalten und das Bild kritisch untersuchen, werden Sie Geisterbilder bemerken. Dies ist bei helleren Objekten auf dunklem Hintergrund deutlicher zu erkennen. Nur aktive 3D-Displays (die eine schwerere LCD-Brille mit Batterie benötigen) können dies vollständig Eliminieren Sie Geisterbilder, da es sich um abwechselnde Bilder handelt, die jeweils einem Auge die Sicht versperren Zeit.

Ist das das ultimative 3D-Display? NEIN.

Das Lume Pad 2 ist wirklich magisch anzusehen. Es ist ein technologisches Wunderwerk, und ich wünschte, ich hätte eine bessere Möglichkeit, es Ihnen zu zeigen, aber ähnlich wie VR ist es etwas, das Sie selbst erleben müssen.

Aber ich weiß, was Sie denken: Das ist eine Modeerscheinung. Bis vor einem Jahrzehnt war ich ein großer Befürworter von 3D-Fernsehern und -Projektoren. Ich habe sogar einen Großteil meiner Studienzeit damit verbracht, Unreal Tournament 2K mit der originalen Nvidia 3D-Brille und einem riesigen Silicon Graphic CRT-Monitor zu spielen. Aber die Veröffentlichungen von 3D-Filmen sind weitgehend versiegt (anscheinend waren es bisher vier in diesem Jahr), und die Leute haben es getan erkannte, dass das Tragen einer Spezialbrille zum Ansehen eines Films mühsam war und oft zu schlechteren Ergebnissen führte ohne.

Das Schöne am Lume Pad 2 ist natürlich, dass es ohne Brille funktioniert – und es funktioniert einfach (wenn auch nur für einen einzelnen Betrachter).

Die Tatsache, dass es über ein integriertes KI-System zum Konvertieren von Nicht-3D-Inhalten und eine Möglichkeit verfügt, eigene 3D-Fotos und -Filme auf dem Gerät selbst zu erstellen, gibt ihm meiner Meinung nach Auftrieb. Selbst wenn die Welt morgen aufhören würde, 3D-Inhalte zu produzieren und das Internet zusammenbrechen würde, könnten Sie immer noch Ihre eigenen Kreationen mit diesem einen Gerät produzieren und anzeigen. Leia hat sich wirklich Mühe gegeben, überzeugende Inhalte mit einem maßgeschneiderten sozialen Netzwerk speziell für Lume Pad zu produzieren Benutzer, und sie verstehen, dass man nicht nur unglaubliche Technologie haben kann – man braucht auch die Apps und Inhalte, die es gibt damit. Das ist sehr ermutigend.

Ein Problem zu verstehen und es lösen zu können, sind jedoch zwei verschiedene Dinge.

Die größte Einschränkung des Lume Pad 2 besteht darin, dass es nicht als allgemeine 3D-Anzeige für eine beliebige Eingabequelle verwendet werden kann. Wenn es einen HDMI-Eingang oder Dongle hätte und jeden SBS-formatierten Eingang im 3D-Modus wiedergeben könnte, wäre es für einen viel größeren Markt ein sofortiger Kauf. Zum Beispiel die Goovis G3 Max Persona Cinema Headset, das wir letzte Woche getestet haben, kann genau das tun. Es benötigt jeden USB-C- oder HDMI-Eingang – egal, ob es sich um einen 3D-Blu-ray-Player oder einen generischen Mediaplayer handelt, auf dem VLC mit etwas SBS läuft formatierte Dateien oder YouTube oder sogar ein PC-Gaming mit einer Software, die 3D-Spiele in einem Side-by-Side-Format ausgibt – und das ist einfach so funktioniert.

Beim Lume Pad 2 muss alles, was Sie in 3D verwenden möchten, speziell mit dem Leia SDK programmiert werden. Es funktioniert nicht einmal mit Android-Apps, die für Google VR entwickelt wurden.

Wenn es keine App dafür gibt, dann ist es das. Und ehrlich gesagt ist es auch nicht so einfach, eigene Inhalte auf dieses Gerät zu bringen. Die Android-Dateiübertragungs-App auf dem Mac ist selbst in den besten Fällen dürftig, daher musste ich eine beliebige Android-App mit einer schrecklichen Benutzeroberfläche installieren, nur um im Netzwerk zu surfen. Es war eine miserable Erfahrung, eine Datei zu kopieren.

Ich denke, die eigentliche Nische für dieses Produkt wird die 3D-Modellierung sein; oder besser gesagt: Sehen Sie sich die 3D-Modelle an, die Sie an anderer Stelle erstellt und auf Sketchfab hochgeladen haben. Das könnte jedoch ein sehr Nischenpublikum sein. Es ist unglaublich fesselnd zu sehen, wie Ihr 3D-Objektdesign zum Leben erwacht, und mit gerenderten 3D-Objekten ist die Tiefe, die Sie erzielen können, unglaublich gut. Und für die Handvoll Leute, die immer noch Stereofotografie lieben: Sie werden es lieben.

Bei allen anderen bin ich mir nicht so sicher. Ich kann sehen, wie Leia versucht, es mit der 3D-Firma-KI jedes YouTube-Videos und der Kamera auf der Rückseite, mit der Sie Ihre eigenen 3D-Fotos erstellen können, überzeugend zu gestalten. Aber mit diesen Funktionen funktioniert es nicht so gut. Ich glaube nicht, dass irgendjemand Familienmomente mit der nach vorne gerichteten 3D-Kamera des Apple Vision Pro aufzeichnen wird, und ich kann mir auch nicht vorstellen, dass Sie ein 1000-Dollar-Tablet mit sich herumschleppen, um Fotos oder Videos aufzunehmen. Meine größte Sorge ist also einfach, dass es für dieses Gerät keinen Markt gibt; Zumindest nicht groß genug, um Entwickler davon zu überzeugen, dass es sich lohnt, ihren Apps Leia SDK-Unterstützung hinzuzufügen.

Obwohl es sich kaum um einen definitiven Datenpunkt handelt, hat der Subreddit für das Lume Pad – der vielleicht der erste Ort ist, zu dem ich springen würde, um neue Apps, Tipps und Inhaltsvorschläge zu finden – insgesamt 105 Mitglieder.

Die Hardware ist unglaublich, und die Software versucht so sehr, einen echten Zweck zu finden, und ich glaube einfach nicht, dass sie ganz ins Schwarze trifft. Aber vielleicht klappt es ja mit der Zeit. Aber wenn Sie das vorherige Lume Pad besitzen und bereits Spaß daran haben, was Sie damit machen können, ist das Lume Pad 2 in jeder Hinsicht ein unglaubliches Upgrade. Holen Sie es sich – Sie werden es lieben.