Ein 3D-Scanner fürs Handy kommt zu AR Works: echte Objekte in deine AR-Szene scannen
5 Min. Lesezeit
Wenn du ein 3D-Modell in deiner Szene in AR Works haben möchtest, hast du im Moment zwei Möglichkeiten. Entweder baust du das Modell selbst in einem 3D-Programm, oder du suchst eines in einer Asset-Bibliothek und hoffst, dass es ungefähr dem entspricht, was du dir vorgestellt hast. Beides funktioniert, aber beides hilft dir wenig, wenn das, was in deine Szene soll, ein echtes, ganz bestimmtes Objekt ist, das vor dir auf dem Tisch steht.
Wir arbeiten an einer dritten Möglichkeit, und die macht aus dem Handy in deiner Tasche einen 3D-Scanner: Richte es auf das Objekt und scanne es. Eine Version davon gibt es auf dem Desktop schon heute, und als Nächstes kommt der Handy-Scanner für den Editor im Browser.
Dein Handy wird zum 3D-Scanner
Die Idee ist einfach. Du gehst mit der Handykamera um ein Objekt herum und machst Fotos aus verschiedenen Winkeln, von oben bis unten und einmal rundherum. Diese Fotos werden zur Verarbeitung weggeschickt, und zurück kommt ein texturiertes 3D-Modell genau dieses Objekts, das du wie jedes andere Asset sofort in eine Szene setzen kannst. Das ist der ganze 3D-Scanner fürs Handy: kein Aufbau, keine Spezialhardware, nur die Kamera, die du sowieso dabeihast.
Du musst keine eigene App herunterladen. Die Aufnahme läuft über das Handy, und das fertige Modell landet in deinem Projekt, neben deinen importierten Dateien. Ab da verhält es sich wie jedes andere Modell, das du hineinholst. Du kannst es verschieben, skalieren, animieren, mit Logik-Knoten verknüpfen und sowohl in eine Szene mit Bild-Tracking als auch in eine mit Raum-Tracking setzen.
Auf dem Desktop schon da: ein eingebautes Fotogrammetrie-Tool
Wenn du nicht auf den Handy-Scanner warten möchtest: Es gibt schon heute eine Version, die du nutzen kannst. Die Desktop-Version von AR Works hat ein Fotogrammetrie-Tool eingebaut, verfügbar in den Tarifen Pro und Education. Du gibst ihm eine Reihe von Fotos eines Objekts, aufgenommen von allen Seiten, und es rekonstruiert daraus ein texturiertes 3D-Modell, das du direkt in eine Szene setzen kannst.
Das Beste daran ist, wo gerechnet wird. Der Desktop-Scanner läuft komplett auf deinem eigenen Computer. Deine Fotos verlassen also nie das Gerät, und du musst nicht darauf warten, dass ein Server fertig wird. Für eine Schule mit streng abgesichertem Netzwerk oder für alle, die ihre Aufnahmen lieber lokal behalten, ist das viel wert. Der Handy-Scanner, der in den Editor im Browser kommt, nutzt dieselbe Fotogrammetrie und macht die Aufnahme so einfach, wie einmal mit dem Handy um das Objekt herumzugehen.
Warum wir glauben, dass Kreative das haben wollen
Bei viel AR-Arbeit geht es um ein ganz bestimmtes Objekt. Ein Produkt, das ein Geschäft wirklich verkauft. Eine Requisite aus dem Schultheater. Ein Exponat in einer Museumsvitrine. Ein Gericht auf einer Speisekarte. Solche Dinge von Grund auf zu modellieren dauert lange, und ein allgemeines Modell aus einer Bibliothek ist selten das echte Objekt. Scannen umgeht beide Probleme. Du fotografierst das tatsächliche Objekt und setzt schon bald genau dieses Objekt in deine Szene.
Es senkt auch die Hürde. Du musst nicht wissen, wie man in 3D modelliert, um ein ordentliches Asset zu bekommen. Wenn du eine Reihe von Fotos sorgfältig aufnehmen kannst, bekommst du etwas Brauchbares, und genau darum geht es bei AR Works: echte AR-Erlebnisse bauen, ohne vorher 3D-Programmierung lernen zu müssen.
Zuerst testen wir es in Restaurants
Bevor wir den Handy-Scanner mehr Menschen zugänglich machen, wollten wir ihn an einem anspruchsvollen Ort ausprobieren. Deshalb läuft gerade ein früher Test mit ein paar Restaurants.
Essen hat sich als guter, schwieriger Test erwiesen. Teller haben knifflige Formen, manche Oberflächen sind glänzend oder nass, und eine Portion sieht bei anderem Licht anders aus. Restaurants haben außerdem einen klaren Grund, sich dafür zu interessieren: Ein Gast kann das Handy auf die Speisekarte richten und das echte Gericht schon vor der Bestellung auf dem Tisch erscheinen sehen, statt es sich anhand einer Beschreibung vorzustellen. Das auf dem Handy richtig hinzubekommen, und das bei einem Scan aus einem vollen Gastraum, verrät uns viel darüber, was die Funktion braucht, bevor sie breiter veröffentlicht wird.
Wir lernen dabei ganz praktische Dinge. Wie viele Fotos genug sind. Wie viel Licht hilft. Welche Objekte sich sauber scannen lassen und welche sich wehren. Über den letzten Punkt wollen wir offen sprechen.
Was sich gut scannen lässt und was nicht
Scannen funktioniert am besten bei Objekten mit etwas Oberflächenstruktur und mattem Finish, die bei gleichmäßigem Licht ruhig gehalten werden. Denk an Keramik, Essen, Werkzeug, Spielzeug, die meisten Alltagsgegenstände.
Schwer tut es sich mit Oberflächen, die auch das menschliche Auge verwirren: klares Glas, Spiegel, Chrom und alles, was dünn oder glänzend ist. Das ist für jeden 3D-Scanner schwierig, nicht nur für unseren. Wenn dein Objekt ein Weinglas oder ein polierter Pokal ist, musst du also mit etwas Nacharbeit rechnen oder lieber auf eine modellierte Version zurückgreifen. Das sagen wir dir lieber gleich, als dass du mit einem schlechten Scan kämpfst.
Teil eines Tools, mit dem das Arbeiten leichtfällt
AR Works ist ein browserbasiertes Tool für die AR-Entwicklung, und das Scannen zieht in dieselbe Richtung wie alles andere. AR Works soll eines der einfachsten Tools für die AR-Entwicklung sein, mit denen man wirklich etwas bauen kann, und der Großteil unserer Arbeit besteht darin, die schwierigen Teile ganz gewöhnlich wirken zu lassen. Der Editor läuft in deinem Browser, du musst also nichts installieren und nichts einrichten, um loszulegen. Die Teile, für die man sonst Entwicklungsfachleute braucht – Tracking, Animation, Materialien und Interaktivität –, erledigst du mit einem visuellen Editor und Drag-and-drop-Logik statt mit Code.
Die andere Hälfte ist die Reichweite. Was du baust, öffnet sich auf aktuellen iPhones und Android-Handys direkt über einen Link oder QR-Code, ohne dass jemand eine App installieren muss, und dieselben Projekte lassen sich auch im Desktop-Editor öffnen. Du baust es einmal, und fast alle können es auf dem Handy ansehen, das ohnehin in ihrer Tasche steckt. Wenn ein Fotogrammetrie-Scanner dazukommt, können die Modelle in deinen Szenen genauso leicht aus der echten Welt stammen, wie das fertige Erlebnis echte Menschen erreicht.
Wer es bekommt, und wann
Scannen ist eine Funktion für Pro und Education. Das Fotogrammetrie-Tool steckt für diese Tarife schon heute in der Desktop-App, und der 3D-Scanner fürs Handy ist jetzt in einem frühen Test und kommt bald für Pro- und Education-Konten, im selben browserbasierten Editor, den du schon nutzt.
Du musst aber nicht warten, um AR Works auszuprobieren. Der Einstieg in den Editor ist kostenlos, du kannst also schon heute ein Konto erstellen und eine echte Szene bauen. Auf Pro umsteigen kannst du, sobald du den Scanner willst. Schulen können mit uns über den Education-Zugang sprechen.
Ein Blick weiter nach vorn
Handys sind heute der Ort, an dem AR stattfindet, aber das ist nicht die ganze Geschichte. AR-Brillen kommen, und Apps dafür zu entwickeln steht auf unserer Roadmap. Wir sind noch nicht so weit, es zu zeigen. Nimm das also als Vorgeschmack und nicht als Datum. Das Ziel ist aber dasselbe wie auf dem Handy: Für AR zu bauen soll etwas sein, das Kreative ohne ein Team aus Fachleuten im Rücken schaffen können. Der Handy-Scanner ist einfach das nächste Teil, das fertig wird.
Bis dahin kannst du schon jetzt in jedem Tarif eigene 3D-Modelle importieren, deine Szenen müssen also nicht auf den Scanner warten.
AR Works kostenlos testen
Erstelle dein erstes Augmented-Reality-Erlebnis im Browser – ohne Code und ohne App-Installation.