Greif hinein und heb es auf: Hände, Physik und die AREngine-App

5 Min. Lesezeit

Bisher war ein Projekt in AR Works etwas zum Anschauen. Du konntest auf einen Planeten tippen, um seinen Namen zu hören oder eine Animation zu starten, aber deine Hände blieben auf dem Bildschirm. Die Szene schwebte in deinem Raum, und du bist um sie herumgegangen.

Mit diesem Update ändert sich das. Halte dein Smartphone hoch, greif in die Szene und heb etwas auf. Lass es los, dann fällt es, rollt und bleibt an dem liegen, was ihm im Weg ist. Deine Hand erscheint vor den Objekten, vor denen sie sich befindet, und hinter denen, hinter denen sie sich befindet. So wirkt die Szene wie ein Teil des Raums und nicht wie ein Aufkleber darüber.

Hier siehst du kurz, was das in der Praxis bedeutet.

Dinge mit den Händen aufheben

Wähle im Editor ein Objekt aus und schalte Interaktiv ein. Wer die Szene ansieht, kann es jetzt mit der Hand berühren und aufheben. Schaltest du zusätzlich Physik ein, hat es Gewicht: Es fällt, wenn du es loslässt, und landet auf dem Boden oder auf einem anderen Objekt. Mit Schiebbar kann eine offene Hand ein Objekt anstoßen, sodass ein Ball davonrollt und eine Kiste rutscht.

Jedes Objekt hat eine Begrenzung, also eine Form, die deine Hand berührt und die die Physik nutzt. Ein Quader, eine Kugel oder ein Zylinder passt für die meisten Dinge. Bei hohlen oder ungewöhnlichen Formen folgt In Mesh-Form umwandeln dem Modell selbst. So kann ein Ball durch ein Rohr fallen, statt von einem unsichtbaren Deckel abzuprallen.

Das Smartphone sucht deine Hand im Kamerabild und schneidet sie aus, damit sie vor den Objekten erscheint, an denen sie vorbeigreift. Nichts über deine Hände verlässt das Smartphone: Das Handtracking läuft auf dem Gerät.

Logik, die auf Berührung reagiert

Dazu bekommt der Logik-Editor neue Ereignisse und Aktionen. Bei Handberührung, Beim Greifen und Beim Loslassen werden ausgelöst, wenn jemand ein Objekt anfasst, und Bei Kollision wird ausgelöst, wenn zwei Objekte aufeinandertreffen. Physik setzen, Interaktiv setzen, Objekt anstoßen und Objekt zurücksetzen verändern Dinge, während die Szene läuft.

Kombiniere sie, und du baust kleine Rätsel, ohne Code zu schreiben. Lass einen Ball in ein Rohr fallen, lass ihn unten einen Schalter treffen und öffne dann eine Truhe mit einer Animation und einem Ton.

Mehr als ein Bild in einer Szene

Eine Szene mit Bild-Tracking folgte bisher einem einzigen gedruckten Bild. Jetzt kannst du Zusätzliche Zielbilder hinzufügen: mehrere Ausdrucke, die zusammen ausgelegt werden und gemeinsam eine ruhigere Position ergeben. Außerdem kannst du Tracking-Bilder hinzufügen, also Bilder, die sich eigenständig bewegen und Objekte mitnehmen. Setz ein Modell auf eine Spielkarte, dann bleibt es auf der Karte, während du sie über den Tisch schiebst, und der Rest der Szene bleibt, wo er ist.

Tracking-Bilder funktionieren auch in Weltszenen. So kann ein Ausdruck auf einer Schachtel oder einer Dose seine eigenen Inhalte in eine größere Weltszene mitbringen.

AREngine, unsere eigene AR-App für Android

Manches davon verlangt einem Webbrowser viel ab. Deshalb haben wir neben dem Web-Viewer AREngine gebaut, eine AR-App für Android mit eigenem Tracking, eigener Handerkennung und eigener Physik. Exportiere dein Projekt als Datei im Format .arengine, öffne sie auf dem Smartphone, und es läuft in der App.

AREngine wird gerade von Google Play geprüft und erscheint bald für alle bei Google Play. Bis dahin kannst du die App über die AREngine-Seite installieren. Eine Version für das iPhone wird gerade getestet.

Deine Links und QR-Codes öffnen sich weiterhin genau wie bisher im Browser. Wenn du ein Projekt teilst, kannst du wählen, welche Engine der Link nutzt: das Tracking von AREngine oder die klassische Engine, mit der bestehende Projekte erstellt wurden.

Brillen und Headsets

AREngine unterstützt außerdem schon früh AR-Brillen und Headsets: Display-Brillen, die an ein Smartphone angeschlossen werden, Android-Brillen mit eigener Kamera und Headsets, die OpenXR unterstützen. Die Unterstützung ist experimentell, und Tester probieren sie gerade auf ihren eigenen Geräten aus. Die Anleitung zu Brillen und Headsets zeigt, welche App jede Geräteart braucht, und dem Download liegt eine Einrichtungsanleitung bei.

Wenn du eine AR-Brille hast, hilft uns ein Gerätebericht aus AREngine, sie richtig zu unterstützen. Er enthält nichts Persönliches und verlässt das Gerät nur, wenn du ihn selbst sendest.

Kleinere Änderungen, die dir auffallen werden

  • Startpunkt. Weltszenen haben jetzt einen Punkt, der markiert, wo die betrachtende Person steht, mit einer Höhe für den Boden. So öffnet sich eine Szene genau so, wie du sie gestaltet hast.
  • Blender-Dateien. In den Tarifen Pro und Education kannst du .blend-Dateien hochladen. Sie werden auf unseren Servern in ein Modell umgewandelt, und du kannst auswählen, welche Sammlungen übernommen werden.
  • Materialien. Ein neues Material Leuchten, bearbeitbare Materialien bei importierten Modellen und die Möglichkeit, ein Material zu löschen, das du nicht brauchst.
  • Aufgeräumtere Projekte. Objekte können in anderen Objekten liegen, Assets können in verschachtelten Ordnern liegen, und die Bereiche des Editors lassen sich andocken, wo du sie haben willst.

Probier es aus

Öffne ein Projekt, wähle ein Objekt aus und schalte Interaktiv und Physik ein. Klicke dann auf Vorschau und auf Webcam verwenden, oder teile das Projekt auf dein Smartphone, und greif hinein. Die Anleitung zur Handinteraktion erklärt jede Einstellung, und wir sind gespannt, was du damit baust.

AR Works kostenlos testen

Erstelle dein erstes Augmented-Reality-Erlebnis im Browser – ohne Code und ohne App-Installation.

Mehr aus dem Blog