AR Works krijgt een 3D-scanner voor je telefoon: scan echte objecten in je AR-scène
5 min leestijd
Wil je nu een 3D-model in je scène in AR Works, dan heb je twee opties. Je bouwt het model zelf in een 3D-programma, of je zoekt er een in een bibliotheek met 3D-bestanden en hoopt dat het ongeveer lijkt op wat je in gedachten had. Allebei werken, maar geen van beide helpt echt als je een specifiek, echt object in je scène wilt hebben dat gewoon voor je op tafel staat.
We werken aan een derde optie, en die maakt van de telefoon in je zak een 3D-scanner: richt hem op het object en scan het. Op de desktop is hier al een versie van beschikbaar, en de telefoonscanner voor de webeditor volgt daarna.
Je telefoon wordt een 3D-scanner
Het idee is simpel. Je loopt met de camera van je telefoon om een object heen en maakt een reeks foto’s vanuit verschillende hoeken, van boven naar beneden en helemaal rondom. Die foto’s worden opgestuurd en verwerkt, en je krijgt een 3D-model met textuur terug van precies dat object, klaar om net als elk ander bestand in een scène te zetten. Dat is de hele 3D-telefoonscanner: geen speciale opstelling, geen aparte apparatuur, alleen de camera die je toch al bij je hebt.
Je hoeft geen aparte app te downloaden. De opname gebeurt via de telefoon en het afgewerkte model komt in je project te staan, naast je geïmporteerde bestanden. Vanaf dat moment gedraagt het zich als elk ander model dat je importeert. Je kunt het verplaatsen, schalen en animeren, koppelen aan logicanodes en gebruiken in een scène met afbeeldingstracking of omgevingstracking.
Al beschikbaar op desktop: een ingebouwde fotogrammetrietool
Wil je niet wachten op de telefoonscanner, dan is er een versie die je vandaag al kunt gebruiken. De desktopversie van AR Works heeft een ingebouwde fotogrammetrietool, beschikbaar voor gebruikers van Pro en Onderwijs. Je geeft er een set foto’s van een object in, genomen vanaf alle kanten, en de tool reconstrueert die tot een 3D-model met textuur dat je direct in een scène kunt zetten.
Het mooiste is waar het werk gebeurt. De desktopscanner draait helemaal op je eigen computer, dus je foto’s verlaten je computer nooit en je hoeft niet te wachten tot een server klaar is. Voor een school met een streng afgesloten netwerk, of voor iedereen die opnames liever lokaal houdt, is dat veel waard. De telefoonscanner die naar de webeditor komt, gebruikt dezelfde fotogrammetrie en maakt het opnemen zo makkelijk als met je telefoon om het object heen lopen.
Waarom we denken dat ontwerpers dit willen
Veel AR-werk draait om één specifiek object. Een product dat een winkel echt verkoopt. Een rekwisiet uit een schooltoneelstuk. Een voorwerp in een museumvitrine. Een gerecht op een menukaart. Die helemaal zelf modelleren kost veel tijd, en een standaardmodel uit een bibliotheek is zelden het echte object. Scannen lost allebei de problemen op. Je fotografeert het echte object en even later zet je dat echte object in je scène.
Het verlaagt ook de drempel. Je hoeft niet te weten hoe je in 3D modelleert om een prima model te krijgen. Kun je een zorgvuldige reeks foto’s maken, dan krijg je iets bruikbaars, en dat is precies waar AR Works om draait: echte AR bouwen zonder eerst 3D-programmeur te hoeven worden.
We testen het eerst in restaurants
Voordat we de telefoonscanner naar meer mensen brengen, wilden we hem testen op een veeleisende plek. Daarom draaien we een vroege proef met een handvol restaurants.
Eten bleek een goede, lastige test. Borden hebben lastige vormen, sommige oppervlakken zijn glanzend of nat, en een portie ziet er onder ander licht anders uit. Restaurants hebben ook een duidelijke reden om dit interessant te vinden: gasten kunnen een telefoon op een menukaart richten en het echte gerecht op tafel zien verschijnen voordat ze bestellen, in plaats van te moeten raden op basis van een beschrijving van één regel. Dat goed krijgen op een telefoon, vanaf een scan die in een druk restaurant is gemaakt, leert ons veel over wat de functie nodig heeft voor een bredere uitrol.
We leren er praktische dingen van. Hoeveel foto’s genoeg zijn. Hoeveel licht helpt. Welke objecten netjes scannen en welke tegenwerken. Over dat laatste willen we eerlijk zijn.
Wat goed scant en wat niet
Scannen werkt het best bij objecten met wat oppervlaktetextuur en een matte afwerking, die stilstaan onder gelijkmatig licht. Denk aan keramiek, eten, gereedschap, speelgoed en de meeste alledaagse dingen.
Het heeft moeite met oppervlakken die ook het menselijk oog in de war brengen: doorzichtig glas, spiegels, chroom en alles wat dun of glanzend is. Die zijn lastig voor elke 3D-scanner, niet alleen voor de onze. Is je object een wijnglas of een gepolijste trofee, reken er dan op dat je wat moet opschonen of dat je beter een gemodelleerde versie kunt nemen. We vertellen je dat liever vooraf dan dat je moet worstelen met een mislukte scan.
Onderdeel van een tool die makkelijk in gebruik is
AR Works is een AR-ontwikkeltool in je browser, en scannen past daar helemaal bij. We willen dat het een van de makkelijkste AR-ontwikkeltools is om echt mee te bouwen, en we steken het grootste deel van ons werk in het heel gewoon laten aanvoelen van de lastige onderdelen. De editor draait in je browser, dus je hoeft niets te installeren of in te stellen om te beginnen. De onderdelen waar je normaal een ontwikkelaar voor nodig hebt (tracking, animatie, materialen en interactiviteit) regel je met een visuele editor en logica die je in elkaar sleept, in plaats van met code.
De andere helft is bereik. Wat je bouwt, opent op recente iPhones en telefoons met Android direct via een link of een QR-code, zonder dat iemand een app hoeft te installeren, en dezelfde projecten openen ook in de desktopeditor. Je maakt iets één keer, en bijna iedereen kan het bekijken op de telefoon die al in ieders zak zit. Met een fotogrammetriescanner erbij kunnen de modellen in je scènes net zo gemakkelijk uit de echte wereld komen als de afgewerkte AR-ervaring bij echte mensen terechtkomt.
Wie krijgt het, en wanneer
Scannen is een functie van Pro en Onderwijs. De fotogrammetrietool zit nu al in de desktopapp voor die abonnementen, en de 3D-telefoonscanner zit in een vroege proef en wordt binnenkort uitgerold voor Pro- en Onderwijs-accounts, in dezelfde editor in je browser die je al gebruikt.
Je hoeft overigens niet te wachten om AR Works uit te proberen. Je kunt gratis beginnen in de editor, dus je kunt vandaag nog een account maken en een echte scène bouwen, en later upgraden naar Pro als je de scanner wilt. Scholen kunnen contact met ons opnemen over toegang tot het abonnement Onderwijs.
Een blik verder vooruit
Vandaag leeft AR op telefoons, maar dat is niet het hele verhaal. AR-brillen komen eraan, en apps bouwen voor die brillen staat op onze roadmap. We kunnen er nog niets van laten zien, dus zie dit als een voorproefje en niet als een datum, maar het doel is hetzelfde als bij telefoons: bouwen voor AR moet iets zijn wat een ontwerper kan doen zonder een team van specialisten achter zich. De telefoonscanner is gewoon het volgende onderdeel dat de deur uitgaat.
Voor nu kun je met elk abonnement al je eigen 3D-modellen importeren, dus je scènes hoeven niet te wachten tot de scanner er is.
Probeer AR Works gratis
Maak je eerste ervaring met augmented reality in de browser – zonder code en zonder app-installatie.