ARの画像トラッキングとワールドトラッキング:何が違うのか
読了時間:8分
拡張現実(AR)の体験は、画面に何かを映し出す前に、まず1つの問いに答えなければなりません。コンテンツをどこに置くのか? ARの画像トラッキングは、カメラが認識できる特定の画像(ポスター、商品の箱、本のページなど)にコンテンツを固定することで、この問いに答えます。ワールドトラッキング(マーカーレスARとも呼ばれます)は、見る人の周りの空間を理解することで答えます。そのため、印刷したターゲットがまったくなくても、コンテンツを床やテーブルの上に置けます。
この選択は、ほかのあらゆる点に影響します。何を印刷する必要があるか、端末によって動きがどう違うか、体験の安定感はどうか、スマートフォンを持つ人にどこまで準備をお願いするか、といったことです。このガイドでは、それぞれのトラッキング方式が実際にどう動くのかを説明し、ブラウザーでの端末対応の状況を正直にお伝えします。そして、両方を使うのが正解になる場合も含めて、選び方の簡単な目安を紹介します。
AR画像トラッキングの仕組み
画像トラッキングは、コンピュータービジョンがリアルタイムでパターン認識を行う技術です。事前に、基準となる画像から特徴点(角、エッジ、質感のような、コントラストの高い小さな細部)を解析し、その点の集まりを、画像を表す小さな指紋のようなデータとして保存しておきます。実行時には、ビューアーがカメラの各フレームから、同じ並び方の点の集まりを探します。一致するものが見つかると、印刷された画像が3D空間のどこにあるか(位置、回転、カメラからの距離)を正確に計算でき、コンテンツをその画像に物理的に貼り付いているかのように描画します。ポスターを傾ければコンテンツも傾き、近づくと大きく見えます。
負荷の大きい解析は事前に済ませてあるため、優れたプラットフォームは、誰かが体験を見る前にターゲットを前処理します。たとえばAR Worksでは、公開するときにターゲット画像をサーバー上でコンパイルします。そのため、リンクを開いたスマートフォンは、重い計算を自分で行う代わりに、できあがったトラッキングデータをダウンロードするだけで済みます。ビューアーは、生のトラッキング信号に適応型のスムージングも適用します。これにより、光の条件がよくない中でカメラを手で持っているときに、ときどき見られる映像の揺れ(ジッター)を抑えられます。
画像トラッキングの実用面での強みは、この仕組みから生まれます。位置合わせが正確で、コンテンツが実物にぴったり重なるため、図にラベルを付けたり、作品に命を吹き込んだりする用途に向いています。また、必要なのはカメラ映像とコンピュータービジョンだけで、OSの高度なAR機能には頼らないため、ブラウザーARの中では最も挙動がそろいやすいトラッキング方式です。比較的新しいiOSのSafariでも、AndroidのChromeでも動作します。
良いターゲット画像の条件
画像トラッキングの精度は、渡す画像の良し悪しで決まります。トラッカーは手がかりにできる細部を求めるので、次のような画像を選びましょう。
- 細部が豊富で、全体に散らばっている:画像全体にテクスチャや特徴があること。細かい部分が1か所に固まり、残りは真っ白な余白、という画像は向きません。
- コントラストが高い:明るい部分と暗い部分の差がはっきりしていると、微妙なグラデーションに比べて、照明が悪い環境でもはるかに認識を保ちやすくなります。
- 非対称で不規則:格子、タイル、縞模様のような繰り返しのパターンは、多くの領域が同じに見えてしまうため、照合の妨げになります。
- 印刷はつや消し仕上げ:光沢紙やラミネート加工は光を反射し、トラッカーが必要とする特徴を隠してしまうことがあります。
写真、イラスト入りのポスター、細部まで描き込まれたパッケージは、きれいに追跡できる傾向があります。無地の背景にミニマルなロゴを置いたものは、追跡しにくい傾向があります。ターゲット画像ガイドでは、この点をさらに詳しく説明しています。印刷に踏み切る前に、候補の画像をテストする方法も載っています。
ワールドトラッキング(マーカーレスAR)の仕組み
ワールドトラッキングは、印刷したターゲットをいっさい使いません。既知の画像を認識する代わりに、端末が周囲の環境そのものを把握します。カメラ映像とモーションセンサーのデータを組み合わせて、スマートフォンが空間の中をどう動いているかを割り出すのです。そこから、床やテーブル、机といった平面を検出し、見る人がコンテンツを現実の場所に固定できるようにします。いったん置いたコンテンツはその場にとどまります。周りを歩けば反対側から見えますし、後ろに下がっても、置いた位置のままです。
ウェブでは、この機能はWebXR Device APIを通じて提供されます。これは、ブラウザー上のページがOSに拡張現実のセッションを要求できるようにする仕組みです。この最後の点が重要です。ブラウザーはOS自身のARエンジンを借りているので、ブラウザーでのワールドトラッキングは、端末そのもののAR対応の範囲でしか使えません。
端末対応の実情:正直にお伝えします
ここは、ワールドトラッキングに画像トラッキングより慎重な見極めが必要な部分で、宣伝ページの説明が本来あるべきよりあいまいになりがちな部分でもあります。しっかり作られたWebARビューアーは、これを段階的に切り替えて対処します。AR Worksのビューアーを具体例に見てみましょう。
- ARCoreのあるAndroidのChromeでは、フル機能の体験になります。検出された平面の上を、配置位置を示す目印が滑るように動き、見る人はタップしてシーンを配置します。そのあと、ピンチで拡大縮小したり、2本の指で回転したり、別の場所に置き直したりできます。オプションで光の推定を使い、シーンを部屋の明るさになじませることもできます。
- iPhone、iPad、そしてARCoreのないAndroid端末では、カメラパススルー表示に切り替わります。背面カメラのライブ映像の上にシーンを合成して表示し、見る人はジャイロセンサーで周りを見回せます。ARらしい感覚やその場にいる感覚は保たれますが、平面検出もタップして配置する操作もなく、コンテンツが現実の特定の場所に固定されるわけではありません。
- デスクトップ、またはカメラの使用を許可しなかったスマートフォンでは、ドラッグして見る角度を変えられるシンプルな3Dプレビューになります。そのため、行き止まりになってしまう人は誰もいません。
ここでいちばん大切なのは次の点です。現時点で、iOSのブラウザーで平面に固定される本格的なワールドトラッキングができると言う人がいたら、疑ってかかってください。優れたプラットフォームが約束できるのは、どの端末にもその端末なりの無理のない形で体験が届き、インタラクションとアニメーションがどの段階でも動作することです。AR Worksのビューアーは、まさにその通りに動作します。機能全体についてもっと広く知りたい方は、WebARとネイティブARアプリの比較をご覧ください。
画像トラッキングとワールドトラッキング:どちらを選ぶべきか
| 画像トラッキング | ワールドトラッキング | |
|---|---|---|
| コンテンツの固定先 | 特定の印刷された画像 | 部屋の中の特定の場所 |
| 印刷物が必要か | はい(ポスター、パッケージ、ページ) | いいえ |
| ブラウザーでの端末間の一貫性 | 高い:比較的新しいiOSのSafariとAndroidのChrome | 端末による:ARCoreのあるAndroidではフル機能、それ以外はカメラ表示に切り替え |
| 位置合わせの精度 | 精密:コンテンツが実物にぴったり重なる | 見る人が自分でコンテンツを配置する |
| 一般的なスケール | 手に持てるサイズから卓上まで | 卓上から部屋サイズ、実物大まで |
画像トラッキングを選ぶのは、物理的な物そのものが体験の主役になる場合です。たとえば、動き出す商品パッケージ、動画が再生されるポスターやチラシ、3Dの図が立体的に現れるワークシートや教科書のページ、博物館の展示ラベル、名刺などです。ターゲットは自分で管理でき、2つの主要なモバイルプラットフォームのどちらでも同じようにトラッキングが動作し、コンテンツは設計したとおりの位置にぴたりと表示されます。
ワールドトラッキングを選ぶのは、印刷するものも、スキャンするものもない場合です。実物大のモデルを部屋に置く、物を実際の大きさで確かめる、実際には存在しない展示物の周りを歩いて回る、といった使い方です。ピクセル単位の正確な位置合わせよりも、スケール感や存在感が大切なときに真価を発揮します。ただし、上で説明した端末の段階については、事実をよく理解したうえで臨んでください。特に、見る人にiPhoneユーザーが多い場合はなおさらです。
覚えておくと便利な目安があります。たいていのプロジェクトは、空間の理解が思っているほど必要ではありません。人々がすでに手にしたり目にしたりしている印刷物がアイデアに関わっているなら、多くの場合、画像トラッキングのほうがシンプルで、確実な選択です。
1つのプロジェクトで両方の方式を使う
この選択は、プロジェクト全体で1つに決める必要はありません。AR Worksでは、トラッキング方式をシーンごとに設定するので、公開した1つのプロジェクトの中で両方を組み合わせられます。たとえば、ワークシートはページに固定された画像トラッキングのシーンから始まり、タップすると、実物大のモデルを教室の床に置くワールドトラッキングのシーンに切り替わる、といった作りです。ワールドトラッキングのシーンには現実世界のスケール設定があり、コンテンツを意図したサイズで表示できます。見る人は、自分の端末でサイズを変えることもできます。そのほかのもの、つまりロジックのノード、アニメーションクリップ、画面に固定されたオーバーレイは、どちらの方式でもまったく同じように動作します。そのため、インタラクションは1回作るだけで済みます。
両方を並べて試したい場合、AR Worksの無料版には、フル機能のエディター、2つのトラッキング方式、共有リンクとQRコードでの公開が含まれています。そのため、何かを決める前に、実際のトラッキングを自分のスマートフォンで確かめられます。無料アカウントを作成するか、ブラウザーでARを作るステップバイステップのチュートリアルに沿って進めて、空のプロジェクトからカメラに映るコンテンツまでを一度の作業で仕上げてみてください。
よくあるご質問
ARの画像トラッキングとワールドトラッキングの違いは何ですか?
画像トラッキングは、カメラが認識する特定の画像(ポスター、商品の箱、ワークシートなど)にコンテンツを固定する方式で、コンテンツはその画像と一緒に動きます。ワールドトラッキング(マーカーレスAR)は、代わりに見る人の周りの空間にコンテンツを固定する方式で、多くの場合、床やテーブルのような平面を検出することで実現します。そのため、印刷したターゲットは必要ありません。
iPhoneのブラウザーでワールドトラッキングは使えますか?
完全には使えません。平面検出とタップしての配置を備えた、ブラウザー上のワールドトラッキングは、WebXRの拡張現実セッションに依存しますが、iOSのSafariは現時点ではこれを提供していません。iPhoneやiPad(そしてARCoreのないAndroidスマートフォン)では、しっかり作られたWebARビューアーは、カメラパススルー表示に切り替わります。ライブのカメラ映像の上にシーンを合成して表示し、ジャイロセンサーを使って周りを見回す形です。実用的ですが、平面に固定されるわけではありません。一方、画像トラッキングは、比較的新しいiOSのSafariでもAndroidのChromeでも動作します。
良いARターゲット画像とは、どのようなものですか?
画像全体に細部が豊富に散らばっていること、コントラストが強いこと、そして、大きな繰り返しパターンや広い空白がないことです。対称なレイアウトより非対称なレイアウトのほうが追跡しやすく、つや消しの印刷なら、認識を妨げかねない光の反射を避けられます。写真、イラスト入りのポスター、にぎやかなパッケージデザインは、たいていうまくいきます。白地にミニマルなロゴは、たいていうまくいきません。
1つのARプロジェクトで、画像トラッキングとワールドトラッキングの両方を使えますか?
プラットフォームによっては可能です。AR Worksではトラッキング方式をシーンごとに設定するので、公開した1つのプロジェクトの中に、画像トラッキングのシーンとワールドトラッキングのシーンを並べて入れられます。たとえば、ワークシートのシーンから部屋サイズのシーンへつなげることもできます。それらはすべて、1つの共有リンクとQRコードの先にまとまります。