AR 中的图像跟踪与世界跟踪:有什么区别?
8 分钟阅读
每个增强现实体验在屏幕上显示任何内容之前,都必须先回答一个问题:内容该放在哪里?AR 图像跟踪的做法,是把内容锁定在摄像头能够识别的某张特定图片上——海报、产品包装盒,或是书里的一页。世界跟踪(常称为无标记 AR)的做法,则是去理解观看者周围的空间,这样内容就能放在地板或桌面上,完全不需要印刷的目标。
这一个选择会牵动其余的一切:需要打印什么,不同设备的表现如何,体验用起来有多可靠,以及要请手持手机的人做多少准备。本文会讲清楚两种跟踪模式各自究竟是怎么工作的,如实介绍浏览器中的设备支持情况,并给出一个简单的选择方法——包括答案是“两者都用”的情形。
AR 图像跟踪是如何工作的
图像跟踪靠的是计算机视觉的实时模式识别。事先,会对参考图像进行分析,找出其中的特征点——也就是角点、边缘、纹理这类对比鲜明的小细节——并把这些点保存下来,作为这张图像的一份精简“指纹”。运行时,查看器会在摄像头的每一帧画面里寻找同样的这一组点。一旦找到匹配,它就能精确算出这张印刷图像在三维空间中的位置、旋转角度以及与摄像头的距离,并把您的内容渲染得就像真的贴在上面一样。把海报倾斜,内容跟着倾斜;走近一些,内容就变大。
由于繁重的分析工作都在事先完成,好的平台会在有人查看体验之前,就预先处理好目标图像。例如,在 AR Works 中,目标图像会在您发布时于服务器端编译,所以手机打开您的链接时,下载到的是现成的跟踪数据,而不必自己去做耗费算力的运算。查看器还会对原始的跟踪信号做自适应平滑处理,减轻在光线欠佳时手持摄像头偶尔出现的抖动。
图像跟踪的实际优势,源于它的工作机制。对位很精确——内容与实物是对齐的,因此很适合给图示加标注,或是让美术作品活起来。而且它只需要摄像头画面和计算机视觉,不依赖操作系统层面的深度 AR 支持,所以它是浏览器 AR 中表现最稳定一致的跟踪模式:在较新的 iOS Safari 和 Android Chrome 上都能运行。
什么样的目标图像好用
图像跟踪的效果,取决于您提供的图像。跟踪器需要有细节可抓,所以请优先选择:
- 丰富且分布均匀的细节——纹理和特征遍布整幅图像,而不是一角很繁复、其余大片留白。
- 高对比度——明暗区域之间的强烈反差,在光线不佳时远比细微的渐变更经得住考验。
- 不对称、不规则——重复的图案(网格、瓷砖、条纹)会让匹配器犯糊涂,因为很多区域看起来一模一样。
- 打印时选用哑光材质——光面纸和覆膜会产生反光,可能遮住跟踪器所需要的特征。
照片、插画海报和细节丰富的包装往往跟踪得很出色;素色背景上的极简徽标往往不行。目标图像指南对此有更深入的介绍,包括如何在决定印刷之前,先测试一张候选图像。
世界跟踪(无标记 AR)是如何工作的
世界跟踪完全不需要印刷的目标。它不是去识别一张已知的图片,而是由设备自己建立对环境的理解:把摄像头画面与运动传感器数据融合起来,推算出手机在空间中是如何移动的。据此,它能检测出平坦的表面——地板、桌子、书桌——让观看者把内容锚定在真实世界的某个位置。内容一旦放好就会待在原处:绕着它走一圈,就能看到它的另一面;退后几步,它仍然停在原来放下的地方。
在网页上,这项能力是通过 WebXR 设备 API 提供的,它允许浏览器页面向操作系统请求一个增强现实会话。最后这一点很重要:浏览器借用的是操作系统自带的 AR 引擎,所以浏览器里的世界跟踪能不能用,完全取决于设备底层有没有 AR 支持。
设备支持:如实说明
这正是世界跟踪比图像跟踪更需要谨慎的地方,也是营销页面往往说得比应有的更含糊的地方。一个做得好的 WebAR 查看器会把它处理成一道阶梯。下面以 AR Works 的查看器为具体例子:
- 装有 ARCore 的 Android Chrome 可获得完整体验:准星会在检测到的表面上滑动,观看者点按即可放置场景,之后还可以双指捏合缩放、双指旋转,或者重新放到别处;另有可选的光照估计,让场景与房间的光线相匹配。
- iPhone、iPad 以及没有 ARCore 的 Android 设备会退回到摄像头画面叠加视图:场景合成在实时的后置摄像头画面之上,观看者借助陀螺仪环顾四周。它看起来像 AR,也保留了空间感,但没有表面检测,也不能点按放置——内容并没有锚定在某个实际的位置上。
- 桌面电脑,或拒绝了摄像头访问权限的手机,会得到一个普通的 3D 预览,观看者可以拖动它来环绕查看——这样就不会有人走进死胡同。
关键结论是:如果有人声称如今在 iOS 浏览器里就能实现完整的、锚定在表面上的世界跟踪,请持怀疑态度。一个好的平台能够承诺的是,每台设备都能得到合理的体验版本,且各个层级中的交互和动画都能正常运行——AR Works 查看器正是如此。若想进一步了解整体能力,请看 WebAR 与原生 AR 应用。
图像跟踪与世界跟踪:该选哪一种?
| 图像跟踪 | 世界跟踪 | |
|---|---|---|
| 内容锚定在 | 某张特定的印刷图像 | 房间里的某个位置 |
| 是否需要印刷材料 | 需要(海报、包装、书页) | 不需要 |
| 浏览器中的跨设备一致性 | 高——较新的 iOS Safari 和 Android Chrome | 因设备而异——装有 ARCore 的 Android 上为完整体验,其他设备为摄像头画面叠加回退 |
| 对位精度 | 精确——内容与实物对得上 | 由观看者自己放置内容 |
| 典型尺度 | 手持和桌面大小 | 从桌面大小到房间尺度,乃至实物大小 |
当实物本身就是体验的重点时,请选择图像跟踪:会“活”起来的产品包装,能播放视频的海报和传单,能冒出 3D 图示的练习纸和教科书页面,博物馆说明牌,名片。目标由您掌控,跟踪在两大主流手机平台上表现一致,内容也会准确落在您设计的位置上。
当没有什么可印刷、可扫描时,请选择世界跟踪:在房间里放一个实物大小的模型,按真实比例预览一件物品,绕着一件现实中并不存在的展品走一圈。当比例和临场感比像素级的精准对齐更重要时,它最能发挥所长——只是要对上面那道设备阶梯心中有数,尤其是当您的受众以 iPhone 用户居多的时候。
一条实用的经验法则:大多数项目对环境理解的需求,比您以为的要少。如果您的想法涉及人们本来就拿在手里或看得到的印刷品,图像跟踪通常是更简单、更可靠的选择。
在同一个项目中同时使用两种模式
这个选择不必在整个项目里一刀切。在 AR Works 中,跟踪模式是按场景设置的,所以同一个已发布的项目可以两者混用:比如一张练习纸可以先打开一个锚定在纸页上的图像跟踪场景,点按一下,就跳转到世界跟踪的场景,把一个实物大小的模型放在教室地板上。世界跟踪的场景带有真实世界比例的设置,让内容以您设想的大小出现,观看者仍然可以在自己的设备上缩放它。其余的一切——逻辑节点、动画片段、屏幕叠加层——在两种模式下的工作方式完全相同,所以交互只需做一次。
如果想把两种模式放在一起试一试,AR Works 免费版包含完整的编辑器、两种跟踪模式,以及发布为可分享的链接和二维码,所以在做任何决定之前,您都可以在自己的手机上测试真实的跟踪效果。免费创建账户,或者跟着浏览器 AR 分步教程,一次就从空白项目做到内容出现在摄像头画面里。
常见问题
AR 中的图像跟踪和世界跟踪有什么区别?
图像跟踪把内容锚定在摄像头识别的某张特定图片上——海报、产品包装盒或练习纸——内容会随着这张图片一起移动。世界跟踪(无标记 AR)则把内容锚定在观看者周围的空间里,通常是通过检测地板、桌子之类的表面来实现,所以不需要印刷的目标。
世界跟踪能在 iPhone 的浏览器里使用吗?
不能完整支持。浏览器中带表面检测和点按放置的世界跟踪,依赖 WebXR 增强现实会话,而 iOS Safari 目前并不提供。在 iPhone 和 iPad(以及没有 ARCore 的 Android 手机)上,一个做得好的 WebAR 查看器会退回到摄像头画面叠加视图:场景合成在实时摄像头画面之上,您借助陀螺仪环顾四周——可以用,但并没有锚定在表面上。相比之下,图像跟踪在较新的 iOS Safari 以及 Android Chrome 上都能使用。
什么样的 AR 目标图像好用?
整幅图像上都有丰富的视觉细节,对比度强,没有大面积的重复图案,也没有大片空白。不对称的版面比对称的更容易跟踪,哑光印刷则能避免可能破坏识别的眩光。照片、插画海报和图案繁复的包装设计通常效果不错;白底上的极简徽标通常不行。
一个 AR 项目能同时使用图像跟踪和世界跟踪吗?
有些平台可以。在 AR Works 中,跟踪模式是按场景设置的,所以同一个已发布的项目里,可以同时有图像跟踪的场景和世界跟踪的场景——例如,一个链接到房间尺度场景的练习纸场景——全都通过同一个可分享的链接和二维码访问。