伸手就能拿起来:手部交互、物理和 AREngine 应用

5 分钟阅读

以前,AR Works 项目是用来看的。您可以点击一颗行星听它的名字,或者让动画播放起来,但您的手始终停留在屏幕上。场景漂浮在房间里,您只能绕着它走动观看。

这次更新改变了这一点。举起手机,把手伸进场景,拿起一样东西。松开手,它就会下落、滚动,碰到挡在前面的东西后停下来。您的手会挡住位于手后方的对象,也会被位于手前方的对象挡住,因此场景就像房间的一部分,而不是贴在画面上的一张贴纸。

下面的短片展示了实际效果。

用手拿起对象

在编辑器中选中一个对象,打开可交互。观看者现在就可以触摸它,并用手把它拿起来。再打开物理,它就有了重量:松手后会落下,落在地面或另一个对象上。可推动让张开的手可以推着对象走,于是球会滚开,箱子会滑动。

每个对象都有一个边界形状,手触碰的是它,物理计算用的也是它。立方体、球体或圆柱体适用于大多数物体。对于中空或形状不规则的物体,转换为网格形状会贴合模型本身的形状,这样球就能顺着管道落下去,而不会被一个看不见的盖子弹开。

手机会在摄像头画面中找到您的手并把它抠出来,让手显示在它伸过去的对象前面。与您的手有关的任何信息都不会离开手机:手部跟踪完全在设备上运行。

对触碰做出反应的逻辑

逻辑编辑器也新增了相应的事件和动作。观看者用手操作对象时,会触发手部触碰时、抓取时和松开时;两个对象相遇时,会触发碰撞时。设置物理、设置可交互、推动对象和重置对象可以在场景运行时改变状态。

把它们组合起来,无需编写代码就能做出小谜题。让球落进管道,在底部撞到开关,然后伴随动画和声音打开一个宝箱。

一个场景中使用多张图片

以前,图像跟踪场景只能跟踪一张打印出来的图片。现在您可以添加额外目标图像:把几张打印图片摆在一起,得到一个更稳定的位置。您还可以添加跟踪图像,也就是可以自行移动、并带着对象一起移动的图片。把模型放在一张扑克牌上,在桌面上滑动这张牌时,模型会一直停留在牌上,而场景的其余部分保持原位。

跟踪图像也可以在世界场景中使用,因此贴在盒子或罐子上的打印图片,可以在更大的世界场景中带着自己的内容。

AREngine:我们自己的 Android AR 应用

其中有些功能对网页浏览器的要求很高。因此,除了网页查看器之外,我们还开发了 AREngine,这是一款 Android AR 应用,拥有自己的跟踪、手部检测和物理功能。把项目导出为 .arengine 文件,在手机上打开,它就会在应用中播放。

AREngine 目前正在接受 Google Play 的审核,很快就会在 Google Play 上向公众发布。在此之前,您可以通过 AREngine 页面安装。iPhone 版本正在测试中。

您的链接和 二维码仍会和以前完全一样在浏览器中打开。分享项目时,您可以选择链接使用哪种引擎:AREngine 的跟踪,或者现有项目制作时使用的经典引擎。

眼镜和头显

AREngine 还初步支持 AR 眼镜和头显:连接到手机的显示眼镜、自带摄像头的 Android 眼镜,以及支持 OpenXR 的头显。这项支持仍处于实验阶段,测试人员目前正在自己的设备上试用。眼镜和头显指南说明了每类设备需要哪个应用,下载内容中也附有设置指南。

如果您有 AR 眼镜,AREngine 生成的设备报告可以帮助我们更好地支持它。报告不包含任何个人信息,只有在您选择发送时才会离开设备。

您会注意到的小改进

  • 起始位置:世界场景现在有一个标记观看者站立位置的点,并带有地面高度,因此场景会按照您设计的样子打开。
  • Blender 文件:Pro 和教育版套餐可以上传 .blend 文件。文件会在我们的服务器上转换为模型,您还可以选择要导入哪些集合。
  • 材质:新增辉光材质,导入模型的材质可以编辑,不需要的材质也可以删除。
  • 更整洁的项目:对象可以放在其他对象里面,素材可以放在多层文件夹中,编辑器的面板也可以停靠到您想要的位置。

试一试

打开一个项目,选中一个对象,打开可交互和物理。然后打开预览并点击使用摄像头,或者把项目分享到手机上,再把手伸进去。手部交互指南介绍了每项设置,我们很期待看到您用它做出的作品。

免费试用 AR Works

在浏览器中制作您的第一个增强现实体验——无需代码,无需安装应用。

更多博客文章