ARKit 玩出新高度：iPhone+纸盒眼镜怎么实现 Inside-out 追踪？

本篇文章1670字，读完约4分钟

自从苹果公司推出arkit以来，许多开发者都疯了。在arkit+htc vive播放tilt brush的视频吸引人们观看后，另一个内容团队将arkit带到了一个新的高度。

据雷锋说。(公开号码:雷锋。这个团队叫做nexus工作室。他们将arkit开发的演示与硬纸板框眼镜结合起来，展示了户外可以达到的效果。

从视频中，我们可以看到在穿上纸板后，你面前的内容被切换到ar，真实环境和虚拟内容一起显示，然后切换到vr，这很有趣。

Nexus studio表示，“在iphone 7上实现ar效果并实现每秒60帧vr图像的由内向外跟踪是完全可能的。”然而，仍然有一些小问题。“你不能快速移动你的头。只要你在展示内容的“画廊范围”内走动，定位和跟踪的效果就不错。”

nexus工作室互动艺术部门的负责人Luke ritchie告诉外国媒体，他们进行了10分钟的测试，他透露说:“说实话，跟踪真的很棒。如果你快速转动你的头，画面将会不稳定。快速的运动和长时间的延迟会让人感到有点不舒服。我们不建议现在就给消费者。”

树旁边是一幅虚拟画

在这个测试视频中，有两个有趣的地方。首先，这个演示是在户外测试的，它有一定的空.范围苹果手机是如何实现定位和跟踪的？另外，虚拟现实和现实如何随意切换？

雷锋。网站咨询了usens的技术副总裁马玉玉。他给出了非常详细的回答:

Arkit的slam技术基于单目摄像机和imu传感器的集成。通过识别和跟踪相机图像中的特征点，可以重建场景的3d模型。但是单目相机无法获取比例信息。因此，需要在惯性测量单元中融合陀螺仪和加速度信息来获取场景的真实尺度信息。

ar和vr中使用的估计slam 空定位技术是相同的，但是显示的内容是不同的。Slam将识别双眼在世界坐标系中的位置。在ar应用中，虚拟物体显示在世界坐标系中的某个位置，同时显示真实场景的内容。虚拟现实应用程序只显示虚拟物体，而不是真实场景。

因为arkit是为ar场景开发的，所以它不适合快速旋转跟踪。文章中也提到了这一点，但它对翻译运动的影响更大，就像看画廊一样。

简单地说，苹果手机上基于单目相机和imu传感器集成的slam技术具有相同的定位，但它具有根据不同的内容发展而切换ar和vr的效果。如果你仔细看视频，你会发现他们在真树上设置了一些云。

马耕虞也解释道:

我们手机上的摄像头可以直接看到外部环境。Ar只不过是在这张图片上叠加虚拟物体。虚拟现实是把虚拟现实的内容放在你的屏幕上。例如，当你看电影或玩游戏时，你看不到外部环境。

vr时间的图片在“画廊范围”内移动

此外，基于现有的单目、双目和深度相机三种视觉定位和跟踪方案，马玉玉说它们的区别如下:

单眼使用的信息最少，如果跟踪丢失，初始化需要相对较长的时间。并且需要高的imu精度来估计比例。最低成本。

双目可以从单帧图像中获取场景的真实比例，初始化相对简单。然而，由于基线长度的限制，初始化太远的场景是不好的。并且成本相对较低。

深度相机需要处理大量数据，计算复杂。此外，深度相机的成本相对较高

雷锋想到了装有深度相机的探戈手机。虽然它很早就推出了，但没有得到开发者的热情响应。根本原因与硬件的普及有关。马玉玉说:“探戈的硬件不流行，需要特殊的硬件才能使用。”因此，普通开发人员不会在tango上开发应用程序，导致消费者没有购买的动机。”

事实上，除了外国开发商，一些国内开发商正在开发arkit内容。雷锋联系了武汉消防旅游网的首席执行官杨桐，后者同意卢克·里奇的观点，但阿尔吉特还不成熟。他们现在使用iphone 7和iphone 6&6s进行演示测试，但它们仍处于“可用”阶段，可能需要等到iphone 8发布后才能在硬件和软件上更好地支持arkit。

让我们来谈谈文章开头提到的vrkit和htc vive。单目+imu的定位模式和空灯塔的定位系统有可能达到我们所看到的效果。

最后，如果iphone 8上市，你会为了好玩而换手机吗？笔芯。

雷锋原创文章。严禁擅自转载。详情请参考转载说明。