谷歌借助陀螺仪和加速计研发手机应用AR新功能

2019-03-28 14:34:24
关注
摘要 当你轻触取景器时,谷歌开发的这一Motion Stills AR功能会把3D虚拟物体“粘到”相应位置,使其看起来像是真实世界场景的一部分。通过假定追踪表面平行于地平面,并且通过设备的加速度传感器来提供智能手机相对于地平面的初始定向。

  谷歌于2017年夏天推出了安卓版Motion Stills,为一大批安卓手机带来了优秀的视频捕捉与观影体验。谷歌随后进一步优化了Motion Stills,使其能够支持Pixel2中最新的运动图片功能。


文中这一AR新功能示意图,资料图

  2018年年初,谷歌正式为安卓版Motion Stills带来了AR模式。借助这一最新的AR模式,用户只需轻触取景器即可在静态或移动水平表面(例如桌子和地板等等)上放置有趣的虚拟3D对象放置有趣的虚拟3D对象,使其能够与动态的真实世界环境无缝对接。你同时可以录制并分享为GIF和视频格式。


谷歌是借助设备上现有的加速度计和陀螺仪来实现类似效果的。资料图

  AR模式由即时运动追踪,一个基于驱动Motion Stillsi OS中Motion Text的技术的6自由度追踪系统,以及YouTube上的隐私模糊提供支持,可以精确追踪静态对象和移动对象。谷歌已经对这项技术进行了优化与增强,从而帮助任何搭载陀螺仪的安卓设备运行有趣的AR体验。

  当你轻触取景器时,Motion Stills AR会把3D虚拟物体“粘到”相应位置,使其看起来像是真实世界场景的一部分。通过假定追踪表面平行于地平面,并且通过设备的加速度传感器来提供智能手机相对于地平面的初始定向,系统可以追踪相机的6个自由度。这可以帮助我们准确地变换和渲染场景中的虚拟对象。

  当智能手机大致平稳时,加速度传感器会提供因地球重力而产生的加速度。对于水平面来说,重力矢量平行于追踪平面的法线,并且可以精确地提供智能手机的初始定向。

  谷歌表示,即时运动追踪的核心理念是分离相机的平移估计和旋转估计,并将两者视为独立的优化问题。首先,我们只根据相机的视觉信号来确定3D相机的平移。为此,我们观察目标区域的明显2D平移和跨帧的相对比例。一个简单的针孔摄像头模型可以把图像平面中方框的平移和缩放与相机的最终3D平移相关联。

  谷歌表示,系统可以通过图像平面中方框的平移和大小(相对比例)变化来确定两个相机位置(C1和C2)之间的3D平移。但由于相机模型并不假定相机透镜的焦距,我们无法知晓追踪平面的真实距离深度。

  为解决这一问题,谷歌为现有的追踪器(用于Motion Text的追踪器)增加了比例估计,并在相机的视场之外追加了区域追踪。当靠近追踪表面时,虚拟内容可精确地缩放,而这与真实世界对象的感知一致。当你在目标区域的视场之外平移时,虚拟对象将重新出现在大致相同的位置。

  在这之后,系统将通过智能手机的内置陀螺仪来获取设备的3D旋转 (纵摇,横摇和艏摇) 。结合估计的3D平移与3D旋转使得系统能在取景器中正确渲染虚拟内容。由于系统单独处理旋转和平台,谷歌的即时运动追踪方法不需要校准,可支持任何搭配陀螺仪的安卓设备。

  谷歌表示,他们十分兴奋为安卓设备上的Motion Stills带来这一最新的模式,并希望用户会喜欢。

您觉得本篇内容如何
评分

相关产品

Bosch Sensortec 博世传感器 BHI160B IMU-惯性测量单元

Bosch BHI160/BHI160B超低功耗传感器集线器是小型3mm x 3mm x 0.95mm低功耗智能集线器,集成了三轴陀螺仪、三轴加速度计和可编程微控制器。BHI160/BHI160B包含预装软件和用于活动识别的特定算法,专门设计用于实现不间断运动传感。这些传感器集线器完全符合智能手机、可穿戴设备或在非常低功耗下需要高精度实时运动数据的任何其他应用的要求。Bosch BHI160/BHI160B可用于可穿戴技术、移动技术、智能电视遥控器和AR/VR控制器,并配有完全集成的Android传感器堆栈。

Bosch BMI120 加速度传感器

BMI120 是 Bosch Sensortec 推出的一款超紧凑六轴数字惯性测量单元(IMU),在仅 3.0 mm × 2.5 mm 的 LGA 封装内集成了三轴加速度计与三轴陀螺仪。加速度计提供 ±2 g 至 ±16 g 可选量程,陀螺仪动态范围为 ±125 °/s 至 ±2000 °/s,两组传感器均配备 16 位 ADC 并支持 SPI 与 I²C 双数字接口。0.55 mA 的六轴全速运行功耗、小于 1 µA 的待机电流,以及内置的运动检测中断与 FIFO,BMI120 能够在极小的体积和功率预算内实现精确的六自由度运动感知,是虚拟现实(VR)及增强现实(AR)头显、可穿戴设备、游戏控制器、智能手机与智能家居等应用的理想 IMU 核心。

评论

您需要登录才可以回复|注册

提交评论

Mark

Hi,第一时间获取全球传感器最新鲜、最前沿的行业、技术资讯,赶紧来关注我吧

关注

点击进入下一篇

国内初创公司开发带加速度传感器的智能物流包装盒

提取码
复制提取码
点击跳转至百度网盘