微软与德国汽车制造商大众汽车合作,开发一款由微软HoloLens 2混合现实头显提供技术支持的增强现实GPS导航系统。微软称这项技术为“移动平台”,旨在为驾驶大众汽车的司机在上下班途中提供实时导航和安全信息。
大众汽车创新集团数据科学团队负责人安德罗•克莱恩博士(Dr.Andro Kleen)在官方博客中表示:“我们认为,混合现实信息是我们可以提供的最直观的信息,它能够增强用户体验。因为你在头显中看到的和你需要操作的,与人们通常看到和操作的相差无几。我们提供的信息没有那么抽象。”
显然,大众汽车已经测试AR导航一段时间了。2015年,大众汽车开始了“赛车教练”的研究项目,将AR技术与自动驾驶汽车结合起来教授赛车。司机开车时,该系统通过HoloLens 2头显在现实世界投射虚拟指令,如转向和刹车提示。但遗憾的是项目由于导航追踪问题一度陷入停滞,问题主要是车辆开始移动,HoloLens 2所呈现的全息图像也会跟着移动。
微软混合现实与人工智能实验室位于瑞士苏黎士,其主任马克·波勒费斯(Marc Pollefeys)表示“微软和大众汽车进行了广泛的讨论。大众汽车展示了应用场景和希望实现的功能。他们很想与微软一道找到解决方案并能够在这些情况下使用HoloLens。”
2018年,微软和大众汽车再次联手,解决了这个长期存在的难题。马克的团队为HoloLens 2开发了一种算法,该算法考虑了车辆的运动,提供了舒适的AR导航体验并且不会失去追踪。这个过程并不简单,由于瑞士新冠疫情管制,马克和他的团队各自居家隔离,通过远程办公实现的。
微软高级软件工程师约书亚·埃尔斯登(Joshua Elsdon)表示:“我们不得不在我家做很多测试。这并非理想的开发条件,我们分散在不同的国家,通过远程协作完成了这些工作,这挺有趣的。”
整个团队经过一些初步的原型设计后,最终能够在微软的雷德蒙德园区附近与大众汽车一起进行现场测试。他们先在游船上做了测试,然后又用汽车测试。团队使用了一个3D定位系统来追踪车辆和头显的位置,把3D信息投影在用户的真实环境中。例如,实时的3D地图可以投影在汽车的仪表盘上,这样用户查看自己当前位置时,视线不用离开路况太远。
大众汽车的AR技术专家迈克尔(Wittkämper)表示“我们为车辆连接了一个可以追踪车辆位置的定位系统,能够在车外的一些兴趣点上显示3D元素,如信息。这样就开启了一种全新的可能性,戴眼镜的用户不仅仅能看到驾驶正前方显示的全息图,其视线所到之处都能看到全息图。”
据微软介绍,他们的移动平台系统已经引起了不少海事组织的兴趣。目前移动平台可用于大型船舶,但微软公司计划未来将这项技术支持应用到飞机、火车和电梯等移动环境。
评论