8月26-27日,2022世界XR产业博览会(简称“AWE Asia 2022”)在中国上海盛大开幕。本届大会由Sunrise昕途国际主办、ARinChina作为官方合作媒体加盟。本届AWE Asia 2022以“虚实共元”为主题,汇聚70+位国内外大咖共话XR。这是一场最具前瞻性的行业盛会,演讲涉及空间计算、AR、VR、MR、元宇宙、5G等主题。
自2010年以来,AWE (Augmented World Expo)以位居世界第一的AR + VR行业盛会享誉全球,活动遍及欧洲、亚洲、北美洲,吸引了10,000+与会者参加。如今,AWE XR行业盛会来到中国,将与全球范围内的从业者探路XR产业新走向。在这里,将汇聚众多国内外首席执行官、首席技术官、设计师、开发人员、创意机构、未来学家、分析师、投资者和顶级媒体,为人们提供了一场集学习、合作、创新、体验于一体的行业盛会。
本次大会上,燧光科技 CEO贺杰为我们带来了《混合现实——从空间交互开始》的主题演讲。以下为演讲内容:
各位来宾大家好,我是燧光的CEO贺杰,今天给大家分享的主题是《混合现实——从空间交互开始》。首先简单介绍一下燧光,我们是一家从2014年成立的专注于XR空间交互的企业,出货总量超过100万件VR与AR的相关设备,累积了260余件发明专利,在混合现实arvr方面的交互领域积累了非常深厚的这个技术和经验。
讲到空间交互,自然绕不开人机交互的历史,首先在人机交互的第一个阶段,是大家所熟悉的早期的计算机,我们叫一维的人机交互,比如命令行输入、命令行输出,又比如说我们的DOS系统;在那之后,我们走入了二维的平面交互时代,比如说我们的屏幕的那头是我们的数字世界,屏幕这头是我们的现实世界,在这个更高维度的二维的交互的语境之下,多任务多窗口帮助人类实现的非常复杂的数据关系处理;
但是在新的一个时代,我们的IOT,Web3.0的时代下面,我们的数据和数据联系变得更加的复杂,其实XR代表的是下一代的基于三维的人机交互的新界面,相当于是把我们的数字孪生世界突破了我们屏幕那层次元壁,融入到了我们的现实生活世界里面。国外厂商微软从上个世纪90年代就在研究基于空间语境之下的人机交互的范式,而我们一直在研究微软,基于研究的结果,燧光的人机交互分为两个方向:
一个方向是ToC消费类的,比如说我们的手机等等;第二方向是ToB,从我们的工作生产效率的层面去出发,去研究最好的人机交互的范式。在很长一段时间内,这两条线互为借鉴,共同发展,会有两个不同的分支和渠道。对我们燧光来说,从2014年到现在就一直在聚焦研究在ToB这个语境之下的,人机交互的效率和范式。
燧光经过那么多年的技术发展以及大规模的出货,结合我们的行业市场,以及我们的用户今后的应用场景,去开发了一套全新的人机交互的一个新的这系统解决方案,为我们的客户提供真正降本增效的一套效率工具。
传统的行业解决方案是多套系统的整合,它非常的割裂,我们现在以头显为中心的高度一体化的醒空系统,通过头显自带的传感器系统和我们的算法芯片,把整个动捕、多人大空间定位、装备跟踪、边缘渲染等众多的核心服务全部聚合到一个系统。开机之后整个系统就立马进入联合工作状态,所以这套全新的聚合态的醒空人机交互系统,会给行业带来比较大的一个变革。
燧光在Q3底的时候会发布一套全新的混合现实头显设备,上面有大量的传感器,还有专用的算法芯片,一个头显设备结合外部的一些附件与系统,实现包括空间重建、自体的动作捕捉、半实物仿真交互。空间交互系统配套的服务也包含了燧光与英伟达联合开发的边缘渲染系统,还有方便分析回溯线上直播的一套混合现实的直播导播系统,能支持上百个摄像头同时在线导播,还有一些专用的行业外设,组成了我们这叫醒空的一个虚实融合的底座工具系统。
首先,醒空的空间重建系统可以举个例子方便大家理解,我们在深圳的办公室展厅重建了一个完整的一个室内街区,而这个街区里面的话呢景是实的,我们通过头显对这个街区进行3D化的扫描,然后实时的生成3D场景重建的一个简面和抽象的结果,形成一个数字化孪生,同时还能够识别他一个什么样物体,这个虚拟重建的数字化世界与真实的世界,会通过我们的定位系统融合叠加在一块,实现一些以往从来没有实现过的革命性的应用。
第二,我们的动作捕捉系统是光混动捕,因为数字人在线世界孪生,头顶上面有个向下的摄像头,通过计算机视觉对自体进行完整的动捕,但是纯粹靠计算机视觉不是百分之百可靠和鲁棒的,所以我们通过光学的方式加上非常少的节,3个节点的惯性元器件,实现光混动捕来方便我们的行业用户,进行大规模、大并发的使用。
第3个部分比较特殊,半实物仿真方面,可以举个例子。我们集成商所做的一些特殊行业的装备仿真类的一些工具,比如喷枪、焊机、焊枪和一些座舱,我们叫虚实融合后半实物仿真。这个对行业应用非常重要,内置在我们头显设备里面的跟踪系统能够对装备进行非常高精度的6自由度定位跟踪和人机交互,而且我们的跟踪精度要求非常的高。我们的集成商用我们这套系统已经实现了对他非常好的精度的跟踪,还有一个就是大空间融合定位系统,就是通过视觉的同步所有人的联合空间。
还有一类在这特殊行业的应用场景里面,他们面临的大量的重复的环境和场景,或者是甚至是一些全黑环境下面的定位,或者一些非常极端环境下面的定位。这套系统支持50多个人同时在一个大空间里面使用,实现多人协同的交互,除了视觉的slam之外,我们还有这个通过红外性标的矩针式信标系统,实现多人大空间的定位,而这套系统的鲁邦性非常强,是一个双保险。
在室外环境下,醒空还有北斗和GPS的一个辅助定位,所以能够实现从室内到室外的一个多人大空间的一个联合定位,底层的服务我们适配了英伟达CloudXR这个系统,现在是目前市市面上面性能最好的一套边缘渲染的服务架构系统,而这套系统已经在很多的一些工业客户职业院校等场景落地,他们长期、稳定的使用了那边缘渲染服务器。
醒空的边缘渲染系统总结下来有三个特点,第一是性能好,第二是稳定性很强,第三是部署便利。我们曾经试过跨省调用这个服务,性能和体验也很好,几乎跟本地使用没有区别,它的好处就在于能保证它的经济性,不需要在本地部署昂贵的渲染设备。
还有一个混合现实的导播直播系统,我们通过部署在环境里面的摄像头,能够实现跨摄像头的这个虚实融合导播和自动调节的功能,同时这套系统实际上可以用于文旅、职业教育等方面的综合应用,很多景区或者一些大型主题公园,都会利用这种套系统,比如射击、探险、冒险等领域都可以在里面使用。在我们工业的一些场景化训练和半实物仿真的训练中,都可以用到这套系统进行直播导播的服务。
醒空这样一个虚实融合底座,他能赋能于多个行业领域,实现行业的全息数字化孪生的深度应用、行业应用,解决以前的一些三高三难的问题和课题,真正实现行业的降本增效。我们首先聚焦的是虚拟仿真和训练这个综合领域的一些行业应用,我们有大量的生态合作伙伴基于我们的系统,去开发了很多有创新性的一些内容和应用。它并不是一个噱头,在我们终端的走访过程当中,发现绝大部分我们的集成商利用这套系统,在终端的行业里面的使用率是非常高的。我们讨论互联网的一句话叫日活,我们的日活用户几乎是这行业里面从早用到晚,而且整个系统的可靠性是极高的,我们最早的用户2019年年底开始使用这套系统,到现在还没有触发过任何的售后或者保障,偶尔某些客户的设备出现问题,他只要把设备寄回来,我们再立马寄回去,就能实现使用的延续,所以这个系统就是从稳定综合的行业解决方案和我们生态建设。
从生态开发者的建设上来说,我们已经实现的比较深厚的一个积累,所以我们也希望从结合虚实融合更多到下层、到行业市场,生成质的应用,解决三高三难问题和降本增效的一些命题,能够带来一些新的变革,逐渐把新的技术跟传统的产业结合在一块,实现我们最终的空间交互的新变革,然后帮助我们的客户真正理解数字化孪生、虚实融合对他自己的这个工作和业务带来的革命性的提升,这也是我们燧光一直在坚持的。
燧光实际上是一个研究交互技术的公司,研究未来数字世界和现实世界如何与环境、物体、人和数据进行深度交互融合的一个公司。所以我们也希望我们的一些工作,能给行业带来一些新的启发,燧光其实把这定义成为混合现实的行业解决方案专家,也希望未来与在场的各位一起共建行业市场。
感谢大家的今天耐心聆听,谢谢!
评论