一个普普通通的平面,遇上 AR 后会产生什么不一样的交互体验?
2021年被称作为元宇宙元年,伴随5G、XR等技术快速发展落地,AR 作为连接元宇宙和现实世界的技术纽带之一,也在加深与各行各业的融合,并为用户在虚拟世界中带来更有趣、更具互动性的沉浸式体验。
比如,学生可以借助一盏AR台灯,在书桌、墙壁甚至任何一个平面上,就可以获得更具社交性、更真实的学习体验。不需手机或者其他设备,只要动动手指,师生之间就能做到远程实时交流:教师的批改不再显示在电子屏幕上,而是通过AI算法“写”在学生的作业本上,实现纸电交互,不仅减少了电子设备对学生眼睛的伤害,也让线上学习变得更加有趣。
这盏能让平面变成学习课堂的台灯,正是出自于声网的超音速永久创业伙伴、国内投影人机交互技术与设备研发商—深光科技,在其 AR 解决方案中,师生互动过程中的高稳定性实时音视频则是由实时互动云服务商—声网提供,使用者无需任何穿戴设备,仅通过手势、触摸等操作行为就可实现在现实空间中的裸眼交互应用。
AR+AI,深光用技术刷新学习交互体验
AR一定是未来主流的交互方式,深光科技 CTO 郭嘉伟表示。人机交互的最终目的,无非是希望使信息沟通效率达到最大、操作方式最简洁、用户体验最舒适。AR无疑是各类交互方式中极具竞争力的一种,而与教育硬件的结合,更能从多方面去提升学生在线学习的效率和体验。
线上教学虽然打破了空间约束,但距离感仍然存在,视频授课无法满足学生对沉浸式学习的需求。如何在已经跨越地理、人数限制的情况下,让线上教学的交互体验更加逼近线下教学的效果,是未来在线教育行业发展的核心方向。
基于此方向的探索,深光科技在2020年切入教育赛道,推出深光 AR 投影伴学台灯,针对家庭伴学、在线教学等场景,将投影技术、AR技术、AI识别技术与护眼台灯相结合。AR台灯可以在任意平面上投射出23寸护眼大屏,在学生学习过程中,对书本内容进行识别,并结合AI算法实时呈现多样化电子教育内容。
学生与教师远程交互时,基于声网的实时音视频、互动白板等技术和产品支撑,教师在网页端既看得到学生状态和桌面作业,也可以对画面中的作业进行实时批改,笔迹同步呈现在作业纸与桌面上,如同教师坐在学生身边亲身授课,打破距离感,让学生仿佛置身课堂,“虽远隔千里,犹如在身边”。
但想要真正做到让线上教育接近线下教育的效率和体验,除了还原实时课堂的书写模式,还需要展现实时上课讲解。因此,这个过程中,高稳定、低延时的实时音视频也是核心关键。“与声网合作,成功解决了以往AR台灯在音视频通话过程中的稳定性问题,并且声网的‘空间音频’技术更是助力提供了更具临场感、沉浸式的教学体验。”深光科技 CEO 冯翀表示。
在交互方案上,深光科技是基于AI+AR算法开发,结合多模信号,在嵌入式算力条件下实现毫米级的精度、70帧的触控帧率,有效排除误触和干扰,实现三类交互支持:投影与人类触控的交互、投影与实际物体的交互和远程通信的端到端交互。
技术加持+资源协同,声网生态多维赋能深光
作为一家初创公司,在成立不到2年的时间里,深光科技推出的AR智能灯订单额已突破了千万元,并获得来自峰瑞资本、北航投资、启迪之星等千万级融资。“这样快速的发展,离不开生态合作伙伴‘声网’的支持。”冯翀坦言。
在今年年初,深光科技参与了声网生态的“超音速计划”和“声选计划”,在 AR 台灯产品的打磨优化过程中,声网除了提供「超音速大礼包」的免费百万音视频通话分钟等多种技术和产品赋能外,更是通过自己的生态技术合作兼渠道合作伙伴科大讯飞在智能语音、交互解决方案上提供了技术加持:
1)联合科大讯飞的语音智能技术,为 AR 台灯增加了语音唤醒、语音加持、语义理解、音库订制等个性化功能;
2)科大讯飞 AIUI 人机交互平台能力持续注入技术保障 ,包括 CAE 降噪算法、AIU 服务授权在内的语音整体交互解决方案,协助深光科技提升自有产品解决方案综合竞争力;
3)协助深光科技整合研发资源,提升团队效率,全面保障上线时间与缩短迭代周期;
不仅如此,对于创业初期的企业来讲,如何寻找可持续的销售渠道、完备的销售运营、以及成本支出方面都是痛点和难点,声网在这方面对深光科技给予了多渠道资源协助:
1)销售渠道上,声网生态助力打通并尝试链接科大讯飞分发渠道,为深光科技提供产品分发;
2)推动深光科技接入科大讯飞 AIUI 人机交互平台,预估综合实现成本节约达12%;
3)为深光提供免费实时音视频额度,降低语音能力前期集成成本,在科大讯飞侧申请相应技术支持额度,同时结合市场体量优化价格结构,最终实打实的降低初创企业前期成本;
虚实结合的人机交互技术在教育领域的应用刚刚起步,冯翀判断,教育硬件的市场将会迎来一个长时间的爆发期。深光科技也将继续探索更多教育场景下,虚实结合人机交互技术的应用。这个探索的过程中,作为合作伙伴,声网生态将继续整合多渠道多品牌资源去赋能和扶持。
声明:本站转载此文目的在于传递更多信息,并不代表赞同其观点和对其真实性负责。如涉及作品内容、版权和其它问题,请在30日内与本网联系,我们将在第一时间删除内容,本网站对此声明具有最终解释权。