朱玉文 李子政 齐景仲 谢帛庭 付昊莹

摘 要:现如今,穿戴设备正成为各大科技公司研究的热门,随着越来越多的可穿戴设备投入市场,可穿戴设备正逐步为社会大众所接受,也频繁得到资本的青睐。微软公司于2015年推出的Hololens对于可穿戴设备可谓有着划时代的意义。其运用的MR技术(Mix Reality)不同于完全虚拟的VR,MR是一种将虚拟与现实真正的结合起来的科技,实现了很多年来人们在科幻中的幻想。因此,我们希望总结Hololens平台的特性,探讨Hololens在数字媒体领域的可能性,整理出一些基于Hololens平台的应用开发方向。

关键词:Hololens平台;特性;开发方向;可能性

1特性

手势识别:Hololens可以通过摄像头识别用户的手势,从而做出相应的操作反馈,极大地改变了人机交互的方式。

语音识别:Hololens可以通过麦克风收集用户的语音信息并通过算法进行精度较高的识别,这使用户通过语音这一直接的方式与系统进行交互成为可能。

视线跟踪:通过Hololens内置的传感器,用户可以使用视线来移动光标,从而实现对全息图像的选择。

环境扫描:Hololens拥有四台摄像头,通过其拍摄到的画面以及其特定的图像算法,Hololens可以计算出场景深度图,通过对场景深度图的再次处理,就可以构建出当前使用者所处的实时三维场景,通过构建出来的三维场景。当Hololens内部存储有用户当前所处环境信息后,就可以很轻易地对其进行虚拟处理。

2 Hololens平台的应用开发方向可能性

游戏:游戏的本质是提供体验,而Hololens在此处的优势是通过环境扫描实现的实时三维场景构建,可以使游戏场景与现实的联系更为紧密,从而加强游戏的沉浸感,比如在墙上开凿一个小洞,或者为四周环境赋予不同寻常的材质来适应游戏的场景需求;此外,因为三维场景的构建,游戏开发者可以让虚拟角色、玩家与真实的环境进行交互,这也是其他平台无法企及的优势。

此外,Hololens可以通过手势、语音识别系统来极大地提升玩家的参与度,玩家不需要通过多余的操作控制器,如手柄、鼠标、键盘等,就可以直接与游戏产生交互。这也为游戏设计师们对更自然的交互方式设计提供了基础。

影视:通过环境扫描技术,Hololens可以轻松实现将虚拟屏幕投射在真实空间中的效果,给用户提供全新的观看体验:用户不再需要手持电子设备或者面对在需要走动时无法将屏幕移走的窘境,在观看便利性上有了极大的提升。而影视应用的另一个开发方向则是利用其虚拟环境构建能力,在真实环境中搭建起舞台,让观影者置身其中,并且随时用自己想要的角度,来进行影片的观看。

新媒体:信息资讯类应用在Hololens平台上可以充分利用的是其交互方式,应用可以将信息以全息影像的方式呈现在用户面前或投射在墙壁上,之后,用户可以直接通过视线、语音、手势等方式来选取自己感兴趣的信息并进行阅读。

综合来看,Hololens在数字媒体技术领域 应用的潜能还是极大的,尤其是游戏、影视、新媒体方向。Hololens的意义在于通过人机交互方式、虚拟与现实环境关系上的创新,来给人们带来前所未有的全新体验,而在此平台上进行应用开发时,也需要开发者们大胆打破常规,并且用心思考应用与平台特性的结合方式,使整个应用兼具易用性与实用性。

基金项目:北京工业大学"星火基金"资助课题(XH-2018-02-27)