VR时代,笔式交互能否“上位”?
VR时代,笔式交互能否“上位”?
从键盘、鼠标,到触摸板、触摸屏,人机交互的范式不断发生变化。虚拟现实(VR)的出现实现了由二维界面到空间界面的变迁。它在给用户提供全新的沉浸式体验的同时,也带来了新的问题:究竟哪种交互范式更适合VR环境?
国际计算机协会(ACM) CHI大会是人机交互领域的顶级国际学术会议。中国科学院软件研究所(以下简称中科院软件所)一项关于笔形态控制器的研究成果近日被ACM CHI 2020接收,并获得今年ACM CHI的最佳论文提名奖。
VR交互缺乏成熟的范式
目前,VR交互的主要输入方式包括了语音、手势、手持控制器,还有眼动、脑电等。
“但VR目前存在的问题是,它的交互并没有一个成熟的范式。” 该论文通讯作者、中科院软件所人机交互技术与智能信息处理实验室田丰团队成员韩腾说。
传统计算机时代,人机交互紧紧围绕在键盘和鼠标周围,它们是唯一的输入通道。在过去十几年间,智能手机和平板电脑又带来了一个新的交互范式——触摸。
因为人们每天都频繁使用着,所以觉得稀松平常。可实际上,正是“触摸”的出现,直接造就了个人计算机和智能手机时代的辉煌。可见,一种成熟的交互范式具有划时代意义。
尽管目前VR设备的视觉质量和沉浸效果已经达到一个比较稳定的状态,可以呈现令人印象深刻的图形,但相应的输入技术仍在不断探索中。
韩腾表示,目前应用程序开发人员比较依赖手持控制器作为消费级VR产品的主要输入手段。从VR头戴式显示器HTC Vive和Oculus Rift等设备上大量的多按钮和多功能控制器就可以明显看出这点。
“大多数VR手持控制器有一个特点,用户抓取它们的方式主要是利用手腕旋转。基于手腕的动作是足够有效的,然而,这种握持方式通常需要所有的手指保持力量来握持设备,这不可避免地限制了用户手指在不受约束时可以实现的动作和输入范围。” 研究团队在论文中指出。
“再如,比较热门的数据手套,它虽然可以实现手的自然使用,拥有手部动作跟踪、手势识别和触觉反馈等功能,但缺点是,这类手套通常很笨重、穿戴不方便。这些因素在用户体验中起到不可忽视的负面作用。” 论文提到,它和手持控制器都面临着小型化、轻量化的挑战。
随着VR技术在数据分析、艺术创作、医疗培训等领域的广泛应用,既要满足用户对输入精度的要求,又要轻巧方便,未来的VR交互模式是否还有更好的选择?
握笔姿态与交互效率
如果人们留意吃饭时我们如何使用筷子,就会发现,这一过程中手指完成了一系列极为精细的动作。有意思的是,研究团队受手指运动的启发,联想到,和筷子外形类似的笔作为常用的书写工具,既需要运动手腕,也需要灵活的手指。
“将来人类面对空间交互,势必要进行一些十分精准的或精细的目标选择和操作,使用笔或许是更好的交互方式。”韩腾说。
中科院软件所人机交互技术与智能信息处理实验室在研究员戴国忠、田丰的带领下,在笔式交互领域耕耘了几十年。随着VR、增强现实(AR)空间定位和传感器等技术的成熟,笔式交互已经不再局限于二维界面。
事实上,在VR中使用笔形态控制器的概念并不是全新的。2019年,罗技发布了一款名为“Logitech VR Ink Pilot Edition”的VR笔。这是世界上首款在三维空间中利用二维表面和空中画面的VR笔,旨在帮助专业人士在VR中更容易地完成设计。