近日,MindMaze公司推出了VR表情检测工具Mask,声称 Mask 使用了先进的机器学习和生物信号处理,用户实际表情发生到解码转化的过程只需数十毫秒,可以让佩戴者的表情实时复制到 VR 中的化身,能够极大的提高用户的沉浸感。
当然人们兴趣盎然的关注此消息时,大部分人都有些失望,这样的表情模拟能够提高多少沉浸感呢?现阶段好好的提高VR图像显示质量,减少画面颗粒感,或者开发更多的五感反馈硬件,这样才是提高沉浸感的不二办法。
但是面部表情现阶段真的不重要吗?笔者认为恰恰相反,现阶段表情反馈是提高沉浸感最好的办法之一,因为高分辨率的视频输出所产生的数据量巨大,现阶段数据传输媒介无法达到要求,在硬件技术没有突破性提升之前谈高分辨率是无稽之谈。
相由心生,人以情动。在感情表达中,言辞占比7%,声调占比38%,体语占比55%,补全体语可极大的提高虚拟沉浸感。
MindMaze是一家瑞士公司,由在神经科学领域拥有超过10年专业经验的Tej Tadi博士领头,专注于将虚拟现实和运动捕捉跟大脑机器界面结合的强大神经科学公司,估值超过十亿美元,2016年初A轮融资1亿美元。
最初Mask所用的系统是为了辅助神经创伤患者的恢复,Tadi博士在一次调查中发现,一家医院利用他们的系统改造了一个“游戏化”的恢复疗程,卓有成效。
受此启发的Tadi开始考虑该技术更为广泛的消费者使用案例,例如游戏。该团队希望将他们的技术堆栈融入未来迭代的虚拟现实头戴设备中,经过近一年多的研发,Mask表情检测工具正式推出,将虚拟体验沉浸感带入一个新的层面。
有人会有这样的疑问,在VR中投影表情真的重要吗?现阶段VR显示的图像质量并不高,费劲心思将表情投影进去有什么意义呢?还不如老老实实研究如何将显示质量提高,让用户体验到更精致的环境,看到更精美的人物。
对于这样的看法,笔者在上文已经解释过,感情的表达体语占半,体语表达表情占多半。若是面无表情,那就算再美,也和木头没有区别。这也是为何眼动追踪技术受到热捧的原因所在,眼睛是心灵的窗户,而表情是心灵的映射。