英国研究员在VR交互系统上实现了品尝声音和聆听味道的交互,他们是怎么做到的呢。
“品尝”声音和聆听“味道”
Mouth CTRLer旨在完成各种不同的任务,我们看到人们在demo中玩一款乒乓球游戏,团队也正在努力把听觉和味觉融入到名为“The Taste of Music”的项目中。
Perona说,跨模态主义科学家一直在探索我们的感官如何能长时间互相影响的方式,特别是味觉和声音。
但她的项目旨在通过一种有趣和通俗易懂的方式来展示具体工作原理。答案? 棒棒糖。
该团队使用了纯促味剂来制作棒棒糖(促味剂可刺激我们的味觉),以减少人们对嗅觉和视觉的关注。
Perona解释说:“棒棒糖形状的设计适合各种口腔,并可直接插入骨传导传感器。”
“棒棒糖形状还可以帮助声音振动从骨传导装置传输到嘴唇和牙齿尽可能最宽的表面。只需轻咬棒棒糖或把嘴唇放在其上,实验者就可以在嘴里听到声音,同时会感受到促味剂的释放。”
然后,该团队邀请了专门研究跟音乐创造性相关的神经科学的Shama Rahman博士(她也是一名专业演员和音乐家)进行合作。
一同研究甜味、酸味、咸味、苦味和鲜味这五种基本品质,以增强或调节味觉和听觉的感知。
虽然这听起来可能像是非常深奥的领域,但Perona解释说这正成为像她这样的研究者的重点课题。
她说:“味觉刺激和多感官绘图技术的进步会促使人们越来越多地在交互式应用和体验中使用味觉。”
网友评论