视听联觉在多通道人机自然交互中的应用研究

简介

研究视听联觉现象以及视听各因素之间存在的具体关联性,并将其应用在多通道人机自然交互中。通过实验系统的分析声音的五种心理和生理要素(音调、音速、粗糙度、尖锐度、非连续性)与多色彩组合的色相、饱和度、对比度以及位置关系等存在的交叉关联性。实验结果表明声音的部分元素如音调、粗糙度等确实与多色彩的色相、饱和度、对比度以及位置关系存在着明显的联觉效应。基于视听联觉效应和视听各元素之间存在的关联属性,设计了基于视听联觉的多通道人机自然交互模型,在模型中构建视觉因素和听觉因素之间的交叉联动关系,提升人机交互的内部处理效率和输出反馈精准度,从而有效提升人机交互的效率。