科研之友
微信
新浪微博
Facebook
分享链接
摘要
本发明公开一种远程声场实时虚拟重现的方法与装置。该方法包括：(1)采用端对端的卷积神经网络,由用户耳部图像推知个性化的仰角定位因素,并以此为依据对通用HRTF进行个性化定制,进一步将定制的个性化HRTF应用于双耳虚拟声信号的合成；(2)基于用户头部位置的实时检测,实现跟踪头部位置的动态双耳虚拟声信号的重放。上述个性化定制和实时动态的虚拟声信号处理方法可以增强用户的现场感和沉浸感。所述装置包括远程声场多通路捡拾模块、云处理模块、用户端模块和5G通讯模块。本发明的实施基于云计算技术和5G网络传输,可有效减轻用户端的运算负荷,满足多用户的并行需求。本发明可视为基于移动便携设备的虚拟现实的声模块方案。
- 出版日期2020-1-8
- 单位华南理工大学
