混合现实空间音频的制作方法

文档序号:20921459发布日期:2020-05-29 14:12阅读:来源:国知局

技术特征:

1.一种向混合现实环境的用户呈现音频信号的方法,所述方法包括:

检测与所述混合现实环境相关联的音频事件,其中所述音频事件与第一音频信号相关联;

确定所述用户相对于所述混合现实环境的位置;

识别与所述用户的位置相关联的第一声学区域;

确定与所述第一声学区域相关联的第一声学参数;

使用所述第一声学参数确定传递函数;

将所述传递函数应用于所述第一音频信号以产生第二音频信号;以及

向所述用户呈现所述第二音频信号。

2.根据权利要求1所述的方法,其中,所述第一音频信号包括波形音频文件。

3.根据权利要求1所述的方法,其中,所述第一音频信号包括现场音频流。

4.根据权利要求1所述的方法,其中:

所述用户与可穿戴系统相关联,所述可穿戴系统包括一个或多个传感器以及被配置为呈现所述混合现实环境的视图的显示器;并且

识别所述第一声学区域包括检测来自所述一个或多个传感器的第一传感器输入,以及基于所述第一传感器输入识别所述第一声学区域。

5.根据权利要求4所述的方法,其中,确定所述第一声学参数包括检测来自所述一个或多个传感器的第二传感器输入,以及基于所述第二传感器输入确定所述第一声学参数。

6.根据权利要求5所述的方法,其中,确定所述第一声学参数进一步包括基于所述第二传感器输入识别所述声学区域的几何特性,以及基于所述几何特性确定所述第一声学参数。

7.根据权利要求5所述的方法,其中,确定所述第一声学参数进一步包括基于所述第二传感器输入识别与所述声学区域相关联的材料,以及基于所述材料确定所述第一声学参数。

8.根据权利要求4所述的方法,其中,所述可穿戴系统进一步包括麦克风,所述麦克风位于所述第一声学区域中,并且基于由所述麦克风检测到的信号确定所述第一声学参数。

9.根据权利要求1所述的方法,其中,所述第一声学参数对应于混响参数。

10.根据权利要求1所述的方法,其中,所述第一声学参数对应于滤波参数。

11.根据权利要求1所述的方法,进一步包括:

识别第二声学区域,所述第二声学区域在声学上耦合到所述第一声学区域;以及

确定与所述第二声学区域相关联的第二声学参数,

其中使用所述第二声学参数确定所述传递函数。

12.一种系统,包括:

可穿戴头部单元,其包括:

显示器,其被配置为呈现混合现实环境的视图;

扬声器;

一个或多个传感器;以及

电路,其被配置为执行方法,所述方法包括:

检测与所述混合现实环境相关联的音频事件,其中所述音频事件与第一音频信号相关联;

基于所述一个或多个传感器,确定所述可穿戴头部单元相对于所述混合现实环境的位置;

识别与所述用户的位置相关联的第一声学区域;

确定与所述第一声学区域相关联的第一声学参数;

使用所述第一声学参数确定传递函数;

将所述传递函数应用于所述第一音频信号以产生第二音频信号;以及

经由所述扬声器向所述用户呈现所述第二音频信号。

13.根据权利要求12所述的系统,其中,所述第一音频信号包括波形音频文件。

14.根据权利要求1所述的系统,其中,所述第一音频信号包括现场音频流。

15.根据权利要求1所述的系统,其中:

识别所述第一声学区域包括检测来自所述一个或多个传感器的第一传感器输入,以及基于所述第一传感器输入识别所述第一声学区域。

16.根据权利要求15所述的系统,其中,确定所述第一声学参数包括检测来自所述一个或多个传感器的第二传感器输入,以及基于所述第二传感器输入确定所述第一声学参数。

17.根据权利要求16所述的系统,其中,确定所述第一声学参数进一步包括基于所述第二传感器输入识别所述声学区域的几何特性,以及基于所述几何特性确定所述第一声学参数。

18.根据权利要求16所述的系统,其中,确定所述第一声学参数进一步包括基于所述第二传感器输入识别与所述声学区域相关联的材料,以及基于所述材料确定所述第一声学参数。

19.根据权利要求15所述的系统,其中,所述第一声学参数基于由所述麦克风检测到的信号而被确定。

20.根据权利要求12所述的系统,其中,所述第一声学参数对应于混响参数。

21.根据权利要求12所述的系统,其中,所述第一声学参数对应于滤波参数。

22.根据权利要求12所述的系统,进一步包括:

识别第二声学区域,所述第二声学区域在声学上耦合到所述第一声学区域;以及

确定与所述第二声学区域相关联的第二声学参数,

其中使用所述第二声学参数确定所述传递函数。

23.一种增强现实系统,包括:

定位子系统,其被配置为确定所述增强现实系统所位于的第一空间的标识;

通信子系统,其被配置为传送所述增强现实系统所位于的所述第一空间的标识,并且被进一步配置为接收与所述第一空间相关联的音频参数;以及

音频输出子系统,其被配置为基于所述音频参数处理音频片段,并且被进一步配置为输出所述音频片段。

24.一种增强现实系统,包括:

传感器子系统,其被配置为确定与第一空间的声学特性相关联的信息,所述第一空间对应于所述增强现实系统的位置;

音频处理子系统,其被配置为基于所述信息处理音频片段,所述音频处理子系统在通信上耦合到所述传感器子系统;以及

扬声器,其用于呈现所述音频片段,所述扬声器被耦合到所述音频处理子系统。

25.根据权利要求24所述的增强现实系统,其中,所述传感器子系统被进一步配置为确定所述第一空间的几何结构信息。

26.根据权利要求24所述的增强现实系统,其中,所述传感器子系统包括相机。

27.根据权利要求24所述的增强现实系统,其中,所述传感器子系统包括对象识别器,所述对象识别器被配置为识别具有独特声学吸收特性的对象。

28.根据权利要求24所述的增强现实系统,其中,所述传感器子系统包括麦克风。


技术总结
公开了一种向混合现实环境的用户呈现音频信号的方法。根据该方法的示例,检测与混合现实环境相关联的音频事件。音频事件与第一音频信号相关联。确定用户相对于混合现实环境的位置。识别与用户的位置相关联的声学区域。确定与第一声学区域相关联的第一声学参数。使用第一声学参数确定传递函数。将传递函数应用于第一音频信号以产生第二音频信号,然后向用户呈现第二音频信号。

技术研发人员:B·L·施密特;J·塔吉克;J-M·约特
受保护的技术使用者:奇跃公司
技术研发日:2018.10.17
技术公布日:2020.05.29
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1