信号处理装置和信号处理方法
【技术领域】
[0001] 本技术涉及给用户极好的在给定地点的沉浸感的信号处理装置及其方法。
【背景技术】
[0002] 近年来，针对因特网上和应用软件中提供的地图信息服务，除了用图形符号等表 示的鸟瞰地图以外，提出了以下新型服务：显示来自卫星的照片的组合、在地图上的各位置 处显示通过实际对地面上的街道的场景和状态进行拍摄而记录的图像，等等。特别地，使用 在地面上拍摄的图像信息的服务对于检查用户以前未到访过的地点非常有用。
[0003] 另一方面，广泛地研宄了通过覆盖用户（观看者）视场而给他或她"感觉就像我在 那个地点"的感觉的沉浸感技术（沉浸现实）。这些技术中的大部分技术通过以下方式实 现：将用户自身置于箱状地点的中间，该箱状地点由五个或六个面（包括天花板和地板）覆 盖，图像可以被显示（投影）在这些面上。
[0004] 认为使用这样的沉浸感显示器获得了临场感，例如在该沉浸感显示器上显示链接 至前述地图信息的实际照片（例如，以进行使人成为等身大小的处理）。
[0005] 引用列表
[0006] 专利文献
[0007] 专利文献 1 :JP 4 6745〇5B
[0008] 专利文献 2 :JP 4 775487B
[0009] 专利文献 3 :JP 4725234B
[0010] 专利文献 4 :JP 4 883197B
[0011] 专利文献 5 :JP 4735108B
【发明内容】
[0012] 技术问题
[0013] 然而，为了获得更高的临场感和沉浸感，要求用于表达除图像以外的空间信息的 系统。
[0014] 本技术考虑到这些情况并且致力于提供一种能够比仅呈现图像信息时更多地增 强用户的沉浸感的技术。
[0015] 问题的解决方案
[0016] 为了解决此问题，根据本公开技术，提供了一种信号处理装置，包括：
[0017] 显示控制单元，被配置成使必要显示单元显示与根据指定位置信息确定的地点相 对应的图像；
[0018] 声音采集信号输入单元，被配置成输入声音采集单元的声音采集信号，声音采集 单元使用被布置成围绕用户的多个麦克风来采集用户发出的声音；
[0019] 声学信号处理单元，被配置成基于第一传递函数对由声音采集信号输入单元输入 的信号进行用于再现声场的第一声学信号处理，在声场中，用户发出的声音被感知为如同 声音正在根据位置信息确定的地点回响，其中第一传递函数是在根据指定位置信息确定的 地点测量的，以指示在该地点内的闭合表面上发出的声音如何在该地点回响，以及然后如 何被传递到闭合表面侧；以及
[0020] 发声控制单元，被配置成使得从布置成围绕用户的多个扬声器发出基于已经被声 学信号处理单元进行了第一声学信号处理的信号的声音。
[0021] 此外，根据本技术，提供了一种使用显示单元、声音采集单元以及发声单元的信号 处理方法，该声音采集单元用被布置成围绕用户的多个麦克风来采集用户发出的声音，该 发声单元用被布置成围绕用户的多个扬声器来进行发声，该方法包括：
[0022] 显示控制过程，在显示控制过程中，使对应于根据指定位置信息确定的地点的图 像显示在显示单元上；
[0023] 声学信号处理过程，在声学信号处理过程中，基于第一传递函数对声音采集单元 的声音采集信号进行用于再现声场的第一声学信号处理，在声场中，用户发出的声音被感 知为如同声音正在根据位置信息确定的地点回响，其中第一传递函数是在根据指定位置信 息确定的地点测量的，以指示从该地点内的闭合表面发出的声音如何在该地点回响，以及 然后如何被传递到闭合表面侧；以及
[0024] 发声控制过程，在发声控制过程中，使得从发声单元发出基于经过了声学信号处 理过程中的第一声学信号处理的信号的声音。
[0025] 根据本技术，呈现对应于根据指定位置信息确定的地点的图像，并且给用户提供 如下声场，在该声场中，用户产生的声音被感知为如同该声音在根据指定位置信息确定的 地点回响。
[0026] 这里，为了增强临场感和沉浸感，图像以及表示空间信息的"声音"的存在很重要。 从而，根据本技术，能够比在仅呈现图像信息时更多地增强用户的沉浸感。
[0027] 发明的有益效果
[0028] 根据以上所述的本技术，能够比在仅呈现图像信息时更多地增强用户的沉浸感。
【附图说明】
[0029] 图1是描述实施方式的信号处理系统中实现的再现技术的概述的图。
[0030] 图2是描述用于实施方式中的声场再现的技术的图。
[0031] 图3是描述用于实施方式的声场再现的技术的概述的图。
[0032] 图4是描述用于实现实施方式的声场再现的传递函数的测量技术的图。
[0033] 图5是示出布置在再现环境中的多个扬声器及其闭合表面以及多个麦克风及其 闭合表面的图。
[0034] 图6是关于作为测量1的用于测量传递函数的具体技术的示意图。
[0035] 图7也是关于作为测量1的用于测量传递函数的具体技术的示意图。
[0036] 图8是关于用于进行传递函数测量的系统配置的示意图。
[0037] 图9是示出脉冲响应测量数据的示例的图。
[0038] 图10是关于用于抑制除混响声成分以外的其他成分（直达声或早期反射声）引 起的不利影响的配置的示意图。
[0039] 图11是关于作为测量2的用于测量传递函数的具体技术的示意图。
[0040] 图12是描述作为实施方式的用于实现信号处理技术的信号处理系统的配置的 图。
[0041] 图13是关于对应关系信息的内容的示意图。
[0042] 图14是示出矩阵卷积单元的具体内部配置示例的图。
[0043] 图15是示出作为实施方式的要在该系统中执行以实现再现操作的处理的内容的 流程图。
[0044] 图16是示出技术2的渲染处理被设定成在云上进行的系统配置示例的图。
[0045] 图17是例示在再现环境中通过扬声器的布置形成的闭合表面与通过麦克风的布 置形成的闭合表面之间的关系的图。
[0046] 图18是关于闭合表面的形状的示意图。
[0047] 图19是示出在再现环境中通过布置麦克风形成的闭合表面被设定在通过布置扬 声器形成的闭合表面内的情况的图。
[0048] 图20是示出对应于图19中所示的情况的测量环境中的闭合表面之间的关系的 图。
[0049] 图21是例示用于使用全向麦克风获得与定向麦克风的输出等同的输出的配置的 图。
[0050] 图22是例示用于使用全向扬声器获得与定向扬声器的输出等同的输出的配置的 图。
[0051] 图23是示出在测量环境和再现环境中闭合表面的尺寸和形状不同的示例的图。
[0052] 图24是关于在测量环境和再现环境中闭合表面的尺寸和形状不同时用于变换传 递函数的技术的示意图。
[0053] 图25是关于使用运动物体的测量示例1的示意图。
[0054] 图26是关于使用运动物体的测量示例2的示意图。
[0055] 图27是关于使用运动物体的测量示例3和测量示例4的示意图。
【具体实施方式】
[0056] 在下文中，描述