信息处理装置、信息处理方法、程序、显示系统和移动物体与流程

本技术涉及信息处理装置、信息处理方法、程序、显示系统和移动物体，其控制图像的显示。

背景技术：

专利文献1描述了一种根据用户的姿势选择视频内容的显示位置的显示系统。在该显示系统中，用于检测用户的姿势的姿势检测装置被提供给包括倾斜机械装置的家具等。基于由姿势检测装置检测到的用户的姿势，从多个显示位置中选择要显示视频内容的显示位置。这允许用户以舒适的姿势观看视频内容(专利文献1的说明书中的[0007]、[0027]、[0030]和[0032]段、图2等)。

引用列表

专利文献

专利文献1：日本专利申请公开no.2009-92950

技术实现要素：

[技术问题]

如上所述，已经开发了根据用户的姿势等来控制信息的显示的技术，并且需要能够在提高用户的使用感的同时发挥高娱乐性能的技术。

鉴于上述情况，本技术的一个目的是提供一种能够在提高用户的使用感的同时发挥高娱乐性能的信息处理装置、信息处理方法、程序、显示系统和移动物体。

[技术问题的解决方案]

为了实现上述目的，根据本技术的实施例的信息处理装置包括获取单元和显示控制单元。

获取单元获取关于用户的姿势的姿势信息。

显示控制单元基于所获取的姿势信息来控制第一信息和第二信息在显示屏上的显示位置，该第二信息与第一信息的种类不同，该显示屏被设置为至少从前侧向上侧覆盖用户周围。

在信息处理装置中，第一信息和与第一信息的种类不同的第二信息被显示在显示屏上，显示屏被设置为从前侧向上侧覆盖用户周围。基于用户的姿势信息来控制具有不同类型的第一信息和第二信息的显示位置。这使得可以在提高用户的使用感的同时发挥高娱乐性能。

第一信息可以包括由用户选择的视频内容或外部的视频中的至少一个。

这使得可以在显示屏上显示视频内容、外部的视频等，并提供各种观看体验。

第二信息可以包括向用户的通知信息、菜单信息或外部环境信息中的至少一个。

这使得可以自然地呈现各种类型的信息，例如通知信息。

显示控制单元可以以用户的视野中心为基准来设置第一信息的显示位置。

例如，在用户的视野中心等处显示第一信息使得可以提供舒适的观看体验。从而可以提高用户的使用感。

显示控制单元可以以用户的视野中心为基准来设置将要显示第一信息的主显示区域。

这使得可以根据用户的视野适当地显示第一信息，并且可以充分提高用户的使用感。

显示控制单元可以以主显示区域为基准来设置第二信息的显示位置。

这使得可以根据将在其中显示第一信息的主显示区域来显示第二信息。从而可以轻松地控制第二信息的显示。

显示控制单元可以能够在主显示区域的外围显示第二信息。

这使得可以在不打断第一信息的情况下适当地显示第二信息，并且可以在不妨碍用户的观看体验的情况下呈现各种类型的信息。

显示控制单元可以能够以叠加在主显示区域上的方式显示第二信息。

这使得可以在不妨碍用户的观看体验的情况下容易地呈现各种类型的信息。

姿势信息可以包括用户要使用的座椅的倾斜角度或通过捕获用户的图像而获得的用户图像中的至少一个。

这使得可以高度精确地检测用户的姿势等并且可以精确地控制第一信息和第二信息等的显示位置。

姿势信息可以包括关于用户的视野的视野信息，该视野是基于用户图像检测的。

这使得可以详细地控制例如第一信息和第二信息的显示位置，并且可以充分提高用户的使用感。

显示控制单元可以能够控制具有与第一信息和第二信息中的每一个不同种类的第三信息的显示。

例如，显示第三信息使得可以发挥高娱乐性能。

显示控制单元可以在显示屏的除要显示第一信息的主显示区域之外的区域中显示第三信息。

这允许使用显示屏进行显示，并且可以提供具有高娱乐性能的观看体验。

第三信息可以包括扩展由在主显示区域中显示的第一信息表示的空间的扩展图像或者关于第一信息的附加信息中的至少一个。

这使得可以发挥优异的娱乐性能。

显示控制单元可以能够控制用于用户执行操作输入的操作图像的显示位置。

显示操作图像使得可以轻松地执行操作输入并且提高用户的使用感。

显示控制单元可以基于姿势信息来设置要在用户周围显示操作图像的操作区域。

这使得可以在适当的位置显示操作图像，并且可以充分提高用户的使用感。

信息处理装置还可以包括声音控制单元，该声音控制单元基于姿势信息来控制声音输出方向。

这使得可以提供具有高娱乐性能的观看体验。

根据本技术的实施例的信息处理方法是一种要由计算机系统执行的信息处理方法，并且包括：获取关于用户的姿势的姿势信息；以及基于所获取的姿势信息来控制第一信息和第二信息在显示屏上的显示位置，第二信息与第一信息的种类不同，该显示屏被设置为至少从前侧向上侧覆盖用户周围。

根据本技术的实施例的程序使计算机系统执行以下步骤：获取与用户的姿势有关的姿势信息；以及基于所获取的姿势信息来控制第一信息和第二信息在显示屏上的显示位置，第二信息与第一信息的种类不同，该显示屏被设置为至少从前侧向上侧覆盖用户周围。

根据本技术的实施例的显示系统包括显示装置、显示屏、获取单元和显示控制单元。

显示屏被设置为至少从前侧向上侧覆盖用户周围。

获取单元获取关于用户的姿势的姿势信息。

显示控制单元基于所获取的姿势信息，控制第一信息和与第一信息的种类不同的第二信息的显示位置，第一信息和第二信息将通过显示装置显示在显示屏上。

根据本技术的实施例的移动物体是能够转移用户的移动物体，并且包括显示装置、显示屏、获取单元和显示控制单元。

[本发明的有益效果]

如上所述，根据本技术，可以在提高用户使用感的同时发挥高娱乐性能。注意，这里描述的效果不必受到限制，并且可以产生本公开中描述的任何一种效果。

附图说明

图1是示出根据本技术的实施例的车辆的内部空间的示例的示意图。

图2是示出控制车辆的车辆控制系统的配置示例的框图。

图3是示出图2中的输出控制单元的配置示例的框图。

图4是示出用于在显示目标表面上执行显示的显示装置的配置示例的示意图。

图5是示出用于在显示目标表面上的显示控制的基本处理的示例的流程图。

图6是用于描述控制显示目标表面上的显示位置的示例的示意图。

图7是示出主要信息、次要信息和相关信息的显示位置的示例的示意图。

图8是示出主要信息、次要信息和相关信息的示例的示意图。

图9是示出次要信息的显示模式的示例的示意图。

图10是地图信息的显示模式的示例。

图11是来自服务的通知信息的显示模式的示例。

图12是来自车辆的通知信息的显示模式的示例。

图13是菜单信息的显示模式的示例。

图14是设置列表的显示模式的示例。

图15是详细信息的显示模式的示例。

图16是内容控制器的显示模式的示例。

图17是示出显示次要信息的方法的示例的示意图。

图18是示出由用户执行的操作输入的示例的示意图。

图19是示出操作区域的显示位置的示例的示意图。

图20是示出操作区域的显示位置的示例的示意图。

图21是示出操作图像的显示模式的示例的示意图。

具体实施方式

在下文中，将参考附图描述本技术的实施例。

[车辆的配置]

图1是示出根据本技术的实施例的车辆的内部空间的示例的示意图。车辆10包括传动体系系统108(参见图2)，该传动体系系统108包括诸如引擎、马达等之类的驱动单元(未示出)，并且能够与乘坐在车辆10上的用户1一起移动。此外，车辆10具有能够自动驾驶到目的地的自主驾驶功能。注意，车辆10是根据该实施例的移动物体的示例。

图1用箭头2示意性地示出了车辆10的行驶方向。箭头2所指示的方向(图中的向右方向)是车辆10的前方，与箭头2所指示的方向相反的方向(图中的向左方向)是车辆10的后方。此外，在车辆10的内部设有在车辆10的前-后方向上较长的内部空间11。内部空间11具有向车辆10的前侧和后侧弯曲的形状。注意，在图1中省略了内部空间11的侧面的图示。

车辆10的内部空间11包括乘客座椅12和显示目标表面13。乘客座椅12安装在内部空间11的底表面上以面对车辆10的前方。因此，乘坐在车辆10上的用户1将坐在乘客座椅12上，同时面向车辆10的前方。此外，乘客座椅12具有未示出的倾斜机械装置。在该实施例中，乘客座椅12对应于用户1要使用的座椅。

倾斜机械装置可以调节包括乘客座椅12的靠背角度等的倾斜角度。调整后的倾斜角度例如由角度检测传感器检测。注意，通过倾斜机械装置可调节的倾斜角度的数量、类型等没有限制。例如，乘客座椅12的头枕、座椅表面、脚踏板(省略图示)等的角度可以适当地调节。例如，使用倾斜机械装置允许用户1以舒适的姿势乘坐在车辆10上。

显示目标表面13被设置为至少从前侧向上侧覆盖用户1的周围。在图1所示的示例中，显示目标表面13沿着车辆10的内部空间11的壁表面从乘客座椅12(用户1)的前侧到上侧设置。下文中，沿显示目标表面13的形状从显示目标表面13的下端侧(内部空间11的底面侧)到上端侧的方向被描述为显示目标表面13的垂直方向。此外，将显示目标表面13上垂直于垂直方向的方向描述为显示目标表面的水平方向。在该实施例中，显示目标表面13对应于显示屏。

在本公开中，“被设置为至少从前侧向上侧覆盖用户的周围的显示屏”例如是至少从前侧越过处于就座姿势的用户1的头设置的表面(显示目标表面13)或至少从挡风玻璃到车辆10的中央支柱(b支柱)设置的表面(显示目标表面13)。因此，显示目标表面13覆盖至少是用户1的前侧的区域(挡风玻璃等)到用户1的上侧的区域(内部空间11的上表面侧等)。例如，即使在调节乘客座椅12的靠背的倾斜角度并且改变用户1的姿势(腰部的角度等)的情况下，用户1也可以轻松地观看显示目标表面13。换言之，也可以说显示目标表面13被设置为适当地落入用户1的视野内，不论用户1的姿势如何变化。显示目标表面13的形状、大小等没有限制。

在显示目标表面13上显示包含视频内容、向用户1的通知等各种类型的信息。因此，用户1可以在乘坐在车辆10上的同时，观看显示在显示目标表面13上的各种类型的信息。稍后将使用图3等详细描述用于显示视频内容等的配置。

此外，车辆10的内部空间11包括未示出的操作输入单元和声音系统。

操作输入单元显示用于用户1执行操作输入的操作图像。此外，操作输入单元使用操作图像检测用户1的操作输入。操作输入单元的示例包括投影仪，投影仪包括感测相机。换言之，通过投影仪投影操作图像，并且通过感测相机检测用户1相对于操作图像的操作。操作输入单元被适当地安装在例如内部空间11的侧表面上或乘客座椅12的附近。操作输入单元的配置、安装的位置等没有限制。

图1用虚线示意性地示出了操作区域14，在该操作区域中将显示操作图像。在图1的示例中，操作区域14设置在乘客座椅12的扶手周围。用户1可以根据在手等附近显示的操作图像来执行预定的操作输入。注意，可以适当地改变显示操作图像的区域(操作区域14)。稍后将对此进行描述。

声音系统包括多个扬声器。例如，适当地设置多个扬声器，以便能够在内部空间11中三维再现声音等。这允许表现声音来自的方向、距离等。另外，在该实施例中，配置使用通过显示目标表面13进行声波反射等的声音系统。这允许例如产生向用户1的前侧输出声音等，并且使得可以实现真实感的声音环境。

此外，在车辆10的内部空间11中适当地设置有捕获用户1的图像的相机、检测用户1的生物信息的生物传感器等。车辆10的内部空间11中提供的设备等没有限制。例如，可以在车辆10的内部空间11中适当地设置有稍后将描述的输入单元101的输入装置、数据获取单元102的传感器等。

[车辆控制系统的配置]

图2是示出控制车辆10的车辆控制系统100的配置示例的框图。车辆控制系统100是安装在车辆10中并且以各种方式控制车辆10的系统。注意，在下文中，在区分车辆10与其他车辆的情况下，车辆10被称为本汽车或本车辆。

车辆控制系统100包括输入单元101、数据获取单元102、通信单元103、车载设备104、输出控制单元105、输出单元106、传动体系控制单元107、传动体系系统108、车身控制单元109、车身系统110、存储单元111和自动驾驶控制单元112。输入单元101、数据获取单元102、通信单元103、输出控制单元105、传动体系控制单元107、车身控制单元109、存储单元111和自动驾驶控制单元112经由通信网络121彼此连接。例如，通信网络121包括符合任何标准的公共汽车或车载通信网络，例如，控制器局域网(can)、本地互连网络(lin)、局域网(lan)、flexray(注册商标)等。注意，有时车辆控制系统100的单元可以在不使用通信网络121的情况下直接彼此连接。

注意，在下文中，在车辆控制系统100的单元经由通信网络121彼此通信的情况下，将省略对通信网络121的描述。例如，在输入单元101和自主驾驶控制单元112经由通信网络121彼此通信的情况下，将给出指示输入单元101和自主驾驶控制单元112彼此通信的简单描述。

输入单元101包括乘客用来输入各种数据、指令等的装置。例如，输入单元101包括诸如触摸屏、按钮、麦克风、开关或操纵杆之类的操作设备，能够通过不同于手动操作的声音、手势等输入信息的操作设备等等。替代地，例如，输入单元101可以是外部连接设备，例如使用红外或另一无线电波的遥控装置，或者与车辆控制系统100的操作兼容的移动设备或可穿戴设备。输入单元101基于乘客输入的数据、指令等生成输入信号，并将所生成的输入信号提供给车辆控制系统100的各个单元。

数据获取单元102包括用于获取要在由车辆控制系统100执行的处理中使用的数据的各种传感器等，并将所获取的数据提供给车辆控制系统100的各个单元。

例如，数据获取单元102包括用于检测车辆10的状态等的各种传感器。具体地，例如，数据获取单元102包括陀螺仪传感器、加速度传感器、惯性测量单元(imu)、以及用于检测油门踏板的操作量、制动踏板的操作量、方向盘的转向角、引擎的转数、马达的转数、车轮的转速的传感器等。

此外，例如，数据获取单元102包括用于检测与车辆10的外部有关的信息的各种传感器。具体而言，例如，数据获取单元102包括诸如飞行(tof)相机、立体声相机、单眼相机、红外相机或其他相机之类的成像装置(车辆外部相机)。此外，例如，数据获取单元102包括用于检测天气、气象现象等的环境传感器以及用于检测车辆10周围的物体的周围信息检测传感器。例如，环境传感器包括雨滴传感器、雾传感器、日照传感器、雪传感器等。周围信息检测传感器包括超声传感器、雷达、lidar(光检测和测距、激光成像检测和测距)传感器、声纳等。

此外，例如，数据获取单元102包括用于检测车辆10的当前位置的各种传感器。具体地，例如，数据获取单元102包括全球导航卫星系统(gnss)接收器等。gnss接收器从用作导航卫星的gnss卫星接收卫星信号(以下称为gnss信号)。

此外，例如，数据获取单元102包括用于检测与车辆10的内部有关的信息的各种传感器。具体地，例如，数据获取单元102包括捕获驾驶员的图像的成像装置(车辆内部相机)、检测驾驶员的生物信息的生物传感器、在车辆内部收集声音的麦克风等。生物传感器例如设置在座椅表面、方向盘等上，并且检测坐在座椅上的乘客或握住方向盘的驾驶员的生物信息。

通信单元103与车载设备104、各种车辆外部设备、服务器、基站等进行通信，发送由车辆控制系统100的各个单元提供的数据，并将接收到的数据提供到车辆控制系统100的各个单元。注意，通信单元103所支持的通信协议没有特别限制。通信单元103可以支持多种类型的通信协议。

例如，通信单元103通过使用无线lan、蓝牙(注册商标)、近场通信(nfc)、无线usb(wusb)等来建立与车载设备104的无线连接。此外，例如，通信单元103通过使用通用串行总线(usb)、高清多媒体接口(hdmi)、移动高清链接(mhl)等，经由连接端子(如有必要，还包括电缆)(未示出)与车载设备104建立有线连接。

此外，例如，通信单元103经由基站或接入点与存在于外部网络(例如，因特网、云网络或公司专用网络)上的设备(例如，应用服务器或控制服务器)进行通信。此外，例如，通信单元103通过使用对等(p2p)技术与存在于车辆10附近的终端(例如，行人或商店的终端，或机器类型通信(mtc)终端)进行通信。此外，例如，通信单元103执行v2x通信，诸如车辆到车辆通信、车辆到基础设施通信、车辆10与家庭之间的车辆到家庭通信、或车辆到行人通信。

此外，例如，通信单元103包括信标接收器，接收从安装在道路等上的无线电台发送的无线电波或电磁波，并且获取关于当前位置、交通拥堵、交通管制、必要时间等的信息。

车载设备104包括例如乘客拥有的移动设备或可穿戴设备、携带在车辆10中或附接到车辆10的信息设备、搜索到任何目的地的路线的导航装置等。

输出控制单元105控制向车辆10的乘客或车辆10的外部的各种信息的输出。例如，输出控制单元105产生包括视觉信息(例如，图像数据)或音频信息(例如，声音数据)中的至少一个的输出信号，将输出信号提供给输出单元106，从而控制来自输出单元106的视觉信息和音频信息的输出。具体地，例如，输出控制单元105组合由数据获取单元102中包括的不同成像装置捕获的多条图像数据，生成鸟瞰图像、全景图像等，并将包括所生成的图像的输出信号提供给输出单元106。此外，例如，输出控制单元105生成包括关于诸如碰撞、接触或进入危险区域之类的警告声音、警告消息等的声音数据，并将包括所生成的声音数据的输出信号提供给输出单元106。

输出控制单元105对应于根据本实施例的信息处理装置，并且包括计算机所需的硬件，例如，中央处理单元(cpu)、随机存取存储器(ram)和只读存储器(rom)。cpu将预先存储在rom中的根据本技术的程序加载到ram并执行该程序，从而执行根据本技术的信息处理方法。

输出控制单元105的具体配置没有限制。例如，可以使用包括诸如现场可编程门阵列(fpga)的可编程逻辑设备(pld)、专用集成电路(asic)等的设备。稍后将参考图3等详细描述输出控制单元105。

输出单元106包括能够将视觉信息或音频信息输出到车辆10的乘客或外部的装置。例如，输出单元106包括显示装置，仪表板，诸如音频扬声器、耳机之类的声音系统，诸如乘客等佩戴的眼镜式显示器之类的可穿戴设备，投影仪，灯等。注意，包括在输出单元106中的显示装置用作用于在图1中的显示目标表面13上显示各种类型的信息的显示机械装置。

传动体系控制单元107生成各种控制信号，将其提供给传动体系系统108，从而控制传动体系系统108。此外，必要时，传动体系控制单元107将控制信号提供给除传动体系系统108之外的结构元件，并通知他们传动体系系统108的控制状态等。

传动体系系统108包括与车辆10的传动体系相关的各种装置。例如，传动体系系统108包括用于产生内燃机、驱动马达等的驱动力的驱动力产生装置，用于将驱动力传递到车轮的驱动力传递机械装置，用于调节转向角的转向机械装置，用于产生制动力的制动装置，防抱死制动系统(abs)，电子稳定性控制(esc)系统，电力转向装置等。

车身控制单元109生成各种控制信号，将其提供给车身系统110，从而控制车身系统110。此外，根据需要，车身控制单元109将控制信号提供给除车身系统110以外的结构元件，并向他们通知车身系统110的控制状态等。

车身系统110包括设置到车身的各种车身装置。例如，车身系统110包括无钥匙进入系统、智能钥匙系统、电动车窗装置、电动座椅、方向盘、空调、各种灯(例如，前大灯、尾灯、刹车灯、方向指示灯和雾灯)等。

存储单元111包括例如，只读存储器(rom)、随机存取存储器(ram)、诸如硬盘驱动器(hdd)等的磁存储设备、半导体存储设备、光学存储设备、磁光存储设备等。存储单元111存储由车辆控制系统100的各个单元使用的各种程序、数据等。例如，存储单元111存储诸如三维高精度地图、全局地图和局部地图之类的地图数据。高精度地图是动态地图等。全局地图的精确度低于高精度地图，但覆盖范围比高精度地图更广。局部地图包括与车辆10的周围环境有关的信息。

自主驾驶控制单元112执行关于自主驾驶的控制，例如自主行驶或驾驶辅助。具体地，例如，自主驾驶控制单元112执行旨在实现高级驾驶员辅助系统(adas)的功能的协作控制，其包括车辆10的避撞或减震、基于跟随距离跟随驾驶、车速保持驾驶、车辆10的碰撞警告、车辆10偏离车道警告等。此外，例如，自主驾驶控制单元112也可以执行旨在用于自主驾驶的协同控制，自主驾驶使车辆自主地行驶而不依赖于驾驶员的操作等。自主驾驶控制单元112包括检测单元131、自身位置估计单元132、状况分析单元133、规划单元134和行为控制单元135。

检测单元131检测控制自主驾驶所需的各种信息。检测单元131包括车辆外部信息检测单元141、车辆内部信息检测单元142和车辆状态检测单元143。

车辆外部信息检测单元141基于来自车辆控制系统100的各个单元的数据或信号执行检测与车辆10的外部有关的信息的过程。例如，车辆外部信息检测单元141执行检测过程、识别过程、车辆10周围物体的跟踪过程以及检测到物体的距离的过程。检测目标物体的示例包括车辆、人、障碍物、建筑物、道路、交通信号灯、交通标志、道路标志等。此外，例如，车辆外部信息检测单元141执行检测车辆10周围的周围环境的过程。检测目标周围的周围环境的示例包括例如，天气、温度、湿度、亮度、路面状况等。车辆外部信息检测单元141将指示检测过程的结果的数据提供给自身位置估计单元132、地图分析单元151、交通规则识别单元152和状况分析单元133的状况识别单元153、行为控制单元135的紧急事件避免单元171等。

车辆内部信息检测单元142基于来自车辆控制系统100的各个单元的数据或信号，执行检测与车辆内部有关的信息的过程。例如，车辆内部信息检测单元142执行驾驶员的认证过程和识别过程、驾驶员状态的检测过程、乘客的检测过程、车辆内部环境的检测过程等。作为检测目标的驾驶员状态的示例包括健康状况、意识程度、专心程度、疲劳程度、凝视方向等。作为检测目标的车辆内部环境的示例包括温度、湿度、亮度、气味等。车辆内部信息检测单元142将指示检测处过程的结果的数据提供给状况分析单元133的状况识别单元153、行为控制单元135的紧急事件避免单元171等。

车辆状态检测单元143基于来自车辆控制系统100的各个单元的数据或信号，执行检测车辆10的状态的过程。作为检测目标的车辆10的状态的示例包括速度、加速度、转向角、存在/不存在异常、异常的内容、驾驶操作状态、电动座椅(乘客座椅12)的位置和倾斜度、门锁的状态、其他车载设备的状态等。车辆状态检测单元143将指示检测过程的结果的数据提供给状况分析单元133的状况识别单元153、行为控制单元135的紧急事件避免单元171等。

自身位置估计单元132基于来自诸如车辆外部信息检测单元141和状况分析单元133的状况识别单元153之类的车辆控制系统100的各个单元的数据或信号来执行估计车辆10的位置、姿势等的过程。此外，根据需要，自身位置估计单元132生成用于估计自身位置的局部地图(以下称为自身位置估计地图)。例如，自身位置估计地图可以是使用诸如同时定位和映射(slam)之类的技术的高精度地图。自身位置估计单元132将指示估计过程的结果的数据提供给状况分析单元133的地图分析单元151、交通规则识别单元152和状况识别单元153等。此外，自身位置估计单元132使存储单元111存储自身位置估计地图。

状况分析单元133执行分析车辆10的状况和车辆10周围的状况的过程。状况分析单元133包括地图分析单元151、交通规则识别单元152、状况识别单元153、和状况预测单元154。

地图分析单元151执行分析存储在存储单元111中的各种地图的过程，并且构造包括自主驾驶过程所需的信息的地图，同时根据需要使用来自诸如自身位置估计单元132和车辆外部信息检测单元141之类的车辆控制系统100的各个单元的数据或信号。地图分析单元151将所构造的地图提供给交通规则识别单元152、状况识别单元153和状况预测单元154，并且将其提供给规划单元134的路线规划单元161、动作规划单元162、行为规划单元163等。

交通规则识别单元152基于来自诸如自身位置估计单元132、车辆外部信息检测单元141和地图分析单元151之类的车辆控制系统100的各个单元的数据或信号，执行识别车辆10周围的交通规则的过程。识别过程使得例如可以识别车辆10周围的交通灯的位置和状态、车辆10周围的交通控制的内容、可驾驶车道等。交通规则识别单元152将指示识别过程的结果的数据提供给状况预测单元154等。

状况识别单元153基于来自诸如自身位置估计单元132、车辆外部信息检测单元141、车辆内部信息检测单元142、车辆状况检测单元143和地图分析单元151之类的车辆控制系统100的各个单元的数据或信号，执行识别与车辆10有关的状况的过程。例如，状况识别单元153执行识别车辆10的状况、车辆周围的状况、车辆10的驾驶员的状况等的过程。此外，根据需要，状况识别单元153生成要用于识别车辆10周围的状况的局部地图(以下称为状况识别地图)。例如，状况识别地图可以是占用栅格地图。

作为识别目标的车辆10的状况的示例包括车辆10的位置、姿势和运动(例如，速度、加速度或运动方向)、存在/不存在异常、异常的内容等。作为识别目标的车辆10周围的状况的示例包括周围静止物体的类型和位置，周围运动物体的类型、位置和运动(例如，速度、加速度和运动方向)，周围道路的建筑物，路面状况，环境天气，温度，湿度，亮度等。作为识别目标的驾驶员的状态的示例包括健康状况、意识程度、专心程度、疲劳程度、凝视运动、驾驶操作等。

状况识别单元153将指示识别过程的结果的数据(必要时包括状况识别地图)提供给自身位置估计单元132、状况预测单元154等。此外，状况识别单元153使存储单元111存储状况识别地图。

状况预测单元154基于来自诸如地图分析单元151、交通规则识别单元152、以及状况识别单元153之类的车辆控制系统100的各个单元的数据或信号，执行预测与车辆10有关的状况的过程。例如，状况预测单元154执行预测车辆10的状况、车辆10周围的状况、驾驶员的状况等的过程。

作为预测目标的车辆10的状况的示例包括车辆的行为、异常的发生、可行驶距离等。作为预测目标的车辆10周围的状况的示例包括车辆10周围的移动物体的行为、交通信号灯的状态变化、诸如天气等环境的变化等。作为预测目标的驾驶员的状况的示例包括驾驶员的行为、健康状况等。

状况预测单元154除了将来自交通规则识别单元152和状况识别单元153的数据，还将指示预测过程的结果的数据提供给规划单元134的路线规划单元161、动作规划单元162和行为规划单元163等。

路线规划单元161基于来自诸如地图分析单元151和状况预测单元154之类的车辆控制系统100的各个单元的数据或信号，来规划到目的地的路线。例如，路线规划单元161基于全局地图来设置从当前位置到指定目的地的路线。此外，例如，路线规划单元161基于诸如交通拥堵、事故、交通法规和建筑物，以及驾驶员的健康状况等状况来适当地改变路线。路线规划单元161将指示所规划路线的数据提供给动作规划单元162等。

动作规划单元162基于来自诸如地图分析单元151和状况预测单元154之类的车辆控制系统100的各个单元的数据或信号，来规划车辆10的动作，以在规划的时间段内在路线规划单元161所规划的路线中安全驾驶。例如，动作规划单元162规划开始、停止、驾驶方向(例如，前进、后退、左转、右转、方向改变等)、驾驶车道、驾驶速度、超车等。动作规划单元162将指示为车辆10规划的动作的数据提供给行为规划单元163等。

行为规划单元163基于来自诸如地图分析单元151和状况预测单元154之类的车辆控制系统100的各个单元的数据或信号，来规划车辆10的行为以实现由动作规划单元162规划的动作。例如，行为规划单元163规划加速、减速、驾驶路线等。行为规划单元163将指示车辆10的规划行为的数据提供给行为控制单元135的加速/减速控制单元172、方向控制单元173等。

行为控制单元135控制车辆10的行为。行为控制单元135包括紧急事件避免单元171、加速/减速控制单元172和方向控制单元173。

紧急事件避免单元171基于由车辆外部信息检测单元141、车辆内部信息检测单元142和车辆状态检测单元143获得的检测结果，执行检测碰撞、接触、进入危险区域、或诸如驾驶员的异常或车辆10中的异常之类的紧急事件的过程。在检测到紧急事件发生的情况下，紧急事件避免单元171规划车辆10的行为，例如避免紧急事件的快速停止或快速转弯。紧急事件避免单元171将指示车辆10的规划行为的数据提供给加速/减速控制单元172、方向控制单元173等。

加速/减速控制单元172控制加速/减速以实现由行为规划单元163或紧急事件避免单元171规划的车辆10的行为。例如，加速/减速控制单元172计算驱动力产生装置或制动装置的控制目标值，以实现所规划的加速、减速或快速停止，并将指示计算出的控制目标值的控制指令提供给传动体系控制单元107。

方向控制单元173控制方向以实现由行为规划单元163或紧急事件避免单元171规划的车辆10的行为。例如，方向控制单元173计算转向机械装置的控制目标值，以实现由行为规划单元163或紧急事件避免单元171规划的驾驶路线或快速转向，并将指示计算出的控制目标值的控制指令提供给传动体系控制单元107。

[输出控制单元的配置]

图3是示出图2中的输出控制单元105的配置示例的框图。输出控制单元105包括姿势获取单元20、显示信息控制单元21、操作输入控制单元22、以及声音控制单元23。例如，当输出控制单元105的cpu执行预定程序时，配置每个功能块。

姿势获取单元20获取与用户1的姿势有关的姿势信息。如上所述，坐在乘客座椅12上的用户1可以通过使用倾斜机械装置等(见图1)来调整用户的姿势。获取与此时用户1的上身相对于座椅表面的角度、用户1的头部的朝向等有关的信息作为姿势信息。在该实施例中，姿势获取单元20对应于获取单元。

在该实施例中，将用户1使用的乘客座椅12的倾斜角度读取为用户1的姿势信息。例如，该倾斜角度由设置在乘客座椅12上的角度传感器30(倾斜机械装置)检测。例如，通过使用该倾斜角度，能够容易地计算出用户1的上身的角度等。

此外，通过捕获用户1的图像而获得的用户图像被读取为用户1的姿势信息。用户图像例如由设置在内部空间11中的车辆内部相机31捕获。例如，基于用户图像执行人检测过程等，这允许详细地检测用户1的姿势。

此外，可以将基于用户图像检测到的与用户1的视野有关的视野信息用作姿势信息。例如，可以从用户1的头部3的位置、朝向等来检测用户1的可视范围(用户1的视野)所面对的方向等。包含用户1的视野的方向的此类视野信息等可以被读取为用户1的姿势信息。姿势信息等的类型没有限制。例如，可以获取通过倾斜机械装置移动的乘客座椅12的前后方向上的位置、上下方向上的高度等。此外，任何能够表达用户1的姿势的信息都可以用作姿势信息。

显示信息控制单元21基于用户1的姿势信息来控制各种类型的信息在显示目标表面13上的显示。显示信息控制单元21包括显示内容确定单元24和布局控制单元25。

显示内容确定单元24确定要在显示目标表面13上显示的显示内容。在该实施例中，主要信息和与主要信息不同类型的次要信息被显示在显示目标表面13上。主要信息是例如将由用户1主要观看的信息(主要内容)。次要信息是例如将由用户1适当地参考的信息(次要内容)。

主要信息包含用户1选择的视频内容。例如，诸如现场音乐、体育、电影和新闻之类的各种类型的视频内容被显示为主要信息(参见图8的b和图8的c)。那些视频内容可以从例如存储单元111或通信单元103中适当地读取。

此外，主要信息包含外部的视频。例如，诸如由车辆外部相机32等捕获的车辆10的前方的视频(参见图8的a)、使用视频通话的其他人的视频、用于视频会议的会议室中的视频等之类的外部的视频被显示作为主要信息。

此外，用作主要信息的信息没有限制。例如，在车辆10(输出控制单元105)的启动和终止的时刻，或者在用户1未选择视频内容的情况下，默认显示的视频可以被显示为主要信息。替代地，例如，可以通过使用机器学习等将根据用户1的偏好等自动选择的视频内容显示为主要信息。

次要信息包含向用户1的通知信息。例如，用于通知用户1接收到邮件等的图标、来电等被显示为次要信息。此外，可以适当地显示用于报告车辆10的异常、路线的改变等的通知信息。

此外，次要信息包含菜单信息。菜单信息是例如在用户1执行操作输入的情况下显示的信息，并且菜单信息包含包括选项等的选择图像、用于设置参数等的设置图像等。此外，次要信息包含外部环境信息。例如，与内部空间11的外部的状况(温度、天气等)有关的信息、车辆10的速度和当前位置的信息等可以被显示为外部环境信息。

用作次要信息的信息不限于那些信息。例如，指示用户1的生物信息(脉搏、血压等)的信息可以被显示为次要信息。此外，被显示为主要信息的视频内容的详细信息，附近商店、饭店等的详细信息以及其他信息可以被显示为次要信息。此外，可以通过使用机器学习等将根据用户1的偏好等自动选择的任何信息显示为次要信息。

如上所述，主要信息和次要信息是彼此类型不同的信息。在该实施例中，主要信息对应于第一信息，并且次要信息对应于第二信息。

例如，显示内容确定单元24确定要在显示目标表面13上显示为主要信息的信息和要在显示目标表面13上显示为次要信息的信息中的每一个。换言之，也可以说显示内容确定单元24选择要在显示目标表面13上显示的主要信息和次要信息中的每一个。

执行主要信息和次要信息的选择例如，基于与在显示目标表面13上的显示有关的预定指令信息。预定指令信息包含用户1经由操作输入的指令、经由通信单元103等接收的来自外部的指令、基于预定程序等来自车辆10的指令和其他指令。此外，生成指令信息等的方法没有限制。

此外，与主要信息和次要信息中的每一个不同类型的相关信息被显示在显示目标表面13上。对于相关信息，典型地，使用与主要信息的内容有关的信息。例如，显示内容确定单元24可以选择确定要显示在显示目标表面13上的与主要信息相关的相关信息。在该实施例中，相关信息对应于第三信息。显示内容确定单元24的确定结果被输出到布局控制单元25。

布局控制单元25基于用户1的姿势信息来控制主要信息和与主要信息不同类型的次要信息中的每一个在显示目标表面13上的显示位置。换言之，也可以说在显示目标表面13上主要信息的显示位置和次要信息的显示位置每个都根据用户1的姿势来设置。

此外，布局控制单元25可以控制主要信息和次要信息在显示目标表面13上的显示尺寸。例如，通过缩放主要信息和次要信息来执行调整每条信息的显示尺寸的过程。在下文中，将显示目标表面13中显示主要信息的区域描述为主显示区域，并且将显示目标表面13中显示次要信息的区域描述为次显示区域。此外，布局控制单元25可以控制相关信息的显示位置和显示尺寸。根据例如显示主要信息的主显示区域来显示相关信息。

如上所述，由布局控制单元25基于用户1的姿势信息来设置在显示目标表面13上显示的主要信息、次要信息和相关信息中的每一个的布局(显示位置、显示尺寸等)。基于布局生成用于显示每条信息的图像信息。所生成的图像信息被输出到用于在显示目标表面13上执行显示的显示装置33。

图4是示出用于在显示目标表面13上执行显示的显示装置33的配置示例的示意图。在图4的a中，将投影仪36用作显示装置33。在使用投影仪36的情况下，将显示目标表面13配置为屏幕15。换言之，在车辆10的内部空间11中提供设置为至少从前侧向上侧覆盖用户1的周围的屏幕15。

投影仪36被适当地设置，使得能够例如在车辆10的内部空间11中的屏幕15(显示目标表面13)上投影图像。在图4的a的示例中，设置在乘客座椅12的上侧和后侧的投影仪36朝着屏幕15投影图像。以这种方式，使用投影仪36允许例如容易地配置所期望的显示目标表面13。

注意，投影仪36的布置、数量等没有限制。例如，可以采用通过使用短焦投影仪36等从用户1的脚投影图像的配置。此外，例如，可以采用通过使用多个投影仪36针对屏幕15的每个区域投影图像的配置。这使得可以容易地实现明亮的图像显示等。

在图4的b中，多个平面显示器37用作显示装置33。在这种情况下，每个平面显示器37的显示屏用作显示目标表面13。多个平面显示器37例如被设置为至少从前侧向上侧覆盖用户1的周围。在图4的b的示例中，示出了沿着内部空间11的内壁彼此相邻设置的三个平面显示器37。

以这种方式，设置多个平面显示器37使得可以容易地实现覆盖从用户1的前侧向上侧的区域的显示目标表面13。此外，例如，要用作另一用途应用的平面显示器37等可以转为其他用途，这可以抑制装置的制造成本等。注意，构成显示目标表面13的平面显示器37的布置、数量等可以根据例如车辆10的内部空间11的形状、尺寸等适当地设定。

在图4的c中，曲面显示器38被用作显示装置33。在这种情况下，曲面显示器38的显示屏用作显示目标表面13。因此，在车辆10的内部空间11中设置曲面显示器38，曲面显示器38被设置为至少从前侧向上侧覆盖用户1的周围。

对于曲面显示器38，例如，可以使用任何使用液晶、有机el(电致发光)等的显示装置。使用曲面显示器38使得可以显示高分辨率和高质量的图像并提供高度沉浸式的观看体验。

另外，显示目标表面13和显示装置33的具体配置等没有限制。例如，假定在内部空间11的前侧设置有挡风玻璃等。在这种情况下，在挡风玻璃上增加诸如诸如液晶百叶窗之类的挡光功能允许提供屏幕15用于投影(显示目标表面13)和挡风玻璃的两种功能。例如，可以采用这种配置。在该实施例中，显示装置33和输出控制单元105实现显示系统。

返回参考图3，操作输入控制单元22控制操作图像的显示位置，以使用户1执行操作输入。具体地，基于用户1的姿势信息来计算操作图像的显示位置。因此，要显示操作图像的位置根据用户1的姿势而改变。与操作图像的显示位置有关的信息被输出到设置在车辆10的内部空间11的预定位置处的操作输入单元34。操作输入单元34的投影仪然后将操作图像投影在通过操作输入控制单元22计算出的显示位置处。在该实施例中，显示信息控制单元21和操作输入单元34实现显示控制单元。

声音控制单元23基于用户1的姿势信息控制声音输出方向。换言之，根据用户1的姿势适当地改变声音的发出方向。例如，调整设置在内部空间11中的多个扬声器(声音系统35)的角度等。此外，例如，对于要输出到每个扬声器的声音信号，执行诸如音量控制、波形控制和带宽控制(均衡)之类的声音控制。此外，控制声音输出方向等的方法没有限制。在该实施例中，声音控制单元23对应于声音控制单元。

图5是示出控制显示目标表面上的显示的基本过程的示例的流程图。图5所示的过程例如是在用户1乘坐到车辆10上并启动车辆10的时刻开始的循环过程。此外，该过程例如在执行终止驾驶的操作时终止。

显示内容确定单元24确定要在显示目标表面13上显示的显示内容(步骤101)。例如，基于与在显示目标表面13上的显示有关的预定指令信息，执行确定要在显示目标表面13上显示的主要信息、次要信息和相关信息中的每一个的过程。

在执行图5所示的循环过程期间，基于用户1的指令、来自外部的指令、来自车辆10的指令等，生成各种类型的指令信息。例如，显示内容确定单元24基于在执行步骤101的时刻读取的指令信息，来选择主要信息、次要信息和相关信息中的每一个。

此外，在指示信息的内容与紧接在前的循环过程中使用的内容相同的情况下，也就是说，指示信息不变，或者在其他情况下，选择与紧接在前的循环过程类似的显示内容(主要信息、次要信息和相关信息)。

注意，指令信息可以包括指示不显示主要信息的指令、指示不显示次要信息的指令、指示不显示相关信息的指令等等。因此，例如，可以确定指示仅显示主要信息和次要信息并且不显示相关信息的显示内容，或者指示仅显示主要信息和相关信息并且不显示次要信息的显示内容。

以这种方式，显示内容确定单元24可以根据来自用户1的指令等适当地控制要在显示目标表面13上显示的显示内容。

姿势获取单元20获取用户1的姿势信息(步骤102)。例如，读取由乘客座椅12的角度传感器30检测到的倾斜角度。此外，读取由车辆内部相机31捕获的用户图像。

布局控制单元25基于用户1的姿势信息来控制在显示目标表面13上的显示位置(步骤103)。

图6是用于描述控制显示目标表面13上的显示位置的示例的示意图。图6示意性地示出了乘客座椅12、使用乘客座椅12的用户1的头部3和显示目标表面13。在图6的右侧视图中，用户1抬起靠背，并面向车辆10的前方而坐。在图6的中间视图中，用户1靠背倾斜而坐。在图6的左侧视图中，用户1面朝上且靠背躺平。

在该实施例中，以用户1的视野中心为基准，来设定主要信息的显示位置。在本公开中，用户1的视野中心包括用户1的视野的实质中心。图6通过虚线示意性地示出了用户1的视野4。此外，箭头示意性地示出了用户1的注视方向(中心注视方向5)，该注视方向指向用户1的视野4的中心。

如图6所示，当用户1改变乘客座椅12的倾斜角度时，用户1的视野4(中心注视方向5)改变，并且用户1可视的目标表面13的范围改变。因此，如果将用户1的视野4的中心被设定为基准，则即使用户1的姿势改变，也能够适当地设定主要信息的显示位置，以使主要信息适当地落入视野4内。注意，可以基于用户1的姿势信息来计算指示用户1的视野4所指向的显示目标表面13的范围的信息。

在该实施例中，布局控制单元25以用户1的视野4的中心为基准，设定要显示主要信息的主显示区域。例如，适当地设定主要信息的布局(显示位置、显示尺寸等)，以使得用户1的视野4的中心与要显示主要信息的主显示区域的中心基本相同。这允许在用户1的前侧显示主要内容(主要信息)，并且允许用户1舒适地观看主要内容。注意，图6通过虚线示意性地示出了显示目标表面13中的主显示区域40。

设定主显示区域40等的方法没有限制。例如，根据倾斜角度和用户图像来计算用户1的头部3的朝向(中心注视方向5)等。然后，计算中心视线方向5与显示目标表面13相交的位置。例如，将显示目标表面13的相交位置设定在主显示区域40的中心。这允许根据用户1的实际姿势以高精度显示主要信息。

此外，还可以在不计算用户1的姿势、注视方向等的情况下设定主显示区域40。例如，可以使用预先记录乘客座椅12的倾斜角度、与该角度相对应的主要信息的显示位置等的表格。适当地参照这样的表格可以容易地设定与当前倾斜角度等相对应的主要信息的显示位置。

注意，在用户1的姿势变化较小或该变化是暂时的情况下，可以执行维持主显示区域40的设定的过程。例如，在倾斜角度的变化较小或用户1执行诸如临时屈曲颈部的操作的情况下，主要信息的显示位置不变。可以执行这样的过程。因此，可以避免显示位置频繁改变的情况，并且可以提供稳定的观看体验。

当设定了主显示区域40时，以主显示区域40为基准来设定次要信息的显示位置。此外，与主要信息有关的相关信息被显示在显示目标表面13除要显示主要信息的主显示区域40之外的区域中。因此，次要信息的显示位置和相关信息的显示位置根据用户1的姿势而改变。稍后将参考图7和8等详细描述次要信息和相关信息的显示位置等。

以这种方式，在该实施例中，基于用户1的姿势信息来适当地控制显示目标表面13上显示的主要信息、次要信息和相关信息中的每一个的显示位置等。从另一角度来看，也可以说输出控制单元105可以根据用户1的姿势适当地控制要显示在显示目标表面上的显示内容的整体布局。

图7是示出主要信息、次要信息和相关信息的显示位置的示例的示意图。在图7的a中，车辆10的前方的视频(运动期间风景)被显示为主要信息41。在图7的b中，音乐视频被显示为主要信息41。在图7的c中，烟花视频被显示为主要信息41。

图8是示出主要信息41、次要信息42和相关信息43的示例的示意图。在图8的a至c的左侧，示意性地示出了在图7的a至c中使用的主要信息41、次要信息42和相关信息43的显示示例。此外，在图8的a至c的中心，示出了主要信息41和相关信息43的示意图。在图8的a至c的右侧，示出了主要信息41的示意图。注意，图8中示出的每个图的外框对应于显示目标表面13的外框。

在图7的a中，用户1坐在乘客座椅12上，面向车辆10的前方。因此，将用户1的视野4指向车辆10的前方。以用户1的视野4的中心为基准，将主显示区域40设定为使得在用户1的前方显示作为车辆10的外部的视频的运动期间风景(主要信息41)。

相关信息被显示在主显示区域40的外部。如图8的a的右侧所示，在显示目标表面13中，在运动期间风景的上侧生成剩余区域44。如图8的a的中间所示，与主要信息41(运动期间风景)有关的相关信息(天空等的图像)被显示在剩余区域44中。以这种方式，扩展由显示在主显示区域40中的主要信息41表示的空间的扩展图像可以用作相关信息43。

生成扩展图像45等的方法没有限制。例如，生成能够自然地连接到图8的a中的运动期间风景的视频的上端的天空图像。因此，扩展图像45可以以自然的方式扩展到主显示区域40的外部。此外，分析运动期间风景中的天空的颜色等，并且生成具有与运动期间风景中的天空的颜色相协调的色调的天空图像作为扩展图像45。因此，在显示运动期间风景时可以在整个显示目标表面13上施加这样的视觉效果，并可以产生扩展的空间。

布局控制单元25能够在主显示区域40的外围中显示次要信息42。这里，主显示区域40的外围是例如偏离主显示区域40的中心的位置，并且包括主显示区域40的内侧、区域之间的边界、其外侧等。此外，布局控制单元25能够以叠加在主显示区域40上的方式显示次要信息42。这允许次要信息42被显示在用户1可以轻松观看的位置，并且允许提高可用性。

在图7的a所示的示例中，用于显示次要信息42的次显示区域46被设定在主显示区域40的中心的下侧的位置处。换言之，次显示区域46被设定在用户1的视野4的中心的下侧。将次显示区域46设定在用户1的视野4的中心的下侧允许用户1通过例如稍微移动视平线来轻松地参看次要信息42。注意，在实际显示中，不显示指示次显示区域46的框等。

此外，例如，可以将次显示区域46适当地设定在主显示区域40外部且也落入用户1的平均视野范围内的区域中。换言之，次显示区域46可以被设定为不妨碍观看显示在主显示区域40中的主要信息41，并且以允许用户1轻松地参看次要信息42。此外，次要信息42的显示位置可以被设定在偏离主显示区域40的中心的位置，例如主显示区域40的中心的上侧、左侧和右侧。设定次要信息42等的显示位置的方法没有限制。例如，基于人机工程学等，可以将次显示区域46设定在用户1轻松观看并且对主要信息41的观看没有影响的显示位置。此外，可以根据主要信息41的类型等适当地设定次要信息42等的显示位置。例如，在将用户1集中观看的视频内容(电影、电视节目、音乐视频等)显示为主要信息41的情况下，次要信息42被显示在主显示区域40的外部。此外，在将用于产生车辆10的内部空间11的视频内容(烟火、山景、背景视频(bgv)等)显示为主要信息41的情况下，次要信息42以叠加在主显示区域40上的方式进行显示。可以执行此类过程。

在图7的b所示的示例中，用户1选择的音乐视频被显示为主要信息41。显示音乐视频的主显示区域40被设定在用户1的前方。因此，在用户1的上侧的显示目标表面13上产生剩余区域44。在这种情况下，如图8的b的右侧和中心所示，照亮舞台的光等的图像(扩展图像45)被用作与音乐视频有关的相关信息43。这允许实现诸如扩展舞台的上部空间的视觉效果。

此外，例如，如果用户1倾斜乘客座椅12的靠背，并且用户1的视野4转移至上侧，则主显示区域40会与视野4的转移相关联地转移至上侧。从而可以在显示目标表面13的下侧产生剩余区域44。在这种情况下，例如，舞台前使现场音乐会升温的观众的图像被新显示为相关信息43。

此外，假定用户1在观看音乐视频期间接收到视频呼叫。在这种情况下，如图8的b的左侧所示，用于指示视频呼叫等的图标被显示为次要信息42。以这种方式，可以将各种类型的通知信息显示为次要信息42。

用户1可以通过经由操作图像60等执行预定的输入操作来开启或拒绝视频呼叫。例如，在开启视频呼叫的情况下，另一通信方的视频被选择为主要信息41并被显示在显示目标表面13上。可以执行这样的过程。

在图7的c所示的示例中，烟花视频被显示为主要信息41。此外，乘客座椅12被倾斜并且用户1的视野4被指向倾斜的上侧。因此，将要显示烟花视频的主显示区域40设定在显示目标表面13的上侧，并且相关信息43被显示在显示目标表面13的下侧。

如图8的c的右侧和中心所示，包括例如山景等的扩展图像45被显示为烟花视频的相关信息43。这会扩展烟火视频的下部空间。

在烟花视频中，再现放烟花的声音、爆破烟花的声音等。在这种情况下，例如，声音控制单元23基于用户1的姿势信息来检测用户1的上身的倾斜、头部的位置等。然后根据检测到的用户1的姿势来适当地控制声音输出方向。

例如，执行诸如从用户1的脚周围输出放烟花的声音并从用户1的前方输出爆破烟花的声音之类的控制。这会实现真实感官的声音空间，并且会发挥出色的娱乐性能。

此外，假定用户1在观看烟花视频期间执行操作输入。在这种情况下，如图8的c的左侧所示，包括指示各种类型的选项等的图标的菜单信息被显示为次要信息42。注意，图8的c的左侧所示的显示示例是用户1斜倚靠背，并且用户1的视野指向显示烟花视频的范围的情况下的显示示例。因此，次要信息42被显示在用户1的视野中心的下侧。

注意，在预定的时间段内未检测到用户1执行的操作输入的情况下，可以执行删除次要信息42并且仅显示主要信息41和相关信息43的过程。这允许用户1仅观看扩展的焰花视频并且继续观看体验而无需关心不必要的显示。

除了图7和图8中描述的主要信息、次要信息和相关信息之外，还可以执行各种类型的显示。例如，通过中继广播诸如棒球和足球之类的体育活动等的实况视频可以被显示为主要内容(主要信息41)。在这种情况下，例如，指示诸如玩游戏的玩家的姓名、位置等的附加信息的图像等可以用作相关信息43。以这种方式，相关信息43可以包括与主要信息41有关的附加信息。因此，例如，可以同时显示用户1所请求的信息等，并且可以提供具有高娱乐性能的观看体验。

图9至图16是各自示出次要信息42的显示模式的示例的示意图。注意，图9至图16中的外框指示次显示区域46。在实际的显示中，不显示指示次显示区域46的框等。

图9是用户1的车身信息50、时间信息51和生物信息52的显示模式的示例。在图9中，指示车辆10的速度、剩余的电池电量、到耗尽的距离等的圆形指示器被显示为车身信息。此外，引擎或马达的转数、车辆10的位置或方向等可以被显示为车身信息。

此外，当前时间被显示在图9的中间。此外，还可以显示预期到达目的地的时间、所需运动时间等。在图9的左侧显示用户1的生物信息52。例如，通过生物传感器适当地获取用户1的血压、每分钟的心跳、心跳的定时等，并以图形方式显示。此外，可以显示各种类型的生物信息52，诸如用户1的体温、血液中的氧含量等。

例如，在车辆10的初始启动时显示图9所示的次要信息42(显示目标表面13)。换言之，车辆10启动时默认显示如图9所示的显示。可以执行这样的过程。

图10是地图信息53的显示模式的示例。在图10的左侧和中间显示参照图9描述的车身信息50和时间信息51。此外，在图10的右侧显示包括车辆10的周围的地图、车辆10的当前位置等的导航图像。地图信息的具体配置没有限制。

例如，在车辆10开始行驶的定时显示图10所示的次要信息42。换言之，当车辆10开始行驶时，图9所示的生物信息52被切换为图10所示的地图信息53。可以执行这样的过程。

图11是来自服务的通知信息54的显示模式的示例。例如，如果视频呼叫服务从外部接收到呼叫请求，则如图11所示，显示指示通知信息的图标。此外，可以一起显示指示接收呼叫请求所需的操作(例如，轻敲预定位置的操作)等的消息。

图12是来自车辆10的通知信息54的显示模式的示例。例如，当车辆10到达目的地时，显示指示到达的消息等。以这种方式，在显示目标表面13上适当地显示用户1的通知信息54作为次要内容(次要信息42)。这允许用户1适当地参看必要的通知。

图13是菜单信息55的显示模式的示例。在图13所示的示例中，显示了指示选项的多个图标。中间的图标指示要选择的选项。例如，如果用户1在预定位置执行滑动操作等，则可以改变要选择的选项。

例如，表示选项内容的缩略图等被显示在图标的内部。这可以直观地选择菜单，并且可以提高可操作性。此外，在显示目标表面13上显示指示用于确定选择所需的操作的消息等。这允许用户1在观看显示目标表面13的同时根据消息执行手边操作。

图14是设置列表的显示模式的示例。在设置列表中，可以确认各种设置项目，例如，与显示目标表面13上的显示有关的设置项目、与声音有关的设置项目以及与车辆10的操作有关的设置项目。在图14中，可以确认设置项目的打开/关闭状态、设置数值等。

图15是详细信息的显示模式的示例。例如，与由用户1选择的内容有关的详细信息、车辆10周围的商店等可以被显示为次要信息42。在图15所示的示例中，通过图标(缩略图)和文字显示详细信息。详细信息不限于以上，并且例如，图片、运动图像等可以被显示为详细信息。

图16是内容控制器的显示模式的示例。例如，在再现由用户1选择的视频内容等的情况下，使用内容控制器等执行对视频内容的控制，例如停止/再现、快退/快进等。这样的信息可以被显示为次要内容(次要信息42)。

注意，次要信息42的显示模式不限于图9至图16所示的显示模式。例如，能够将与次要信息42的类型相对应的任何显示模式显示在显示目标表面13上。此外，显示次要信息42的范围(次显示区域46)的尺寸等也没有限制，并且可以根据要显示的次要信息42的数量和显示模式61的形状来适当地设定次显示区域46。

图17是示出显示次要信息42的方法的示例的示意图。在图17中，当显示次要信息42时，使用动画。例如，假定次要信息42的显示位置(次显示区域46)被设定在用户1的视野4的中心的下侧等。例如，次要信息42被显示为从用户1的视野4的外部(屏幕的下侧)朝着所设定的显示位置移动。

此外，次要信息42被显示为随着次要信息42接近显示位置，其颜色变暗(透明度变低)。换言之，显示次要信息42从视野4的外部向显示位置淡入的动画。使用这样的动画允许次要信息42向着用户1的可视范围(最佳视力区域)显示，使得不干扰用户正在观看的视频内容等。

此外，使用逐渐加深颜色等的视觉效果允许自然地显示次要信息42，以便与主要信息41等相协调。此外，在运动中显示次要信息42，从而用户1可以容易注意到次要信息42。

显示次要信息42的方法没有限制。例如，可以使用诸如在右左方向上移动次要信息42的动画。替代地，可以执行淡入/淡出过程而不从所设定的显示位置移动次要信息42。此外，显示次要信息42的任何视觉过程可以被显示。

图18是示出由用户1执行的操作输入的示例的示意图。在图18的左侧，示意性地示出了坐在乘客座位12上的用户1。此外，在图18的右侧，示意性地示出了操作区域14，其中显示了供用户1执行操作输入的操作图像60。

在本实施例中，操作输入控制单元22基于用户1的姿势信息，在用户1周围设定显示操作图像60的操作区域14。这里，“在用户1周围”例如是在用户1的可及范围内，或者在能够进行手动操作输入的范围内等等。

例如，基于由姿势获取单元20读取的乘客座椅12的倾斜角度或用户图像来计算用户1的可及范围等。操作区域14被设定在可以在所计算的范围内投影图像的区域等中。

此外，例如，可以使用预先记录有乘客座椅12的倾斜角度和根据该角度设定的操作区域14的表格等。在这种情况下，从表格中适当地读取与当前倾斜角度相对应的操作区域14。可以执行这样的过程。

在图18所示的示例中，将操作区域14设置在乘客座椅12的扶手中。所设置的操作区域14的信息被输出到操作输入单元34(未示出)，并且操作图像60被操作输入单元34的投影仪投影到操作区域14。因此，用户1可以通过使用显示在手附近的操作图像60来执行预定的操作输入。

显示操作图像60，例如使得用户1的手指或手所处的位置是操作输入的起点。这使得可以轻松地执行右、左、上和下的选择，诸如轻敲之类的确定操作、划动操作、旋转操作等等。

在图18中，右/左选择图标被显示为操作图像60。例如，假设用户1执行触摸左图标的操作。在这种情况下，通过操作输入单元34的感测相机检测到用户1的操作，并且确定选择了左图标。类似地，如果执行了触摸右图标的操作，则确定选择了右图标。以这种方式，用户1可以通过根据操作图像60在手附近执行操作来执行任何操作输入。注意，稍后将参考图21详细描述操作图像60。

此外，在用户1将乘客座椅12的靠背放平的情况下，认为用户难以看见扶手上的手。在这种情况下，操作区域14被设定在用户1可见且在用户1可及范围内的另一区域中(例如，车辆10的内部空间11的侧面等)，并且在所设定的操作区域14中显示操作图像60。这使得即使用户1的姿势改变，用户1也可以轻松地执行操作输入。

图19和图20是各自示出操作区域14的显示位置的示例的示意图。在图19中，将使用四人座车辆10的示例来描述操作区域14的显示位置。如车辆10中，分别设置有四个乘客座椅12a至12d和四个操作输入单元34a至34d(投影仪和感测相机)。

操作输入单元34a和操作输入单元34b被设置在车辆10的右侧和左侧的前支柱(a柱)上。此外，操作输入单元34c和操作输入单元34d被设置在车辆10的右侧和左侧的中央支柱(b柱)上。操作输入单元34的安装位置等没有限定。

在用户1乘坐在车辆10上的情况下(左上图)，操作区域14被设定在用户1周围。例如，通过安装在最靠近用户1所坐的右前乘客座椅12a的右侧前支柱上安装的操作输入单元34a将操作图像60显示在用户1周围。

在两个用户1乘坐在车辆10上的情况下(左下图)，操作区域14被设定在各用户1周围。此时，操作输入单元34a在右前侧在用户1周围显示操作图像60，并且操作输入单元34b在左前侧在用户1周围显示操作图像60。注意，操作输入单元34a(34b)可以在左前侧(右前侧)上在用户1周围显示操作图像60。

在三个用户1乘坐在车辆10上的情况下(右上图)，用户1乘坐在后排乘客座椅12中。例如，在如图19所示的包括相邻的后排乘客座椅12c的长凳式座椅的情况下，可以想到用户1坐在乘客座椅12c和12d之间的中间部分。在这种情况下，通过使用安装在中间支柱上的操作输入单元34c和34d之一，在后方中心处在用户1周围适当地显示操作图像60。

例如，在四个用户1乘坐在车辆10上的情况下(右下图)，操作输入单元34c在右后侧在用户1周围显示操作图像60，并且操作输入单元34d在左后侧在用户1周围显示操作图像60。以这种方式，即使乘坐在车辆10上的乘客的数量、要坐的位置等改变，也可以针对乘坐在车辆10上的每个用户1适当地显示操作图像60等。

图20示出了从侧面看图19所示的车辆10的内部空间11的情况的示意图。注意，在图20中，省略了图19中的操作输入单元34的图示。如图20所示，操作图像60可以被显示在内部空间11的侧表面上，例如门板。此外，对于坐在后排乘客座椅12(后排座椅)上的用户1，还可以在前排乘客座椅12(前排座椅)的后表面部分等上显示操作图像60。

操作图像60的显示位置没有限制。例如，在设置于车辆10的侧表面的窗户具有遮光功能等的情况下，也可以在该窗户上显示操作图像60。此外，可以根据每个用户1的姿势将操作图像60显示在用户1可及范围内的任何位置。

图21是示出操作图像60的显示模式示例的示意图。图21示出了操作图像60的显示模式61a至61f。例如，这些显示模式61a至61f通过操作输入单元34的投影仪根据用户1的姿势在用户1周围适当地投影。注意矩形外框没有被显示。

在显示模式61a中显示右/左选择图标。例如，当选择图13所示的选项时，显示模式61a被显示。在显示模式61b中显示用于右、左、上和下的四个选择图标。此外，在四个选择图标的中央，通过文本图像(进入(enter))显示用于确定选择的确定图标。以这种方式，可以将文本图像显示为操作图像60。

在显示模式61c中显示使用数字文本图像显示的选择图标。这允许直接选择选项。数量等没有限制，并且例如，可以显示表示从0到9的数字的选择图标。这允许输入数值。

在显示模式61d中显示用于调节诸如参数之类的值的调节图标。例如，使用以减号(-)和加号(+)显示的调节图标可以轻松调节诸如视频内容的亮度和音量之类的参数。

在显示模式61e中显示圆形轻推转盘(jogdial)。用户1可以例如通过沿着轻推转盘的圆周方向旋转指尖来轻松调节参数等的值。在显示模式61f中，显示模式61b所示的选择图标和确定图标被显示在圆形轻推转盘的内部。例如，可以显示这样的操作图像。

注意，操作图像60的显示模式不限于图21所示的显示模式61a至61f。例如，与操作输入的类型相对应的任何显示模式都可以用作操作图像60。

上文中，根据本实施例的输出控制单元105在被设置为从前侧向上侧覆盖用户1的周围的显示目标表面13上显示主要信息41和具有与主要信息41不同类型的次要信息42。基于用户1的姿势信息，针对各个显示位置来控制具有不同类型的那些主要信息41和次要信息42。这使得可以在提高用户1的使用感的同时发挥高娱乐性能。

例如，可以想到使用诸如显示器之类的显示装置来观看电视节目、电影等。用户关注例如显示器等的安装位置。这导致用户采取不适当姿势的可能性，并且观看显示器等可能对用户造成负担。

在该实施例中，主要信息41(主要内容)和次要信息42(次要内容)被显示在被设置为覆盖用户1的前侧和上侧的显示目标表面13上。主要信息41和次要信息42的显示位置根据用户1的姿势来适当地调整。

这使得即使用户1倾斜乘客座椅12并且用户1的姿势改变，用户1也可以继续观看必要信息而不需要采取不适当的姿势。因此，用户1可以以轻松的姿势继续观看，并且可以充分提高用户1的使用感(可用性)。

此外，输出控制单元105可以在用户1的前面显示主要信息41，并且在偏离用户1的视野4的中心的位置显示次要信息42。这使得可以轻松检查诸如通知信息54(通知)之类的次要信息，而不妨碍主要内容的再现显示。因此，可以毫不费力地处理各种类型的信息并发挥非常高的可用性。

与主要信息41有关的相关信息43被显示在显示目标表面13上。这使得主要内容可以在整个显示目标表面13上以放大的方式显示。因此，例如，即使用户1将视线从主要内容移开，用户1也具有被包围在娱乐空间中的感觉，这使得可以避免妨碍沉浸在视频中的感觉。以这种方式，可以提供具有高娱乐性能的观看体验。

<其他实施例>

本技术不限于上述实施例，并且可以实现其他各种实施例。

在上述实施例中，次要信息被显示在偏离用户视野中心的位置，但是本技术不限于此。次要信息可以被显示在用户视野的中心。例如，在接收到重要通知等的情况下，通知信息被显示在用户视野的中心。可以执行这样的过程。此外，次要信息的显示位置没有限制，并且可以根据例如次要信息的内容来控制显示位置。

在上述实施例中，安装在车辆中的输出控制单元执行根据本技术的信息处理方法，该信息处理方法包括对显示目标表面等的显示控制。然而，安装在车辆中的输出控制单元和可经由网络等通信的另一计算机可以执行根据本技术的信息处理方法和程序。此外，当安装在车辆中的输出控制单元和另一计算机彼此协同工作时，可以建立根据本技术的内容提供系统。

换言之，根据本技术的信息处理方法和程序不仅可以在由单个计算机配置的计算机系统中执行，而且可以在多个计算机彼此协同操作的计算机系统中执行。注意，在本公开中，系统是指多个组件(例如，装置或模块(部件))的集合，并且是否所有组件都被容纳在同一壳体中并不重要。因此，容纳在分离的壳体中并且经由网络彼此连接的多个装置以及具有容纳在单个壳体中的多个模块的单个装置，二者都是系统。

由计算机系统执行根据本技术的信息处理方法和程序例如包括以下两种情况：获取与用户的姿势有关的姿势信息；对主要信息和次要信息在显示目标表面上的显示位置的控制等由单个计算机执行，以及那些过程由不同计算机执行。此外，由预定计算机执行各个过程包括使另一计算机执行那些过程中的一些或全部并获取其结果。

换言之，根据本技术的信息处理方法和程序也可以应用于云计算配置，其中一个功能由多个装置经由网络共享并协作处理。

在上述实施例中，已经在使用车辆作为移动物体的示例的情况下给出了说明。然而，本技术可应用于任何类型的移动物体等。根据本公开的技术可以应用于各种产品。例如，根据本公开的技术可以实现为安装在诸如车辆、电动车辆、混合电动车辆、个人运输工具、飞机、轮船、建筑机械、农业机械(拖拉机)等等的任何种类的移动物体中的装置。

此外，根据本公开的技术不限于安装在移动物体中。例如，本技术可以应用于在娱乐设施和教育设施中使用的显示系统等。此外，还可以将显示系统建立为用于家庭使用的家庭娱乐系统。此外，本技术可应用于任何显示系统。

在根据上述本技术的特征部分中，可以组合至少两个特征部分。也就是说，各实施例中描述的各种特征部可以任意组合，而不管是哪些实施例。此外，上述各种效果仅是示例并且没有限制，并且可以发挥其他效果。

注意，本技术也可以如下配置。

(1)一种信息处理装置，包括：

获取单元，其获取与用户的姿势有关的姿势信息；以及

显示控制单元，其基于所获取的姿势信息来控制第一信息和第二信息在显示屏上的显示位置，所述第二信息与所述第一信息的种类不同，所述显示屏被设置为至少从前侧向上侧覆盖用户的周围。

(2)根据(1)所述的信息处理装置，其中

所述第一信息包括用户选择的视频内容或外部的视频中的至少一个。

(3)根据(1)或(2)所述的信息处理装置，其中

所述第二信息包括向用户的通知信息、菜单信息或外部环境信息中的至少一个。

(4)根据(1)到(3)中的任一项所述的信息处理装置，其中

所述显示控制单元以用户的视野中心为基准来设定所述第一信息的显示位置。

(5)根据(4)所述的信息处理装置，其中

所述显示控制单元以用户的视野中心为基准来设定显示所述第一信息的主显示区域。

(6)根据(5)所述的信息处理装置，其中

所述显示控制单元以所述主显示区域为基准来设定所述第二信息的显示位置。

(7)根据(5)或(6)所述的信息处理装置，其中

所述显示控制单元能够在所述主显示区域的外围显示所述第二信息。

(8)根据(5)到(7)中的任一项所述的信息处理装置，其中

所述显示控制单元能够以叠加在所述主显示区域上的方式显示所述第二信息。

(9)根据(1)到(8)中的任一项所述的信息处理装置，其中

所述姿势信息包括用户使用的座椅的倾斜角度或通过捕获用户的图像而获得的用户图像中的至少一个。

(10)根据(9)所述的信息处理装置，其中

所述姿势信息包括与用户的视野有关的视野信息，所述视野是基于所述用户图像检测的。

(11)根据(1)到(10)中的任一项所述的信息处理装置，其中

所述显示控制单元能够控制与所述第一信息和所述第二信息中的每一个的种类不同的第三信息的显示。

(12)根据(11)所述的信息处理装置，其中

所述显示控制单元在所述显示屏的除显示所述第一信息的主显示区域之外的区域中显示所述第三信息。

(13)根据(12)所述的信息处理装置，其中

所述第三信息包括扩展由在所述主显示区域中显示的所述第一信息表示的空间的扩展图像或与所述第一信息有关的附加信息中的至少一个。

(14)根据(1)到(13)中的任一项所述的信息处理装置，其中

所述显示控制单元能够控制用于用户执行操作输入的操作图像的显示位置。

(15)根据(14)所述的信息处理装置，其中

所述显示控制单元基于所述姿势信息来设定要在用户周围显示操作图像的操作区域。

(16)根据(1)到(15)中的任一项所述的信息处理装置，还包括

声音控制单元，其基于所述姿势信息来控制声音输出方向。

(17)一种由计算机系统执行的信息处理方法，所述信息处理方法包括：

获取与用户的姿势有关的姿势信息；以及

基于所获取的姿势信息，控制第一信息和第二信息在显示屏上的显示位置，所述第二信息与所述第一信息的种类不同，所述显示屏被设置为至少从前侧向上侧覆盖用户的周围。

(18)一种使计算机系统执行以下步骤的程序：

获取与用户的姿势有关的姿势信息；以及

基于所获取的姿势信息，控制第一信息和第二信息在显示屏上的显示位置，所述第二信息与所述第一信息的种类不同，所述显示屏被设置为至少从前侧向上侧覆盖用户的周围。

(19)一种显示系统，包括：

显示装置；

显示屏，被设置为至少从前侧向上侧覆盖用户的周围；

获取单元，其获取与用户的姿势有关的姿势信息；以及

显示控制单元，其基于所获取的姿势信息，控制第一信息和第二信息的显示位置，所述第二信息与所述第一信息的种类不同，所述第一信息和所述第二信息由所述显示装置显示在所述显示屏上。

(20)一种能够转移用户的移动物体，所述移动物体包括：

显示装置；

显示屏，被设置为至少从前侧向上侧覆盖用户的周围；

获取单元，其获取与用户的姿势有关的姿势信息；以及

显示控制单元，其基于所获取的姿势信息，控制第一信息和第二信息的显示位置，所述第二信息与所述第一信息的种类不同，所述第一信息和所述第二信息由所述显示装置显示在所述显示屏上。

附图标记列表

1用户

4视野

5中心注视方向

10车辆

12乘客座椅

13显示目标表面

20姿势获取单元

21显示信息控制单元

22操作输入控制单元

23声音控制单元

33显示装置

40主显示区域

41主要信息

42次要信息

43相关信息

45扩展图像

50车身信息

54通知信息

55菜单信息

60操作图像

100车辆控制系统

105输出控制单元