图像处理装置、显示系统、图像处理方法和记录介质与流程

1.本公开涉及图像处理装置、显示系统、图像处理方法和记录介质。


背景技术：

2.已知一种用于在诸如安装在车辆中顶棚上的有机el片之类的屏幕上显示内容的技术。作为示例，已知一种用于在屏幕上显示从当前位置看到的天空视图的技术。另外，作为另一示例，已知一种用于在屏幕上显示通往目的地的路线所沿着的一条道路和该一条道路上的位置的技术。
3.引文列表
4.专利文献
5.专利文献1：日本专利申请特许公开no.2002-328624


技术实现要素：

6.本发明要解决的问题
7.然而，上述常规技术具有可能不能显示对乘员来说舒适的画面的问题。例如，已知当乘员操作车辆中的画面时乘员容易晕车。
8.因此，本公开提出了能够显示对乘员来说舒适的画面的图像处理装置、显示系统、图像处理方法和记录介质。
9.问题的解决方案
10.为了解决上述问题，根据本公开的一个方面的图像处理装置包括：创建单元，创建属于多种模式之一的画面作为要显示在设置在车辆中的屏幕上的应用的画面；以及切换单元，在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下在与车辆行进方向平行或垂直的第一方向上移动切换前和切换后的画面，并且在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下在与第一方向垂直的第二方向上移动切换前和切换后的画面。
附图说明
11.图1是图示根据第一实施例的图像处理装置的配置的示例的图。
12.图2是图示屏幕的示例的图(1)。
13.图3是图示屏幕的示例的图(2)。
14.图4是用于解释模式和面板的图。
15.图5是用于解释行进方向的图。
16.图6是用于解释画面过渡的动画的图(1)。
17.图7是用于解释画面过渡的动画的图(2)。
18.图8是用于解释画面过渡的动画的图(3)。
19.图9是用于解释模式之间的画面过渡的动画的图。
20.图10是用于解释一种模式下的画面过渡的动画的图。
21.图11是图示根据第一实施例的图像处理装置的处理流程的流程图。
22.图12是图示其中显示路线的画面的示例的图。
23.图13是图示其中显示目的地和乘员的图标的画面的示例的图。
24.图14是图示目的地添加处理的流程的流程图。
25.图15是图示其中显示播放列表的画面的示例的图。
26.图16是图示其中显示要被再现的视频的画面的示例的图。
27.图17是图示屏幕之间的画面的移动的图。
28.图18是图示移动之后的画面的示例的图。
29.图19是图示车辆控制系统的示意性配置的示例的框图。
30.图20是描绘成像部的安装位置的示例的图(1)。
31.图21是描绘成像部的安装位置的示例的图(2)。
32.图22是图示网络系统的配置的示例的图。
具体实施方式
33.下面将参考附图对本公开的优选实施例进行详细描述。注意的是，在本说明书和附图中，具有基本相同的功能配置的组件用相同的附图标记表示，并且将省略其重复描述。
34.此外，将按以下次序给出描述。
35.1.第一实施例
36.2.对移动体的应用的示例
37.[1.第一实施例]
[0038]
图1是图示根据第一实施例的图像处理装置的配置的示例的图。图1中所示的图像处理装置10是用于执行与在设置在具有自动化驾驶功能的车辆中的屏幕上显示内容相关的处理的装置。
[0039]
输入单元11是接收车辆的行进状态、乘员的状况、乘员的操作等的输入的输入设备。输入单元11包括各种传感器，诸如图像传感器、深度传感器和触摸传感器。图像传感器是获取二维图像的传感器，诸如可见光相机或红外相机。深度传感器是获取包括深度的三维信息的传感器，诸如立体相机或能够执行飞行时间方法、结构光方法等的传感器。输入单元11接收通过触摸显示器的操作、通过语音的操作、使用骨架场的手势操作等作为乘员的操作。
[0040]
通信单元12是用于与另一设备执行数据通信的接口。通信单元12例如通过网络接口卡(nic)等来实现。
[0041]
信息处理单元13执行与显示内容相关的每个处理。信息处理单元13例如由包括中央处理单元(cpu)的计算机实现。信息处理单元13基于从输入单元11接收到的信息执行用于显示被包括在内容中的图像的处理。信息处理单元13控制在用于显示应用的窗口等上绘制多内容并且递送诸如对每个内容的触摸之类的事件。信息处理单元13执行与一般os的控制层对应的处理。
[0042]
图像显示装置40是显示被包括在内容中的图像的装置。图像显示装置40可以包括投影仪和投影仪屏幕。可替代地，图像显示装置40也可以是诸如液晶显示器之类的显示器。
在下文中，将投影仪屏幕、液晶显示器等实际显示图像的表面简称为屏幕。
[0043]
图2是图示屏幕的示例的图(1)。如图2中所示，图像显示装置40可以包括投影仪20和投影仪屏幕30。如图2中所示，投影仪20从车辆后部向每个屏幕上投影图像。投影仪20可以能够根据屏幕形状改变图像投影方向和图像投影高度。投影仪20可以被安装在后座的后部或者可以被附接到后座的后部的顶棚。可替代地，投影仪20可以设置在驾驶员座椅或驾驶员座椅旁边的乘员座椅的头枕上。
[0044]
图3是图示屏幕的示例的图(2)。如图3中所示，图像显示装置40可以是设置在车辆的顶棚上的液晶显示器31。
[0045]
声音输出装置50是输出被包括在内容中的声音的设备。例如，声音输出装置50是扬声器。
[0046]
显示输出控制单元14创建要显示的图像和要输出的声音。显示输出控制单元14例如由包括cpu的计算机来实现。如图1中所示，显示输出控制单元14包括内容获取单元141、图像/声音创建单元142和输入信息累积单元143。
[0047]
内容获取单元141获取内容。内容获取单元141可以从预定存储设备获取内容，或者可以经由网络从外部设备或另一车辆获取内容。
[0048]
图像/声音创建单元142创建属于多种模式之一的画面作为要显示在设置在车辆中的屏幕上的应用的画面。此外，在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下，图像/声音创建单元142在与车辆行进方向平行或垂直的第一方向上移动切换前的画面和切换后的画面。另一方面，在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下，图像/声音创建单元142在与第一方向垂直的第二方向上移动切换前的画面和切换后的画面。
[0049]
输入信息累积单元143是累积由乘员输入的信息的存储设备。例如，输入信息累积单元143累积稍后将描述的播放列表信息等。
[0050]
属于每种模式的画面将被称为面板。将参考图4描述模式和面板。图4是用于解释模式和面板的图。如图4中所示，应用具有例如敞篷汽车模式和剧院模式。
[0051]
在敞篷汽车模式下，通过捕获车辆的上侧而获得的图像被显示为背景，并且每个内容的图像被显示在背景上。例如，在敞篷汽车模式下，在外侧风景(view)面板上仅显示通过捕获车辆的上侧而获得的图像。此外，例如，通过捕获车辆的上侧而获得的图像上的汽车导航图像被显示在敞篷汽车模式下的汽车导航面板上。
[0052]
在剧院模式下，显示主要用于娱乐的内容的图像。作为示例，夏威夷的风景被显示在剧院模式下的夏威夷面板上。此外，作为另一示例，烟花的视频被显示在剧院模式下的烟花面板上。可替代地，电影、电视节目、由另一车辆捕获的图像等可以被显示在剧院模式下的面板上。
[0053]
将参考图5描述行进方向。图5是用于解释行进方向的图。行进方向是车辆向前移动的方向。然而，在屏幕沿着挡风玻璃部署的情况下，图5中的箭头所指示的方向将被称为行进方向。
[0054]
图6是用于解释画面过渡的动画的图(1)。例如，在顶棚的屏幕上显示图6的画面。在这种情况下，在图6中，屏幕的上部比屏幕的下部更靠近车辆的后方定位(屏幕的下部比屏幕的上部更靠近车辆的前方定位)。在这种情况下，画面在与行进方向平行的方向上的移
动是指画面在图6中箭头所指示的方向上以滚动方式移动。
[0055]
在此，在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下，图像/声音创建单元142在与车辆行进方向垂直的第一方向上移动切换前的画面和切换后的画面。另一方面，在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下，图像/声音创建单元142在与车辆行进方向平行的第二方向上移动切换前的画面和切换后的画面。
[0056]
图7是用于解释画面过渡的动画的图(2)。图7中的箭头所指示的方向是与车辆行进方向垂直的方向。图8是用于解释画面过渡的动画的图(3)。图8中的箭头所指示的方向是与车辆行进方向平行的方向。
[0057]
在此，关于模式之间画面的切换，由于乘员以要查看另一画面的期望模式为目标切换画面，因此画面过渡的数量可以少。另一方面，关于模式中画面的切换，即，当面板以相同模式被切换时(如电视频道快速变换)，会发生大量的画面过渡。
[0058]
此外，例如，在画面在与行进方向垂直的方向上被移动的情况下，由于可以维持画面的下部是地面而画面的上部是天空的模型，因此即使频繁发生画面的切换，乘员也不太容易晕车。另一方面，在画面在与行进方向平行的方向上被移动的情况下，乘员更容易晕车。
[0059]
因此，在本实施例中，图像处理装置10在与行进方向平行的方向上移动画面以用于模式之间画面的过渡，在此期间画面切换频率可以低。相反，图像处理装置10在与行进方向垂直的方向上移动画面以用于一种模式下的画面过渡，在此期间画面切换频率可以高。因此，可以抑制乘员晕车的发生。
[0060]
图9是用于解释模式之间的画面过渡的动画的图。首先，乘员通过手势指出面板的下部的黑点(101v)。然后，该点水平扩展，并且仪表累积(102v)。当仪表满时，确定选择面板(103v)，并且面板变小(104v)。然后，就好像切换后的面板向上推动切换前的面板一样，每个面板(以滚动方式)从下侧向上侧移动(105v)。然后，模式之间面板的切换完成(106v)。注意的是，用于面板切换输入的黑点可以设置在面板的上部处。在这种情况下，如果指出位于面板的上部的黑点，那么面板(以滚动方式)从上侧向下侧移动。
[0061]
图10是用于解释一种模式下的画面过渡的动画的图。首先，乘员通过手势指出面板的左端部分处的黑点(101p)。然后，点垂直扩展，并且仪表累积(102p)。当仪表满时(103p)，面板变小(104p)。然后，就好像切换后的面板向右推动切换前的面板一样，每个面板从左侧(以滚动方式)向右侧移动(105p)。然后，模式中面板的切换完成(106p)。注意的是，在通过手势指出位于面板的右部的黑点的情况下，面板从右侧(以滚动方式)向左侧移动。
[0062]
在图9的104v和图10的104p中，图像/声音创建单元142在被移动时以缩小的尺寸显示切换前和切换后的画面。因此，相对于整个画面的显示量减少，并且乘员感觉好像视野被加宽，因此乘员不太容易晕车。此外，此时图像/声音创建单元142可以以降低的亮度移动切换前和切换后的画面，从而进一步防止乘员晕车。
[0063]
图11是图示根据第一实施例的图像处理装置的处理流程的流程图。如图11中所示，图像处理装置10在不执行面板切换操作的情况下处于待机状态(步骤s101，否)。
[0064]
在已输入面板切换操作的情况下(步骤s101，是)，图像处理装置10缩小面板的显
示(步骤s102)。然后，图像处理装置10降低面板的显示的亮度(步骤s103)。
[0065]
在此，图像处理装置10确定面板是否在模式之间被切换(步骤s104)。在面板在模式之间被切换的情况下(步骤s104，是)，图像处理装置10垂直地(在与行进方向平行的方向上)滚动切换前和切换后的面板(步骤s106)。在面板没有在模式之间被切换的情况下(步骤s104，否)，图像处理装置10水平地(在与行进方向垂直的方向上)滚动切换前和切换后的面板(步骤s105)。
[0066]
将描述用于每个面板的图像处理方法。图像/声音创建单元142创建在其下侧示出目的地并且在其上侧示出当前地点的画面，作为示出要显示在设置在车辆的顶棚的屏幕上的从当前地点到目的地的路线的画面。
[0067]
在通常的汽车导航系统中，目的地在画面的上侧示出，而当前地点在画面的下侧示出。相反，如图12中所示，在本实施例中，在顶棚的屏幕上显示路线的情况下，图像处理装置10在画面的上侧显示当前地点并在画面的下侧显示目的地以使行进方向与路线的行进方向相匹配。
[0068]
图12是图示其中显示路线的画面的示例的图。如图12中所示，由于顶棚上的屏幕大，因此在其上显示的画面占据了乘员的大部分视野。因此，当画面上的gui大幅移动时，乘员容易晕车。为了避免这种情况，图像处理装置10将路线简化为以直线示出，其中当前地点和目的地被固定。而且，图像处理装置10可以通过在当前地点和目的地之间移动诸如观光点或服务区之类的点来根据距离识别当前行进位置。在图12的示例中，在通过δδ公园之后，图像处理装置10从路线中删除与其对应的图标。
[0069]
显示在顶棚的屏幕上的画面可以由多个乘员操作。例如，多个乘员中的每个可以任意地将目的地添加到汽车导航面板。在这种情况下，如图13中所示，图像/声音创建单元142创建显示从当前地点到目的地的路线、指示目的地类别的图标和指示已设置目的地的乘员的图标的画面。对于被添加到汽车导航面板的每个目的地，图像处理装置10显示已添加目的地的乘员的图标。图13是图示其中显示目的地和乘员的图标的画面的示例的图。
[0070]
将描述图像处理装置10的目的地添加处理的流程。图14是图示目的地添加处理的流程的流程图。如图14中所示，首先，图像处理装置10待机，直到输入目的地添加操作为止(步骤s201，否)。
[0071]
当输入目的地添加操作时(步骤s201，是)，图像处理装置10指定已输入该操作的乘员(步骤s202)。然后，图像处理装置10指定已输入该操作的乘员(步骤s202)。另外，图像处理装置10确定所添加的目的地的类别(步骤s203)。然后，图像处理装置10在已输入操作的乘员的图标旁边显示目的地的图标。
[0072]
目的地的类别主要被归类为中途停留和最终目的地。归类为中途停留的类别包括上厕所休息、用餐休息等。上厕所休息类别中包括的目的地的示例包括服务区和停车区。此外，归类为用餐休息的类别的示例包括餐馆和便利店。
[0073]
此外，归类为最终目的地的类别包括购物、公共设施和观光点。购物类别中包括的目的地的示例包括购物中心和超市。此外，公共设施类别中包括的目的地的示例包括图书馆、市政厅、学校、火车站、路边站和公共汽车站。此外，观光点类别中包括的目的地的示例包括游乐园、博物馆和动物园。
[0074]
例如，在乘员添加便利店作为目的地的情况下，将乘员的图标和用餐休息类别的
图标添加到画面。因此，有可能向驾驶员等通知例如后座的儿童想要上厕所休息或用餐休息的情况。此外，例如，在多个人使用一辆车进行拼车(一起乘车)的情况下，每个乘员可以容易地向另一乘员通知期望的目的地。
[0075]
此外，图像/声音创建单元142还创建用于再现预先映射到当前地点的音乐的声音。图15是图示其中显示播放列表的画面的示例的图。如图15中所示，可以在路线上示出预先向其已映射播放列表的位置。当车辆接近播放列表已被映射到的位置时，图像处理装置10输出所创建的音乐。
[0076]
在此，自动化驾驶控制装置60是在自动化驾驶期间控制速度等的装置。自动化驾驶控制装置60是例如发动机控制单元(ecu)。另外，路线控制装置70是确定自动化驾驶期间的路线的装置。自动化驾驶控制装置60和路线控制装置70可以根据显示由图像/声音创建单元142创建的画面的时间(内容再现时间)来改变到目的地的路线和车辆的行进速度。
[0077]
图16是图示其中显示要被再现的视频的画面的示例的图。例如，如图16中所示，自动化驾驶控制装置60和路线控制装置70控制路线或行进速度，以在再现60分钟视频和30分钟视频之后到达目的地。
[0078]
图像处理装置10可以根据乘员的操作在屏幕之间移动画面。例如，图像处理装置10可以在顶棚的屏幕上显示在汽车导航系统上显示的路线。
[0079]
此时，在输入用于在设置在车辆的顶棚的屏幕上显示在车辆的汽车导航系统上显示的第一画面的操作的情况下(其中从当前地点到目的地的路线以在其上侧示出目的地并且在其下侧示出当前地点而被显示)，图像/声音创建单元142创建在其下侧示出目的地并且在其上侧示出当前地点的第二画面，作为要显示在设置在顶棚的屏幕上的画面。
[0080]
图17是图示屏幕之间的画面的移动的图。汽车导航系统上显示的路线在图17的左侧示出。此外，顶棚的屏幕上显示的路线在图17的右侧示出。如图17中所示，垂直位置关系(例如，在“幕张”和“武石”之间)在汽车导航系统和顶棚的屏幕之间被颠倒。图18是图示移动之后的画面的示例的图。如图18中所示，由于在顶棚的屏幕上目的地被显示在前方，因此乘员可以直观地掌握路线。
[0081]
(第一实施例的效果)
[0082]
如迄今为止所描述的，图像处理装置包括：创建单元(实施例中的图像/声音创建单元142)，其创建属于多种模式之一的画面作为要显示在设置在车辆中的屏幕上的应用的画面；以及切换单元(实施例中的图像/声音创建单元142)，其在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下在与车辆行进方向平行或垂直的第一方向上移动切换前和切换后的画面，并且在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下在与第一方向垂直的第二方向上移动切换前和切换后的画面。例如，图像处理装置可以取决于模式之间的画面切换的频率和一种模式中的画面切换的频率来确定画面移动方向。因此，根据第一实施例，有可能显示对乘员来说舒适的画面。
[0083]
在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下，切换单元在与车辆行进方向垂直的第一方向上移动切换前和切换后的画面，并且在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下，切换单元在与车辆行进方向平行的第二方向上移动切换前和切换后的画面。
[0084]
切换单元在被移动时以缩小的尺寸显示切换前和切换后的画面。因此，根据第一实施例，有可能使操作画面的乘员不太容易晕车。
[0085]
切换单元以降低的亮度移动切换前和切换后的画面。因此，根据第一实施例，有可能使操作画面的乘员不太容易晕车。
[0086]
创建单元创建在其下侧示出目的地并且在其上侧示出当前地点的画面，作为要显示在设置在车辆的顶棚的屏幕上的示出从当前地点到目的地的路线的画面。因此，根据第一实施例，有可能以使乘员容易直观地理解信息的方式显示信息。
[0087]
在输入用于在设置在车辆的顶棚的屏幕上显示在车辆的汽车导航系统上显示的第一画面的操作的情况下(其中从当前地点到目的地的路线以在其上侧示出目的地并且在其下侧示出当前地点而被显示)，创建单元创建在其下侧示出目的地并且在其上侧示出当前地点的第二画面，作为要显示在设置在顶棚的屏幕上的画面。因此，根据第一实施例，有可能配合屏幕以使乘员容易直观地理解信息的方式显示信息。
[0088]
创建单元创建显示从当前地点到目的地的路线、指示目的地的类别的图标和指示已设置目的地的乘员的图标的画面。因此，根据第一实施例，特别是在拼车等期间，可以容易地将乘员的期望通知给另一乘员。
[0089]
创建单元还创建用于再现预先映射到当前地点的音乐的声音。因此，根据第一实施例，乘员可以聆听适合该地点的音乐。
[0090]
图像处理装置还包括行进控制单元，其根据显示由创建单元创建的画面的时间改变到目的地的路线和车辆的行进速度。因此，根据第一实施例，乘员可以观看视频直到视频的结束。例如，根据第一实施例，在旅行等期间，乘员可以预先学习关于乘员要访问的地方的信息。
[0091]
[2.对移动体的应用的示例]
[0092]
根据本公开的技术(本技术)可以应用于各种产品。例如，根据本公开的技术可以被实现为安装在任何类型的移动体(诸如车辆、电动车辆、混合动力电动车辆、摩托车、自行车、个人移动设备、飞机、无人机、船或机器人)上的设备。
[0093]
图19是描绘作为可以对其应用根据本公开的实施例的技术的移动体控制系统的示例的车辆控制系统的示意性配置的示例的框图。
[0094]
车辆控制系统12000包括经由通信网络12001彼此连接的多个电子控制单元。在图19中描绘的示例中，车辆控制系统12000包括驾驶系统控制单元12010、车身系统控制单元12020、车外信息检测单元12030、车内信息检测单元12040和集成控制单元12050。此外，微型计算机12051、声音/图像输出部12052和车载网络接口(i/f)12053被图示为集成控制单元12050的功能配置。
[0095]
驾驶系统控制单元12010根据各种程序控制与车辆的驾驶系统相关的设备的操作。例如，驾驶系统控制单元12010用作用于生成车辆的驱动力的驱动力生成设备(诸如内燃机、驱动电动机等)、用于向车轮传递驱动力的驱动力传递机构、用于调整车辆的转向角的转向机构、用于生成车辆的制动力的制动设备等的控制设备。
[0096]
车身系统控制单元12020根据各种程序控制装备在车身上的各种设备的操作。例如，车身系统控制单元12020用作用于无钥匙进入系统、智能钥匙系统、动力车窗设备，或各种灯(诸如前照灯、倒车灯、刹车灯、转向灯、雾灯等)的控制设备。在这种情况下，作为替代
各种开关的按键或信号的从移动设备传输的无线电波可以被输入到车身系统控制单元12020。车身系统控制单元12020接收这些输入的无线电波或信号，并控制车辆的门锁设备、动力车窗设备、灯等。
[0097]
车外信息检测单元12030检测关于包括车辆控制系统12000的车辆的外部的信息。例如，车外信息检测单元12030与成像部12031连接。车外信息检测单元12030使成像部12031对车辆的外部的图像成像，并接收经成像的图像。基于接收到的图像，车外信息检测单元12030可以执行检测诸如人、车辆、障碍物、标志、路面上的字符等物体的处理，或者检测到其的距离的处理。
[0098]
成像部12031是接收光并输出与光的受光量对应的电信号的光学传感器。成像部12031可以将电信号作为图像输出，或者可以将电信号作为关于测得的距离的信息输出。此外，由成像部12031接收到的光可以是可见光，或者可以是诸如红外线等不可见光。
[0099]
车内信息检测单元12040检测关于车辆的内部的信息。车内信息检测单元12040例如与检测驾驶员的状态的驾驶员状态检测部12041连接。驾驶员状态检测部12041例如包括对驾驶员进行成像的相机。基于从驾驶员状态检测部12041输入的检测信息，车内信息检测单元12040可以计算驾驶员的疲劳程度或驾驶员的注意力集中程度，或者可以确定驾驶员是否在打瞌睡。
[0100]
微型计算机12051可以基于由车外信息检测单元12030或车内信息检测单元12040获得的关于车辆的内部或外部的信息来计算用于驱动力生成设备、转向机构或制动设备的控制目标值，并向驾驶系统控制单元12010输出控制命令。例如，微型计算机12051可以执行旨在实现高级驾驶员辅助系统(adas)的功能的协同控制，其功能包括车辆的碰撞避免或冲击缓和、基于跟随距离的跟随驾驶、车速维持驾驶、车辆碰撞的警告、车辆偏离车道的警告等。
[0101]
此外，微型计算机12051可以基于由车外信息检测单元12030或车内信息检测单元12040获得的关于车辆的外部或内部的信息，通过控制驱动力生成设备、转向机构、制动设备等来执行旨在使车辆自主行进而无需依赖驾驶员的操作的自动化驾驶等的协同控制。
[0102]
此外，微型计算机12051可以基于由车外信息检测单元12030获得的关于车辆的外部的信息向车身系统控制单元12020输出控制指令。例如，微型计算机12051可以例如根据由车外信息检测单元12030检测到的前车或迎面而来的车辆的位置通过控制前照灯以从远光灯改变为近光灯来执行旨在防止眩光的协同控制。
[0103]
声音/图像输出部12052将声音或图像中的至少一种的输出信号传输到能够视觉地或听觉地向车辆的乘员或车辆的外部通知信息的输出设备。在图19的示例中，音频扬声器12061、显示部12062和仪表面板12063被示为输出设备。例如，显示部12062可以包括车载显示器或平视显示器中的至少一种。
[0104]
图20是描绘成像部的安装位置的示例的图(1)。
[0105]
在图20中，成像部12031包括成像部12101、12102、12103、12104、12105和12106。
[0106]
成像部12101、12102、12103、12104、12105、12106例如部署在车辆12100的前车头、侧视镜、后保险杠、后门上的位置，以及车厢内的挡风玻璃的上侧和车顶的位置等等。设置在前车头的成像部12101和设置在车厢内的挡风玻璃的上侧的成像部12105主要获得车辆12100的前方的图像。设置在侧视镜的成像部12102、12103主要获得车辆12100的侧面的图
像。设置在后保险杠或后门的成像部12104主要获得车辆12100的后方的图像。设置在车厢内挡风玻璃的上侧的成像部12105主要被用于检测前车、行人、障碍物、信号、交通标志、车道等。设置在车顶的成像部12106主要捕获上空的图像。
[0107]
顺便提及，图20描绘了成像部12101至12104的成像范围的示例。成像范围12111表示设置在前车头的成像部12101的成像范围。成像范围12112和12113分别表示设置在侧视镜的成像部12102和12103的成像范围。成像范围12114表示设置在后保险杠或后门的成像部12104的成像范围。例如，通过叠加由成像部12101至12104成像的图像数据，获得从上方观察的车辆12100的俯瞰图像。
[0108]
成像部12101至12104中的至少一个可以具有获得距离信息的功能。例如，成像部12101至12104中的至少一个可以是由多个成像元件构成的立体相机，或者可以是具有用于相位差检测的像素的成像元件。
[0109]
例如，微型计算机12051可以基于从成像部12101至12104获得的距离信息来确定到成像范围12111到12114内的每个三维物体的距离以及该距离的时间变化(相对于车辆12100的相对速度)，并从而提取最近的三维物体作为前车，特别是存在于车辆12100的行进路径上并以预定速度(例如，等于或大于0公里/小时)在与车辆12100基本相同的方向上行进的物体。另外，微型计算机12051可以预先设置要在前车前方维持的跟随距离，并执行自动制动控制(包括跟随停止控制)、自动加速控制(包括跟随起动控制)等。因此有可能执行旨在使车辆自主行进而不依赖于驾驶员的操作的自动化驾驶等的协同控制。
[0110]
例如，微型计算机12051可以基于从成像部12101至12104获得的距离信息将关于三维物体的三维物体数据归类为两轮车、标准尺寸车辆、大型车辆、行人、电线杆和其它三维物体的三维物体数据，提取已归类的三维物体数据，并将提取的三维物体数据用于障碍物的自动避开。例如，微型计算机12051将车辆12100周围的障碍物识别为车辆12100的驾驶员可以视觉地识别的障碍物和车辆12100的驾驶员难以视觉地识别的障碍物。然后，微型计算机12051确定指示与每个障碍物碰撞的风险的碰撞风险。在碰撞风险等于或高于设定值并且因此有碰撞的可能的状况下，微型计算机12051经由音频扬声器12061或显示部12062向驾驶员输出警告，并经由驾驶系统控制单元12010执行强制减速或避让转向。微型计算机12051由此可以辅助驾驶以避免碰撞。
[0111]
成像部12101至12104中的至少一个可以是检测红外线的红外线相机。例如，微型计算机12051可以通过确定在成像部12101至12104的成像的图像中是否存在行人来识别行人。行人的这种识别例如通过提取作为红外线相机的成像部12101至12104的成像的图像中的特征点的过程和通过对表示物体的轮廓的一系列特征点执行模式匹配处理来确定是否是行人的过程来执行。当微型计算机12051确定在成像部12101至12104的成像的图像中存在行人并因此识别出行人时，声音/图像输出部12052控制显示部12062以显示用于强调的方形轮廓线以便被叠加在已识别出的行人上。另外，声音/图像输出部12052还可以控制显示部12062，使得表示行人的图标等被显示在期望的位置。
[0112]
图21是描绘成像部的安装位置的示例的图(2)。如图21中所示，成像部12106捕获车辆上方的图像。成像部12106可以是广角相机或全方位相机。
[0113]
上面已经描述了可以对其应用根据本公开的技术的车辆控制系统的示例。根据本公开的技术可以应用于上面描述的配置中的微型计算机12051。具体而言，图像处理装置10
的显示输出控制单元14的处理由微型计算机12051实现。此外，参考图4等描述的车辆上方的图像可以由成像部12106捕获。
[0114]
其上安装有图像处理装置的车辆可以连接到网络。图22是图示网络系统的配置的示例的图。如图22中所示，包括图像处理装置的车辆100v可以被连接到另一车辆110v以用于数据通信。此外，车辆100v可以经由网络n被连接到服务器100s以用于通信。网络n例如是因特网。在这种情况下，设置在车辆100v中的图像处理装置可以从服务器100s或车辆110v获取内容。
[0115]
注意的是，包括图1的每个装置的系统可以作为一个设备被实现。即，作为一个实施例，可以实现除了与图像处理装置10的功能类似的功能之外还具有与图像显示装置40、声音输出装置50、自动化驾驶控制装置60和路线控制装置70中的至少一个类似的功能的设备。例如，具有与图像处理装置10、图像显示装置40、声音输出装置50、自动化驾驶控制装置60和路线控制装置70的所有功能类似的功能的图像处理装置可以提供等同于包括图1中的所有装置的系统的处理的处理。
[0116]
此外，也可以将图1中的信息处理单元13和显示输出控制单元14的功能设置在车辆外部的网络上的服务器中，并且车辆与服务器可以彼此通信。在这种情况下，图像显示装置40、声音输出装置50、自动化驾驶控制装置60和路线控制装置70可以由服务器控制。
[0117]
注意的是，本技术还可以具有以下配置。
[0118]
(1)
[0119]
一种图像处理装置，包括：
[0120]
创建单元，创建属于多种模式之一的画面作为要显示在设置在车辆中的屏幕上的应用的画面；以及
[0121]
切换单元，在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下在与车辆行进方向平行或垂直的第一方向上移动切换前和切换后的画面，并且在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下在与第一方向垂直的第二方向上移动切换前和切换后的画面。
[0122]
(2)
[0123]
根据(1)所述的图像处理装置，其中，在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下，切换单元在与车辆行进方向垂直的第一方向上移动切换前和切换后的画面，并且在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下，切换单元在与车辆行进方向平行的第二方向上移动切换前和切换后的画面。
[0124]
(3)
[0125]
根据(1)或(2)所述的图像处理装置，其中切换单元在被移动时以缩小的尺寸显示切换前和切换后的画面。
[0126]
(4)
[0127]
根据(1)至(3)中的任一项所述的图像处理装置，其中切换单元以降低的亮度移动切换前和切换后的画面。
[0128]
(5)
[0129]
根据(1)至(4)中的任一项所述的图像处理装置，其中创建单元创建其中在其下侧
示出目的地并且在其上侧示出当前地点的画面，作为要显示在设置在车辆的顶棚的屏幕上的从当前地点到目的地的路线的画面。
[0130]
(6)
[0131]
根据(1)至(4)中的任一项所述的图像处理装置，其中，在输入用于在设置在车辆的顶棚的屏幕上显示在车辆的汽车导航系统上显示的第一画面的操作的情况下，创建单元创建在其下侧示出目的地并且在其上侧示出当前地点的第二画面，作为要显示在设置在顶棚的屏幕上的画面，其中在所述第一画面中显示从当前地点到目的地的路线，在其上侧示出目的地并且在其下侧示出当前地点。
[0132]
(7)
[0133]
根据(1)至(6)中的任一项所述的图像处理装置，其中创建单元创建显示从当前地点到目的地的路线、指示目的地的类别的图标和指示设置了目的地的乘员的图标的画面。
[0134]
(8)
[0135]
根据(1)至(7)中的任一项所述的图像处理装置，其中创建单元还创建用于再现预先映射到当前地点的音乐的声音。
[0136]
(9)
[0137]
根据(1)至(8)中的任一项所述的图像处理装置，还包括行进控制单元，所述行进控制单元根据由创建单元创建的画面被显示的时间来改变到目的地的路线和车辆的行进速度。
[0138]
(10)
[0139]
一种显示系统，包括设置在车辆中的屏幕、将图像投影到屏幕上的投影仪，以及图像处理装置，
[0140]
其中图像处理装置包括：
[0141]
创建单元，创建属于多种模式之一的画面作为要显示在设置在车辆中的屏幕上的应用的画面；以及
[0142]
切换单元，在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下在与车辆行进方向平行或垂直的第一方向上移动切换前和切换后的画面，并且在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下在与第一方向垂直的第二方向上移动切换前和切换后的画面。
[0143]
(11)
[0144]
一种由计算机执行的图像处理方法，所述图像处理方法包括：
[0145]
创建属于多种模式之一的画面作为要显示在设置在车辆中的屏幕上的应用的画面；以及
[0146]
在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下在与车辆行进方向平行或垂直的第一方向上移动切换前和切换后的画面，并且在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下在与第一方向垂直的第二方向上移动切换前和切换后的画面。
[0147]
(12)
[0148]
一种记录介质，所述记录介质记录用于使计算机用作以下各项的程序：
[0149]
创建单元，创建属于多种模式之一的画面作为要显示在设置在车辆中的屏幕上的
应用的画面；以及
[0150]
切换单元，在输入用于从正在显示的画面切换到对于应用的相同模式下的另一画面的操作的情况下在与车辆行进方向平行或垂直的第一方向上移动切换前和切换后的画面，并且在输入用于从正在显示的画面切换到对于应用的不同模式下的另一画面的操作的情况下在与第一方向垂直的第二方向上移动切换前和切换后的画面。
[0151]
附图标记列表
[0152]
10
ꢀꢀ
图像处理装置
[0153]
11
ꢀꢀ
输入单元
[0154]
12
ꢀꢀ
通信单元
[0155]
13
ꢀꢀ
信息处理单元
[0156]
14
ꢀꢀ
显示输出控制单元
[0157]
20
ꢀꢀ
投影仪
[0158]
30
ꢀꢀ
投影仪屏幕
[0159]
31
ꢀꢀ
液晶显示器
[0160]
40
ꢀꢀ
图像显示装置
[0161]
50
ꢀꢀ
声音输出装置
[0162]
60
ꢀꢀ
自动化驾驶控制装置
[0163]
70
ꢀꢀ
路线控制装置
[0164]
141 内容获取单元
[0165]
142 图像/声音创建单元
[0166]
143 输入信息累积单元