输入装置、输入方法及输入程序的制作方法
输入装置、输入方法及输入程序的制作方法
【专利摘要】本发明提供输入装置及输入方法。操作检测部检测与相对于安装在方向盘上的操作输入部的操作输入方向，操作输入方向识别部在车辆处于行驶中时，将所述操作检测部所检测出的操作输入方向识别成与要素图像的配置相应的方向，该要素图像构成显示在图像显示部上的图像的一部分。另外，作为与所述要素图像的至少任意一个相关的操作输入方向，操作输入方向控制部使用所述操作输入方向识别部所识别出的方向。
【专利说明】输入装置、输入方法及输入程序
【技术领域】
[0001]本发明涉及输入装置、输入方法及输入程序。
【背景技术】
[0002]以往，公知一种例如在车辆的方向盘上设置触控传感器来接受驾驶员在车辆的驾驶过程中进行的操作的输入设备。在所述输入设备中，为确保操作性，使在行驶过程中接受的操作比停车时接受的操作简化。
[0003]例如，日本特开2011-201497号记载的操作接受装置取得表示相对于转向操作部的接触位置的接触位置信息，若车辆处于停车中，则显示出表示与规定操作相关的操作指示的候选项即第一选择候选项的图像，若车辆处于行驶中，则显示出表示与操作相关的操作指示的候选项且是与第一选择候选项不同的二选一的第二选择候选项的图像，若车辆处于停车中，则基于接触位置接受从第一选择候选项中择一的第一操作指示，若车辆处于行驶过程中，则基于接触位置接受从二选一的第二选择候选项中择一的第二操作指示。
[0004]日本特开2011-201497号记载的操作接受装置由于是选择所显示的规定的第一选择候选项或第二选择候选项的某一个，因此不能适用于任意的图像，例如预先生成的图像。另外，不论图像的性状如何，所接受的选择候选项都会被变更。因此，对于操作者来说，操作性未必会提高。
【发明内容】
[0005]本发明是鉴于上述问题点而研发的，其目的是提供提高了在行驶中进行操作输入时的操作性的输入装置、输入方法及输入程序。
[0006](I)本发明的一方式的输入装置具有:操作检测部，检测相对于安装在方向盘上的操作输入部的操作输入方向；操作输入方向识别部，在车辆处于行驶中时，将所述操作检测部所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；和操作输入方向控制部，作为与所述要素图像的至少任意一个相关的操作输入方向，使用由所述操作输入方向识别部识别出的方向。
[0007](2)在上述(I)的方式中，可以是，所述操作输入方向识别部将所述操作检测部所检测出的操作输入方向识别成所述要素图像的配置具有规则性的方向。
[0008](3)在上述(I)或(2)的方式中，可以是，在不显示所述要素图像的余边部的比例比规定的比例高的情况下，所述操作输入方向识别部将所述操作输入方向识别成与所述要素图像的配置相应的方向。
[0009](4)在上述(I)至(3)中的任意一个方式中，可以是，所述操作输入方向识别部根据能够操作所述要素图像的操作输入方向的自由度，来判定是否限制所述操作输入方向。
[0010](5)在上述(I)至(4)中的任意一个方式中，可以是，所述操作输入方向识别部将所述操作检测部所检测出的操作输入方向识别成显示在所述图像显示部上的要素图像的组所配置的方向，在所述要素图像的组的某一个被指示时，将所述操作检测部所检测出的操作输入方向识别成在所述某一个的组中配置要素图像的方向。
[0011](6)在上述(I)的方式中，还可以具有显示控制部，所述显示控制部在车辆处于行驶中时将配置所述要素图像的方向控制成预定方向。
[0012](7)在上述(I)至(6)中的任意一个方式中，还可以具有检测所述方向盘的转向角的转向角检测部，所述操作输入方向控制部基于所述转向角检测部所检测出的转向角来判定是否修正所述操作输入方向，在修正所述操作输入方向的情况下，作为与所述要素图像的至少任意一个相关的操作输入方向，使用所述操作检测部所检测出的操作输入方向。
[0013](8)本发明的一方式的输入方法是输入装置中的输入方法，其中，具有:操作检测过程，检测相对于安装在方向盘上的操作输入部的操作输入方向；操作输入方向识别过程，在车辆处于行驶中时，将在所述操作检测过程中所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；和操作输入方向控制过程，作为与所述要素图像的至少任意一个相关的操作输入方向，使用在所述操作输入方向识别过程中识别出的方向。
[0014](9)本发明的一方式的输入程序用于使输入装置的计算机执行如下步骤:操作检测步骤，检测相对于安装在方向盘上的操作输入部的操作输入方向；操作输入方向识别步骤，在车辆处于行驶中时，将在所述操作检测步骤中所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；操作输入方向控制步骤，作为与所述要素图像的至少任意一个相关的操作输入方向，使用在所述操作输入方向识别步骤中识别出的方向。
[0015]根据上述(1)、(8)、(9)的方式，作为与要素图像相关的操作输入方向，使用与要素图像的配置相应的方向，从而不妨碍在与要素图像相关的区域间进行移位的操作输入。由此，在行驶过程中进行操作输入时的操作性提高。
[0016]上述(2)的情况下，由于被限制的操作方向是要素图像的具有规则性的方向，所以用户能够顺畅地进行在与沿该方向排列的要素图像相关的区域间进行移位的操作输入。
[0017]上述(3)的情况下，余边部的比例高，因此即使在作为选择对象的要素图像的候选多时，也能够通过将操作输入方向限制成与要素图像的配置相应的方向，来缩小该候选的范围。由此，用户能够容易进行要素图像的选择。
[0018]上述(4)的情况下，根据操作输入方向的自由度，操作输入方向被限制成与要素图像的配置相应的方向，由此，能够缩小成为选择对象的要素图像的候选的范围，从而用户能够容易地进行要素图像的选择。
[0019]上述(5)的情况下，能够进行要素图像的组的选择、所选择的组中的要素图像的选择，并通过用户阶段性地进行操作输入，即使操作方向被制限也能够顺畅地进行要素图像的选择。
[0020]上述(6)的情况下，通过生成沿预定的方向配置了要素图像的图像，由此，关于独自生成的图像，即使操作输入方向被限制成与要素图像的配置相应的方向，也能够抑制进行行驶中的操作输入时的操作性的降低。
[0021]上述(7)的情况下，不限制根据所检测的转向角修正的操作方向，由此，能够将修正的操作方向的精度确保为高精度。
【专利附图】
【附图说明】
[0022]图1是表示本发明的实施方式的输入装置的外观的表面图。
[0023]图2是表示本实施方式的输入装置的结构的概要框图。
[0024]图3A是表示相对于本实施方式的输入装置的操作面的操作坐标系和操作输入方向的例子的图。
[0025]图3B是表示相对于本实施方式的输入装置的操作面的操作坐标系和操作输入方向的例子的图。
[0026]图4A是表示本实施方式的输入装置的显示画面上的操作对象的移动方向的例子的图。
[0027]图4B是表示本实施方式的输入装置的显示画面上的操作对象的移动方向的例子的图。
[0028]图5是表不本实施方式的输入处理的一例的流程图。
[0029]图6是表示本实施方式的输入处理的另一例的流程图。
[0030]图7A是表示操作输入方向的控制例(I)的图。
[0031 ]图7B是表示操作输入方向的控制例(I)的图。
[0032]图8A是表示操作输入方向的控制例(2 )的图。
[0033]图8B是表示操作输入方向的控制例(2 )的图。
[0034]图8C是表示操作输入方向的控制例(2 )的图。
[0035]图9A是表示操作输入方向的控制例(3 )的图。
[0036]图9B是表示操作输入方向的控制例(3 )的图。
[0037]图9C是表示操作输入方向的控制例(3 )的图。
[0038]图1OA是表示操作输入方向的控制例(4)的图。
[0039]图1OB是表示操作输入方向的控制例(4)的图。
[0040]图1OC是表示操作输入方向的控制例(4)的图。
[0041 ]图1IA是表示操作输入方向的控制例(5 )的图。
[0042]图1IB是表示操作输入方向的控制例(5 )的图。
[0043]图12A是表示操作输入方向的控制例(6)的图。
[0044]图12B是表示操作输入方向的控制例(6)的图。
[0045]图13是表示操作输入方向的控制例(7)的图。
[0046]图14A是表示操作输入方向的控制例(8)的图。
[0047]图14B是表示操作输入方向的控制例(8)的图。
[0048]图15是表示操作输入方向的控制例(9)的图。
[0049]图16A是表示本变形例的方向盘11的握持状态的例子的概念图。
[0050]图16B是表示本变形例的方向盘11的握持状态的例子的概念图。
【具体实施方式】
[0051 ]以下，参照【专利附图】
【附图说明】本发明的一实施方式。
[0052]图1是表示本实施方式的输入装置10的外观的表面图。
[0053]本实施方式的输入装置10设置在车辆的方向盘11上，包括供操作者握持的握持部12、操作输入部13、图像显示部14 (图2)及手指传感器15 (图2)。输入装置10是例如引导直到目的地的行驶路径的路径引导装置(例如，导航装置)、再生音乐等声音内容的音响装置(例如，音频装置)、再生所接收的通过广播传送的声音的音频接收装置，或是至少具有它们中的某些功能的复合机。
[0054]操作输入部13具有设置在握持部12的表面上并与操作者的操作物例如手指接触而接受操作输入的操作面13A、13B。操作输入部13例如是具有触控传感器的触控板。触控传感器是例如静电容量传感器。操作输入部13将表示所检测到的接触区域的接触信号向后述的控制部22 (后述)输出。操作面13A、13B例如是触控传感器。在以下的说明中，在不区别操作面13A、13B的情况下，有时称为操作面13A或操作面13A等。
[0055]此外，操作输入部13不限于触控传感器或具有触控传感器的触控板。操作输入部13只要是能够检测出通过操作输入使操作物接触的位置、该位置移动的移动方向、力的方向，或者是通过操作输入而向至少I方向旋转的结构，则可以是任意的。操作输入部13不限于静电传感器，也可以是例如压力传感器、磁传感器、由它们的任意组合构成的开关、触摸板、旋转开关等。
[0056]图像显示部14具有不论方向盘11是否旋转、在车内的位置都固定的显示画面14a。图像显示部14基于从控制部22 (图2)输入的图像信号，将图像以操作者例如驾驶员能够目视观察到的方式显示在显示画面14a上。显示在显示画面14a上的图像例如包括画面部件。
[0057]画面部件是由操作输入部13接受对显示在显示画面14a上的显示区域进行的操作输入的图像，即成为操作对象的图像。通过画面部件接受的操作输入有时用于输入装置10的工作。画面部件也被称为UI (User Interface ;用户界面)部件、⑶I (Graphic UserInterface ;图形用户界面)组件，例如图标、按钮、链接等。
[0058]图像显示部14例如是将显示画面14a配置在车辆的中央控制台的上部的中央控制台显示器、将车辆前窗的表面作为显示画面14a来显示图像的平视显示器、将显示画面14a配置在车辆的仪表板(仪表盘)上的多信息显示器、将显示画面14a配置在车辆的仪表板的各种计量器类附近的显示器等。
[0059]显示画面14a的配置不论方向盘11是否旋转都是固定的。
[0060]手指传感器15具有检测面15A、15B,该检测面15A、15B主要设置在握持部12的侧面上，用于检测出操作者的操作物所接触的握持区域。手指传感器15将表示所检测到的握持区域的握持区域信号向控制部22输出。检测面15A、15B例如是静电容量传感器、光传感器、温度传感器、压力传感器等。在以下的说明中，在不区别检测面15A、15B的情况下，有时称为检测面15A或检测面15A等。
[0061](输入装置的结构)
[0062]图2是表示本实施方式的输入装置10的结构的概要框图。
[0063]输入装置10包括操作输入部13、图像显示部14、手指传感器15、转向角传感器(转向角检测部)17、速度传感器18及控制部22。
[0064]速度传感器18检测车辆行驶的速度，将表示所检测出的速度的速度信号向控制部22输出。
[0065]控制部22控制构成输入装置10的各部分的工作。控制部22例如由CPU(CentralProcessing Unit ;中央处理器)、FPGA(Field Programmable Gate Array ;现场可编程门阵列)等处理装置构成。控制部22从自身具有的存储介质(例如，ROM (Read Only Memory ；只读存储器)读出程序，并执行所读出的程序来发挥各种功能。控制部22例如取得图像信号，并将所取得的图像信号向图像显示部14输出，由此是图像显示在图像显示部14上。在控制部22使图像显示部14显示的各I张(帧)图像中，包含作为I个或多个要素图像的画面部件。
[0066]画面部件是指成为操作对象的图像。也就是说，控制部22是在从操作输入部13输入的接触信号所表示的接触位置包含于画面部件的显示区域中时(按下、指示)，关于该画面部件进行预定的处理。画面部件也被称为π部件、Π组件等。画面部件例如有图标、链接、按钮等。
[0067]在画面部件中，显示在图像显示部14上的显示位置根据OS (Operating System ；操作系统)或应用程序等程序而被预先设定。另外，控制部22是在执行程序时确定显示位置。另外，控制部22基于从操作输入部13输入的接触信号所表示的接触位置来确定画面部件的显示位置。
[0068]控制部22构成为例如包括:操作检测部31、握持状态检测部32、选择部33、旋转修正判定部37、旋转修正部38、行驶状态判定部41、图像解析部42、显示控制部43、操作输入方向识别部44及操作输入方向控制部45。
[0069]操作检测部31以预定的时间间隔(例如，1ms)判别从操作输入部13输入的接触信号所表示的接触区域，将判别出的各接触区域的中心点作为操作物与操作面13A等接触的接触位置而算出。这是因为，在操作面13A上操作物所接触的接触区域具有大小，接触区域有时存在多个。这里，操作检测部31在接触区域的判别中，将空间上相互连续的接触区域判定为属于I个接触区域。操作检测部31生成表示接触区域和接触位置的接触操作信号。
[0070]操作检测部31也可以基于所输入的接触信号检测接触区域的有无、按压力、接触位置的移动方向(操作输入方向)、移动量等，并使检测出的信息包含于接触操作信号。这里，操作检测部31将从之前刚刚的接触位置朝向当前的接触位置的方向确定为操作输入方向，将该接触位置间的距离确定为移动量。另外，操作检测部31也可以基于判别或算出的信息判别手势操作的类别，并使表示判别出的类别的信息包含于接触操作信号，手势操作的类别有例如对操作面13A进行敲击(点击)、划动(滑动)、抓取、跟随模仿、扭转、扫动(拂动)等的操作。操作检测部31也可以基于操作物与操作面13A接触的接触位置的轨迹来判定手势操作的类别。
[0071]操作检测部31将所生成的接触操作信号向选择部33、显示控制部43、操作输入方向识别部44及操作输入方向控制部45输出。
[0072]握持状态检测部32基于从手指传感器15输入的握持区域信号来检测握持方向盘11的手指的状态(握持状态)。握持状态检测部32例如在下述情况下判定为左手的手掌(尤其，根部(手腕侧))离开，所述情况是指:在方向盘11的左侧，对于所输入的握持区域信号所表示的握持区域而言，与从基准线左旋的区域(下方)相比，从基准线右旋的区域(上方)比预定的区域的基准值大。基准线是指在方向盘11未被转向的状态下穿过其中心的水平线。这是因为，方向盘11被向右侧转向的情况下，存在着操作者的指尖与方向盘11接触而手掌却从方向盘11离开的倾向。此外，握持状态检测部32还可以在下述情况下判定为左手的手掌离开，所述情况是指:对于转向角传感器17输入的转向角信号所表示的转向角而言，判定为预定的右旋的转向角A比预定的转向角大。
[0073]另外，握持状态检测部32在下述情况下判定为右手的手掌(尤其，根部(手腕侧))离开，所述情况是指:在方向盘11的右侧，对于所输入的握持区域信号所表示的握持区域而言，与从基准线右旋的区域(下方)相比，左旋的区域(上方)比预定的区域的基准值大。此夕卜，握持状态检测部32还可以在下述情况下判定为右手的手掌离开，所述情况是指:对于从转向角传感器17输入的转向角信号所表示的转向角而言，判定为预定的左旋的转向角A比预定的转向角大。握持状态检测部32也可以在除此以外的情况下判定为手掌未离开。
[0074]握持状态检测部32将表示判定出的握持状态的握持状态信号向旋转修正部38输出。
[0075]选择部33可以根据例如从操作检测部31输入的接触操作信号、从其他开关(未图示)输入的操作输入信号(例如，0N/0FF信号)等，来选择是否使用操作输入方向识别部44所识别的方向(后述)。是否使用操作输入方向识别部44所识别的方向也可以在例如从操作检测部31输入的接触操作信号表示预定类别的操作时来切换(切换顺序)。
[0076]预定类别的操作是指例如以下操作:(1)在预定的区域中，接触和非接触断续的操作(例如，连击、双击等)；(2)在同一位置保持接触的状态持续比预定的时间(例如，3秒)长的操作(例如，长按)；(3)与预定的区域(例如，修正切换按钮的显示区域)的接触。
[0077]选择部33将表示是否使用操作输入方向识别部44识别出的方向的选择信号向操作输入方向控制部45输出。
[0078]此外，在从旋转修正判定部37输入的旋转修正判定信号表示对操作坐标系进行修正的情况下，选择部33可以选择操作输入方向控制部45不使用操作输入方向识别部44所识别出的方向，也就是说选择使用操作检测部31所检测出的操作输入方向。
[0079]旋转修正判定部37判定是否对伴随方向盘11的旋转而在操作面13A等(图1)上检测接触操作时作为基准的坐标系(操作坐标系)进行修正。例如，在从转向角传感器17输入的转向角信号所表示的转向角比预定的转向角的阈值大的情况下，旋转修正判定部37判定为修正关于操作面13A等的操作坐标系。在该转向角信号表示的转向角与预定的转向角的阈值相等或比该阈值小的情况下，旋转修正判定部37判定为不修正关于操作面13A等的操作坐标系。旋转修正判定部37将表示是否修正该操作坐标系的旋转修正判定信号向旋转修正部38、显示控制部43及操作输入方向控制部45输出。
[0080]另外，旋转修正判定部37也可以根据例如从操作检测部31输入的接触操作信号、从其他开关(未图示)输入的旋转修正切换信号(例如，0N/0FF信号)等，来选择是否修正该操作坐标系。关于是否修正操作坐标系，也可以在例如从操作检测部31输入的接触操作信号表示预定类别的操作时来切换是否修正该操作坐标系(切换顺序)。预定类别的操作是指例如以下操作:(I)在预定的区域中，接触和非接触断续的操作(例如，连击等)；(2)在同一位置保持接触的状态持续比预定的时间(例如，3秒)长的操作(例如，长按)；(3)与预定的区域(例如，修正切换按钮的显示区域)的接触。
[0081]在从旋转修正判定部37输入的旋转修正判定信号表示对操作坐标系进行修正的情况下，旋转修正部38修正从操作检测部31输入的接触操作信号所表示的接触位置，由此，关于规定种类的画面部件(例如，图标、滚动对象的要素图像、拖动对象的要素图像等)，与接触位置对应的在显示画面14a上的显示位置、表示其移动的移动方向会受到控制。
[0082]这里，在旋转修正部38中预先存储有操作检测部31检测操作输入方向时所使用的关于操作面13A的坐标系(操作坐标系)、与确定在图像显示部14的显示画面14a上显示要素图像的位置时所使用的坐标系(显示坐标系)之间的对应关系。操作坐标系、显示坐标系是例如具有相互正交的2个坐标轴的二维的正交坐标系。操作输入方向是指操作检测部31所检测出的接触位置的移动方向。操作坐标系与显示坐标系的对应关系例如用这些坐标系之间的坐标轴(例如，X轴、Y轴)间的旋转角或坐标值(例如，X坐标值、Y坐标值)间的放大率表示。
[0083]旋转修正部38利用所存储的对应关系，确定与被输入的接触操作信号所表示的接触位置及移动方向(操作坐标系)对应的位置及移动方向(显示坐标系)。
[0084]例如，在操作者对方向盘11转向时，如图3A及3B所示，操作面13A与方向盘11一起围绕其旋转轴旋转。此时，认为是操作者在使握持方向盘11的手的手指(例如，左手拇指)与操作面13A保持接触的同时向规定的操作输入方向移动的情况。关于操作面13A的操作坐标系的X方向、Y方向分别从未执行转向的情况以方向盘的转向角A变化。此外，在图3A及3B中，省略了检测面15A、15B的图示。
[0085]在方向盘11未被转向的情况下(图3A)，以操作面13A的操作坐标系为基准由操作检测部31检测的操作输入方向被预先设定为与以显示画面14a的显示坐标系为基准由旋转修正部38确定的移动方向一致。在图4A及4B所示的例子中，X轴、Y轴的方向分别是水平方向、垂直方向。此时，形成关于操作面13A的操作坐标系的X轴、Y轴的方向、和形成关于显示画面14a的显示坐标系的X轴、Y轴的方向一致。在图4A所示的例子中，移动方向是Θ ?
[0086]另一方面，在方向盘11被转向的情况下(图3B)，以操作面13A的操作坐标系为基准由操作检测部31检测的操作输入方向从以显示画面14a的显示坐标系为基准由旋转修正部38确定的移动方向以方向盘11的转向角A偏移。在图4B所示的例子中，修正前的移动方向是θ _A。
[0087]因此，旋转修正部38以使操作面13A的操作坐标系的X轴、Y轴的方向以方向盘11的转向角A旋转的方式进行修正时，经修正的X轴、Y轴的方向与未进行方向盘11的转向的情况下的操作坐标系的X轴、Y轴的方向一致。随之，未进行方向盘11的转向的情况、和进行了转向的情况下，移动方向一致。在图4B所示的例子中，修正后的移动方向成为Θ。
[0088]返回图2，行驶状态判定部41例如基于从速度传感器18输入的速度信号判定车辆的行驶状态。行驶状态判定部41例如在速度信号表示的速度与预定的速度的阈值(例如，时速Okm)相等的情况下，判定为车辆处于停止中，在速度信号表示的速度比预定的速度的阈值高的情况下，判定为车辆处于行驶中。行驶状态判定部41将表示所判定的行驶状态的行驶状态信号向操作输入方向识别部44输出。
[0089]此外，在本实施方式中，速度的阈值也可以是充分地近似于时速Okm的低速度(例如，时速4km)。该情况下，行驶状态判定部41例如在向前行驶中速度信号所表示的速度与预定的速度的阈值(例如，时速Okm)相等或比该阈值低的情况下，判定为车辆处于停止中。另外，行驶状态判定部41例如在向前行驶中速度信号所表示的速度比其速度的阈值高的情况下，判定为车辆处于行驶中。由此，在车辆以充分低的速度行驶从而对驾驶要求的注意力较低的情况下，可以视为车辆处于停止中。
[0090]如下所述，在判定为处于停止中时，对操作输入方向的限制被解除。
[0091]图像解析部42对在图像显示部14上显示的图像的配置进行解析。图像解析部42判定各帧的图像所包含的要素图像的配置特征。图像解析部42也可以解析例如水平方向(X方向)或垂直方向(Y方向)上的要素图像的配置规则性、未被要素图像占据的余边部的比例及组构成的至少任意一个。图像解析部42将表示解析出的要素图像的配置特征的配置信息向显示控制部43及操作输入方向识别部44输出。
[0092]另外，作为各帧的图像所包含的要素图像，若包含有预定种类的画面部件，则图像解析部42也可以使表示该画面部件的类别的信息包含于配置信息，并输出给操作输入方向识别部44。作为预定种类的画面部件，可以将操作输入方向自由度高的画面部件(例如，指针)或操作时要求高自由度的操作输入方向的画面部件(例如，旋转拨盘)事先设定于图像解析部42。
[0093]对要素图像的配置规则性进行解析时，图像解析部42可以例如关于各帧的图像，算出原图像与向水平方向或垂直方向移位了的图像之间的自相关性。在存在所算出的自相关性比预定的自相关阈值大的位移量，且该位移量的数量比规定的数量(例如，3个)少的情况下，图像解析部42判定为在该位移方向上的要素图像的配置具有规则性。这是因为该位移方向与要素图像所配置的方向相当。在不存在所算出的自相关性比预定的自相关阈值大的位移量，或该位移量的数量与规定的数量(例如，3个)相等或比该数量多的情况下，图像解析部42判定为在该位移方向上的要素图像的配置没有规则性。
[0094]即使在图像解析部42判定为具有规则性的情况下，若各帧的图像中包含预定种类的画面部件，则也使表示该画面部件的类别的信息包含于配置信息并向操作输入方向识别部44输出。
[0095]解析余边部的比例时，图像解析部42算出沿水平方向或垂直方向相互相邻的要素图像间的间隔、该间隔的最小值、平均值等统计量、余边部的面积比等特征量。所算出的特征量比预定的特征量的阈值小时，图像解析部42判定为余边部的比例不充分，所算出的特征量与预定的特征量的阈值相等、或比该阈值大时，图像解析部42判定为余边部的比例充分。
[0096]解析组构成时，图像解析部42判定为相互相邻的要素图像间接近，即要素图像间的间隔比预定的间隔小的要素图像彼此属于同一组。由此，按照作为与其他区域相比要素图像更密集的显示区域的组来区分要素图像。即，图像解析部42判定各帧的图像所包含的要素图像包含于哪个组。而且，图像解析部42也可以在各组内、组间解析规则性。
[0097]此外，关于显示控制部43对显示进行了控制的图像，图像解析部42也可以省略解析要素图像的配置的特征的处理。
[0098]显示控制部43基于从行驶状态判定部41输入的行驶状态信号来控制包含于各帧的图像中且成为其一部分的要素图像(例如，画面部件)的配置。在显示控制部43中成为控制对象的图像是由要素图像构成的图像，且是能够由控制部22变更要素图像的配置的图像或者能够独自地生成的图像(例如，列表显示画面、功能选择等的设定画面等)。即，配置不能变更的已完成图像(例如，图像内容等)即使是包含要素图像的图像也不能成为显示控制部43的控制对象。
[0099]例如，在所输入的行驶状态信号表示处于行驶中的情况下，显示控制部43沿预定的方向(例如，水平方向或垂直方向中的某一方)按规定个数以预定间隔配置规定种类的要素图像并合成各帧的图像。显示控制部43将表示所合成的图像的图像信号向图像显示部14输出，并将表示在该配置的方向上配置要素图像这一情况的配置信息向操作输入方向识别部44输出。这是因为，在这样的情况下，要求向该配置方向的操作输入，而向除此以外的方向(例如，与配置方向正交的方向)的操作输入的必要性进一步降低。
[0100]例如，所输入的行驶状态信号表示处于停止中的情况下，显示控制部43以预定的任意的配置(例如，二维的网格点上、圆周上)配置要素图像并合成各帧的图像。该情况下的要素图像的配置可以是与行驶中的配置相比、方向的自由度高的配置，也可以与行驶中的配置相同。显示控制部43将表示所合成图像的图像信号向图像显示部14输出，并将表示要素图像的配置没有规则性这一情况的配置信息向操作输入方向识别部44输出。
[0101]此外，在表示处于停止中的行驶状态信号被输入的情况下，在从选择部33输入选择信号以表示不使用操作输入方向识别部44所识别的方向这一情况之前的期间，显示控制部43可以沿预定的方向配置要素图像并合成图像。车辆停止时，不论操作者的意图怎样，在图像显示部14上显示的图像的形态都不变更，从而能够提高操作性。
[0102]此外，显示控制部43在以下的情况下，也可以以预定的任意的配置来配置要素图像并合成各帧的图像。例如，从选择部33输入的选择信号表示不使用操作输入方向识别部44所识别的方向的情况、或从旋转修正判定部37输入的旋转修正判定信号表示不修正操作坐标的情况。
[0103]操作输入方向识别部44基于从行驶状态判定部41输入的行驶状态信号及从图像解析部42或显示控制部43输入的配置信息，识别从操作检测部31输入的接触操作信号所表不的操作输入方向。
[0104]这里，在所输入的行驶状态信号表示处于行驶中的情况下，操作输入方向识别部44识别成所输入的接触操作信号表示的操作输入方向是与从图像解析部42或显示控制部43输入的配置信息所表示的要素图像的配置相应的方向。也就是说，操作输入方向识别部44将所输入的接触操作信号所表示的操作输入方向视为配置信息所表示的方向、且要素图像的配置方向。
[0105]操作输入方向识别部44在识别成操作输入方向是与要素图像的配置相应的方向的情况下，直接采用该方向的坐标、变化量，而作为与该方向垂直的方向上的坐标则采用接触开始时刻的坐标(固定值)。例如，在与要素图像的配置相应的方向是水平方向的情况下，操作输入方向识别部44将接触操作信号所表示的操作输入方向识别成水平方向。这里，操作输入方向识别部44直接采用接触位置的水平方向的坐标、变化量，而对于接触位置的垂直方向的坐标，则采用接触开始时刻的垂直方向的坐标，将变化量定为零。操作输入方向识别部44将表示所采用的坐标、变化量的识别操作信号向操作输入方向控制部45输出。该识别操作信号表示接触位置在所识别的操作输入方向上的变化。
[0106]另一方面，操作输入方向识别部44在从操作检测部31输入的行驶状态信号表示处于停止中的情况下，停止将所输入的接触操作信号所表示的操作输入方向识别成与所输入的配置信息所表示的要素图像的配置相应的方向。另外，操作输入方向识别部44在该情况下，停止识别操作信号向操作输入方向控制部45的输出。
[0107]操作输入方向识别部44也可以例如如(a)?(C)中的任意一个所示的那样识别将操作输入方向。
[0108](a)将各帧的图像所包含的要素图像的配置的具有规则性的方向识别成配置要素图像的方向。
[0109]操作输入方向识别部44例如将操作输入方向识别成是在从图像解析部42输入的配置信息所表示的要素图像的配置中具有规则性的方向。关于操作输入方向的控制例，使用图7A及图7B、图8A?图8C、图1OA?图1OC在后面说明。
[0110](b)基于未显示各帧的图像中所包含的要素图像的余边部的比例，确定是否将操作输入方向识别成与要素图像的配置相应的方向。
[0111]操作输入方向识别部44例如在从图像解析部42输入的配置信息表示余边部的比例充分的情况，将操作输入方向识别成与配置信息表示的要素图像的配置相应的方向。关于操作输入方向的控制例，使用图1OA?图1OC在后面说明。
[0112](c)将操作输入方向识别成各帧的图像中所包含的要素图像的组的配置方向，在根据操作输入而某一组被选择时，将操作输入方向识别成所选择的组中所包含的要素图像的配置方向。在各组的显示区域中，要素图像比其他区域密集。
[0113]操作输入方向识别部44基于从图像解析部42输入的配置信息所表示的组构成及属于各组的要素图像的配置，进行识别该操作输入方向的处理。关于操作输入方向的控制例，使用图9A?图9C在后面说明。
[0114]操作输入方向控制部45从操作输入方向识别部44被输入识别操作信号的情况下，关于至少任意一个要素图像，进行使用了该识别操作信号所表示的操作输入方向的处理。关于要素图像的处理，例如是使作为画面部件的一种的指针的显示位置或指示的位置移动的处理，指示作为画面部件的一种的图标使其移动的与拖动操作相关的处理。使用了操作输入方向的处理例如是进行与沿该操作输入方向的移动相关的处理，例如进行使指针的显示位置或指示的位置沿该操作输入方向移动的处理、进行指示图标使其沿该操作输入方向移动的处理。由此，在车辆行驶时，操作输入方向被限制在被识别的方向。成为处理对象的要素图像是所配置的多个要素图像的一部分或全部，也就是说，可以是只是某I个，也可以是多个。
[0115]另一方面，识别操作信号未被输入的情况下，操作输入方向控制部45使用从操作检测部31输入的接触操作信号表示的操作输入方向进行关于要素图像的处理。这样的情况下，操作输入方向没有特别限制。
[0116]另外，在从选择部33输入的选择信号表示不进行操作输入方向的限制的情况下，操作输入方向控制部45也使用从操作检测部31输入的接触操作信号表示的操作输入方向进行关于要素图像的处理。除此以外，操作输入方向控制部45在以下的(d)、(e)的情况下，也使用从操作检测部31输入的接触操作信号表示的操作输入方向进行关于要素图像的处理。
[0117](d)根据转向角修正操作输入方向的情况，也就是，对于操作输入方向控制部45而言，从旋转修正判定部37输入的旋转修正判定信号表不修正操作坐标系这一,清况。关于操作输入方向的控制例，使用图15在后面说明。
[0118](e)各帧的图像包含预定种类的画面部件的情况，例如，从图像解析部42输入的配置信息所表示的种类的画面部件符合该预定种类的画面部件的情况。预定种类的画面部件例如是操作输入方向的自由度高的画面部件(例如，指针)或操作时要求高自由度的操作输入方向的画面部件(例如，旋转拨盘)。关于操作输入方向的控制例，使用图8A?图8C、图1lA?图14B在后面说明。
[0119](输入处理)
[0120]以下，关于本实施方式中的输入处理的例子进行说明。
[0121]图5是表不本实施方式的输入处理的一例的流程图。
[0122](步骤S101)行驶状态判定部41基于从速度传感器18输入的速度信号判定车辆是处于行驶中还是处于停止中。在判定为处于行驶中的情况下(步骤SlOl是)，进入步骤S102。在判定为处于停止中的情况下(步骤SlOl否)，进入步骤S107。
[0123](步骤S102)图像解析部42解析在图像显示部14上显示的图像的各帧中所包含的要素图像的配置，例如有无规则性、余边部的比例、有无预定种类的画面部件。然后，进入步骤S103。
[0124](步骤S103)在图像解析部42中，在判定为有规则性的情况下(步骤S103是)，进入步骤S104。在判定为没有规则性的情况下(步骤S103否)，进入步骤S107。
[0125](步骤S104)在图像解析部42中，在判定为没有配置要素图像的余边部的比例是充分的情况下(步骤S104是)，进入步骤S105。
[0126]在判定为余边部的比例不充分的情况下(步骤S104否)，进入步骤S107。
[0127](步骤S105)在图像解析部42中，在判定为具有预定种类的画面部件的情况下(步骤S105是)，进入步骤S106。在判定为没有预定种类的画面部件的情况下(步骤S105否)，进入步骤S107。
[0128](步骤S106)操作输入方向识别部44将相对于操作输入部13的接触位置的移动方向即操作输入方向识别成例如被判定为有规则性的方向。操作输入方向控制部45关于要素图像进行使用了操作输入方向识别部44所识别的操作输入方向的处理。然后，结束本流程的处理。
[0129](步骤S107)操作输入方向控制部45关于要素图像进行使用了操作检测部31所检测的操作输入方向的处理。然后，结束本流程的处理。
[0130]以下，关于本实施方式的输入处理的其他例进行说明。
[0131]图6是表示本实施方式的输入处理的其他例的流程图。
[0132]图6所示的输入处理具有图5所示的输入处理中的步骤S101，并代替步骤S103?S105而具有步骤Slll?S114。在图6所示的输入处理中，若在步骤SlOl中判定为处于行驶中(步骤SlOl是)，则进入步骤S111。若判定为处于停止中(步骤SlOl否)，则进入步骤S112。
[0133](步骤S111)显示控制部43沿预定的方向(例如，水平方向)配置要素图像并合成各帧的图像。然后，进入步骤S112。
[0134](步骤S112)操作输入方向识别部44将操作检测部31所检测的操作输入方向识别成在步骤Slll中确定的方向。操作输入方向控制部45关于要素图像进行使用了操作输入方向识别部44所识别的操作输入方向的处理。然后，结束本流程的处理。
[0135](步骤S113)显示控制部43以与在步骤Slll中确定的配置相比、方向的自由度高的配置(例如，二维的网格点上)配置要素图像并合成各帧的图像。然后，进入步骤S114。
[0136](步骤S114)操作输入方向控制部45关于要素图像进行使用了操作检测部31所检测的操作输入方向的处理。然后，结束本流程的处理。
[0137](操作输入方向的控制例)
[0138]以下，关于本实施方式的操作输入方向的控制例进行说明。
[0139]图7A及图7B是表示操作输入方向的控制例(I)的图。
[0140]在图7A中，在显示画面14a上显示了 4个图标102a?102d沿水平方向等间隔地配置的图像。此时，表示具有沿水平方向的规则性的配置信息被输入给操作输入方向识别部44。在从行驶状态判定部41输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别为双箭头所示的水平方向，并通过操作输入方向控制部45将操作输入方向限定成水平方向(简易模式(Simple Mode))。
[0141]在图7B中，与图7A同样地在显示画面14a上显示4个图标102a?102d。此时，表示车辆处于停止中的行驶状态信号从行驶状态判定部41被输入给操作输入方向识别部44，于是，将操作输入方向识别成水平方向的处理停止。由于操作输入方向控制部45使用操作检测部31所检测的操作输入方向，所以如双箭头所示，除了水平方向以外，沿垂直方向的操作输入方向也能够接受(标准模式(Normal Mode))。
[0142]因此，即使车辆的行驶状态例如是车辆处于行驶中，也由于操作输入方向被限制成要素图像的配置方向，所以能够抑制操作性的降低。另外，在车辆停止的情况下，操作输入方向的限制被解除时的操作性的变化受到抑制，操作者不会产生不适感。由此，作为整体，操作性提闻。
[0143]图8A?图8C是表示操作输入方向的控制例(2 )的图。
[0144]在图8A中，在显示画面14a上，显示3个列表103a?103c沿水平方向等间隔地配置的图像。列表103a?103c分别是表示I行文字列的I行列表，在该配置中具有沿水平方向的规则性。也就是说，在列表103a?103c中，不需要沿垂直方向的操作，但需要沿水平方向的操作。换言之，具有沿水平方向的自由度。此时，表示具有沿水平方向的规则性的配置信息被输入给操作输入方向识别部44。
[0145]在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别成双箭头所示的水平方向，通过操作输入方向控制部45将操作输入方向限制成水平方向。
[0146]在图8B中，在显示画面14a上，显示有包含I个列表104的图像。列表104是能够选择沿垂直方向配置的3行文字列中的任意一个的3行列表。在列表104中，需要接受沿垂直方向的操作，没有沿水平方向的自由度。此时，表示3行列表的配置信息被输入给操作输入方向控制部45。在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别成双箭头所示的垂直方向，通过操作输入方向控制部45将操作输入方向限制成垂直方向。
[0147]在图8C中，在显示画面14a上，显示包含I个描画区域105和指针106的图像。指针106指示描画区域105内的任意位置，因此如箭头所示，需要将二维平面内的任意方向或以45°间隔被量化的方向中的任意一个作为操作输入方向来接受。即，需要操作输入方向的自由度。此时，表示指针的配置信息被输入给操作输入方向识别部44。即使在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44也停止将操作输入方向识别成特定方向的处理。操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此任意方向都能作为操作输入方向来接受。另外，操作输入方向控制部45即使限制操作输入方向，也将操作输入方向限制成被量化的方向中的任意一个。
[0148]图9A?图9C是表示操作输入方向的控制例(3 )的图。
[0149]在图9A中，在显示画面14a上显示表示新闻报道的图像。在该图像中包含多个链接。链接根据它们的位置被分类成3个组107a?107c。组107a?107c沿水平方向配置。在组107a?107c中，分别沿垂直方向配置有多个链接。
[0150]此时，表示在组之间具有沿水平方向的规则性、且在各组中具有沿垂直方向的规则性的配置信息被输入给操作输入方向识别部44。
[0151]从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别成双箭头所示的水平方向，通过操作输入方向控制部45将操作输入方向限制成水平方向。组107b所包含的朝向右斜上方的实线的箭头表示示出接触位置的指针。组107a、107c所包含的朝向右斜上方的虚线的箭头表示能够使接触位置移动到该位置。
[0152]在图9B所显示的图像中，在组107a、107c中不显示指针，而在组107b中显示指针。这里，操作输入方向控制部45将在显示指针的接触位置以比预定时间(例如，3秒)长的时间持续含有接触位置的组107b确定为其区域中所包含的链接能够被选择的组。此外，也可以是，若在该接触位置，从操作检测部31输入的接触操作信号是预定类别的操作(例如，双击)，则操作输入方向控制部45将链接能够选择的组确定为组107b。
[0153]在图9C所显示的图像中，与图9A不同，双箭头表示垂直方向。关于被选择的组107b，根据表示具有沿垂直方向的规则性的配置信息被输入给操作输入方向识别部44，将操作输入方向识别成垂直方向，通过操作输入方向控制部45将操作输入方向限制成垂直方向。由此，能够选择将操作输入方向限定成了组的配置方向的组，能够选择在所选择的组中将操作输入方向限定成了要素图像的配置方向的要素图像、和阶段性的选择。由此，即使在链接等要素图像、特别细微的要素图像紧密地配置的情况下，操作者也能够容易地进行目标要素图像的选择。
[0154]图1OA?图1OC是表示操作输入方向的控制例(4)的图。
[0155]在图1OA中，在显示画面14a上，4个图标108a?108d沿水平方向、垂直方向都有规则地配置在2行2列的网格上。另外，在各图标的周围具有充分的余边(面积比约0.3)。表示余边部充分的配置信息从图像解析部42被输入给操作输入方向识别部44。在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别成水平方向或垂直方向，通过操作输入方向控制部45将操作输入方向限定成水平方向或垂直方向。操作输入方向识别部44也可以预先设定识别水平方向、垂直方向中的某一个或都识别。
[0156]在图1OB中，在显示画面14a上，4个图标109a?109d沿水平方向、垂直方向都有规则地配置在2行2列的网格上。但是，与图1OA所示的例子不同，各图标的周围的余边少(面积比约0.03)。表示余边部不充分的配置信息从图像解析部42被输入给操作输入方向识别部44。即使在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44也停止将操作输入方向识别成特定方向的处理。操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，从而操作输入方向不被限制。这是因为，即使接触位置移动，该接触位置也包含于某一图标区域中，因此即使不限制操作输入方向，也能够较容易地选择任意的图标。
[0157]在图1OC中，在显示画面14a上，4个窗口 110-1?110-4配置在2行2列的网格上。窗口 110-1?110-4是基于图像信号显示图像的区域，所述图像信号是由控制部22分别执行不同的应用软件(以下称为应用程序)时生成的。但是，窗口 110-1?110-4各自包含的图标的配置、个数不同。
[0158]在窗口 110-1中，4个图标IlO-1a?IlO-1d配置在2行2列的网格上。在窗口110-2中配置有4个图标110-2a?110_2d，图标110_2a?110_2d的显示区域的边界线是窗口 110-2的对角线。在窗口 110-3中，2个图标110-3a、110-3b被配置成I行2列。在窗口 110-4中，2个图标110-4a、110-4b被配置成2行I列。
[0159]该情况下，表示不具有沿水平方向、垂直方向的规则性的配置信息从图像解析部42被输入给操作输入方向识别部44。在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44停止将操作输入方向识别成特定方向的处理。操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。另外，即使在窗口 110-3单独显示在显示画面14a上的情况下，也从图像解析部42向操作输入方向识别部44输入表示不具有沿水平方向、垂直方向的规则性的配置信息。即使在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44也停止将操作输入方向识别成特定方向的处理,操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。
[0160]图1IA及图1IB是表示操作输入方向的控制例(5 )的图。
[0161]在图1lA中，在显示画面14a上显示地图，在地图的大致中央部显示有X标记的指针111。指针111表示接触位置，是为了接受选择地图上的任意位置(例如，放大缩小操作的基准地点、目的地等)的操作而显示的。该情况下，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。
[0162]在图1lB中，图标密集地配置在8行8列的网格上。这里，在朝向右斜上方的指针所指示的左上端的图标112a的显示区域中,包含当前该指针所表示的接触位置。在图标像这样密集地配置，并且操作者要求显示指针以选择任意的图标的情况下，操作输入方向识别部44停止将操作输入方向识别成特定方向的处理，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。由于操作输入方向不受限制，所以操作者通过对目标图标、例如右下的图标112b的位置进行指示而能够容易地选择。相反，若操作输入方向例如仅限于水平方向或垂直方向，则与操作相关的动作的次数增力口，变得繁琐。
[0163]图12A及图12B是表示操作输入方向的控制例(6)的图。
[0164]在图12A中，在显示画面14a上显示有拨盘113。拨盘113具有8个扇形的区域A-H0区域A-H所具有的中心角分别是45°的等角。拨盘113的上方的双箭头表示拨盘113能够操作的方向。
[0165]在图12B中，在显示画面14a上显示有音量选择器114。音量选择器114具有朝向水平方向的9个细长的区块114a-114i。区块114a_114i的左端、右端的水平方向的坐标都不对齐。横贯区块114a-114i的朝向右上方的双箭头表示通过选择区块114a-114i的任意一个而能够选择音量。
[0166]但是，拨盘113、音量选择器114仅能够观察到其形状，用户不能直接推测出能够操作的方向。关于所述要素图像，优选能够自由设定操作输入方向并使操作者体验到能够操作的方向。因此，关于所述画面部件，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。
[0167]图13是表示操作输入方向的控制例(7)的图。
[0168]在图13中，在显示画面14a上显示有设定面板115。在设定面板115的左侧、右侧配置有音频设定部115-1、空调设定部115-2。音频设定部115-1的上段115_lb的右上半部分所示的音源选择部(Source)的7个沿水平方向划分的区域表示能够选择与其任一个对应的音源，例如⑶(Compact Disc)。音频设定部115-1的上段115_lb的左下半部分所示的音轨选择部(Track)的7个沿垂直方向划分的区域表示能够选择与其任一个对应的内容，例如乐曲。音频设定部115-1的下段115-la所示的音量设定部(Volume)的7个沿垂直方向划分的区域表示通过使接触位置从右向左移动而能够设定大的音量。
[0169]空调设定部115-2的上段115_2b的左上半部分所示的模式选择部(Mode)的7个沿水平方向划分的区域表示能够选择与其任一个对应的动作模式，例如温度自动调整模式。空调设定部115-2的上段115-2b的右下半部分所示的温度设定部(温度)的7个沿垂直方向划分的区域表示能够选择与其任一个对应的温度。空调设定部115-2的下段115-2a所示的风量设定部(风量)的7个沿垂直方向划分的区域表示通过使接触位置从左向右移动而能够设定更强的风量。
[0170]关于如该设定面板115那样地操作输入方向按每个操作对象不同的画面部件，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。由此，能够发挥如下的设定面板115的优点，即:不用对I个画面切换多个操作对象，能够省略找出目标操作对象的操作。
[0171]图14A及图14B是表示操作输入方向的控制例(8)的图。
[0172]在图14A及图14B中，在显示画面14a上显示了描画输入框(手写输入组件)116。描画输入框116是检测与其显示区域所包含的位置对应的接触位置、并能够输入(描画输入)由与所检测的接触位置对应的位置的轨迹形成的图像的画面部件。在显示描画输入框116的情况下，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。
[0173]这里，操作检测部31也可以根据预先存储的操作坐标系和显示坐标系的对应关系对基于从操作输入部13输入的接触信号检测出的接触位置的轨迹进行坐标变换使之成为显示坐标系的轨迹。操作检测部31进行公知的图像识别处理来确定示出了经坐标变换的轨迹的图像是否是预先设定的文字或符号(以下称为文字等)中的某一个。在控制部22中预先存储有该文字等的每一个和预定的处理之间的对应关系，执行与确定的文字等对应的处理。
[0174]在图14A中，显示在描画输入框116上的Λ标记是所输入的图像的一例。该情况下，操作输入方向控制部45进行与Λ标记对应的处理，例如，将用于设定目标值等的地图显示在图像显示部14上，并接受选择地图上的任意位置的操作。
[0175]在图14Β中，显示在描画输入框116上的“空调”的文字是所输入的图像的又一例。该情况下，操作输入方向控制部45进行与“空调”的文字对应的处理，例如，将用于设定空调动作的空调设定图像显示在图像显示部14上。
[0176]像这样，由于没有进行操作输入方向的限制，所以要求自由的操作输入方向的描画输入不受妨碍。
[0177]图15是表示操作输入方向的控制例(9)的图。这里，省略了操作面13Β的图示。
[0178]图15表示对方向盘11转向时，操作者用手指接触操作面13Α的接触位置01的状况。在图15所示的例子中，方向盘11以转向角A旋转。
[0179]这里，以接触位置01为起点的8根箭头表示操作输入方向被限制成各箭头方向中的某一个。8根箭头中的相邻的2根所成的角度在该例中是45°。8根箭头中的朝向右斜上方、左斜下方的2根箭头形成了 X轴，朝向左斜上方、右斜下方的2根箭头形成了 Y轴。在这样的情况下，由于操作输入方向以45°间隔离散，所以，即使旋转修正部38以转向角A修正操作输入方向Θ，也无法得到足够的精度。因此，在以转向角A修正操作输入方向Θ的情况下，即，旋转修正判定部37判定为修正操作坐标系的情况下，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。由此，不会失去通过修正实现的高精度。
[0180](变形例)
[0181]以下，关于本实施方式的变形例进行说明。
[0182]旋转修正部38除了从旋转修正判定部37输入的旋转修正判定信号以外，还基于从握持状态检测部32输入的握持状态信号，对从操作检测部31输入的接触操作信号所表示的接触位置进行修正。旋转修正部38例如以与旋转修正判定信号所表示的转向角A和握持状态信号所表示的握持状态相应的修正角B的合计Α+Β的角度使操作坐标系向右旋转，由此将操作输入方向Θ修正成θ - (Α+Β)。
[0183]这里，在旋转修正部38中，实现将握持状态信号和预定的修正角B对应着设定在自身所具有的存储部中，并根据所输入的握持状态信号求出修正角B。在旋转修正部38中，例如，预先使表示左手的手掌离开的握持状态信号和作为修正角B的负的实数值(例如，-15° )相对应。另外，在旋转修正部38中，预先使表示右手的手掌离开的握持状态信号和作为修正角B的正的实数值(例如，15° )相对应，并使表示手掌未分离的握持状态信号和作为修正角B的O度相对应。
[0184]因此，关于表示左手的手掌离开的握持状态信号，操作输入方向Θ被进一步向左旋方向修正，关于表示右手的手掌离开的握持状态信号，操作输入方向Θ被进一步向右旋方向修正。由此，能够消除由握持状态的手指的可动范围、手指的移动带来的影响。
[0185]以下，关于方向盘11的握持状态的例子进行说明。
[0186]图16Α及图16Β是表示本变形例的方向盘11的握持状态的例子的概念图。这里，省略了操作面13Β的图示。
[0187]图16A示出了在方向盘11未被转向的情况下，操作者在使拇指接触操作面13A的同时使接触位置移动的状况。以操作面13A的下端为起点的朝向左上方的线段表示接触位置的轨迹la。操作者的左手的食指指尖、手掌、拇指的指肚部都与方向盘11的外周接触，因此握持状态检测部32判定为手掌未离开。
[0188]图16B示出了在方向盘11被向右转向的情况下，操作者在使手指接触操作面13A的同时使接触位置移动的状况。以操作面13A的下端为起点朝向左上方的线段表示接触位置的轨迹lb。此时，操作者的左手的食指指尖与方向盘11的外周接触，而手掌和拇指的指肚部从方向盘11离开。由此，握持状态检测部32判定为左手的手掌离开。此时，旋转修正部38与图16A相比以修正角B向左旋地修正操作输入方向Θ。在左手的手掌离开的情况下，拇指的朝向与未被转向的情况相比右旋偏移，从而操作检测部31所检测出的操作输入方向也容易比操作者的意图更向右旋地偏移。因此，在本变形例中，将所检测出的操作输入方向左旋修正，从而能够获得按照操作者的意图的操作输入方向。由此，对于用户来说，能够提高操作性。
[0189]另一方面，在方向盘11左旋转向的情况下，握持状态检测部32判定为左手的手掌离开。旋转修正部38与图16A相比以修正角B向右旋地修正对操作面13B (未图示)的操作输入方向Θ。该情况下，对于用户来说，也能够提高操作性。
[0190]如上所述，在本实施方式中，检测相对于安装在方向盘11上的操作输入部13的操作输入方向，在车辆处于行驶中时，将所检测出的操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部14上的图像的一部分。另外，在本实施方式中，作为与要素图像的至少任意一个相关的操作输入方向，使用所识别的方向。
[0191]由于作为与要素图像相关的操作输入方向使用与要素图像的配置相应的方向，所以不妨碍在要素图像的区域间进行移位的操作输入。由此，在行驶中进行操作输入时的操作性提高。
[0192]在上述说明中，以输入装置10被设置在车辆上的情况为例进行了说明，但在本实施方式中，不限于此。也可以在输入装置10或其一部分例如控制部22未被设置在车辆上的状态下实施，例如，生产、使用、转让、租赁、出口、进口、转让及租赁的提出。
[0193]此外，也可以通过计算机实现上述实施方式中的输入装置10的一部分，例如，操作检测部31、握持状态检测部32、选择部33、旋转修正判定部37、旋转修正部38、行驶状态判定部41、图像解析部42、显示控制部43、操作输入方向识别部44及操作输入方向控制部45。该情况下，也可以将用于实现该控制功能的程序存储在计算机可读取的存储介质中，通过使存储在该存储介质中的程序由计算机系统读入并执行来实现。此外，这里所谓的“计算机系统”是指内置于输入装置10中的计算机系统，包括OS及周边设备等硬件。另外，“计算机可读取的存储介质”是指软盘、磁光盘、R0M、CD-R0M等便携介质以及内置于计算机系统中的硬盘等存储装置。而且，“计算机可读取的存储介质”也可以指如通过互联网等网络或电话线等的通信线路发送程序的情况下的通信线那样地以短时间动态地保持程序的部件，也包括该情况下的作为服务器或客户端的计算机系统内部的易失性存储器那样地以一定时间保持程序的部件。另外，上述程序也可以用于实现上述功能的一部分，还可以通过与全部存储在计算机系统中的程序之间的组合来实现上述功能。
[0194]另外，上述实施方式中的输入装置10的一部分或全部也可以采用LSI (LargeScale Integrat1n ;大规模集成电路)等集成电路实现。输入装置10的各功能块既可以独立地处理器化，也可以一部分或全部集成而处理器化，另外，集成电路化的方法不限于LSI，也可以通过专用电路或通用处理器实现。另外，随着半导体技术的进步，在出现了代替LSI的集成电路化的技术的情况下，也可以使用由该技术实现的集成电路。
[0195]以上，参照附图详细说明了本发明的一实施方式，但具体的结构并不限于上述结构，在不脱离本发明的主旨的范围内能够进行各种设计变更等。
【权利要求】
1.一种输入装置，其特征在于，具有: 操作检测部，检测相对于安装在方向盘上的操作输入部的操作输入方向； 操作输入方向识别部，在车辆处于行驶中时，将所述操作检测部所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；和 操作输入方向控制部，作为与所述要素图像的至少任意一个相关的操作输入方向，使用由所述操作输入方向识别部识别出的方向。
2.如权利要求1所述的输入装置，其特征在于， 所述操作输入方向识别部将所述操作检测部所检测出的操作输入方向识别成所述要素图像的配置具有规则性的方向。
3.如权利要求1所述的输入装置，其特征在于，在不显示所述要素图像的余边部的比例比规定的比例高的情况下，所述操作输入方向识别部将所述操作输入方向识别成与所述要素图像的配置相应的方向。
4.如权利要求1所述的输入装置，其特征在于，所述操作输入方向识别部根据能够操作所述要素图像的操作输入方向的自由度，来判定是否将所述操作输入方向识别成与所述要素图像的配置相应的方向。
5.如权利要求1所述的输入装置，其特征在于，所述操作输入方向识别部将所述操作检测部所检测出的操作输 入方向识别成显示在所述图像显示部上的要素图像的组所配置的方向，在所述要素图像的组的某一个被指示时，将所述操作检测部所检测出的操作输入方向识别成在所述某一个的组中配置要素图像的方向。
6.如权利要求1所述的输入装置，其特征在于，还具有显示控制部，所述显示控制部在车辆处于行驶中时将配置所述要素图像的方向控制成预定方向。
7.如权利要求1~6中任一项所述的输入装置，其特征在于， 具有检测所述方向盘的转向角的转向角检测部， 所述操作输入方向控制部基于所述转向角检测部所检测出的转向角来判定是否修正所述操作输入方向，在修正所述操作输入方向的情况下，作为与所述要素图像的至少任意一个相关的操作输入方向，使用所述操作检测部所检测出的操作输入方向。
8.一种输入方法，是输入装置中的输入方法，其特征在于，具有: 操作检测过程，检测相对于安装在方向盘上的操作输入部的操作输入方向； 操作输入方向识别过程，在车辆处于行驶中时，将在所述操作检测过程中所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；和 操作输入方向控制过程，作为与所述要素图像的至少任意一个相关的操作输入方向，使用在所述操作输入方向识别过程中识别出的方向。
9.一种输入程序，其特征在于，用于使输入装置的计算机执行如下步骤: 操作检测步骤，检测与相对于安装在方向盘上的操作输入部的操作输入方向； 操作输入方向识别步骤，在车辆处于行驶中时，将在所述操作检测步骤中所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；操作输入方向控制步骤，作为与所述要素图像的至少任意一个相关的操作输入方向，使用在所述操作输 入方向识别步骤中识别出的方向。
【文档编号】B60R16/02GK104071097SQ201410116649
【公开日】2014年10月1日 申请日期:2014年3月26日 优先权日:2013年3月27日
【发明者】奥山晴子 申请人:本田技研工业株式会社
【专利摘要】本发明提供输入装置及输入方法。操作检测部检测与相对于安装在方向盘上的操作输入部的操作输入方向，操作输入方向识别部在车辆处于行驶中时，将所述操作检测部所检测出的操作输入方向识别成与要素图像的配置相应的方向，该要素图像构成显示在图像显示部上的图像的一部分。另外，作为与所述要素图像的至少任意一个相关的操作输入方向，操作输入方向控制部使用所述操作输入方向识别部所识别出的方向。
【专利说明】输入装置、输入方法及输入程序
【技术领域】
[0001]本发明涉及输入装置、输入方法及输入程序。
【背景技术】
[0002]以往，公知一种例如在车辆的方向盘上设置触控传感器来接受驾驶员在车辆的驾驶过程中进行的操作的输入设备。在所述输入设备中，为确保操作性，使在行驶过程中接受的操作比停车时接受的操作简化。
[0003]例如，日本特开2011-201497号记载的操作接受装置取得表示相对于转向操作部的接触位置的接触位置信息，若车辆处于停车中，则显示出表示与规定操作相关的操作指示的候选项即第一选择候选项的图像，若车辆处于行驶中，则显示出表示与操作相关的操作指示的候选项且是与第一选择候选项不同的二选一的第二选择候选项的图像，若车辆处于停车中，则基于接触位置接受从第一选择候选项中择一的第一操作指示，若车辆处于行驶过程中，则基于接触位置接受从二选一的第二选择候选项中择一的第二操作指示。
[0004]日本特开2011-201497号记载的操作接受装置由于是选择所显示的规定的第一选择候选项或第二选择候选项的某一个，因此不能适用于任意的图像，例如预先生成的图像。另外，不论图像的性状如何，所接受的选择候选项都会被变更。因此，对于操作者来说，操作性未必会提高。
【发明内容】
[0005]本发明是鉴于上述问题点而研发的，其目的是提供提高了在行驶中进行操作输入时的操作性的输入装置、输入方法及输入程序。
[0006](I)本发明的一方式的输入装置具有:操作检测部，检测相对于安装在方向盘上的操作输入部的操作输入方向；操作输入方向识别部，在车辆处于行驶中时，将所述操作检测部所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；和操作输入方向控制部，作为与所述要素图像的至少任意一个相关的操作输入方向，使用由所述操作输入方向识别部识别出的方向。
[0007](2)在上述(I)的方式中，可以是，所述操作输入方向识别部将所述操作检测部所检测出的操作输入方向识别成所述要素图像的配置具有规则性的方向。
[0008](3)在上述(I)或(2)的方式中，可以是，在不显示所述要素图像的余边部的比例比规定的比例高的情况下，所述操作输入方向识别部将所述操作输入方向识别成与所述要素图像的配置相应的方向。
[0009](4)在上述(I)至(3)中的任意一个方式中，可以是，所述操作输入方向识别部根据能够操作所述要素图像的操作输入方向的自由度，来判定是否限制所述操作输入方向。
[0010](5)在上述(I)至(4)中的任意一个方式中，可以是，所述操作输入方向识别部将所述操作检测部所检测出的操作输入方向识别成显示在所述图像显示部上的要素图像的组所配置的方向，在所述要素图像的组的某一个被指示时，将所述操作检测部所检测出的操作输入方向识别成在所述某一个的组中配置要素图像的方向。
[0011](6)在上述(I)的方式中，还可以具有显示控制部，所述显示控制部在车辆处于行驶中时将配置所述要素图像的方向控制成预定方向。
[0012](7)在上述(I)至(6)中的任意一个方式中，还可以具有检测所述方向盘的转向角的转向角检测部，所述操作输入方向控制部基于所述转向角检测部所检测出的转向角来判定是否修正所述操作输入方向，在修正所述操作输入方向的情况下，作为与所述要素图像的至少任意一个相关的操作输入方向，使用所述操作检测部所检测出的操作输入方向。
[0013](8)本发明的一方式的输入方法是输入装置中的输入方法，其中，具有:操作检测过程，检测相对于安装在方向盘上的操作输入部的操作输入方向；操作输入方向识别过程，在车辆处于行驶中时，将在所述操作检测过程中所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；和操作输入方向控制过程，作为与所述要素图像的至少任意一个相关的操作输入方向，使用在所述操作输入方向识别过程中识别出的方向。
[0014](9)本发明的一方式的输入程序用于使输入装置的计算机执行如下步骤:操作检测步骤，检测相对于安装在方向盘上的操作输入部的操作输入方向；操作输入方向识别步骤，在车辆处于行驶中时，将在所述操作检测步骤中所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；操作输入方向控制步骤，作为与所述要素图像的至少任意一个相关的操作输入方向，使用在所述操作输入方向识别步骤中识别出的方向。
[0015]根据上述(1)、(8)、(9)的方式，作为与要素图像相关的操作输入方向，使用与要素图像的配置相应的方向，从而不妨碍在与要素图像相关的区域间进行移位的操作输入。由此，在行驶过程中进行操作输入时的操作性提高。
[0016]上述(2)的情况下，由于被限制的操作方向是要素图像的具有规则性的方向，所以用户能够顺畅地进行在与沿该方向排列的要素图像相关的区域间进行移位的操作输入。
[0017]上述(3)的情况下，余边部的比例高，因此即使在作为选择对象的要素图像的候选多时，也能够通过将操作输入方向限制成与要素图像的配置相应的方向，来缩小该候选的范围。由此，用户能够容易进行要素图像的选择。
[0018]上述(4)的情况下，根据操作输入方向的自由度，操作输入方向被限制成与要素图像的配置相应的方向，由此，能够缩小成为选择对象的要素图像的候选的范围，从而用户能够容易地进行要素图像的选择。
[0019]上述(5)的情况下，能够进行要素图像的组的选择、所选择的组中的要素图像的选择，并通过用户阶段性地进行操作输入，即使操作方向被制限也能够顺畅地进行要素图像的选择。
[0020]上述(6)的情况下，通过生成沿预定的方向配置了要素图像的图像，由此，关于独自生成的图像，即使操作输入方向被限制成与要素图像的配置相应的方向，也能够抑制进行行驶中的操作输入时的操作性的降低。
[0021]上述(7)的情况下，不限制根据所检测的转向角修正的操作方向，由此，能够将修正的操作方向的精度确保为高精度。
【专利附图】
【附图说明】
[0022]图1是表示本发明的实施方式的输入装置的外观的表面图。
[0023]图2是表示本实施方式的输入装置的结构的概要框图。
[0024]图3A是表示相对于本实施方式的输入装置的操作面的操作坐标系和操作输入方向的例子的图。
[0025]图3B是表示相对于本实施方式的输入装置的操作面的操作坐标系和操作输入方向的例子的图。
[0026]图4A是表示本实施方式的输入装置的显示画面上的操作对象的移动方向的例子的图。
[0027]图4B是表示本实施方式的输入装置的显示画面上的操作对象的移动方向的例子的图。
[0028]图5是表不本实施方式的输入处理的一例的流程图。
[0029]图6是表示本实施方式的输入处理的另一例的流程图。
[0030]图7A是表示操作输入方向的控制例(I)的图。
[0031 ]图7B是表示操作输入方向的控制例(I)的图。
[0032]图8A是表示操作输入方向的控制例(2 )的图。
[0033]图8B是表示操作输入方向的控制例(2 )的图。
[0034]图8C是表示操作输入方向的控制例(2 )的图。
[0035]图9A是表示操作输入方向的控制例(3 )的图。
[0036]图9B是表示操作输入方向的控制例(3 )的图。
[0037]图9C是表示操作输入方向的控制例(3 )的图。
[0038]图1OA是表示操作输入方向的控制例(4)的图。
[0039]图1OB是表示操作输入方向的控制例(4)的图。
[0040]图1OC是表示操作输入方向的控制例(4)的图。
[0041 ]图1IA是表示操作输入方向的控制例(5 )的图。
[0042]图1IB是表示操作输入方向的控制例(5 )的图。
[0043]图12A是表示操作输入方向的控制例(6)的图。
[0044]图12B是表示操作输入方向的控制例(6)的图。
[0045]图13是表示操作输入方向的控制例(7)的图。
[0046]图14A是表示操作输入方向的控制例(8)的图。
[0047]图14B是表示操作输入方向的控制例(8)的图。
[0048]图15是表示操作输入方向的控制例(9)的图。
[0049]图16A是表示本变形例的方向盘11的握持状态的例子的概念图。
[0050]图16B是表示本变形例的方向盘11的握持状态的例子的概念图。
【具体实施方式】
[0051 ]以下，参照【专利附图】
【附图说明】本发明的一实施方式。
[0052]图1是表示本实施方式的输入装置10的外观的表面图。
[0053]本实施方式的输入装置10设置在车辆的方向盘11上，包括供操作者握持的握持部12、操作输入部13、图像显示部14 (图2)及手指传感器15 (图2)。输入装置10是例如引导直到目的地的行驶路径的路径引导装置(例如，导航装置)、再生音乐等声音内容的音响装置(例如，音频装置)、再生所接收的通过广播传送的声音的音频接收装置，或是至少具有它们中的某些功能的复合机。
[0054]操作输入部13具有设置在握持部12的表面上并与操作者的操作物例如手指接触而接受操作输入的操作面13A、13B。操作输入部13例如是具有触控传感器的触控板。触控传感器是例如静电容量传感器。操作输入部13将表示所检测到的接触区域的接触信号向后述的控制部22 (后述)输出。操作面13A、13B例如是触控传感器。在以下的说明中，在不区别操作面13A、13B的情况下，有时称为操作面13A或操作面13A等。
[0055]此外，操作输入部13不限于触控传感器或具有触控传感器的触控板。操作输入部13只要是能够检测出通过操作输入使操作物接触的位置、该位置移动的移动方向、力的方向，或者是通过操作输入而向至少I方向旋转的结构，则可以是任意的。操作输入部13不限于静电传感器，也可以是例如压力传感器、磁传感器、由它们的任意组合构成的开关、触摸板、旋转开关等。
[0056]图像显示部14具有不论方向盘11是否旋转、在车内的位置都固定的显示画面14a。图像显示部14基于从控制部22 (图2)输入的图像信号，将图像以操作者例如驾驶员能够目视观察到的方式显示在显示画面14a上。显示在显示画面14a上的图像例如包括画面部件。
[0057]画面部件是由操作输入部13接受对显示在显示画面14a上的显示区域进行的操作输入的图像，即成为操作对象的图像。通过画面部件接受的操作输入有时用于输入装置10的工作。画面部件也被称为UI (User Interface ;用户界面)部件、⑶I (Graphic UserInterface ;图形用户界面)组件，例如图标、按钮、链接等。
[0058]图像显示部14例如是将显示画面14a配置在车辆的中央控制台的上部的中央控制台显示器、将车辆前窗的表面作为显示画面14a来显示图像的平视显示器、将显示画面14a配置在车辆的仪表板(仪表盘)上的多信息显示器、将显示画面14a配置在车辆的仪表板的各种计量器类附近的显示器等。
[0059]显示画面14a的配置不论方向盘11是否旋转都是固定的。
[0060]手指传感器15具有检测面15A、15B,该检测面15A、15B主要设置在握持部12的侧面上，用于检测出操作者的操作物所接触的握持区域。手指传感器15将表示所检测到的握持区域的握持区域信号向控制部22输出。检测面15A、15B例如是静电容量传感器、光传感器、温度传感器、压力传感器等。在以下的说明中，在不区别检测面15A、15B的情况下，有时称为检测面15A或检测面15A等。
[0061](输入装置的结构)
[0062]图2是表示本实施方式的输入装置10的结构的概要框图。
[0063]输入装置10包括操作输入部13、图像显示部14、手指传感器15、转向角传感器(转向角检测部)17、速度传感器18及控制部22。
[0064]速度传感器18检测车辆行驶的速度，将表示所检测出的速度的速度信号向控制部22输出。
[0065]控制部22控制构成输入装置10的各部分的工作。控制部22例如由CPU(CentralProcessing Unit ;中央处理器)、FPGA(Field Programmable Gate Array ;现场可编程门阵列)等处理装置构成。控制部22从自身具有的存储介质(例如，ROM (Read Only Memory ；只读存储器)读出程序，并执行所读出的程序来发挥各种功能。控制部22例如取得图像信号，并将所取得的图像信号向图像显示部14输出，由此是图像显示在图像显示部14上。在控制部22使图像显示部14显示的各I张(帧)图像中，包含作为I个或多个要素图像的画面部件。
[0066]画面部件是指成为操作对象的图像。也就是说，控制部22是在从操作输入部13输入的接触信号所表示的接触位置包含于画面部件的显示区域中时(按下、指示)，关于该画面部件进行预定的处理。画面部件也被称为π部件、Π组件等。画面部件例如有图标、链接、按钮等。
[0067]在画面部件中，显示在图像显示部14上的显示位置根据OS (Operating System ；操作系统)或应用程序等程序而被预先设定。另外，控制部22是在执行程序时确定显示位置。另外，控制部22基于从操作输入部13输入的接触信号所表示的接触位置来确定画面部件的显示位置。
[0068]控制部22构成为例如包括:操作检测部31、握持状态检测部32、选择部33、旋转修正判定部37、旋转修正部38、行驶状态判定部41、图像解析部42、显示控制部43、操作输入方向识别部44及操作输入方向控制部45。
[0069]操作检测部31以预定的时间间隔(例如，1ms)判别从操作输入部13输入的接触信号所表示的接触区域，将判别出的各接触区域的中心点作为操作物与操作面13A等接触的接触位置而算出。这是因为，在操作面13A上操作物所接触的接触区域具有大小，接触区域有时存在多个。这里，操作检测部31在接触区域的判别中，将空间上相互连续的接触区域判定为属于I个接触区域。操作检测部31生成表示接触区域和接触位置的接触操作信号。
[0070]操作检测部31也可以基于所输入的接触信号检测接触区域的有无、按压力、接触位置的移动方向(操作输入方向)、移动量等，并使检测出的信息包含于接触操作信号。这里，操作检测部31将从之前刚刚的接触位置朝向当前的接触位置的方向确定为操作输入方向，将该接触位置间的距离确定为移动量。另外，操作检测部31也可以基于判别或算出的信息判别手势操作的类别，并使表示判别出的类别的信息包含于接触操作信号，手势操作的类别有例如对操作面13A进行敲击(点击)、划动(滑动)、抓取、跟随模仿、扭转、扫动(拂动)等的操作。操作检测部31也可以基于操作物与操作面13A接触的接触位置的轨迹来判定手势操作的类别。
[0071]操作检测部31将所生成的接触操作信号向选择部33、显示控制部43、操作输入方向识别部44及操作输入方向控制部45输出。
[0072]握持状态检测部32基于从手指传感器15输入的握持区域信号来检测握持方向盘11的手指的状态(握持状态)。握持状态检测部32例如在下述情况下判定为左手的手掌(尤其，根部(手腕侧))离开，所述情况是指:在方向盘11的左侧，对于所输入的握持区域信号所表示的握持区域而言，与从基准线左旋的区域(下方)相比，从基准线右旋的区域(上方)比预定的区域的基准值大。基准线是指在方向盘11未被转向的状态下穿过其中心的水平线。这是因为，方向盘11被向右侧转向的情况下，存在着操作者的指尖与方向盘11接触而手掌却从方向盘11离开的倾向。此外，握持状态检测部32还可以在下述情况下判定为左手的手掌离开，所述情况是指:对于转向角传感器17输入的转向角信号所表示的转向角而言，判定为预定的右旋的转向角A比预定的转向角大。
[0073]另外，握持状态检测部32在下述情况下判定为右手的手掌(尤其，根部(手腕侧))离开，所述情况是指:在方向盘11的右侧，对于所输入的握持区域信号所表示的握持区域而言，与从基准线右旋的区域(下方)相比，左旋的区域(上方)比预定的区域的基准值大。此夕卜，握持状态检测部32还可以在下述情况下判定为右手的手掌离开，所述情况是指:对于从转向角传感器17输入的转向角信号所表示的转向角而言，判定为预定的左旋的转向角A比预定的转向角大。握持状态检测部32也可以在除此以外的情况下判定为手掌未离开。
[0074]握持状态检测部32将表示判定出的握持状态的握持状态信号向旋转修正部38输出。
[0075]选择部33可以根据例如从操作检测部31输入的接触操作信号、从其他开关(未图示)输入的操作输入信号(例如，0N/0FF信号)等，来选择是否使用操作输入方向识别部44所识别的方向(后述)。是否使用操作输入方向识别部44所识别的方向也可以在例如从操作检测部31输入的接触操作信号表示预定类别的操作时来切换(切换顺序)。
[0076]预定类别的操作是指例如以下操作:(1)在预定的区域中，接触和非接触断续的操作(例如，连击、双击等)；(2)在同一位置保持接触的状态持续比预定的时间(例如，3秒)长的操作(例如，长按)；(3)与预定的区域(例如，修正切换按钮的显示区域)的接触。
[0077]选择部33将表示是否使用操作输入方向识别部44识别出的方向的选择信号向操作输入方向控制部45输出。
[0078]此外，在从旋转修正判定部37输入的旋转修正判定信号表示对操作坐标系进行修正的情况下，选择部33可以选择操作输入方向控制部45不使用操作输入方向识别部44所识别出的方向，也就是说选择使用操作检测部31所检测出的操作输入方向。
[0079]旋转修正判定部37判定是否对伴随方向盘11的旋转而在操作面13A等(图1)上检测接触操作时作为基准的坐标系(操作坐标系)进行修正。例如，在从转向角传感器17输入的转向角信号所表示的转向角比预定的转向角的阈值大的情况下，旋转修正判定部37判定为修正关于操作面13A等的操作坐标系。在该转向角信号表示的转向角与预定的转向角的阈值相等或比该阈值小的情况下，旋转修正判定部37判定为不修正关于操作面13A等的操作坐标系。旋转修正判定部37将表示是否修正该操作坐标系的旋转修正判定信号向旋转修正部38、显示控制部43及操作输入方向控制部45输出。
[0080]另外，旋转修正判定部37也可以根据例如从操作检测部31输入的接触操作信号、从其他开关(未图示)输入的旋转修正切换信号(例如，0N/0FF信号)等，来选择是否修正该操作坐标系。关于是否修正操作坐标系，也可以在例如从操作检测部31输入的接触操作信号表示预定类别的操作时来切换是否修正该操作坐标系(切换顺序)。预定类别的操作是指例如以下操作:(I)在预定的区域中，接触和非接触断续的操作(例如，连击等)；(2)在同一位置保持接触的状态持续比预定的时间(例如，3秒)长的操作(例如，长按)；(3)与预定的区域(例如，修正切换按钮的显示区域)的接触。
[0081]在从旋转修正判定部37输入的旋转修正判定信号表示对操作坐标系进行修正的情况下，旋转修正部38修正从操作检测部31输入的接触操作信号所表示的接触位置，由此，关于规定种类的画面部件(例如，图标、滚动对象的要素图像、拖动对象的要素图像等)，与接触位置对应的在显示画面14a上的显示位置、表示其移动的移动方向会受到控制。
[0082]这里，在旋转修正部38中预先存储有操作检测部31检测操作输入方向时所使用的关于操作面13A的坐标系(操作坐标系)、与确定在图像显示部14的显示画面14a上显示要素图像的位置时所使用的坐标系(显示坐标系)之间的对应关系。操作坐标系、显示坐标系是例如具有相互正交的2个坐标轴的二维的正交坐标系。操作输入方向是指操作检测部31所检测出的接触位置的移动方向。操作坐标系与显示坐标系的对应关系例如用这些坐标系之间的坐标轴(例如，X轴、Y轴)间的旋转角或坐标值(例如，X坐标值、Y坐标值)间的放大率表示。
[0083]旋转修正部38利用所存储的对应关系，确定与被输入的接触操作信号所表示的接触位置及移动方向(操作坐标系)对应的位置及移动方向(显示坐标系)。
[0084]例如，在操作者对方向盘11转向时，如图3A及3B所示，操作面13A与方向盘11一起围绕其旋转轴旋转。此时，认为是操作者在使握持方向盘11的手的手指(例如，左手拇指)与操作面13A保持接触的同时向规定的操作输入方向移动的情况。关于操作面13A的操作坐标系的X方向、Y方向分别从未执行转向的情况以方向盘的转向角A变化。此外，在图3A及3B中，省略了检测面15A、15B的图示。
[0085]在方向盘11未被转向的情况下(图3A)，以操作面13A的操作坐标系为基准由操作检测部31检测的操作输入方向被预先设定为与以显示画面14a的显示坐标系为基准由旋转修正部38确定的移动方向一致。在图4A及4B所示的例子中，X轴、Y轴的方向分别是水平方向、垂直方向。此时，形成关于操作面13A的操作坐标系的X轴、Y轴的方向、和形成关于显示画面14a的显示坐标系的X轴、Y轴的方向一致。在图4A所示的例子中，移动方向是Θ ?
[0086]另一方面，在方向盘11被转向的情况下(图3B)，以操作面13A的操作坐标系为基准由操作检测部31检测的操作输入方向从以显示画面14a的显示坐标系为基准由旋转修正部38确定的移动方向以方向盘11的转向角A偏移。在图4B所示的例子中，修正前的移动方向是θ _A。
[0087]因此，旋转修正部38以使操作面13A的操作坐标系的X轴、Y轴的方向以方向盘11的转向角A旋转的方式进行修正时，经修正的X轴、Y轴的方向与未进行方向盘11的转向的情况下的操作坐标系的X轴、Y轴的方向一致。随之，未进行方向盘11的转向的情况、和进行了转向的情况下，移动方向一致。在图4B所示的例子中，修正后的移动方向成为Θ。
[0088]返回图2，行驶状态判定部41例如基于从速度传感器18输入的速度信号判定车辆的行驶状态。行驶状态判定部41例如在速度信号表示的速度与预定的速度的阈值(例如，时速Okm)相等的情况下，判定为车辆处于停止中，在速度信号表示的速度比预定的速度的阈值高的情况下，判定为车辆处于行驶中。行驶状态判定部41将表示所判定的行驶状态的行驶状态信号向操作输入方向识别部44输出。
[0089]此外，在本实施方式中，速度的阈值也可以是充分地近似于时速Okm的低速度(例如，时速4km)。该情况下，行驶状态判定部41例如在向前行驶中速度信号所表示的速度与预定的速度的阈值(例如，时速Okm)相等或比该阈值低的情况下，判定为车辆处于停止中。另外，行驶状态判定部41例如在向前行驶中速度信号所表示的速度比其速度的阈值高的情况下，判定为车辆处于行驶中。由此，在车辆以充分低的速度行驶从而对驾驶要求的注意力较低的情况下，可以视为车辆处于停止中。
[0090]如下所述，在判定为处于停止中时，对操作输入方向的限制被解除。
[0091]图像解析部42对在图像显示部14上显示的图像的配置进行解析。图像解析部42判定各帧的图像所包含的要素图像的配置特征。图像解析部42也可以解析例如水平方向(X方向)或垂直方向(Y方向)上的要素图像的配置规则性、未被要素图像占据的余边部的比例及组构成的至少任意一个。图像解析部42将表示解析出的要素图像的配置特征的配置信息向显示控制部43及操作输入方向识别部44输出。
[0092]另外，作为各帧的图像所包含的要素图像，若包含有预定种类的画面部件，则图像解析部42也可以使表示该画面部件的类别的信息包含于配置信息，并输出给操作输入方向识别部44。作为预定种类的画面部件，可以将操作输入方向自由度高的画面部件(例如，指针)或操作时要求高自由度的操作输入方向的画面部件(例如，旋转拨盘)事先设定于图像解析部42。
[0093]对要素图像的配置规则性进行解析时，图像解析部42可以例如关于各帧的图像，算出原图像与向水平方向或垂直方向移位了的图像之间的自相关性。在存在所算出的自相关性比预定的自相关阈值大的位移量，且该位移量的数量比规定的数量(例如，3个)少的情况下，图像解析部42判定为在该位移方向上的要素图像的配置具有规则性。这是因为该位移方向与要素图像所配置的方向相当。在不存在所算出的自相关性比预定的自相关阈值大的位移量，或该位移量的数量与规定的数量(例如，3个)相等或比该数量多的情况下，图像解析部42判定为在该位移方向上的要素图像的配置没有规则性。
[0094]即使在图像解析部42判定为具有规则性的情况下，若各帧的图像中包含预定种类的画面部件，则也使表示该画面部件的类别的信息包含于配置信息并向操作输入方向识别部44输出。
[0095]解析余边部的比例时，图像解析部42算出沿水平方向或垂直方向相互相邻的要素图像间的间隔、该间隔的最小值、平均值等统计量、余边部的面积比等特征量。所算出的特征量比预定的特征量的阈值小时，图像解析部42判定为余边部的比例不充分，所算出的特征量与预定的特征量的阈值相等、或比该阈值大时，图像解析部42判定为余边部的比例充分。
[0096]解析组构成时，图像解析部42判定为相互相邻的要素图像间接近，即要素图像间的间隔比预定的间隔小的要素图像彼此属于同一组。由此，按照作为与其他区域相比要素图像更密集的显示区域的组来区分要素图像。即，图像解析部42判定各帧的图像所包含的要素图像包含于哪个组。而且，图像解析部42也可以在各组内、组间解析规则性。
[0097]此外，关于显示控制部43对显示进行了控制的图像，图像解析部42也可以省略解析要素图像的配置的特征的处理。
[0098]显示控制部43基于从行驶状态判定部41输入的行驶状态信号来控制包含于各帧的图像中且成为其一部分的要素图像(例如，画面部件)的配置。在显示控制部43中成为控制对象的图像是由要素图像构成的图像，且是能够由控制部22变更要素图像的配置的图像或者能够独自地生成的图像(例如，列表显示画面、功能选择等的设定画面等)。即，配置不能变更的已完成图像(例如，图像内容等)即使是包含要素图像的图像也不能成为显示控制部43的控制对象。
[0099]例如，在所输入的行驶状态信号表示处于行驶中的情况下，显示控制部43沿预定的方向(例如，水平方向或垂直方向中的某一方)按规定个数以预定间隔配置规定种类的要素图像并合成各帧的图像。显示控制部43将表示所合成的图像的图像信号向图像显示部14输出，并将表示在该配置的方向上配置要素图像这一情况的配置信息向操作输入方向识别部44输出。这是因为，在这样的情况下，要求向该配置方向的操作输入，而向除此以外的方向(例如，与配置方向正交的方向)的操作输入的必要性进一步降低。
[0100]例如，所输入的行驶状态信号表示处于停止中的情况下，显示控制部43以预定的任意的配置(例如，二维的网格点上、圆周上)配置要素图像并合成各帧的图像。该情况下的要素图像的配置可以是与行驶中的配置相比、方向的自由度高的配置，也可以与行驶中的配置相同。显示控制部43将表示所合成图像的图像信号向图像显示部14输出，并将表示要素图像的配置没有规则性这一情况的配置信息向操作输入方向识别部44输出。
[0101]此外，在表示处于停止中的行驶状态信号被输入的情况下，在从选择部33输入选择信号以表示不使用操作输入方向识别部44所识别的方向这一情况之前的期间，显示控制部43可以沿预定的方向配置要素图像并合成图像。车辆停止时，不论操作者的意图怎样，在图像显示部14上显示的图像的形态都不变更，从而能够提高操作性。
[0102]此外，显示控制部43在以下的情况下，也可以以预定的任意的配置来配置要素图像并合成各帧的图像。例如，从选择部33输入的选择信号表示不使用操作输入方向识别部44所识别的方向的情况、或从旋转修正判定部37输入的旋转修正判定信号表示不修正操作坐标的情况。
[0103]操作输入方向识别部44基于从行驶状态判定部41输入的行驶状态信号及从图像解析部42或显示控制部43输入的配置信息，识别从操作检测部31输入的接触操作信号所表不的操作输入方向。
[0104]这里，在所输入的行驶状态信号表示处于行驶中的情况下，操作输入方向识别部44识别成所输入的接触操作信号表示的操作输入方向是与从图像解析部42或显示控制部43输入的配置信息所表示的要素图像的配置相应的方向。也就是说，操作输入方向识别部44将所输入的接触操作信号所表示的操作输入方向视为配置信息所表示的方向、且要素图像的配置方向。
[0105]操作输入方向识别部44在识别成操作输入方向是与要素图像的配置相应的方向的情况下，直接采用该方向的坐标、变化量，而作为与该方向垂直的方向上的坐标则采用接触开始时刻的坐标(固定值)。例如，在与要素图像的配置相应的方向是水平方向的情况下，操作输入方向识别部44将接触操作信号所表示的操作输入方向识别成水平方向。这里，操作输入方向识别部44直接采用接触位置的水平方向的坐标、变化量，而对于接触位置的垂直方向的坐标，则采用接触开始时刻的垂直方向的坐标，将变化量定为零。操作输入方向识别部44将表示所采用的坐标、变化量的识别操作信号向操作输入方向控制部45输出。该识别操作信号表示接触位置在所识别的操作输入方向上的变化。
[0106]另一方面，操作输入方向识别部44在从操作检测部31输入的行驶状态信号表示处于停止中的情况下，停止将所输入的接触操作信号所表示的操作输入方向识别成与所输入的配置信息所表示的要素图像的配置相应的方向。另外，操作输入方向识别部44在该情况下，停止识别操作信号向操作输入方向控制部45的输出。
[0107]操作输入方向识别部44也可以例如如(a)?(C)中的任意一个所示的那样识别将操作输入方向。
[0108](a)将各帧的图像所包含的要素图像的配置的具有规则性的方向识别成配置要素图像的方向。
[0109]操作输入方向识别部44例如将操作输入方向识别成是在从图像解析部42输入的配置信息所表示的要素图像的配置中具有规则性的方向。关于操作输入方向的控制例，使用图7A及图7B、图8A?图8C、图1OA?图1OC在后面说明。
[0110](b)基于未显示各帧的图像中所包含的要素图像的余边部的比例，确定是否将操作输入方向识别成与要素图像的配置相应的方向。
[0111]操作输入方向识别部44例如在从图像解析部42输入的配置信息表示余边部的比例充分的情况，将操作输入方向识别成与配置信息表示的要素图像的配置相应的方向。关于操作输入方向的控制例，使用图1OA?图1OC在后面说明。
[0112](c)将操作输入方向识别成各帧的图像中所包含的要素图像的组的配置方向，在根据操作输入而某一组被选择时，将操作输入方向识别成所选择的组中所包含的要素图像的配置方向。在各组的显示区域中，要素图像比其他区域密集。
[0113]操作输入方向识别部44基于从图像解析部42输入的配置信息所表示的组构成及属于各组的要素图像的配置，进行识别该操作输入方向的处理。关于操作输入方向的控制例，使用图9A?图9C在后面说明。
[0114]操作输入方向控制部45从操作输入方向识别部44被输入识别操作信号的情况下，关于至少任意一个要素图像，进行使用了该识别操作信号所表示的操作输入方向的处理。关于要素图像的处理，例如是使作为画面部件的一种的指针的显示位置或指示的位置移动的处理，指示作为画面部件的一种的图标使其移动的与拖动操作相关的处理。使用了操作输入方向的处理例如是进行与沿该操作输入方向的移动相关的处理，例如进行使指针的显示位置或指示的位置沿该操作输入方向移动的处理、进行指示图标使其沿该操作输入方向移动的处理。由此，在车辆行驶时，操作输入方向被限制在被识别的方向。成为处理对象的要素图像是所配置的多个要素图像的一部分或全部，也就是说，可以是只是某I个，也可以是多个。
[0115]另一方面，识别操作信号未被输入的情况下，操作输入方向控制部45使用从操作检测部31输入的接触操作信号表示的操作输入方向进行关于要素图像的处理。这样的情况下，操作输入方向没有特别限制。
[0116]另外，在从选择部33输入的选择信号表示不进行操作输入方向的限制的情况下，操作输入方向控制部45也使用从操作检测部31输入的接触操作信号表示的操作输入方向进行关于要素图像的处理。除此以外，操作输入方向控制部45在以下的(d)、(e)的情况下，也使用从操作检测部31输入的接触操作信号表示的操作输入方向进行关于要素图像的处理。
[0117](d)根据转向角修正操作输入方向的情况，也就是，对于操作输入方向控制部45而言，从旋转修正判定部37输入的旋转修正判定信号表不修正操作坐标系这一,清况。关于操作输入方向的控制例，使用图15在后面说明。
[0118](e)各帧的图像包含预定种类的画面部件的情况，例如，从图像解析部42输入的配置信息所表示的种类的画面部件符合该预定种类的画面部件的情况。预定种类的画面部件例如是操作输入方向的自由度高的画面部件(例如，指针)或操作时要求高自由度的操作输入方向的画面部件(例如，旋转拨盘)。关于操作输入方向的控制例，使用图8A?图8C、图1lA?图14B在后面说明。
[0119](输入处理)
[0120]以下，关于本实施方式中的输入处理的例子进行说明。
[0121]图5是表不本实施方式的输入处理的一例的流程图。
[0122](步骤S101)行驶状态判定部41基于从速度传感器18输入的速度信号判定车辆是处于行驶中还是处于停止中。在判定为处于行驶中的情况下(步骤SlOl是)，进入步骤S102。在判定为处于停止中的情况下(步骤SlOl否)，进入步骤S107。
[0123](步骤S102)图像解析部42解析在图像显示部14上显示的图像的各帧中所包含的要素图像的配置，例如有无规则性、余边部的比例、有无预定种类的画面部件。然后，进入步骤S103。
[0124](步骤S103)在图像解析部42中，在判定为有规则性的情况下(步骤S103是)，进入步骤S104。在判定为没有规则性的情况下(步骤S103否)，进入步骤S107。
[0125](步骤S104)在图像解析部42中，在判定为没有配置要素图像的余边部的比例是充分的情况下(步骤S104是)，进入步骤S105。
[0126]在判定为余边部的比例不充分的情况下(步骤S104否)，进入步骤S107。
[0127](步骤S105)在图像解析部42中，在判定为具有预定种类的画面部件的情况下(步骤S105是)，进入步骤S106。在判定为没有预定种类的画面部件的情况下(步骤S105否)，进入步骤S107。
[0128](步骤S106)操作输入方向识别部44将相对于操作输入部13的接触位置的移动方向即操作输入方向识别成例如被判定为有规则性的方向。操作输入方向控制部45关于要素图像进行使用了操作输入方向识别部44所识别的操作输入方向的处理。然后，结束本流程的处理。
[0129](步骤S107)操作输入方向控制部45关于要素图像进行使用了操作检测部31所检测的操作输入方向的处理。然后，结束本流程的处理。
[0130]以下，关于本实施方式的输入处理的其他例进行说明。
[0131]图6是表示本实施方式的输入处理的其他例的流程图。
[0132]图6所示的输入处理具有图5所示的输入处理中的步骤S101，并代替步骤S103?S105而具有步骤Slll?S114。在图6所示的输入处理中，若在步骤SlOl中判定为处于行驶中(步骤SlOl是)，则进入步骤S111。若判定为处于停止中(步骤SlOl否)，则进入步骤S112。
[0133](步骤S111)显示控制部43沿预定的方向(例如，水平方向)配置要素图像并合成各帧的图像。然后，进入步骤S112。
[0134](步骤S112)操作输入方向识别部44将操作检测部31所检测的操作输入方向识别成在步骤Slll中确定的方向。操作输入方向控制部45关于要素图像进行使用了操作输入方向识别部44所识别的操作输入方向的处理。然后，结束本流程的处理。
[0135](步骤S113)显示控制部43以与在步骤Slll中确定的配置相比、方向的自由度高的配置(例如，二维的网格点上)配置要素图像并合成各帧的图像。然后，进入步骤S114。
[0136](步骤S114)操作输入方向控制部45关于要素图像进行使用了操作检测部31所检测的操作输入方向的处理。然后，结束本流程的处理。
[0137](操作输入方向的控制例)
[0138]以下，关于本实施方式的操作输入方向的控制例进行说明。
[0139]图7A及图7B是表示操作输入方向的控制例(I)的图。
[0140]在图7A中，在显示画面14a上显示了 4个图标102a?102d沿水平方向等间隔地配置的图像。此时，表示具有沿水平方向的规则性的配置信息被输入给操作输入方向识别部44。在从行驶状态判定部41输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别为双箭头所示的水平方向，并通过操作输入方向控制部45将操作输入方向限定成水平方向(简易模式(Simple Mode))。
[0141]在图7B中，与图7A同样地在显示画面14a上显示4个图标102a?102d。此时，表示车辆处于停止中的行驶状态信号从行驶状态判定部41被输入给操作输入方向识别部44，于是，将操作输入方向识别成水平方向的处理停止。由于操作输入方向控制部45使用操作检测部31所检测的操作输入方向，所以如双箭头所示，除了水平方向以外，沿垂直方向的操作输入方向也能够接受(标准模式(Normal Mode))。
[0142]因此，即使车辆的行驶状态例如是车辆处于行驶中，也由于操作输入方向被限制成要素图像的配置方向，所以能够抑制操作性的降低。另外，在车辆停止的情况下，操作输入方向的限制被解除时的操作性的变化受到抑制，操作者不会产生不适感。由此，作为整体，操作性提闻。
[0143]图8A?图8C是表示操作输入方向的控制例(2 )的图。
[0144]在图8A中，在显示画面14a上，显示3个列表103a?103c沿水平方向等间隔地配置的图像。列表103a?103c分别是表示I行文字列的I行列表，在该配置中具有沿水平方向的规则性。也就是说，在列表103a?103c中，不需要沿垂直方向的操作，但需要沿水平方向的操作。换言之，具有沿水平方向的自由度。此时，表示具有沿水平方向的规则性的配置信息被输入给操作输入方向识别部44。
[0145]在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别成双箭头所示的水平方向，通过操作输入方向控制部45将操作输入方向限制成水平方向。
[0146]在图8B中，在显示画面14a上，显示有包含I个列表104的图像。列表104是能够选择沿垂直方向配置的3行文字列中的任意一个的3行列表。在列表104中，需要接受沿垂直方向的操作，没有沿水平方向的自由度。此时，表示3行列表的配置信息被输入给操作输入方向控制部45。在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别成双箭头所示的垂直方向，通过操作输入方向控制部45将操作输入方向限制成垂直方向。
[0147]在图8C中，在显示画面14a上，显示包含I个描画区域105和指针106的图像。指针106指示描画区域105内的任意位置，因此如箭头所示，需要将二维平面内的任意方向或以45°间隔被量化的方向中的任意一个作为操作输入方向来接受。即，需要操作输入方向的自由度。此时，表示指针的配置信息被输入给操作输入方向识别部44。即使在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44也停止将操作输入方向识别成特定方向的处理。操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此任意方向都能作为操作输入方向来接受。另外，操作输入方向控制部45即使限制操作输入方向，也将操作输入方向限制成被量化的方向中的任意一个。
[0148]图9A?图9C是表示操作输入方向的控制例(3 )的图。
[0149]在图9A中，在显示画面14a上显示表示新闻报道的图像。在该图像中包含多个链接。链接根据它们的位置被分类成3个组107a?107c。组107a?107c沿水平方向配置。在组107a?107c中，分别沿垂直方向配置有多个链接。
[0150]此时，表示在组之间具有沿水平方向的规则性、且在各组中具有沿垂直方向的规则性的配置信息被输入给操作输入方向识别部44。
[0151]从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别成双箭头所示的水平方向，通过操作输入方向控制部45将操作输入方向限制成水平方向。组107b所包含的朝向右斜上方的实线的箭头表示示出接触位置的指针。组107a、107c所包含的朝向右斜上方的虚线的箭头表示能够使接触位置移动到该位置。
[0152]在图9B所显示的图像中，在组107a、107c中不显示指针，而在组107b中显示指针。这里，操作输入方向控制部45将在显示指针的接触位置以比预定时间(例如，3秒)长的时间持续含有接触位置的组107b确定为其区域中所包含的链接能够被选择的组。此外，也可以是，若在该接触位置，从操作检测部31输入的接触操作信号是预定类别的操作(例如，双击)，则操作输入方向控制部45将链接能够选择的组确定为组107b。
[0153]在图9C所显示的图像中，与图9A不同，双箭头表示垂直方向。关于被选择的组107b，根据表示具有沿垂直方向的规则性的配置信息被输入给操作输入方向识别部44，将操作输入方向识别成垂直方向，通过操作输入方向控制部45将操作输入方向限制成垂直方向。由此，能够选择将操作输入方向限定成了组的配置方向的组，能够选择在所选择的组中将操作输入方向限定成了要素图像的配置方向的要素图像、和阶段性的选择。由此，即使在链接等要素图像、特别细微的要素图像紧密地配置的情况下，操作者也能够容易地进行目标要素图像的选择。
[0154]图1OA?图1OC是表示操作输入方向的控制例(4)的图。
[0155]在图1OA中，在显示画面14a上，4个图标108a?108d沿水平方向、垂直方向都有规则地配置在2行2列的网格上。另外，在各图标的周围具有充分的余边(面积比约0.3)。表示余边部充分的配置信息从图像解析部42被输入给操作输入方向识别部44。在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44将操作输入方向识别成水平方向或垂直方向，通过操作输入方向控制部45将操作输入方向限定成水平方向或垂直方向。操作输入方向识别部44也可以预先设定识别水平方向、垂直方向中的某一个或都识别。
[0156]在图1OB中，在显示画面14a上，4个图标109a?109d沿水平方向、垂直方向都有规则地配置在2行2列的网格上。但是，与图1OA所示的例子不同，各图标的周围的余边少(面积比约0.03)。表示余边部不充分的配置信息从图像解析部42被输入给操作输入方向识别部44。即使在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44也停止将操作输入方向识别成特定方向的处理。操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，从而操作输入方向不被限制。这是因为，即使接触位置移动，该接触位置也包含于某一图标区域中，因此即使不限制操作输入方向，也能够较容易地选择任意的图标。
[0157]在图1OC中，在显示画面14a上，4个窗口 110-1?110-4配置在2行2列的网格上。窗口 110-1?110-4是基于图像信号显示图像的区域，所述图像信号是由控制部22分别执行不同的应用软件(以下称为应用程序)时生成的。但是，窗口 110-1?110-4各自包含的图标的配置、个数不同。
[0158]在窗口 110-1中，4个图标IlO-1a?IlO-1d配置在2行2列的网格上。在窗口110-2中配置有4个图标110-2a?110_2d，图标110_2a?110_2d的显示区域的边界线是窗口 110-2的对角线。在窗口 110-3中，2个图标110-3a、110-3b被配置成I行2列。在窗口 110-4中，2个图标110-4a、110-4b被配置成2行I列。
[0159]该情况下，表示不具有沿水平方向、垂直方向的规则性的配置信息从图像解析部42被输入给操作输入方向识别部44。在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44停止将操作输入方向识别成特定方向的处理。操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。另外，即使在窗口 110-3单独显示在显示画面14a上的情况下，也从图像解析部42向操作输入方向识别部44输入表示不具有沿水平方向、垂直方向的规则性的配置信息。即使在从行驶状态判定部41被输入了表示车辆处于行驶中的行驶状态信号的情况下，操作输入方向识别部44也停止将操作输入方向识别成特定方向的处理,操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。
[0160]图1IA及图1IB是表示操作输入方向的控制例(5 )的图。
[0161]在图1lA中，在显示画面14a上显示地图，在地图的大致中央部显示有X标记的指针111。指针111表示接触位置，是为了接受选择地图上的任意位置(例如，放大缩小操作的基准地点、目的地等)的操作而显示的。该情况下，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。
[0162]在图1lB中，图标密集地配置在8行8列的网格上。这里，在朝向右斜上方的指针所指示的左上端的图标112a的显示区域中,包含当前该指针所表示的接触位置。在图标像这样密集地配置，并且操作者要求显示指针以选择任意的图标的情况下，操作输入方向识别部44停止将操作输入方向识别成特定方向的处理，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。由于操作输入方向不受限制，所以操作者通过对目标图标、例如右下的图标112b的位置进行指示而能够容易地选择。相反，若操作输入方向例如仅限于水平方向或垂直方向，则与操作相关的动作的次数增力口，变得繁琐。
[0163]图12A及图12B是表示操作输入方向的控制例(6)的图。
[0164]在图12A中，在显示画面14a上显示有拨盘113。拨盘113具有8个扇形的区域A-H0区域A-H所具有的中心角分别是45°的等角。拨盘113的上方的双箭头表示拨盘113能够操作的方向。
[0165]在图12B中，在显示画面14a上显示有音量选择器114。音量选择器114具有朝向水平方向的9个细长的区块114a-114i。区块114a_114i的左端、右端的水平方向的坐标都不对齐。横贯区块114a-114i的朝向右上方的双箭头表示通过选择区块114a-114i的任意一个而能够选择音量。
[0166]但是，拨盘113、音量选择器114仅能够观察到其形状，用户不能直接推测出能够操作的方向。关于所述要素图像，优选能够自由设定操作输入方向并使操作者体验到能够操作的方向。因此，关于所述画面部件，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。
[0167]图13是表示操作输入方向的控制例(7)的图。
[0168]在图13中，在显示画面14a上显示有设定面板115。在设定面板115的左侧、右侧配置有音频设定部115-1、空调设定部115-2。音频设定部115-1的上段115_lb的右上半部分所示的音源选择部(Source)的7个沿水平方向划分的区域表示能够选择与其任一个对应的音源，例如⑶(Compact Disc)。音频设定部115-1的上段115_lb的左下半部分所示的音轨选择部(Track)的7个沿垂直方向划分的区域表示能够选择与其任一个对应的内容，例如乐曲。音频设定部115-1的下段115-la所示的音量设定部(Volume)的7个沿垂直方向划分的区域表示通过使接触位置从右向左移动而能够设定大的音量。
[0169]空调设定部115-2的上段115_2b的左上半部分所示的模式选择部(Mode)的7个沿水平方向划分的区域表示能够选择与其任一个对应的动作模式，例如温度自动调整模式。空调设定部115-2的上段115-2b的右下半部分所示的温度设定部(温度)的7个沿垂直方向划分的区域表示能够选择与其任一个对应的温度。空调设定部115-2的下段115-2a所示的风量设定部(风量)的7个沿垂直方向划分的区域表示通过使接触位置从左向右移动而能够设定更强的风量。
[0170]关于如该设定面板115那样地操作输入方向按每个操作对象不同的画面部件，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。由此，能够发挥如下的设定面板115的优点，即:不用对I个画面切换多个操作对象，能够省略找出目标操作对象的操作。
[0171]图14A及图14B是表示操作输入方向的控制例(8)的图。
[0172]在图14A及图14B中，在显示画面14a上显示了描画输入框(手写输入组件)116。描画输入框116是检测与其显示区域所包含的位置对应的接触位置、并能够输入(描画输入)由与所检测的接触位置对应的位置的轨迹形成的图像的画面部件。在显示描画输入框116的情况下，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。
[0173]这里，操作检测部31也可以根据预先存储的操作坐标系和显示坐标系的对应关系对基于从操作输入部13输入的接触信号检测出的接触位置的轨迹进行坐标变换使之成为显示坐标系的轨迹。操作检测部31进行公知的图像识别处理来确定示出了经坐标变换的轨迹的图像是否是预先设定的文字或符号(以下称为文字等)中的某一个。在控制部22中预先存储有该文字等的每一个和预定的处理之间的对应关系，执行与确定的文字等对应的处理。
[0174]在图14A中，显示在描画输入框116上的Λ标记是所输入的图像的一例。该情况下，操作输入方向控制部45进行与Λ标记对应的处理，例如，将用于设定目标值等的地图显示在图像显示部14上，并接受选择地图上的任意位置的操作。
[0175]在图14Β中，显示在描画输入框116上的“空调”的文字是所输入的图像的又一例。该情况下，操作输入方向控制部45进行与“空调”的文字对应的处理，例如，将用于设定空调动作的空调设定图像显示在图像显示部14上。
[0176]像这样，由于没有进行操作输入方向的限制，所以要求自由的操作输入方向的描画输入不受妨碍。
[0177]图15是表示操作输入方向的控制例(9)的图。这里，省略了操作面13Β的图示。
[0178]图15表示对方向盘11转向时，操作者用手指接触操作面13Α的接触位置01的状况。在图15所示的例子中，方向盘11以转向角A旋转。
[0179]这里，以接触位置01为起点的8根箭头表示操作输入方向被限制成各箭头方向中的某一个。8根箭头中的相邻的2根所成的角度在该例中是45°。8根箭头中的朝向右斜上方、左斜下方的2根箭头形成了 X轴，朝向左斜上方、右斜下方的2根箭头形成了 Y轴。在这样的情况下，由于操作输入方向以45°间隔离散，所以，即使旋转修正部38以转向角A修正操作输入方向Θ，也无法得到足够的精度。因此，在以转向角A修正操作输入方向Θ的情况下，即，旋转修正判定部37判定为修正操作坐标系的情况下，操作输入方向控制部45使用操作检测部31所检测出的操作输入方向，因此操作输入方向不受限制。由此，不会失去通过修正实现的高精度。
[0180](变形例)
[0181]以下，关于本实施方式的变形例进行说明。
[0182]旋转修正部38除了从旋转修正判定部37输入的旋转修正判定信号以外，还基于从握持状态检测部32输入的握持状态信号，对从操作检测部31输入的接触操作信号所表示的接触位置进行修正。旋转修正部38例如以与旋转修正判定信号所表示的转向角A和握持状态信号所表示的握持状态相应的修正角B的合计Α+Β的角度使操作坐标系向右旋转，由此将操作输入方向Θ修正成θ - (Α+Β)。
[0183]这里，在旋转修正部38中，实现将握持状态信号和预定的修正角B对应着设定在自身所具有的存储部中，并根据所输入的握持状态信号求出修正角B。在旋转修正部38中，例如，预先使表示左手的手掌离开的握持状态信号和作为修正角B的负的实数值(例如，-15° )相对应。另外，在旋转修正部38中，预先使表示右手的手掌离开的握持状态信号和作为修正角B的正的实数值(例如，15° )相对应，并使表示手掌未分离的握持状态信号和作为修正角B的O度相对应。
[0184]因此，关于表示左手的手掌离开的握持状态信号，操作输入方向Θ被进一步向左旋方向修正，关于表示右手的手掌离开的握持状态信号，操作输入方向Θ被进一步向右旋方向修正。由此，能够消除由握持状态的手指的可动范围、手指的移动带来的影响。
[0185]以下，关于方向盘11的握持状态的例子进行说明。
[0186]图16Α及图16Β是表示本变形例的方向盘11的握持状态的例子的概念图。这里，省略了操作面13Β的图示。
[0187]图16A示出了在方向盘11未被转向的情况下，操作者在使拇指接触操作面13A的同时使接触位置移动的状况。以操作面13A的下端为起点的朝向左上方的线段表示接触位置的轨迹la。操作者的左手的食指指尖、手掌、拇指的指肚部都与方向盘11的外周接触，因此握持状态检测部32判定为手掌未离开。
[0188]图16B示出了在方向盘11被向右转向的情况下，操作者在使手指接触操作面13A的同时使接触位置移动的状况。以操作面13A的下端为起点朝向左上方的线段表示接触位置的轨迹lb。此时，操作者的左手的食指指尖与方向盘11的外周接触，而手掌和拇指的指肚部从方向盘11离开。由此，握持状态检测部32判定为左手的手掌离开。此时，旋转修正部38与图16A相比以修正角B向左旋地修正操作输入方向Θ。在左手的手掌离开的情况下，拇指的朝向与未被转向的情况相比右旋偏移，从而操作检测部31所检测出的操作输入方向也容易比操作者的意图更向右旋地偏移。因此，在本变形例中，将所检测出的操作输入方向左旋修正，从而能够获得按照操作者的意图的操作输入方向。由此，对于用户来说，能够提高操作性。
[0189]另一方面，在方向盘11左旋转向的情况下，握持状态检测部32判定为左手的手掌离开。旋转修正部38与图16A相比以修正角B向右旋地修正对操作面13B (未图示)的操作输入方向Θ。该情况下，对于用户来说，也能够提高操作性。
[0190]如上所述，在本实施方式中，检测相对于安装在方向盘11上的操作输入部13的操作输入方向，在车辆处于行驶中时，将所检测出的操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部14上的图像的一部分。另外，在本实施方式中，作为与要素图像的至少任意一个相关的操作输入方向，使用所识别的方向。
[0191]由于作为与要素图像相关的操作输入方向使用与要素图像的配置相应的方向，所以不妨碍在要素图像的区域间进行移位的操作输入。由此，在行驶中进行操作输入时的操作性提高。
[0192]在上述说明中，以输入装置10被设置在车辆上的情况为例进行了说明，但在本实施方式中，不限于此。也可以在输入装置10或其一部分例如控制部22未被设置在车辆上的状态下实施，例如，生产、使用、转让、租赁、出口、进口、转让及租赁的提出。
[0193]此外，也可以通过计算机实现上述实施方式中的输入装置10的一部分，例如，操作检测部31、握持状态检测部32、选择部33、旋转修正判定部37、旋转修正部38、行驶状态判定部41、图像解析部42、显示控制部43、操作输入方向识别部44及操作输入方向控制部45。该情况下，也可以将用于实现该控制功能的程序存储在计算机可读取的存储介质中，通过使存储在该存储介质中的程序由计算机系统读入并执行来实现。此外，这里所谓的“计算机系统”是指内置于输入装置10中的计算机系统，包括OS及周边设备等硬件。另外，“计算机可读取的存储介质”是指软盘、磁光盘、R0M、CD-R0M等便携介质以及内置于计算机系统中的硬盘等存储装置。而且，“计算机可读取的存储介质”也可以指如通过互联网等网络或电话线等的通信线路发送程序的情况下的通信线那样地以短时间动态地保持程序的部件，也包括该情况下的作为服务器或客户端的计算机系统内部的易失性存储器那样地以一定时间保持程序的部件。另外，上述程序也可以用于实现上述功能的一部分，还可以通过与全部存储在计算机系统中的程序之间的组合来实现上述功能。
[0194]另外，上述实施方式中的输入装置10的一部分或全部也可以采用LSI (LargeScale Integrat1n ;大规模集成电路)等集成电路实现。输入装置10的各功能块既可以独立地处理器化，也可以一部分或全部集成而处理器化，另外，集成电路化的方法不限于LSI，也可以通过专用电路或通用处理器实现。另外，随着半导体技术的进步，在出现了代替LSI的集成电路化的技术的情况下，也可以使用由该技术实现的集成电路。
[0195]以上，参照附图详细说明了本发明的一实施方式，但具体的结构并不限于上述结构，在不脱离本发明的主旨的范围内能够进行各种设计变更等。
【权利要求】
1.一种输入装置，其特征在于，具有: 操作检测部，检测相对于安装在方向盘上的操作输入部的操作输入方向； 操作输入方向识别部，在车辆处于行驶中时，将所述操作检测部所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；和 操作输入方向控制部，作为与所述要素图像的至少任意一个相关的操作输入方向，使用由所述操作输入方向识别部识别出的方向。
2.如权利要求1所述的输入装置，其特征在于， 所述操作输入方向识别部将所述操作检测部所检测出的操作输入方向识别成所述要素图像的配置具有规则性的方向。
3.如权利要求1所述的输入装置，其特征在于，在不显示所述要素图像的余边部的比例比规定的比例高的情况下，所述操作输入方向识别部将所述操作输入方向识别成与所述要素图像的配置相应的方向。
4.如权利要求1所述的输入装置，其特征在于，所述操作输入方向识别部根据能够操作所述要素图像的操作输入方向的自由度，来判定是否将所述操作输入方向识别成与所述要素图像的配置相应的方向。
5.如权利要求1所述的输入装置，其特征在于，所述操作输入方向识别部将所述操作检测部所检测出的操作输 入方向识别成显示在所述图像显示部上的要素图像的组所配置的方向，在所述要素图像的组的某一个被指示时，将所述操作检测部所检测出的操作输入方向识别成在所述某一个的组中配置要素图像的方向。
6.如权利要求1所述的输入装置，其特征在于，还具有显示控制部，所述显示控制部在车辆处于行驶中时将配置所述要素图像的方向控制成预定方向。
7.如权利要求1~6中任一项所述的输入装置，其特征在于， 具有检测所述方向盘的转向角的转向角检测部， 所述操作输入方向控制部基于所述转向角检测部所检测出的转向角来判定是否修正所述操作输入方向，在修正所述操作输入方向的情况下，作为与所述要素图像的至少任意一个相关的操作输入方向，使用所述操作检测部所检测出的操作输入方向。
8.一种输入方法，是输入装置中的输入方法，其特征在于，具有: 操作检测过程，检测相对于安装在方向盘上的操作输入部的操作输入方向； 操作输入方向识别过程，在车辆处于行驶中时，将在所述操作检测过程中所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；和 操作输入方向控制过程，作为与所述要素图像的至少任意一个相关的操作输入方向，使用在所述操作输入方向识别过程中识别出的方向。
9.一种输入程序，其特征在于，用于使输入装置的计算机执行如下步骤: 操作检测步骤，检测与相对于安装在方向盘上的操作输入部的操作输入方向； 操作输入方向识别步骤，在车辆处于行驶中时，将在所述操作检测步骤中所检测出的所述操作输入方向识别成与要素图像的配置相应的方向，所述要素图像构成显示在图像显示部上的图像的一部分；操作输入方向控制步骤，作为与所述要素图像的至少任意一个相关的操作输入方向，使用在所述操作输 入方向识别步骤中识别出的方向。
【文档编号】B60R16/02GK104071097SQ201410116649
【公开日】2014年10月1日 申请日期:2014年3月26日 优先权日:2013年3月27日
【发明者】奥山晴子 申请人:本田技研工业株式会社
相关技术
网友询问留言
已有0条留言
- 还没有人留言评论。精彩留言会获得点赞！
1