信息处理装置的制作方法

文档序号:15980401发布日期:2018-11-17 00:15阅读:141来源:国知局

本公开内容涉及信息处理装置、信息处理方法、程序及信息处理系统,并且,特别地,涉及例如能够改进可操作性的信息处理装置、信息处理方法、程序及信息处理系统。

背景技术

例如电视接收器(tv)的电子设备的远程操作是通过如以对设置有频道按钮和音量按钮的远程命令器的按钮进行按压这样的方式、将命令从远程命令器传输至tv来执行的。

同时,近几年来为了支持诸如tv的显示屏幕上的浏览器的操作等的各种操作,已经提出了设置有用于对触摸板、触摸面板等的操作表面上的触摸进行检测的触摸传感器的远程命令器。

此外,用于通过使用类似智能电话的、设置有触摸传感器的装置来执行触摸操作以启用电子设备的远程操作的应用程序有所增加。

使用检测用户对操作表面所执行的操作的触摸传感器对除了tv以外的电子设备进行操作的操作系统大致分为两种类型,即,第一操作系统和第二操作系统。

可以这么说,第一操作系统是使用与鼠标操作相同的“相对位置”操作来对设置在显示屏幕上的指针(光标)进行移动并且对布置在显示屏幕上的图形用户界面(gui)等进行操作的操作系统(类似于设置在所谓的笔记本式个人计算机(pc)等上的触摸板)。

在第一操作系统中,指针根据在操作表面上触摸的关于触摸开始时操作表面上的位置的相对位置来移动。因此,即使当对操作表面上的相同位置进行触摸时,指针并不一定要显示在相同位置处。

第二操作系统是将由用户操作的触摸板等的操作表面上的每个点(每个位置)(坐标)与tv等的显示屏幕上的每个点(每个位置)(坐标)以一一对应的方式相关联,并且对根据触摸板的操作表面上的“绝对位置”移动的指针进行操作的操作系统(例如,参照ptl1)。

在第二操作系统中,操作表面上的每个点与显示屏幕上的每个点一一对应。因此,如果对操作表面上的相同位置进行触摸,则指针显示在相同的位置处。

同时,为了能够进行最近盛行的多点触摸,当操作表面被多个手指触摸时,第二操作系统必需保持各触摸点之间的位置关系。

在第一操作系统中,无论用户是否对触摸板的操作表面进行触摸,指针显示在显示屏幕上。然而,在第二操作系统中,例如,当用户触摸操作表面时,指针显示在显示屏幕上的与被触摸点(触摸点)对应的位置处。

因此,在第二操作系统中,当用户从操作表面释放触摸(当拿开手指)时,已经显示在显示屏幕上的指针被消除。

例如,在上述的第二操作系统中,可以根据由左手的手指(左手手指)对操作表面所执行的操作和由右手的手指(右手手指)对操作表面所执行的操作来分别在显示屏幕上显示指针,并且因此可以通过使用双手来执行操作。

因此,根据第二操作系统,当对屏幕键盘(osk)进行操作时,可以快速地执行键的选择、预测候选的选择等。

[引用列表]

[专利文献]

ptl1:日本未审查专利申请公开号no.2009-253773



技术实现要素:

技术问题

使用触摸传感器的操作系统的历史还很短,因而对于可操作性的改进还有余地。

本公开内容已经考虑到至少上述的情况,并且理想的是使可操作性得到改进。

问题的解决方案

根据本公开内容的第一实施方式的信息处理装置包括:映射单元,该映射单元基于显示在显示屏幕上的图形执行将由用户操作的操作表面上的位置与在其上显示图像的显示屏幕上的位置相关联的映射;和检测单元,该检测单元基于映射的结果对对应点进行检测,该对应点处于显示屏幕上的位置并且与由用户操作的操作表面上的位置对应。此外,根据本公开内容的第一实施方式的信息处理程序可以使计算机用作信息处理装置。

根据本公开内容的第一实施方式的信息处理方法可以包括:基于显示在显示屏幕上的图形执行将由用户操作的操作表面上的位置与在其上显示图像的显示屏幕上的位置相关联的映射;以及基于映射的结果对对应点进行检测,该对应点处于显示屏幕上的位置并且与由用户操作的操作表面上的位置对应。

根据本公开内容的第二实施方式的信息处理系统可以包括:包括由用户操作的操作表面的终端;以及根据操作表面的操作执行处理的信息处理装置。信息处理装置可以包括映射单元,该映射单元基于显示在显示屏幕上的图形执行将操作表面上的位置与在其上显示图像的显示屏幕上的位置相关联的映射;和检测单元,该检测单元基于映射的结果对对应点进行检测,该对应点处于显示屏幕上的位置并且与由用户操作的操作表面上的位置对应。

根据上述的第一实施方式和第二实施方式,将由用户操作的操作表面上的位置与在其上显示图像的显示屏幕上的位置相关联的映射可以基于显示在显示屏幕上的图形被执行,以及处于显示屏幕上的位置并且与由用户操作的操作表面上的位置对应的对应点可以基于映射的结果被检测。

同时,根据实施方式的信息处理装置可以是单独的装置以及可以是对单个装置进行配置的内部块。

另外,可以通过经由传输介质传输程序或通过在记录介质上记录程序来提供程序。

根据本公开内容的另一实施方式的信息处理装置包括配置成接收触摸输入的操作表面,和配置成在操作表面的第一操作区域内对来自操作表面的用户的操纵的至少一个右侧触摸输入进行检测以及在操作表面的第二操作区域内对来自操作表面的用户的操纵的至少一个左侧触摸输入进行检测的传感器单元,其中操作表面的第一操作区域和第二操作区域被映射到显示设备的图形用户界面(gui)。

根据本公开内容的另一实施方式的信息处理方法包括将终端设备的操作表面的第一操作区域和第二操作区域映射到显示设备的图形用户界面(gui)区域,在操作表面的第一操作区域内对来自操作表面的用户的操纵的至少一个右侧触摸输入进行检测,以及在操作表面的第二操作区域内对来自操作表面的用户的操纵的至少一个左侧触摸输入进行检测。

根据本公开内容的另一实施方式的通过程序体现的非暂时性计算机可读介质,该程序当由计算机执行时使所述计算机执行下述方法,该方法包括将终端设备的操作表面的第一操作区域和第二操作区域映射到显示设备的图形用户界面(gui)区域,在操作表面的第一操作区域内对来自操作表面的用户的操纵的至少一个右侧触摸输入进行检测,以及在操作表面的第二操作区域内对来自操作表面的用户的操纵的至少一个左侧触摸输入进行检测。

本发明的有益效果

根据本公开内容的实施方式,可以改进可操作性。

附图说明

[图1]图1是示出了根据本公开内容的实施方式的信息处理系统的配置示例的立体图。

[图2]图2是示出了根据本公开内容的实施方式的终端的配置示例的立体图。

[图3]图3是示出了根据本公开内容的实施方式的信息处理系统的处理的概述的图。

[图4]图4是示出了根据本公开内容的实施方式的终端和tv的配置示例的框图。

[图5]图5是示出了根据本公开内容的实施方式的终端的处理的流程图。

[图6]图6是示出了根据本公开内容的实施方式的tv的处理的流程图。

[图7]图7是示出了根据本公开内容的实施方式的将操作表面11与显示屏幕相关联的映射的示例的图。

[图8]图8是示出了根据本公开内容的实施方式的第一映射的图。

[图9]图9是示出了根据本公开内容的实施方式的第二映射的图。

[图10]图10是示出了根据本公开内容的实施方式的操作表面上的位置(xin,yin)与根据第二映射的显示屏幕上的对应点(xout,yout)之间的对应关系的图。

[图11]图11是示出了根据本公开内容的实施方式的第三映射的图。

[图12]图12是示出了根据本公开内容的实施方式的操作表面上的位置(xin,yin)与根据第三映射的显示屏幕上的对应点(xout,yout)之间的对应关系的图。

[图13]图13是示出了应用根据本公开内容的实施方式的第三映射(限制映射(limitedmapping))的确定处理的流程图。

[图14]图14是示出了根据本公开内容的实施方式的触摸点识别处理的流程图。

[图15]图15是示出了根据本公开内容的实施方式的第四映射的图。

[图16]图16是示出了根据本公开内容的实施方式的操作表面上的位置(xin,yin)与根据第四映射的显示屏幕上的对应点(xout,yout)之间的对应关系的图。

[图17]图17是示出了应用根据本公开内容的实施方式的第四映射(偏移映射)的确定处理的流程图。

[图18]图18是示出了根据本公开内容的实施方式的作为终端的触摸屏幕的操作表面的显示示例的图。

[图19]图19是示出了根据本公开内容的实施方式的计算机的配置示例框图。

具体实施方式

<根据实施方式的信息处理系统>

图1是示出了根据本公开内容的实施方式的信息处理系统的配置示例的立体图。

在图1中,信息处理系统包括终端10和tv20。

例如,终端10是诸如智能手机等的平板电脑终端或对电子设备执行远程操作的远程命令器,以及用作对图1中的tv20执行远程操作的远程命令器。

终端10包括具有矩形形状并且由用户操作的操作表面11,终端10将指示由用户对操作表面11所执行的操作的操作信息传输至tv20。

tv20包括具有矩形形状、并且显示图像和显示诸如电视广播节目、由记录器(未示出)记录的节目、记录在内置的记录介质(未示出)中的节目等内容的图像的显示屏幕21。

另外,tv20在显示屏幕21上显示图形用户界面(gui),即,例如显示浏览器等图形。

此外,tv20接收从终端10传输的操作信息并且根据操作信息执行下述处理:诸如频道的选择(例如,频道调谐)、音量的增大或减小、菜单的显示、与诸如浏览器等的gui对应的处理。

在如上所述配置的信息处理系统中,包括诸如在终端10中由用户触摸的操作表面11上的位置(例如,触摸点)的坐标的指示触摸点的信息的操作信息被传输至tv20。

在tv20中,基于来自终端10的操作信息对显示屏幕21上对应于触摸点的位置的对应点进行检测,并且根据对应点执行处理。

图2是示出了根据本公开内容的实施方式的图1中的终端10的配置示例的立体图。

终端10具有平面形状,并且在终端的一个表面上设置有由用户操作的并且具有矩形形状的操作表面11。

文中,终端10的在上面设置有操作表面11的表面被称为终端10的前表面(例如,表层)。

另外,当具有矩形形状的操作表面11的长边方向被水平布置时,在作为操作表面11的矩形中的两个长侧中的一个长侧被称为终端10的上侧。

例如,终端10包括内置的静电(例如,静电电容)型触摸面板或触摸板组、发射光的光源以及接收来自物体的反射光的传感器,并且终端10具有从外部接收(例如,检测)给操作表面11的输入(例如,接近和接触)的功能。

如果来自外部的物体,即,例如用户的手指或用户所使用的触摸笔接近操作表面11或与操作表面11接触(例如,触摸),则终端10对包括指示接近或接触的位置的位置信息的操作信息进行传输。

下文中,尽管描述主要讨论了用户的手指或触摸笔与操作表面11接触的情况,但是本公开内容的实施方式还考虑了除了上述情况或替代上述情况以外的由用户的手指或触摸笔接近操作表面11的情况。

作为指示用户的手指所接触的位置(例如,触摸点)的位置信息,可以使用指定操作表面11上与手指接触的触摸点的信息,例如,如操作表面11上的触摸点的坐标、指示对于操作表面11上的每个点的接触程度(例如,当操作表面11由静电式触摸面板等配置时,操作表面11的静电电容的分配)。

另外,在终端10中,例如,作为指示触摸点的位置信息的坐标系,可以使用固定的2维坐标系,其中从终端10的方向向上(在图2中使用白色空白箭头指示)被设定为y轴,操作表面11的垂直方向被设定为x轴,并且包括操作表面11的2维平面上的预定点被设定为原点。

此外,在终端10中,例如,可以基于操作表面11上的用户的手指的阴影(例如,当用户的手指垂直地投影到操作表面11时所显现的阴影)、重力传感器等来检测当用户手持终端10时终端10的姿态,并且根据终端10的姿态使用可变的2维坐标系作为触摸点的位置信息的坐标系。

也就是说,在终端10中,当用户手持终端10时,可以使用根据终端10的姿势而变化的可变的2维坐标系作为触摸点的位置信息的坐标系,其中,操作表面11的垂直方向被设定为y轴,操作表面11的水平方向被设定为x轴,以及操作表面11上的预定点被设定为原点。

同时,如上所述,在tv20中,基于来自终端10的操作信息对显示屏幕21上对应于触摸点的对应点进行检测。然而,当为了检测对应点,除了位置信息以外的操作表面11的尺寸(例如,x坐标和y坐标中的每个的最小值和最大值)为必需时,从终端10传输至tv20的操作信息还包括诸如操作表面11的尺寸的信息,这是除了位置信息以外检测对应点所需的信息(如果必需)。

下文中,为了使作为示例给出的说明容易,如果没有特别指定,则用户使终端10的上侧的相对侧(例如,下侧)面向靠近用户的位置,并且在其中终端10(例如,操作表面11)在长边方向上的端部被右手或左手抓住以使得用户可以看到操作表面11的状态(下文中称为“标准状态”)下使用右手的手指或左手的手指对操作表面11进行操作。然而,本公开内容不限于此。

用户对终端10所执行的操作主要包括被执行以选择显示在tv20的显示屏幕21上的gui上的按钮等的操作(例如,定点),以及被执行以对选择进行确定(例如,确认)的确定操作。

如图2中所示,如果需要,则物理按钮13被设置在终端10的前面、后面(例如,前面的相对侧的面)以及侧面。因此,在终端10中,例如,可以将设置在终端10的侧面上的按钮13的操作分配给确定操作。

也就是说,例如,当用户在标准状态下手持终端10时,可以使用左手的食指等对设置在终端10的上侧的左侧面上的开关13容易地操作,并且可以使用右手食指对设置在终端10的上侧的右侧面上的开关13容易地操作。

文中,可以将设置在终端10的上侧的左侧面上的开关13的操作分配给确定操作,该确定操作被执行以确定通过使用左手的手指对操作表面11的操作所执行的选择。以同样的方式,可以将设置在终端10的上侧的右侧面上的开关13的操作分配给确定操作,该确定操作被执行以确定通过使用右手的手指对操作表面11的操作所执行的选择。

另外,在终端10中,例如,可以将从操作表面11取走与操作表面11接触的手指的释放操作分配给确定操作。

也就是说,可以将取走与操作表面11接触的左手手指的操作分配给确定操作以立即确定在此之前通过使用左手手指对操作表面11的操作(例如,接触)所执行的选择。以同样的方式,可以将取走与操作表面11接触的右手手指的操作分配给确定操作以立即确定在此之前通过使用右手手指对操作表面11的操作(例如,接触)所执行的选择。

另外,在终端10中,例如,可以将使用与操作表面11接触的手指按压操作表面11的按压操作分配给确定操作。

在终端10中,例如,如图2所示,对于对操作表面11所执行的按压操作,对按压操作表面11的压力进行检测的压力(例如,负载)传感器被设置在操作表面11的(例如,长边方向)相应的右端部和左端部上,并且可以基于由相应的压力传感器所检测的压力来检测使用用户的左手手指或右手手指的按压操作是否被执行。

更特别地,可以使用从操作表面11上的相应的右压力传感器和左压力传感器输出的压力和操作表面11上的左手手指和右手手指的触摸点(例如,的坐标)来计算用户的左手手指和右手手指的相应的触摸点的按压力,并且可以确定是否对触摸点执行按压操作以作为确定操作,在此处按压力大于预定阈值。否则,例如,可以基于从操作表面11上的相应的右压力传感器和左压力传感器输出的压力比来确定对用户的左手手指或右手手指的触摸点是否执行按压操作以作为确定操作。

同时,设置有压力传感器的位置不限于操作表面11的右端部和左端部。另外,可以仅设置单个压力传感器,或者可以设置三个或更多个压力传感器。

另外,在终端10中,对于对操作表面11所执行的按压操作,例如,操作表面11被配置以使得操作表面11可以被按压(例如,操作表面11的内部可以被按压),并且检测操作表面11被按压的点击开关被设置在操作表面11的右端部和左端部上。可以基于每个点击开关的开启状态或关闭状态来检测是否使用用户的左手手指或右手手指来执行按压操作。

另外,在终端10中,对于对操作表面11所执行的按压操作,例如,操作表面11被配置以使得操作表面11可以被按压,操作表面11配置有静电式触摸板等,以及设置有检测操作表面11的按压的单个点击开关。可以基于当点击开关处于开启状态时操作表面11的静电电容的变化来检测是否使用用户的左手手指或右手手指执行了按压操作。

此外,在终端10中,对于对操作表面11所执行的按压操作,例如,操作表面11配置有静电式触摸板等。可以基于操作表面11的静电电容的变化对操作表面11的按压以及对通过使用用户的任一左手手指和右手手指的操作来执行按压的事实进行检测。

另外,当可以通过用户的手指等的接近来对操作表面11进行操作时,可以将与操作表面接触(例如,触摸)分配给确定操作。

图3是示出了根据本公开内容的实施方式的图1中的信息处理系统的处理的概述的图。

在图3中,在tv20中,节目的图像(例如,节目图像)显示在显示屏幕21上,并且,进一步的,对gui进行配置的图标31与节目图像交叠并且被显示。

文中,图标31用作各种类型的按钮(例如,虚拟按钮),诸如调节音量的音量按钮,选择频道的音乐选择按钮,等等。

例如,当终端10的操作状态发生变化时等,终端10有规律地或无规律地将操作信息传输至tv20。

tv20基于来自终端10的操作信息对终端10的操作状态进行识别(例如,检测),并且当用户的左手手指触摸终端10的操作表面11时,tv20显示指针30l作为指示左手手指对显示屏幕21上对应于由左手手指触摸的操作表面11的触摸点(下文中称为左触摸点)的对应点(下文中称为左对应点)进行触摸的符号图像。

以类似的方式,当终端10的操作表面11是由用户的右手手指触摸时,tv20显示指针30r作为指示右手手指对显示屏幕21上对应于由右手手指触摸的操作表面11的触摸点(下文中称为右触摸点)的对应点(下文中称为右对应点)进行触摸的符号图像。

可以显示指针30l和指针30r以使得用户以如改变诸如颜色、图案、形状等的显示格式这样的方式很容易地区分相应的指针。

另外,在图3中,圆形的图形被用作指示左手手指(例如,的触摸)的指针30l。然而,例如,除了圆形的图形以外,可以使用箭头形的图形、与操作表面11接触的左手手指的形状的图形、使用色调或色彩等表达左手手指与操作表面11的接触(例如,接近)程度的左手手指的形状的图形作为指针30l。指示右手手指(例如,的触摸)的指针30r可以被类似地表示。

如果用户将用户的手指(例如,左手手指或右手手指)与操作表面11接触,则指针30l或指针30r显示在显示屏幕21上与由用户的手指所触摸的操作表面11上的触摸点对应的对应点处。

当用户对触摸操作表面11的手指进行移动的同时触摸操作表面11时,指针30l或指针30r根据用户的手指的移动而移动。在图3中,操作表面11上的触摸点与显示屏幕21上的对应点是一一对应的,并且用户可以在可能与显示屏幕21接触的间隔处执行操作。

例如,当指针30l或指针30r以用户移动触摸操作表面11的手指这样的方式被移动到所希望的图标31上并且在其中指针30l或指针30r位于图标31(例如,被指向)上的状态下执行确定操作时,终端10将指示由用户所执行的确定操作的操作信息传输至tv20。

当tv20对指示确定操作的操作信息进行接收时,当确定操作被执行时,即,例如,当音量的调整或频道的选择被执行时,tv20执行对应于指针30l或指针30r位于其上的图标31的处理。

<终端10和tv20的配置示例>

图4是示出了根据本公开内容的实施方式的图1中的终端10和tv20的配置示例的框图。

在图4中,终端10包括操作表面11、传感器12、按钮组13、控制单元41、存储器42以及通信单元43。

例如,操作表面11是由用户操作的矩形表面。传感器12检测对操作表面11所执行的操作,并且将指示检测结果的检测信息提供给控制单元41。

同时,当需要时,除了如触摸板或触摸面板的触摸传感器以外,传感器12包括如图2中所示的压力传感器的必需的传感器。

另外,操作表面11是触摸传感器的一部分。

此外,当具有透明操作表面11的触摸面板被用作触摸传感器时,可以将操作表面11和显示单元一体地配置到单个的主体中,如液晶面板等。在这个情况下,操作表面11对图像进行显示并且用作可以对图像的输入进行接收的触摸屏幕。诸如gui等的所需的图像在控制单元41的控制下显示在对触摸屏幕进行配置的显示单元上。

图2中所示的按钮13是设置在终端10的一侧上并且由用户进行操作的物理按钮。

控制单元41对配置终端10的每个块进行控制并且执行其他所需的处理。

也就是说,控制单元41基于来自传感器12的检测信息或按钮13的操作生成指示由用户相对于包括操作表面11的终端10所执行的操作的操作信息,并且将所生成的操作信息提供给通信单元43。另外,控制单元41根据由通信单元43所接收的信息执行需要的处理。

存储器42存储对于控制单元41的操作是必需的数据(例如,信息)。

例如,通信单元43以无线的方式执行通信(例如,无线通信),无线的方式诸如无线局域网(lan)、ieee802.15(所谓的蓝牙(注册商标))、红外线等。

也就是说,通信单元43将操作信息从控制单元41传输至tv51。

另外,通信单元43对从tv20等无线传输的信息进行接收并且将该信息提供给控制单元41。

tv20包括通信单元51、信息处理单元52、显示单元53以及tv功能单元54。

类似于通信单元43,通信单元51执行无线通信。

也就是说,通信单元51对从信息处理单元52等提供的信息进行传输。另外,通信单元51对从终端10(例如,的通信单元43)传输的操作信息进行接收,并且将操作信息提供给信息处理单元52。

信息处理单元52执行各种类型的信息(例如,信号)处理,以使用从通信单元51提供的操作信息对tv20以及终端10进行远程操作。

也就是说,信息处理单元52包括显示控制单元61、映射单元62以及对应点检测63。

显示控制单元61执行在显示单元53上显示图像的显示控制。

也就是说,例如,显示控制单元61生成并且获取如浏览器、osk等的gui,并且将gui显示在显示单元53上。另外,例如,显示控制单元61在显示单元53上显示指针30l或指针30r作为符号图像,这指示终端10的操作表面11在由对应点检测单元63所检测的显示单元53的显示屏幕21上的对应点处被触摸。

映射单元62基于显示在显示单元53上的gui执行将终端10的操作表面11上的位置与显示单元53的显示屏幕21上的位置相关联的映射。

对应点检测单元63基于由映射单元62所执行的映射结果对显示单元53的显示屏幕21上的对应点进行检测,该对应点与由用户触摸的操作表面11上的触摸点对应并且使用来自通信单元51的操作信息被识别。

例如,显示单元53是包括如液晶面板、有机电致发光(el)面板等的显示屏幕21的显示面板,并且显示单元在显示控制单元61的控制下将gui、指针30l或指针30r等显示在显示屏幕21上。

另外,显示单元53对从tv功能单元54提供的图像进行显示。

tv功能单元54是使tv20用作tv并且执行例如电视广播节目的接收、电视广播节目等的内容的记录、记录内容的再现等的程序。

使用tv功能单元54所接收的电视广播节目或再现内容的图像从tv功能单元54提供给显示单元53并且显示在显示屏幕21上。

图5是示出了根据本公开内容的实施方式的图4中的终端10的处理的流程图。

控制单元41根据传感器12的输出或按钮13的操作生成并且获取操作信息,并且在步骤s11中将操作信息提供给通信单元43。处理前进到步骤s12。

在步骤s12中,通信单元43对来自控制单元41的操作信息进行传输。在此之后,处理从步骤s12返回到步骤s11。在下文中,重复相同的处理。

图6是示出了根据本公开内容的实施方式的图4中的tv20的处理的流程图。

在步骤s21中,显示控制单元61根据不同于由用户所执行的操作的事件生成gui,将gui提供给显示单元53,并且将gui显示在显示屏幕21上。处理前进到步骤s22。

在步骤s22中,映射单元62基于显示在显示屏幕21上的gui执行将终端10的操作表面11上的位置与显示单元53的显示屏幕21上的位置相关联的映射。处理前进到步骤s23。

在步骤s23中,通信单元51等待要从终端10传输的操作信息,接收操作信息,并且将操作信息提供给信息处理单元52。处理前进到步骤s24。

在步骤s24中,信息处理单元52的对应点检测单元63基于由映射单元62在之前立即执行的映射结果对显示单元53的显示屏幕21上的对应点进行检测,对应点是通过使用来自通信单元51的操作信息而被识别的并且与由用户触摸的操作表面11上的触摸点对应。处理前进到步骤s25。

在步骤s25中,显示控制单元61在由对应点检测单元63检测的显示单元53的显示屏幕21上的对应点处显示指针30l或指针30r。处理返回到步骤s23。

<显示屏幕21的显示示例>

图7是示出了根据本公开内容的实施方式的将操作表面11(上的位置)与显示屏幕21(上的位置)相关联的映射的示例的图。

在图7中,映射被执行以使得整个操作表面11同等地对应于整个显示屏21。在下文中,该映射适合被称为正常映射(normalmapping)。

文中,如果假设显示屏幕21的水平方向(例如,横向方向)上的长度h2是操作表面11的水平方向(例如,长边方向)上的长度h1的kx(=h2/h1)倍,以及显示屏幕21的垂直方向(例如,纵向方向)上的长度v2是操作表面11的垂直方向上的长度v1的ky(=v2/v1)倍,则点(kxxxin,kyxyin)与触摸点(xin,yin)(例如,其中x坐标为xin和y坐标为yin的点和/或位置)相关联作为正常映射的对应点(xout,yout)。

同时,文中,为了简单说明,例如,假设限定操作表面11上的触摸点(xin,yin)的2维坐标系的原点是操作表面11的左下点(例如,顶点),以及限定显示屏幕21上的对应点(xout,yout)的2维坐标系的原点是显示屏幕21的左下点。

图7显示了用于输入在网页上搜索的字母串的输入部分、其中基于输入到输入部分的字母(例如,字符串)预测待输入的字母串的候选的预测候选部分以及使用osk作为gui组件的gui(在下文中,称为搜索gui)。

另外,在图7中,搜索gui以其中搜索gui与电视广播节目的图像(例如,节目图像)交叠的形式被显示。

这里,在图7中,预测候选以预测候选被分成左侧和右侧上的两列这样的方式显示在预测候选部分中。左侧预测候选是基于输入部分中的字母(例如,字符串)输入而预测的待被输入的字母串候选。右侧预测候选是基于输入部分中的字母(例如,字符串)输入而预测是要被搜索的记录在tv20中的内容的候选标题。

顺便提及的是,在图7中,搜索gui是半透明的,以使得节目图像尽可能可见。此外,在图7中,搜索gui的垂直长度大约与显示屏幕21的垂直长度一致。然而,搜索gui的水平宽度比显示屏幕21的水平宽度窄一定的裕量,以使得节目图像尽可能可见(以使得用户尽可能容易地确认节目图像)。

另外,搜索gui显示在显示屏幕21的中心,并且因此与搜索gui交叠的节目图像显示在其中其左部分和右部分被清楚地看到的状态下。

下文中,相较于上述的正常映射,第一映射至第四映射将被描述为可以改进终端10的可操作性的映射。

<第一映射>

图8是示出了根据本公开内容的实施方式的将操作表面11与显示屏幕21相关联的第一映射的图。

在正常映射中,不论显示在显示屏幕21上的gui如何,例如,如参照图7所描述的那样,整个操作表面11与整个显示屏幕21均匀地相关联。

因此,在正常映射中,除了显示屏幕21上在其上显示有gui的区域(在下文中称为gui区域)以外,用户可以对除了gui区域以外的区域(在下文中称为非gui区域)进行操作(例如,指向)。

这里,“对显示屏幕21上的区域进行操作”是指对操作表面11进行操作以使得对应点位于该区域中。

如上所述,在正常映射中,用户可以对非gui区域进行操作。然而,因为gui区域没有显示在非gui区域中,所以不需要对非gui区域进行操作。

文中,在第一映射中,映射单元62基于显示在显示屏幕21上的gui,将使gui显示在操作表面11上的位置处的gui区域(例如,图形区域)上的位置与显示屏幕21上的位置相关联。

在图8中,映射被执行以使得整个操作表面11与整个gui区域均匀地相关联。

文中,将整个(或一部分)操作表面11与整个gui区域均匀地相关联的映射称为均匀映射。

在均匀映射中,如果假设gui区域的水平方向上的长度h2是操作表面11的水平方向上的长度h1的kx(=h2/h1)倍,以及gui区域的垂直方向上的长度v2是操作表面11的垂直方向上的长度v1的ky(=v2/v1)倍,则操作表面11上的位置(xin,yin)与gui区域上的位置(kxxxin,kyxyin)相关联。

同时,文中,为了简单说明,例如,假设gui区域是矩形区域,限定操作表面11上的位置(例如,点)(xin,yin)的2维坐标系的原点是操作表面11的左下点(例如,顶点),以及限定gui区域上的位置(xout,yout)的2维坐标系的原点是gui区域的左下点。

在其最大的实施方式中gui区域在尺寸上等于显示屏幕21,以及gui区域通常被配置为小于显示屏幕21。

在图8中,显示了参照图7所描述的搜索gui。如参照图7所描述的那样,搜索gui小于显示屏幕21。

这里,假设显示屏幕21的具有任意尺寸的区域是单位区域。根据将整个操作表面11与整个gui区域相关联的均匀映射(例如,第一映射),与将整个操作表面11与整个显示屏幕21相关联的正常映射相比较,操作表面11上的较宽的范围与单位区域相关联。

也就是说,例如,如图8所示,当osk显示在显示区域21中时,与正常映射相比较,根据均匀映射,操作表面11的较宽的范围与osk的每个键(例如,的显示区域)相关联。

因此,与正常映射的情况相比较,当感测到osk的每个键变大时,用户可以采用相对粗糙的精度对操作表面11进行操作,并且因此可以改进终端10的可操作性(即osk的可操作性)。

这里,与正常映射的情况相比较,在均匀映射中,根据显示在显示屏幕21上的gui,可以减小被设置为是来自整个显示屏幕21的gui区域的对应点的显示屏幕21上的区域。

同时,当不可能显示在显示屏幕21上的大的gui被显示时,作为结果,可以以与正常映射相同的方式在均匀映射中将整个操作表面11与整个显示屏幕21相关联。除此之外,可以假设显示屏幕21被放大以使得大的gui可以被显示的虚拟显示屏幕,并且将当整个大的gui被显示时所获得的gui区域与虚拟显示屏幕上的操作表面11相关联。

在均匀映射中,将当整个大的gui被显示在其中显示屏幕21被放大的虚拟屏幕上时所获得的gui区域与操作表面11相关联。然后,相较于正常映射的情况,在均匀映射中,根据显示在显示屏幕21上的gui,可以放大可以是对显示在虚拟显示屏幕上的大的gui区域的对应点的显示屏幕21上的区域。

同时,当多个gui显示在显示屏幕21上时,映射单元62基于激活的(例如,聚焦的)gui执行映射。因此,如果激活的gui发生变化时,映射单元62基于变化的gui再次执行映射。

<第二映射>

图9是示出了根据本公开内容的实施方式的将操作表面11与显示屏幕21相关联的第二映射的图。

第二映射基于对显示在显示屏幕21上的gui进行配置的gui组件将操作表面11上的位置与gui区域上的位置相关联。因此,相较于均匀映射的情况,将在显示有具有小(或大)尺寸的gui组件的区域与操作表面11的宽(或窄)区域相关联。

这里,在图9中,在显示屏幕21上,如参照图7所描述的那样,使用作为gui组件的输入部分、预测候选部分以及osk的搜索gui被显示。

同时,为gui组件的预测候选部分还被配置以使得每个预测候选被用作gui组件。另外,为gui组件的osk还被配置以使得每个键被用作gui组件。

在搜索gui中,例如,当注意到预测候选部分和osk时,显示在预测候选部分中的预测候选具有比osk的每个键的宽度更大的水平宽度。因此,预测候选的操作的困难程度相对较低(即,很容易被操作)以及osk的键的操作的困难程度较高(即,不易被操作)。

这里,相较于均匀映射,在第二映射中,基于对显示在显示屏幕21上的gui进行配置的gui组件,将具有小尺寸的gui组件的区域与操作表面11的宽范围相关联。

也就是说,在图9中,在第二映射中,将gui组件与具有与gui组件的水平宽度成反比的垂直宽度的操作表面11的范围相关联。

因此,在图9中,与均匀映射的情况相比较,将具有宽的水平宽度的预测候选与具有窄的垂直宽度的操作表面11的范围相关联,以及与均匀映射的情况相比较,将具有窄的水平宽度的osk的键与具有宽的垂直宽度的操作表面11的范围相关联。

图10是示出了根据本公开内容的实施方式的操作表面11上的位置(xin,yin)与根据第二映射的显示屏幕21上的对应点(xout,yout)之间的对应关系的图。

同时,假设gui区域的水平方向上的长度h2是操作表面11的水平方向上的长度h1的kx(=h2/h1)倍,以及gui区域的垂直方向上的长度v2是操作表面11的垂直方向上的长度v1的ky(=v2/v1)倍。此外,假设kx=ky=k。

同时,为了简单说明,假设gui区域是矩形区域,限定操作表面11上的位置(xin,yin)的2维坐标系的原点是操作表面11的左下点(顶点),以及限定位置(xout,yout)的2维坐标系的gui区域是gui区域上的左下点。

在均匀映射中,如图10中使用虚线所示,将操作表面11上的位置(xin,yin)与gui区域上的位置(kxxinkyyin)相关联。

同时,在图10中,x坐标的对应关系被省略并且仅示出y坐标的对应关系。

在第二映射中,如图10中使用实线所示,将操作表面11上的位置yin(例如,位于操作表面11上的y坐标为yin的位置)与gui区域上的位置yout=f(yin)相关联。

这里,函数f(yin)指示第二映射。

根据图10中的函数f(yin),分别将osk(例如,其中显示osk的区域)与具有宽于均匀映射的情况下的垂直宽度的垂直宽度(例如,在y方向上的宽度)的操作表面11的范围相关联,将预测候选部分与具有窄于均匀映射的情况下的垂直宽度的垂直宽度(例如,在y方向上的宽度)的操作表面11的范围相关联,以及将输入部分与具有与均匀映射的情况下相同的垂直宽度的垂直宽度的操作表面11的范围相关联。

同时,在图9中的第二映射中,对水平方向执行与均匀映射相同的映射。

如上所述,根据第二映射,因为将具有窄的水平宽度的键的osk与具有宽于均匀映射的情况下的垂直宽度的垂直宽度的操作表面11的范围相关联,所以当感测到osk的每个键的垂直宽度实际上被加宽时,对操作表面11进行操作的用户可以对osk进行操作,并且因此可以通过降低对osk的键进行操作的困难程度来改进osk的可操作性。

也就是说,根据第二映射,例如,可以容易地指向如osk的键、到网页的链接按钮等的gui组件,该gui组件的尺寸小并且对在均匀映射中要求精细的手指移动的操作具有高难度。

同时,根据图9和图10中的第二映射,因为预测候选部分与具有窄于均匀映射的垂直宽度的垂直宽度的操作表面11的范围相关联,对在预测候选部分中的预测候选的操作的困难程度在垂直方向(例如,y方向)上增大。

然而,预测候选具有宽的水平宽度,并且与均匀映射的情况下相同的可操作性在水平方向上被固定。因此,通常,对下述可操作性几乎没有影响:通过将预测候选部分与具有窄于均匀映射的情况下的垂直宽度的垂直宽度的操作表面11的范围相关联而获得的预测候选部分的可操作性。

这里,在第二映射中,根据显示在显示屏幕21上的gui组件(例如,的尺寸),可以对正常映射情况下的与操作表面11上的位置对应的对应点进行校正。

同时,在图9和图10中,作为第二映射,将gui组件与具有与gui组件的水平宽度成反比的垂直宽度的操作表面11的范围相关联(例如,随着gui组件的水平宽度变得更小(或更大),垂直宽度的范围变得更大(或更小))。然而,除此之外,在第二映射中,将gui组件与具有与gui组件的垂直宽度成反比的水平宽度的操作表面11的范围相关联。

另外,在图9和图10中,在第二映射中,以与第一映射相同的方式将gui区域上的位置与操作表面11上的位置或显示屏幕21上的位置相关联。然而,除此之外,在第二映射中,例如,可以以与正常映射相同的方式将整个操作表面11与整个显示屏幕21相关联。

<第三映射>

图11是示出了根据本公开内容的实施方式将操作表面11与显示屏幕21相关联的第三映射的图。

在第一映射和第二映射中,不论操作表面11上的触摸点是由用户的左手手指触摸的左触摸点还是由用户的右手手指触摸的右触摸点,都应用相同的映射。然而,在第三映射中,对左触摸点和右触摸点(例如,通过用户的左手对操作表面11执行的操作以及通过右手对操作表面11执行的操作)执行不同类型的映射。

也就是说,在第三映射中,对于左触摸点,将操作表面11的一部分与gui区域的一部分相关联。对于右触摸点,将操作表面11的另一部分与gui区域的剩余部分相关联。

在图11中,对于左触摸点,将作为操作表面11的左侧的一部分的操作表面11的约左半部分范围(在下文中称为左操作范围)与gui区域的左半部分均匀地相关联。对于右触摸点,将作为操作表面11的右侧的一部分的操作表面11的约右半部分范围(在下文中称为右操作范围)与gui区域的右半部分均匀地相关联。

另外,在图11中,在操作表面11的左操作范围与右操作范围之间存在间隙。

此外,在图11中,与操作表面11的左操作范围相关联的gui区域的左半部分区域(下文中称为左gui区域)的右侧的边界与布置在osk的直线上的“t”、“g”以及“v”键的右侧的边界相配。

另外,在图11中,与操作表面11的右操作范围相关联的gui区域的右半部分区域(下文中称为右gui区域)的左侧的边界与布置在osk的直线上的“y”、“h”以及“b”键的左侧的边界相配。

图12是示出了根据本公开内容的实施方式的操作表面11上的位置(xin,yin)与通过执行第三映射获得的显示屏幕21上的对应点(xout,yout)之间的对应关系的图。

同时,假设gui区域的水平方向上的长度h2是操作表面11的水平方向上的长度h1的kx(=h2/h1)倍,以及gui区域的垂直方向上的长度v2是操作表面11的垂直方向上的长度v1的ky(=v2/v1)倍。此外,假设kx=ky=k。

同时,为了简单说明,假设gui区域是矩形区域,操作表面11上的左下点(例如,位置)是点(xin_min,yin_min),以及右上点是点(xin_max,yin_max)。此外,假设gui区域上的左下点是点(xout_min,yout_min)以及右上点是点(xout_max,yout_max)。

例如,如果假设目前(xin_min,yin_min)=(xout_min,yout_min)=(0,0),则如图10中使用虚线所示,在均匀映射中,操作表面11上的位置(xin,yin)与gui区域上的位置(kxxin,kxyin)相关联。

同时,在图12中,y坐标的对应关系被省略并且仅示出x坐标的对应关系。

在第三映射中,如图12中使用实线所示,对于操作表面11上的左触摸点xin_l(例如,操作表面11上其中x坐标是xin_l的左触摸点),左触摸点xin_l与gui区域上的位置xout_l=fl(xin_l)相关联。

此外,在第三映射中,如图12中使用虚线所示,对于操作表面11上的右触摸点xin_r,右触摸点xin_r与gui区域上的位置xout_r=fr(xin_r)相关联。

这里,函数fl(xin_l)和fr(xin_r)指示第三映射。

根据图12中的函数fl(xin_l),对于左触摸点xin_l,如果左触摸点xin_l在从左端点xin_min=0到左操作范围的右端点in1的范围中从左边移动至右边,则显示屏幕21上与左触摸点xin_l对应的左对应点xout_l使得左gui区域从左边移动至右边。

另外,如果左触摸点xin_l到达左操作范围的右端的点in1,则与左触摸点xin_l对应的左对应点xout_l到达左gui区域的右端的点out1。

在此之后,即使左触摸点xin_l移动到比左操作范围的右端的点in1的更右侧,与左触摸点xin_l对应的左对应点xout_l不移动同时被定位在左gui区域的右端的点out1。

同时,根据函数fr(xin_r),对于右触摸点xin_r,即使右触摸点xin_r在从操作表面11的左端到到右操作范围的左端的点in2的范围中移动,与右触摸点xin_r对应的右对应点xout_r不移动同时被定位在右触摸点xin_r的左端的点out2。

如果右触摸点xin_r从操作表面11的左侧到达右操作范围的左端的点in2,以及然后在从右操作范围的左端的点in2到右端的点xin_max的范围从左边移动到右边,显示屏幕21上与右触摸点xin_r对应的右对应点xout_r使得右gui区域从左边移动到右边。

另外,如果右触摸点xin_r到达右操作范围的右端的点xin_max,则与右触摸点xin_r对应的右对应点xout_r到达右gui区域的右端的点xout_max。

同时,在图11和图12所示的第三映射中,对于垂直方向(例如,y方向),对左触摸点和右触摸点两者执行与均匀映射相同的映射。

在第三映射中,当用户在操作表面11上将左触摸点xin_l(例如,在中心方向上)从左边移向右边并且与左触摸点xin_l对应的左对应点xout_l到达左gui区域的右端的点out1时,左对应点xout_l不从点out1移动。

另外,在第三映射中,当用户在操作表面11上将右触摸点xin_r(例如,在中心方向上)从右边移向左边并且与右触摸点xin_r对应的右对应点xout_r到达右gui区域的左端的点out2时,右对应点xout_r不从点out2移动。

因此,根据第三映射,当尝试使用左触摸点对osk的、被布置在左gui区域的右端的“t”、“g”“v”键进行操作时,可以防止osk的、被布置在右gui区域的左端的“y”、“h”或“b”键被错误的操作。相反地,当尝试使用右触摸点对osk的被布置在右gui区域的左端的“y”、“h”或“b”键进行操作时,可以防止osk的、被布置在左gui区域的右端的“t”、“g”或“v”键被错误的操作。

因此,用户可以使用左手以粗糙的操作指向除了osk的“t”、“g”和“v”键以外的在左gui区域的端部处的部件,并且可以使用右手以粗糙的操作指向除了osk的“y”、“h”和“b”键以外的在右gui区域的端部处的部件,并且因此能够改进可操作性。

这里,在第三映射中,可以单独地限制由左手指向的gui区域的区域,以及限制由右手指向的gui区域的区域。在下文中,第三映射被称为限制映射。

同时,在图11和图12中,作为限制映射(例如,第三映射),映射被执行以在水平方向上限制使用左手指向的gui区域的区域和使用右手指向的gui区域的区域。然而,除此之外,可以在垂直方向上等限制使用左手和右手分别指向的区域。

另外,在限制映射中,可以应用第二映射以将左操作范围与左gui区域相关联,并且将右操作范围与右gui区域相关联。

然而,如果限制映射被有规律地应用,则存在其中在操作中出现问题的情况。

也就是说,例如,如果图11和图12中的限制映射被有规律地应用,则当仅使用左手或右手对操作表面11进行操作时,osk的某些键可能不能由手操作。

这里,tv20的信息处理单元52(图4)执行应用程序确定,以确定是否应用限制映射,并且可以确定根据应用程序确定的结果是否使用映射单元62来应用限制映射。

图13是示出了根据本公开内容的实施方式的应用限制映射的确定处理的流程图。

在步骤s31中,信息处理单元52基于从通信单元51提供的操作信息识别操作表面11上的触摸点的数量,并且处理前进到步骤s32。

在步骤s32中,信息处理单元52确定触摸点的数量是否为二。

在步骤s32中,当确定触摸点的数量为二时,即,当用户通过左手(例如,的手指)和右手(例如,的手指)两者触摸操作表面11时,并且因此存在左触摸点和右触摸点时,处理前进到步骤s33。信息处理单元52确定使用映射单元62执行限制映射,并且处理返回到步骤s31。

另外,在步骤s32中当确定触摸点的数量不是二时,即,例如,当用户通过左手或右手触摸操作表面11时,或者当用户没有触摸操作表面11时,处理前进到步骤s34。信息处理单元52确定不使用映射单元62执行(例如,释放)限制映射,并且处理返回到步骤s31。

根据上述的应用程序确定处理,映射单元62的映射根据触摸点的数量而改变。也就是说,仅当用户通过左手和右手两者触摸操作表面11时,执行限制映射。在其他情况下,例如,当用户仅通过左手或右手触摸操作表面11时,不执行限制映射。

因此,例如,即使用户仅通过左手或右手对操作表面11进行操作,osk的所有键可以通过限制映射来操作。

然而,在限制映射中,当使用左手指向的gui区域的区域和使用右手指向的gui区域的区域可以被单独限定时,以及还当指针30l或指针30r被显示时,需要识别触摸点(或对应点)是由用户的左手触摸的左触摸点(或左对应点)还是由用户的右手触摸的右触摸点(或右对应点)。

这里,tv20的信息处理单元52(图4)执行触摸点识别处理,该处理对根据从通信单元51提供的操作信息对触摸点是左触摸点还是右触摸点进行识别。

图14是示出了根据本公开内容的实施方式的触摸点识别处理的流程图。

在步骤s41中,信息处理单元52基于从通信单元51提供的操作信息确定操作表面11上的触摸点的数量是否增加。

当在步骤s41中确定触摸点的数量没有增加时,处理前进到步骤s47。

另外,当在步骤s41中确定触摸点的数量增加时,即,当出现新的触摸点时,处理前进到步骤s42。信息处理单元52确定新的触摸点是否是第一触摸点。

当在步骤s42中确定新的触摸点是第一触摸点时,处理前进到步骤s43。信息处理单元52确定作为新的触摸点的第一触摸点的x坐标x1是否小于操作表面11在水平方向上的中间点的x坐标xmax/2(在下文中称为中间点坐标)。

当在步骤s43中确定第一触摸点的x坐标x1小于中间点坐标xmax/2时,即,当第一触摸点是操作表面11上的左半部分侧的点时,处理前进到步骤s44。信息处理单元52识别出第一触摸点是左触摸点。

在此之后,根据所识别的第一触摸点是左触摸点,信息处理单元52将第一触摸点坐标(x1,y1)(例如,根据操作信息识别的)设定成(例如,可变的其指示)左触摸点坐标(x左,y左),并且将指示右触摸点不存在(例如,未限定)的值(无,无)设定成右触摸点坐标(x右,y右)。在此之后,处理从步骤s44返回到步骤s41。

另外,当在步骤s43中确定第一触摸点的x坐标x1不小于中间点坐标xmax/2时,即,当第一触摸点是操作表面11上的右半部分侧的点时,处理前进到步骤s45。信息处理单元52识别出第一触摸点是右触摸点。

在此之后,根据所识别的第一触摸点是右触摸点,信息处理单元52将指示左触摸点不存在的值(无,无)设定成左触摸点坐标(x左,y左),并且将第一触摸点坐标(x1,y1)设定成右触摸点坐标(x右,y右)。在此之后,处理从步骤s45返回到步骤s41。

同时,当在步骤s42中确定新的触摸点不是第一触摸点时,处理前进到步骤s46。信息处理单元52确定新的触摸点是否是第二触摸点。

当在步骤s46中确定新的触摸点是第二触摸点时,处理前进到步骤s47。信息处理单元52保持当前实际上识别出的左触摸点和右触摸点,并且根据识别设定左触摸点坐标(x左,y左)和右触摸点坐标(x右,y右)。在此之后,处理返回到步骤s41。

另外,当在步骤s46中确定新的触摸点是第二触摸点时,处理前进到步骤s48。信息处理单元52确定第二触摸点的x坐标x2是否大于第一触摸点的x坐标x1。

当在步骤s48中确定第二触摸点的x坐标x2大于第一触摸点的x坐标x1时,也就是说,当第二触摸点位于比操作表面11上的第一触摸点更右侧时,处理前进到步骤s49。信息处理单元52识别出第一触摸点是左触摸点以及第二触摸点是右触摸点。

在此之后,信息处理单元52根据第一触摸点是左触摸点以及第二触摸点是右触摸点的识别将第一触摸点坐标(x1,y1)设定成左触摸点坐标(x左,y左),并且将第二触摸点坐标(x2,y2)(例如,根据操作信息识别的)设定成右触摸点坐标(x右,y右)。处理从步骤s49返回到步骤s41。

另外,当在步骤s48中确定第二触摸点的x坐标x2不大于第一触摸点的x坐标x1时,也就是说,当第二触摸点位于比操作表面11上的第一触摸点更左侧时,处理前进到步骤s50。信息处理单元52识别出第一触摸点是右触摸点以及第二触摸点是左触摸点。

在此之后,信息处理单元52根据第一触摸点是右触摸点以及第二触摸点是左触摸点的识别将第二触摸点坐标(x2,y2)设定成左触摸点坐标(x左,y左),并且将第一触摸点坐标(x1,y1)(例如,根据操作信息识别的)设定成右触摸点坐标(x右,y右)。处理从步骤s50返回到步骤s41。

对于其中操作表面11上的位置与显示屏幕21上的位置一一对应的操作系统(例如,第二操作系统),用户通过使右手手指和左手手指按顺序触摸操作表面11,以及当需要时通过移动手指同时右手手指和左手手指触摸操作表面11来重复地指向gui区域所需的斑点并且根据需要执行确定操作。

因此,根据图14中的流程图通过执行触摸点识别处理可以识别出触摸点是左触摸点还是右触摸点。

同时,除此之外,例如,可以基于操作表面11上的手指的阴影(例如,形状)来执行触摸点识别。

另外,可以基于当手指接近操作表面11时手指的接近方向来执行触摸点识别。

可以基于手指与操作表面11之间的接触面积(例如,形状)的变化来对手指的接近方向进行检测。

另外,当传感器12可以在z方向上对操作表面11上的手指的位置进行检测时,可以通过拖动接近手指的位置(x,y,z)来检测手指的接近方向。

<第四映射>

图15是示出了根据本公开内容的实施方式的将操作表面11与显示屏幕21相关联的第四映射的图。

在第四映射中,以与第三映射相同的方式对左触摸点和右触摸点执行不同类型的映射。

然而,在第三映射中,对于左触摸点,操作表面11的一部分与gui区域的一部分相关联,以及对于右触摸点,操作表面11的另一部分与gui区域的剩余部分相关联。然而,在第四映射中,映射被执行以使得对于左触摸点的与gui区域相关联的操作表面11的范围偏离对于右触摸点的与gui区域相关联的操作表面11的范围。

因此,在应用第四映射的情况下,需要以与应用第三映射的情况相同的方式执行触摸点识别,以识别触摸点是左触摸点还是右触摸点。

在图15中,从操作表面11的左端到操作表面的略中部而不是其右端的位置的范围,即,具有窄于操作表面11的水平宽度的水平宽度的范围是由左手操作的范围(下文中称为左可操作范围),以及从操作表面11的右端到操作表面的略中部而不是其左端的位置的范围,即,具有窄于操作表面11的水平宽度的水平宽度的范围是由右手操作的范围(下文中称为右可操作范围)。

另外,在图15中,对于左触摸点,左可操作范围与gui区域均匀地相关联,以及对于右触摸点,右可操作范围与gui区域均匀地相关联。

因此,在图15中,将操作表面11与gui区域相关联,以使得对于左触摸点,与gui区域相关联的左可操作范围从右可操作范围移位到左侧,以及对于右触摸点,与gui区域相关联的右可操作范围从左可操作范围移位到右侧。

图16是示出了根据本公开内容的实施方式的操作表面11上的位置(xin,yin)与根据第四映射的显示屏幕21上的对应点(xout,yout)之间的对应关系的图。

同时,假设gui区域的水平方向上的长度h2是操作表面11的水平方向上的长度h1的kx(=h2/h1)倍,以及gui区域的垂直方向上的长度v2是操作表面11的垂直方向上的长度v1的ky(=v2/v1)倍。此外,假设kx=ky=k。

另外,为了简单说明,假设gui区域是矩形区域,操作表面11上的左下点是点(xin_min,yin_min),以及右上点是点(xin_max,yin_max)。此外,假设gui区域上的左下点是点(xout_min,yout_min)以及其中的右上点是点(xout_max,yout_max)。

例如,如果假设目前(xin_min,yin_min)=(xout_min,yout_min)=(0,0),则在均匀映射中,如图16中使用虚线所示,操作表面11上的位置(xin,yin)与gui区域上的位置(kxxin,kxyin)相关联。

同时,在图16中,y坐标的对应关系被省略并且仅示出x坐标的对应关系。

在第四映射中,如图16中使用实线所示,对于操作表面11上的左触摸点xin_l(例如,操作表面11上其中x坐标是xin_l的左触摸点),左触摸点xin_l与gui区域上的位置xout_l=fl(xin_l)相关联。

另外,在第四映射中,如图16中使用虚线所示,对于操作表面11上的右触摸点xin_r,右触摸点xin_r与gui区域上的位置xout_r=fr(xin_r)相关联。

文中,函数fl(xin_l)和fr(xin_r)指示第四映射。

根据图16中的函数fl(xin_l),对于左触摸点xin_l,左触摸点xin_l仅在从操作表面11的右端的点xin_min到左端的点xin_max的范围的左可操作范围内移动,即,在从左可操作范围的左端的点xin_min到右端的点inl(<xin_max)的范围内移动。

另外,在第四映射中,如图16中所示,将具有窄于操作表面11的水平宽度的水平宽度的左可操作范围与gui区域均匀地相关联(例如,左可操作范围中的左触摸点的坐标与gui区域上的对应于左触摸点的左对应点的坐标成比例关系)。因此,随着左触摸点xin_l位于右侧,gui区域上对应于左触摸点xin_l的左对应点xout_l偏移(例如,移位)(使用图16中的向上的箭头指示偏移)到比正常映射情况下的更右边。

以同样的方式,在第四映射中,如图16中所示,具有窄于操作表面11的水平宽度的水平宽度的右可操作范围与gui区域均匀地相关联。因此,随着右触摸点xin_r位于左侧,gui区域上对应于右触摸点xin_r的右对应点xout_r偏移(使用图16中的向下的箭头指示偏移)到比正常映射情况下的更左边。

同时,在图15和图16所示的第四映射中,对于垂直方向(例如,y方向),对左触摸点和右触摸点两者执行与均匀映射相同的映射。

文中,例如,对于osk中的相邻键,例如,“g”键和“h”键,当试图分别使用左手手指和右手手指连续地操作“g”键和“h”键时,在正常映射中在操作表面11上左手手指会干扰(例如,接触)右手手指,并且因此当使用左手手指指向“g”键时难以使用右手手指指向“h”键。

另外,在传感器12是静电式触摸传感器的情况下,如果左手手指与右手手指接触,则可能存在其中基于静电式触摸点检测原理左手手指和右手手指的两个触摸点被检测为具有大的接触面积的单个触摸点的情况。在这种情况下,违背用户的意图,仅指针30l或指针30r被显示以替代两个指针30l和指针30r,并且难以快速且连续地操作“g”键和“h”键。

在第四映射中,如上所述,gui区域上的对应于左触摸点xin_l的左对应点xout_l偏移到比正常映射的更右边,并且gui区域上的对应于右触摸点xin_r的右对应点xout_r偏移到比正常映射的更左边。

因此,在正常映射中,除非移动左手手指以使得左触摸点xin_l位于靠近操作表面11的中心的左边,否则难以指向“g”键。然而,根据第四映射,可以使用通过移动左手手指以使得左触摸点xin_l位于稍微远离操作表面11的中心的左边而偏移到右边的左对应点xout_l指向“g”键。

以同样的方式,在正常映射中,除非移动右手手指以使得右触摸点xin_r位于靠近操作表面11的中心的右边,否则难以指向“h”键。然而,根据第四映射,可以使用通过移动右手手指以使得右触摸点xin_r位于稍微远离操作表面11的中心的左边而偏移到左边的右对应点xout_r指向“h”键。

因此,对于osk中的相邻键,即,“g”键和“h”键,当试图分别使用左手手指和右手手指连续地操作“g”键和“h”键时,在其中操作表面上左手手指稍微远离右手手指的状态下,可以使用左手手指指向“g”键并且使用右手手指指向“h”键

因此,当试图使用左手手指和右手手指连续地操作osk中的相邻键时,防止左手手指和右手手指相互干扰,并且防止左手手指和右手手指的两个触摸点被检测为具有大的接触面积的单个触摸点,并且因此能够改进可操作性。

同时,在图15和图16所示的第四映射中,左可操作范围与整个gui区域相关联,并且右可操作范围与整个gui区域相关联。因此,可以仅使用左手手指或右手手指指向包括osk的所有键的gui区域中的任意点。

这里,在第四映射中,基于触摸点是左触摸点还是右触摸点的事实,以及触摸点的坐标(例如,在图15和图16中,x坐标),可以执行校正以对触摸点的对应点进行偏移。在下文中,第四映射被称为偏移映射。

在图15和图16的偏移映射中,对于左触摸点,与将触摸点(xin,yin)与对应点(kxxin,kxyin)相关联的均匀映射(由图16中的虚线指示)的情况相比较,随着左触摸点的x坐标xin_l变大,左对应点的x坐标xout_l在正方向上的偏移量(由图16中的向上的箭头指示)增大。

因此,随着左触摸点位于右侧,左对应点偏移到相较于均匀映射的情况下的更右侧。

另外,在图15和图16的偏移映射中,对于右触摸点,与均匀映射的情况(由图16中的虚线指示)相比较,随着右触摸点的x坐标xin_r变小,右对应点的x坐标xout_r在负方向上的偏移量(由图16中的向下的箭头指示)增大。

因此,随着右触摸点位于左侧,右对应点偏移到相较于均匀映射的情况下的更左侧。

如上所述,左对应点偏移到右侧以及右对应点偏移到左侧。因此,当osk的彼此水平相邻的两个键的左侧键是由左手手指操作并且右侧键是由右手手指操作时,在操作表面11上左手手指稍微远离右手手指的状态下,可以使用左手手指和右手手指指向两个相邻的键。

同时,在图15和图16中,在水平方向上对对应点进行偏移的映射被作为偏移映射(例如,第四映射)执行。然而,除此之外,在偏移映射中,可以将位于左对应点与右对应点之间的上侧的对应点偏移到下侧,以及将位于下侧的对应点偏移到上侧。

在这种情况下,例如,当osk在垂直方向上彼此相邻的两个键是由左手手指和右手手指操作时,可以防止左手手指和右手手指相互干扰。

另外,当在偏移映射中左可操作范围与gui区域相关联以及右可操作范围与gui区域相关联时,可以应用第二映射。

同时,当使用左手手指和右手手指对操作表面11进行操作时,出现左手手指与右手手指之间的干扰等。因此,当触摸点是单个点或更少的点时,不应用偏移映射,并且仅当触摸点是两个点时,可以应用偏移映射。

然而,如果当触摸点是单个点时不应用偏移映射,并且仅当触摸点是两个点时设置应用偏移映射,则当触摸点从单个点变成两个点以及当两个点变成单个点时,显示在显示屏幕21上的指针30l和指针30r跳跃移动。因此,用户可能会感觉不协调。

因此,不论触摸点的数量是多少,可以应用偏移映射。

同时,如图4中所描述的那样,当操作表面11整体地配置有如液晶面板等的显示单元并且用作可以显示图像并且可以接收关于图像的输入的触摸屏幕时,例如,可以在用作终端10中的触摸屏幕的操作表面11上对显示在tv20的显示屏幕21上的gui进行显示并且例如,对是对gui进行配置的gui组件的osk进行显示。

例如,当显示在tv20的显示屏幕21上的osk也显示在终端10的操作表面11上时,存在用户对操作表面11进行操作同时观察显示在远离用户的tv20的显示屏幕21上的osk的情况,以及其中用户对操作表面11进行操作同时观察显示在手边的终端10的操作表面11上的osk的情况。

如果当用户对操作表面11进行操作同时观察显示在手边的终端10的操作表面11上的osk时应用偏移映射,则存在其中在操作表面11上由用户触摸的osk的键与由显示屏幕21上的指针30l或指针30r指向的osk的键不一致的情况。在这种情况下,用户可能会感觉不协调。

这里,应用程序确定被执行以确定在tv20的信息处理的单元52(图4)中是否应用偏移映射,并且因此可以根据应用程序确定的结果确定是否要在映射单元62中应用偏移映射。

图17是示出了根据本公开内容的实施方式的偏移映射的应用程序确定的处理的流程图。

在步骤s61中,信息处理单元52基于从通信单元51提供的操作信息确定用户对操作表面11所执行的操作是否是轻敲。

在步骤s61中,当确定由用户对操作表面11所执行的操作是轻敲时,处理前进到步骤s62。信息处理单元52确定在映射单元62中不执行(例如,释放)偏移映射,并且处理返回到步骤s61。

另外,当在步骤s61中确定由用户对操作表面11所执行的操作不是轻敲时,处理前进到步骤s63。信息处理单元52基于从通信单元51提供的操作信息确定由用户对操作表面11所执行的操作是否是拖动。

当在步骤s63中确定由用户对操作表面11所执行的操作不是拖动时,处理返回到步骤s61。

另外,当在步骤s63中确定由用户对操作表面11所执行的操作是拖动时,处理前进到步骤s64。信息处理单元52确定在映射单元62中执行偏移映射,并且处理返回到步骤s61。

也就是说,当用户对操作表面11执行拖动操作时,假设用户对操作表面11进行操作同时观察显示在tv20的显示屏幕21上的osk等。因此,映射单元62执行偏移映射。

另一方面,当用户对操作表面11执行轻敲操作时,假设用户对操作表面11进行操作同时观察显示在操作表面11上的osk等。因此,映射单元62不执行偏移映射。

在这种情况下,当在操作表面11上由用户触摸的osk的键与显示屏幕21上的指针30l或指针30r指向的osk的键不一致时,可以防止用户不协调的感觉。

同时,当操作表面11用作触摸屏幕时,类似于智能电话等终端10可以在独立模式下操作。

在这种情况下,终端10设置有如图4中的映射单元62和对应点检测单元63相同的块,并且可以执行对应于触摸点的对应点的映射和检测。

图18是示出了根据本公开内容的实施方式的作为这种终端10的触摸屏幕的操作表面11的显示的示例的图。

在图18中,osk显示在操作表面11上,以及输入部分显示在osk的上部。

在图18中,通过对osk进行操作而输入的字母显示在输入部分中。

在图18中,执行校正以对对应于触摸点的对应点进行偏移的偏移映射在终端10的x方向(例如,水平方向)和y方向(例如,垂直方向)的两个方向上被执行。

然而,如图15所示,对于x方向,其中对应于触摸点的对应点的x坐标的偏移量根据触摸点的x坐标而变化的偏移映射(在下文中,称为可变的偏移映射)被执行。然而,对于y方向,不管触摸点的y坐标如何被执行,其中对应于触摸点的对应点的y坐标的偏移量的偏移映射是均匀的(在下文中,被称为固定的偏移映射)。

在图18中,在终端10中,基于上述的偏移映射的结果检测对应于左触摸点的左对应点和对应于右触摸点的右对应点。指针15l显示在操作表面11的左对应点处作为指示左手手指触摸的符号图像,指针15r显示在操作表面11的右对应点处作为指示右手手指触摸的符号图像。

在图18中,如上所述,对于x方向可变的偏移映射被执行,并且对于y方向固定的偏移映射被执行。因此,如图18a所示,当左触摸点位于显示在操作表面11上的osk的左端时,对应于左触摸点的左对应点位于通过在y方向上从左触摸点偏移预定偏移量而获得的位置处。

如上所述,由于指针15l显示在通过在y方向上从左触摸点偏移预定偏移量而获得的位置的左对应点处,所以可以防止指针15l被触摸左触摸点的左手手指隐藏且不可见。

以同样的方式,对于右触摸点,当右触摸点位于显示在操作表面11上的osk的右端时,指针15r显示在通过在y方向上从右触摸点偏移预定偏移量而获得的位置的右对应点处。因此,可以防止指针15r被触摸右触摸点的右手手指隐藏且不可见。

另外,如图18b所示,当左触摸点位于靠近显示在操作表面11上的osk的中心的左边时,对应于左触摸点的左对应点在通过在y方向上从左触摸点偏移预定偏移量并且偏移根据左触摸点的x坐标在x方向(例如,右方向)(例如,靠近中心)上增大的偏移量而获得的位置处。

如上所述,指针15l通过在y方向上从左触摸点偏移预定偏移量并且偏移根据左触摸的x坐标在x方向上增大的偏移量而显示在靠近中心的位置(例如,左触摸点的左上位置)的左对应点处。

另外,如图18b所示,当左触摸点位于靠近显示在操作表面11上的osk的中心的右边时,对应于右触摸点的右对应点位于通过在y方向上从右触摸点偏移预定偏移量并且偏移根据右触摸的x坐标在x方向(例如,右方向)(例如,靠近中心)上增大的偏移量而获得的位置处。

如上所述,指针15r通过在y方向上从右触摸点偏移预定偏移量并且偏移根据右触摸的x坐标在x方向上增大的偏移量而显示在靠近中心的位置(例如,右触摸点的右上位置)的右对应点处。

因此,可以防止指针15l和指针15r被手指隐藏,并且当osk的两个相邻的键由左手手指和右手的手指操作时可以防止左手手指和右手手指互相接触。

如上所述,例如,在独立的终端10中,对于x方向可变的偏移映射被执行以及对于y方向固定的偏移映射被执行,并且因此可以防止显示在操作表面11上的指针15l和指针15r被手指隐藏。因此,用户通过观察指针15l和指针15r可以容易地识别出osk的被指向的键,从而可以在即使osk的键很小时毫无负担的执行操作。

此外,根据在x方向上的偏移映射,可以减小其中当指向osk的键时手指在x方向上移动的距离。

同时,可以显示指针15l和指针15r以使得用户可以通过以如指针30l和指针30r相同的方式改变其显示格式来很容易地区分相应的指针。

另外,在图18中,可以在输入部分中显示其被指向并且对其执行图2中所描述的确定操作的osk的键的字母。除此之外,可以执行其被指向并且对其不执行确定操作的osk的键的字母的所谓的预览显示。

此外,当在输入部分中执行预览显示时,可以使用与指针15l和指针15r的每个指针相同的显示格式来执行显示,以使得用户可以容易地区分使用左手手指所指向的键的字母和使用右手手指所指向的键的字母。在这种情况下,用户可以通过执行所谓的盲触来对osk进行操作同时观察输入部分。

同时,在图18中,两个字母的预览显示,即,由左手手指(指针15l)指向的键的字母和由右手手指(指针15r)指向的键的字母被执行。然而,当两个字母显示在预览显示中时,存在其中可读性变差的情况,并且因此难以读取。文中,在预览显示中,可以选择性地显示由指针15l指向的键的字母中的一个和由指针15r指向的键的字母。也就是说,例如,在预览显示中,可以仅显示由指针15l和指针15r的指针指向的键的单个字母,其距当先前的确定操作被执行时有大的移动距离。

<根据实施方式的计算机的说明>

随后,可以使用硬件或者可以使用软件来执行上述的一系列的处理。当使用软件来执行一系列的处理时,对软件进行配置的程序被安装在通用计算机等中。

文中,图19示出了其中安装有根据本公开内容的执行上述一系列处理的程序的计算机的配置示例。

程序可以被预先记录在用作内置在计算机中的记录介质的硬盘105或rom103中。

或者,程序可以被存储(例如,记录)在可移动记录介质111中。这种可移动记录介质111可以被设置成所谓的封装软件。文中,例如,可移动记录介质111包括软盘、光盘只读存储器(cd-rom)、磁光(mo)盘、数字多功能光盘(dvd)、磁光盘、半导体存储器等。

同时,程序根据上述的可移动记录介质111被安装在计算机中,并且除此之外,程序可以经由通信网络或广播网络被下载到计算机上并且被安装在内置的硬盘105中。也就是说,例如,程序可以经由数字卫星广播的卫星从下载站点被无线传输至计算机上,或者可以经由网络如局域网(lan)或因特网以有线的方式被传输至计算机。

计算机包括内置的中央处理单元(cpu)102,并且输入/输出接口110经由总线101连接至cpu102。

当命令是经由输入/输出接口110以输入单元107是由用户操作的这样的方式输入时,cpu102根据命令执行存储在只读存储器(rom)103中的程序。或者,cpu102将存储在硬盘105中的程序加载到随机存取存储器(ram)104中,并且执行该程序。

因此,cpu102根据上述的流程图执行处理或通过上述框图的配置执行处理。另外,例如,当需要时,cpu102经由输入/输出接口110使得处理结果从输出部分106输出,从通信单元108传输,或者记录在硬盘105中。

同时,输入单元107包括键盘、鼠标、麦克风等。另外,输出单元106包括液晶显示器(lcd)、扬声器等。

文中,在本说明书中,根据程序通过计算机执行的处理不需要根据流程图中所描述的顺序按时间顺序执行。也就是说,根据程序通过计算机执行的处理包括并行执行或单独执行(例如,并行处理或根据对象的处理)的处理。

另外,程序可以通过单个计算机(例如,处理器)来处理,或者可以分配给多个计算机来处理。另外,程序可以被传输至远程计算机来执行。

此外,在本说明书中,系统是指多个配置元件(例如,装置,模块(组件)等)的集合体,并且不论所有的配置元件是否包括在同一壳体中。因此,在存储在单独的壳体中并且经由网络连接的多个装置中,以及其中多个模块存储在单个壳体中的单个装置中,任何一个也是一个系统。

同时,本公开内容的实施方式不限于上述的实施方式,并且在不脱离本公开内容的主旨的范围内各种类型的修改是可能的。

例如,本公开内容的实施方式可以使用其中在网络上单个功能在多个装置之间共享并且共同执行的云计算的配置。

另外,在上述流程图中的各个步骤不仅可以与多个装置共享以及在多个装置中执行,而且也可以在单个装置中执行。

此外,当多个处理对单个步骤进行配置时,包括在单个步骤中的多个处理不仅可以共享以及在多个装置中执行,而且可以在单一装置中执行。

另外,在实施方式中,在终端10中,指示操作表面11上的触摸点的信息对操作信息进行配置以及然后传输至tv20。然而,在终端10中,指示与操作表面11上的触摸点对应的对应点的信息可以包括在操作信息中以及然后传输至tv20。

在终端10中,当指示操作表面11上的对应于触摸点的对应点的信息对操作信息进行配置以及然后传输至tv20时,对于终端10执行对应于触摸点的对应点的映射和检测是需要的。因此,映射单元62和对应点检测单元63(图4)未设置在tv20中,但设置在终端10中。

另外,在实施方式中,根据显示在显示屏幕21上的gui,显示控制单元61分别显示指针30l或指针30r作为指示对应于触摸点的对应点被触摸的符号图像。然而,显示控制单元61可以通过改变显示形式(例如显示在对应点处的gui组件的亮度或颜色而不是显示在对应点处的符号图象)来显示触摸被执行。

同时,本公开内容的实施方式可以包括以下配置。

(1)一种信息处理装置包括:

操作表面,该操作表面被配置成对触摸输入进行接收;以及

传感器单元,该传感器单元被配置成在操作表面的第一操作区域内对来自由操作表面的用户进行的操纵的至少一个右侧触摸输入进行检测,以及在操作表面的第二操作区域内对来自由操作表面的用户进行的操纵的至少一个左侧触摸输入进行检测,

其中操作表面的第一操作区域和第二操作区域被映射至显示设备的图形用户界面(gui)区域。

(2)根据(1)的信息处理装置,其中第一操作区域与第二操作区域通过操作表面上的间隙被间隔且分开。

(3)根据(1)的信息处理装置,其中第一操作区域和第二操作区域至少部分地相互交叠。

(4)根据(1)的信息处理装置,其中第一操作区域和第二操作区域基本上相互交叠。

(5)根据(1)的信息处理装置,在检测到至少一个右侧触摸输入时,与被检测到的至少一个右侧触摸输入对应的第一焦点显示在显示设备的gui区域中,以及其中,在检测到至少一个左侧触摸输入时,与被检测到的至少一个左侧触摸输入对应的第二焦点显示在显示设备的gui区域中。

(6)根据(5)的信息处理装置,其中当至少一个右侧触摸输入不再被检测到时,第一焦点不显示在显示设备的gui区域中,以及当至少一个左侧触摸输入不再被检测到时,第二焦点不显示在显示设备的gui区域中。

(7)根据(5)的信息处理装置,其中第一焦点和第二焦点各自包括指针图标。

(8)根据(5)的信息处理装置,其中第一焦点和第二焦点各自包括相应的关联区域在gui区域内的加亮区。

(9)根据(5)的信息处理装置,其中第一焦点和第二焦点各自包括屏幕键盘(osk)的相应的关联键显示在显示设备的gui区域内的加亮区。

(10)根据(1)的信息处理装置,其中,在检测到用于传送至少一个右侧触摸输入的、接近操作表面的第一操作工具时,与被检测到的接近的第一操作工具对应的第一焦点显示在显示设备的gui区域中,以及其中,在检测到用于传送至少一个左侧触摸输入的、接近操作表面的第二操作工具时,与被检测到的接近的第二操作工具对应的第二焦点显示在显示设备的gui区域中。

(11)根据(1)的信息处理装置,其中传感器单元还被配置成将由操作表面接收的触摸输入识别为右手触摸输入或左手触摸输入。

(12)根据(11)的信息处理装置,其中传感器单元基于在操作表面上进行了相应的触摸输入的点的x坐标位置将触摸输入中的每个触摸输入识别为右手触摸输入或左手触摸输入。

(13)根据(11)的信息处理装置,其中传感器单元基于当操作表面接收相应的触摸输入时在操作表面上形成的阴影形状将触摸输入中的每个触摸输入识别为右手触摸输入或左手触摸输入。

(14)根据(1)的信息处理装置,其中操作表面的第一操作区域和第二操作区域被映射到的显示设备的gui区域小于显示设备的总的显示区域。

(15)根据(1)的信息处理装置,其中操作表面的第一操作区域被映射至显示设备的gui区域的第一区域,以及操作表面的第二操作区域被映射至显示设备的gui区域的第二区域。

(16)根据(15)的信息处理装置,其中操作表面的第一操作区域被映射至显示设备的gui区域的屏幕键盘(osk)的第一部分,以及操作表面的第二操作区域被映射至显示设备的gui区域的osk的第二部分。

(17)根据(1)的信息处理装置,其中在操作表面的区域上覆盖有第二gui,第二gui与显示设备的gui区域对应。

(18)根据(1)的信息处理装置,其中操作表面的文本输入部分被映射至显示设备的gui区域的屏幕键盘(osk)上。

(19)根据(18)的信息处理装置,其中将操作表面的文本输入部分映射至显示设备的gui区域的osk的映射大小比大于映射至显示设备的gui区域的对应部分的操作表面的其他部分的映射大小比。

(20)一种信息处理方法包括:

将终端设备的操作表面的第一操作区域和第二操作区域映射至显示设备的图形用户界面(gui)区域;

在操作表面的第一操作区域内对来自由操作表面的用户进行的操纵的至少一个右侧触摸输入进行检测;以及

在操作表面的第二操作区域内对来自由操作表面的用户进行的操纵的至少一个左侧触摸输入进行检测。

(21)根据(20)的信息处理方法还包括:

当至少一个第一触摸输入被检测时,在显示设备的gui区域中显示与被检测的至少一个第一触摸输入对应的第一焦点,以及

当至少一个第二触摸输入被检测时,在显示设备的gui区域中显示与被检测的至少一个第二触摸输入对应的第二焦点。

(22)一种通过程序体现的非暂时性计算机可读介质,该程序当由计算机执行时使计算机执行下述方法,该方法包括:

将终端设备的操作表面的第一操作区域和第二操作区域映射至显示设备的图形用户界面(gui)区域;

在操作表面的第一操作区域内对来自由操作表面的用户进行的操纵的至少一个右侧触摸输入进行检测;以及

在操作表面的第二操作区域内对来自由操作表面的用户进行的操纵的至少一个左侧触摸输入进行检测。

(23)根据(22)的非暂时性计算机可读介质,还使计算机执行下述方法:

当至少一个第一触摸输入被检测时,在显示设备的gui区域中显示与被检测的至少一个第一触摸输入对应的第一焦点,以及

当至少一个第二触摸输入被检测时,在显示设备的gui区域中显示与被检测的至少一个第二触摸输入对应的第二焦点。

(24)一种信息处理装置包括:映射单元,该映射单元基于显示在显示屏幕上的图形执行将由用户操作的操作表面上的位置与在其上显示图像的显示屏幕上的位置相关联的映射;和检测单元,该检测单元基于映射的结果对对应点进行检测,该对应点处于显示屏幕上的位置并且与由用户操作的操作表面上的位置对应。

(25)根据(24)的信息处理装置还包括:显示控制单元,该显示控制单元对指示操作在对应点处被执行的符号图像进行显示或改变对对应点上的图形进行配置的图形组件的显示格式。

(26)在(24)或(25)的信息处理装置中,映射单元基于显示在显示屏幕上的图形执行映射以使得操作表面上的位置与在其上图形显示在显示屏幕上的位置内的图形区域上的位置相关联。

(27)在(26)的信息处理装置中,映射单元执行映射以使得操作表面与图形区域均匀地相关联。

(28)在(24)至(26)中的任一项的信息处理装置中,映射单元基于对显示在显示屏幕上的图形进行配置的图形组件执行映射以使得操作表面上的位置与显示屏幕上的位置相关联。

(29)在(28)的信息处理装置中,相较于将操作表面与图形区域均匀地相关联的均匀映射,映射单元执行映射以使得在其上显示小尺寸图形组件的区域与操作表面的较宽范围相关联。

(30)在(26)至(29)中的任一项的信息处理装置中,对于由用户的左手对操作表面所执行的操作以及由用户的右手对操作表面所执行的操作,映射单元执行不同类型的映射。

(31)在(30)的信息处理装置中,映射单元执行偏移映射,该偏移映射使与图形区域相关联的对于由左手对操作表面所执行的操作的操作表面的范围从与图形区域相关联的对于由右手对操作表面的操作的操作表面的范围移位。

(32)在(31)的信息处理装置中,在偏移映射中,对于由用户的左手对操作表面所执行的操作,映射单元使与图形区域相关联的操作表面的范围移位至左侧,以及对于用户的右手对操作表面所执行的操作,映射单元使与图形区域相关联的操作表面的范围移位至右侧。

(33)在(31)的信息处理装置中,映射单元当对操作表面执行拖动操作时采用偏移映射,以及当对操作表面执行轻敲操作时不采用偏移映射。

(34)在(30)的信息处理装置中,映射单元执行映射以使得对于由用户的左手对操作表面所执行的操作,操作表面的一部分与图形区域的一部分相关联,以及对于由用户的右手对操作表面所执行的操作,操作表面的另一部分与图形区域的剩余部分相关联。

(35)在(34)的信息处理装置中,映射单元执行映射以使得对于由用户的左手对操作表面所执行的操作,操作表面的左侧的一部分与图形区域的剩余左半部分相关联,以及对于由用户的右手对操作表面所执行的操作,操作表面的右侧的一部分与图形区域的剩余右半部分相关联。

(36)在(24)至(35)中的任一项的信息处理装置中,映射单元根据由用户操作的操作表面上的位置的数量来改变映射。

(37)一种信息处理方法包括:基于显示在显示屏幕上的图形执行将由用户操作的操作表面上的位置与在其上显示图像的显示屏幕上的位置相关联的映射;以及基于映射的结果对对应点进行检测,该对应点处于显示屏幕上的位置并且与由用户操作的操作表面上的位置对应。

(38)一种使计算机用作下述的程序:映射单元,该映射单元基于显示在显示屏幕上的图形执行将由用户操作的操作表面上的位置与在其上显示图像的显示屏幕上的位置相关联的映射;和检测单元,该检测单元基于映射的结果对对应点进行检测,该对应点处于显示屏幕上的位置并且与由用户操作的操作表面上的位置对应。

(39)一种信息处理系统包括:包括由用户操作的操作表面的终端;以及根据操作表面的操作执行处理的信息处理装置。信息处理装置可以包括映射单元,该映射单元基于显示在显示屏幕上的图形执行将操作表面上的位置与在其上显示图像的显示屏幕上的位置相关联的映射;和检测单元,该检测单元基于映射的结果对对应点进行检测,该对应点处于显示屏幕上的位置并且与由用户操作的操作表面上的位置对应。

本公开内容包括涉及2012年4月19日递交给日本专利局的公开在日本优先专利申请jp2012-095497中的主题,全部内容通过引用合并到本文中。

本领域技术人员应了解,只要在随附权利要求或其等同物的范围内,根据设计要求和其他因素可以有各种修改、组合、子组合和变更。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1