进行对应于姿势操作的数据处理的数据处理装置以及方法
【专利摘要】本发明涉及进行对应于姿势操作的数据处理的数据处理装置以及方法。其课题为，在检测姿势操作而进行对应于该操作的数据处理的情况下，能够恰当地判断其姿势操作。CPU（1）对检测到触摸面板（5b）上的姿势操作时的处理状态进行判别，并且根据其处理状态来判断该姿势操作种类，进行对应于该操作种类的数据处理。在该情况下，CPU（1）按照每个处理状态对姿势操作种类进行判断评价，并更新轻拂优先指针（FP）、敲击优先指针（TP）的值（评价累计值），根据该轻拂优先指针（FP）以及敲击优先指针（TP）的值来判断某一个姿势操作种类（轻拂操作/敲击操作）。
【专利说明】进行对应于姿势操作的数据处理的数据处理装置以及方法
【技术领域】
[0001]本发明涉及进行对应于姿势操作的数据处理的数据处理装置以及方法。
【背景技术】
[0002]以往，作为在移动终端装置等数据处理装置中，根据触摸面板上的姿势操作的动作本身来判断是否进行了轻拂操作的技术，例如存在:根据触摸面板上的接触开起点与接触结束点之间的关系，来判断是轻拂(flick)操作还是敲击(tap)操作的技术(日本特开2011-118629公报);根据触摸位置的分散状态的阈值来判断是拖动(drag)操作还是轻拂操作的技术(日本特开2011 -134212公报);以及通过操作的动作和速度的阈值判断，来判断为是轻拂操作的技术(日本特开2006-85703公报)。
[0003]然而，在上述各专利文献I?3的技术中，仅是根据姿势本身的操作的动作(物理的操作状态)来判断是否为轻拂操作，存在误判断的危险性。即，即使是相同种类的姿势操作，有时其动作会微妙地变化，因此存在进行了与用户的意图相反的姿势判断，例如虽然打算进行轻拂操作但被判断为敲击操作、或者虽然打算进行敲击操作但被判断为轻拂操作等误判断的危险性。
【发明内容】
[0004]本发明的课题在于，在检测姿势操作而进行对应于该操作的数据处理的情况下，能够恰当地判断其姿势操作。
[0005]本发明具备下述构成。
[0006]本发明的一种方案为一种数据处理装置，具备检测姿势操作的检测单元，其特征在于，具备:判别单元，基于由上述检测单元检测到姿势操作的检测时刻，判别该数据处理装置的处理状态；判断单元，根据由上述判别单元判别的处理状态，从多个姿势操作种类中判断某一个姿势操作种类；以及数据处理单元，进行与由上述判断单元判断的姿势操作种类相对应的数据处理。
[0007]本发明的另一种方案为一种数据处理装置，具备检测姿势操作的检测单元，其特征在于，具备:判别单元，在由上述检测单元检测到姿势操作时，判别其操作对象的属性；判断单元，根据由上述判别单元判别的操作对象的属性，从多个姿势操作种类中判断某一个姿势操作种类；以及数据处理单元，进行与由上述判断单元判断的姿势操作种类相对应的数据处理。
[0008]发明的效果
[0009]根据本发明，在检测姿势操作而进行对应于该操作的数据处理的情况下，能够恰当地判断其姿势操作，能够进行按照用户意图的操作。
【专利附图】
【附图说明】
[0010]图1是表示带有触摸屏的家庭用的印刷装置的基本构成要素的框图。[0011]图2是表示缩略图画面的图。
[0012]图3是用于说明图像存储器GM的图。
[0013]图4是根据缩略图画面的显示指定而开始执行的流程图。
[0014]图5是用于说明对姿势操作时的处理状态进行判别的处理的图。
[0015]图6是用于对轻拂优先条件判断处理进行详细说明的流程图。
[0016]图7是用于对敲击优先条件判断处理进行详细说明的流程图。
[0017]图8是表示平板终端装置的基本构成要素的框图。
[0018]图9是用于对在触摸显示部15上进行了姿势操作的情况下的操作对象进行说明的图。
[0019]图10是表示根据姿势操作而开始执行的平板终端装置的动作的流程图。
【具体实施方式】
[0020]以下，参照附图详细说明本发明的实施方式。
[0021](实施方式I)
[0022]首先，参照图1?图7说明本发明第一实施方式。
[0023]本实施方式为，例示数据处理装置用作为带有触摸屏的家庭用的印刷装置的情况，图1是表示该印刷装置的基本构成要素的框图。
[0024]数据处理装置(印刷装置)具备制作地址簿的功能、印刷图像/文章/地址等的印刷功能、以及编辑照片图像/文章等的编辑功能等，能够简单地印刷贺年卡等的地址、文章，为了提高操作性而搭载有触摸屏。
[0025]CPUl是通过从电源部(省略图示)的电力供给而进行动作、根据存储部2内的各种程序来控制该印刷装置的全体动作的中央计算处理装置。存储部2包括:存储后述的图4?图7的流程图所示的程序等各种程序的程序区域2a ;存储该印刷装置所需要的各种数据(图像数据、地址簿数据、文章数据等)的数据区域2b ;以及将标志等临时存储用的工作区域2c，在该数据区域2b中，具有后述的图像存储器GM、敲击优先指针TP以及轻拂优先指针FP。此外，存储部2也可以是包括SD卡等可移动记录介质的构成，也可以包括其他服务器装置(省略图示)侧的存储区域。
[0026]操作部3为，作为按压按钮式的各种键，具备使电源开/关的电源开关键、使上下左右的光标移动的光标键、以及指示印刷开始的打印键等，CPUl进行与来自操作部3的键操作信号相对应的处理。印刷部4例如为将彩色墨(黄色、品红、青色)向用纸喷射，而进行高精细度的印刷的喷墨方式的打印机，墨余量检测部4a按照各彩色墨来检测墨余量(％ )，将各墨的余量给予CPU1，并使该墨余量常时或者根据需要进行引导显示。
[0027]触摸显示部5构成触摸屏，是在显示面板5a上层叠配设了触摸面板5b的构成，具有输入控制部5c、显示控制部5d，显示作为软件键(软键)的功能名、或者显示各种图标等。显示面板5a例如为具有纵横比不同的画面的高精细度液晶显示器或者有机EL (ElectroLuminescence:电致发光)显示器。
[0028]输入控制部5c为，在触摸面板5b上基于手指、笔等进行了姿势操作的情况下，检测其接触位置等并输入其坐标数据，输入控制部5c例如采用静电电容方式或者电阻膜方式，但也可以是其他方式。在此，触摸面板5b上的姿势操作是指，根据手指、笔的动作而指示接触位置、接触移动、接触方向等的操作。
[0029]输入控制部5c为，当根据与向触摸面板5b的接触位置相对应的信号的时间变化，来检测手指等的移动方向、移动速度，或者检测手指等的接触离开了的情况，而将输入事件给予CPUl时，CPUl判断触摸面板5b上的姿势操作种类，并进行与该种类相对应的数据处理。
[0030]在此，在第一实施方式中，作为触摸面板5b上的姿势操作种类，例示出对触摸面板5b上的任意位置接触并立即离开的姿势操作(敲击操作)、以及在触摸面板5b上接触移动之后立即离开的姿势操作(轻拂操作)，但当然还能够执行其他种类的姿势操作。
[0031]此外，姿势操作不限于向触摸面板5b上的接触操作(触摸操作)，作为与该接触操作近似的操作，例如意味着包含如下的非接触操作:根据由手指、笔的接近、接近移动引起的静电电容变化、明亮度变化等，来检测手指、笔的位置。换句话说，不限于检测接触操作的接触型触摸面板，也可以是检测非接触操作的非接触型触摸面板、操作检测器件，但本实施方式的情况为，作为姿势操作，例示了接触型触摸面板上的接触操作。
[0032]图2是表示使通过SD卡等从外部供给的照片图像缩小而在触摸显示部5上一览显示的情况下的缩略图画面的图。
[0033]在图示的例子中表示如下的缩略图画面:多个图像(I)?(12)以3行X4列的矩阵状配置显示，在其各图像的右上角部配置显示有对该图像的放大显示进行指示的放大预览按钮BI。此外，在缩略图画面内的空白区域中，配置有下页切换按钮B2以及前页切换按钮B3，并且配置有使缩略图显示结束的返回按钮B4。此外，在下页切换按钮B2与前页切换按钮B3之间，例如以1/10的方式引导显示当前页/页总数。
[0034]在这种构成的缩略图画面上，当进行某种姿势操作时，CPUl判断该姿势操作的种类(姿势操作种类)，如果是敲击操作，则执行图像的选择处理，如果是轻拂操作，则执行页切换处理。此外，在图示的例子中，例示了在图像(9)上进行了敲击操作的情况，此外，例示了在图像(3)、(4)附近进行了向箭头方向(右方向)的轻拂操作、和向箭头方向(左方向)的轻拂操作的情况。当进行这种姿势操作时，CPUl判别姿势操作检测时的当前的处理状态，并且根据该处理状态来判断姿势操作种类，并执行与该姿势操作种类相对应的数据处理。
[0035]在此，上述的“处理状态”为，详细情况将后述，但例如是从显示规定的数据起是否经过了规定时间的处理状态、墨余量是否接近不足的处理状态、是否是对图像的姿势操作的处理状态、是否在进行了姿势操作的操作位置存在规定的图像的处理状态、是否经由了经过(trace)状态(接触移动状态)的处理状态、是否为显示数据正在加工中的处理状态等。
[0036]此外，如后述那样，当然不限定于上述的处理状态。此外，与姿势操作种类相对应的数据处理是指，如果姿势操作种类为敲击操作，则是选择所敲击操作的图像而使其放大显示的图像选择处理，如果为轻拂操作，则是对应于该轻拂方向切换为下页的缩略图画面、或切换为前一页的缩略图画面的页切换处理，但如后述那样，当然不限于此。
[0037]图3是用于说明图像存储器GM的图。
[0038]图像存储器GM用于对与从SD卡等读出并取得的各种照片图像有关的信息进行存储管理，其构成为，除了作为一系列编号的“N0.”、作为图像识别信息的“图像ID”以外，还具有作为“图像属性”的各项目。“图像属性”为，作为该图像的属性，具有表示储存该图像的文件夹目的地“文件夹”、表示是否印刷结束的“印刷”、表示有无伸展处理(放大显示)的“伸展”、表示伸展处理时有无产生错误的“伸展错误”的各项目。
[0039]此外，在图示的例子中，例如表示的情况为，“N2”为“I”的图像，其“图像ID”为“01001”、“图像属性”的“文件夹”为“收藏(faVOrite)”、“印刷”为“未印刷”、“伸展”为“未
伸展”、“伸展错误”为“一一(无)”。
[0040]接下来，参照图4?图7所示的流程图来说明第一实施方式的印刷装置的动作概念。在此，这些流程图所记述的各功能，以能够读取的程序代码的形态储存，并依次执行按照该程序代码的动作。此外，还能够依次执行按照经由网络等传送介质传送来的上述程序代码的动作。该情况在后述的其他实施方式中也同样，除了记录介质以外，还能够利用经由传送介质从外部供给的程序/数据来执行本实施方式特有的动作。
[0041]此外，图4?图7是表示印刷装置的全体动作中、本实施方式的特征部分的动作概要的流程图，在从该图4?图7的流程退出时，返回全体动作的主流程(省略图示)。
[0042]图4是根据缩略图画面的显示指定而开始执行的流程图。
[0043]首先，控制部I为，当从菜单画面中选择指定成为缩略图显示的对象的任意的图像文件夹时(步骤Al )，读入该文件夹(例如收藏文件夹等)内的各图像(步骤A2)，制作图2所示那样的缩略图画面而使其显示在触摸显示部5上(步骤A3)。
[0044]首先，作为第一页的缩略图画面，从第一张图像到第十二张图像被一览显示为矩阵状。在该状态下，CPUl调查在缩略图画面上是否进行了某种操作(按钮接触操作或者姿势操作)(步骤A4),在进行某种操作之前成为操作等待状态。
[0045]然后，当在缩略图画面上进行了某种操作时(步骤A4中是)，调查其接触位置是否为各种按钮BI?B4的配置位置(步骤A5),如果是向按钮的配置位置的接触操作(步骤A5中是)，则调查其操作按钮是否为返回按钮B4 (步骤A6)。
[0046]然后，在返回按钮B4被操作时(步骤A6中是)，将缩略图画面解除而向下一个画面(例如菜单画面)返回，在返回按钮B4以外的按钮BI?B3被操作时(步骤A6中否)，进行对应于该操作按钮BI?B3的处理(步骤A7)。例如，在放大预览按钮BI被操作时，对该按钮位置的图像进行放大处理，而预览显示其放大图像。
[0047]此外，在下页切换按钮B2被操作时，切换显示为下页的缩略图画面，在前页切换按钮B3被操作时，切换显示为前页的缩略图画面。然后，返回上述的步骤A4而成为操作等待状态。
[0048]在此，如果不是向各种按钮BI?B4的操作(步骤A5A中否)，则作为进行了姿势操作的情况，由输入控制部5c检测向触摸面板5b的接触位置，并且根据与该接触位置相对应的信号的时间变化来检测手指等的移动方向、移动速度，或者检测手指等的接触离开了的情况(步骤A8)。
[0049]然后，通过这种姿势操作内容的检测来进行姿势操作的筛选(进行是敲击操作还是轻拂操作的筛选)，将对应于其姿势操作的输入事件给予CPUl (步骤A9)。CPUl当接受到表示姿势操作的输入事件时，判别其姿势操作时的处理状态(步骤A10)，并且根据该处理状态进行判断姿势操作种类的处理(步骤All)。
[0050]S卩，当根据触摸显示部5上的姿势操作内容而取入表示其姿势操作的输入事件时，为了判断其真伪，而参照当前的处理状态来判断姿势操作的种类。
[0051]图5是用于说明对姿势操作时的处理状态进行判别的处理(图4的步骤A10)的图。首先，CPUl从印刷部4的墨余量检测部4a取得各种墨的余量，并调查是否余量接近不足(例如1%)(步骤BI)，如果为余量接近不足的I %以下(步骤BI中是)，则进行对轻拂优先指针FP的值加“I”的更新处理(步骤B2)，如果墨余量超过1% (步骤BI中否)、即墨余量具有剩余，则进行对敲击优先指针TP的值加“ I ”的更新处理(步骤B3 )。
[0052]在此，轻拂优先指针FP以及敲击优先指针TP为，按照多种处理状态的每种来存储姿势操作种类的判断评价点(评价累计值)，轻拂优先指针FP是在姿势操作时的处理状态为进行轻拂操作的可能性较高的处理状态的情况下更新其值(评价累计值)的指针，敲击优先指针TP是在进行敲击操作的可能性较高的处理状态的情况下更新其值(评价点累计值)的指针。
[0053]在此，墨余量被常时或者根据需要而进行引导显示，在用户根据该余量显示而确认了接近不足的情况下，选择图像而使该图像印刷的可能性较小，因此该情况下的姿势操作，与选择图像的敲击操作相比进行轻拂操作的可能性较高，因此对轻拂优先指针FP的值进行更新，但如果墨余量具有剩余，则进行敲击操作的可能性较高，因此对敲击优先指针TP的值进行更新。
[0054]接下来，调查来自输入控制部5c的输入事件是否为轻拂(步骤B4)，在接受到轻拂的输入事件时(步骤B4中是)，根据其接触位置的变化来调查是否检测到图像上的接触移动(步骤B5)。在此，如果未检测到图像上的接触移动(步骤B4中否)，则与选择图像的敲击操作相比，进行指示翻页的轻拂操作的可能性较高，因此进行对轻拂优先指针FP的值加“I”的更新处理(步骤B6)，但在检测到图像上的接触移动时(步骤B5中是)，使轻拂操作的可能性优先，但由于还剩余有敲击操作的可能性，因此作为进一步的判断处理而转移到轻拂优先条件判断处理(步骤B7)。
[0055]图6是用于详细说明轻拂优先条件判断处理(图5的步骤B7)的流程图。
[0056]首先，CPUl调查是否为从初次显示后(电源接通后、初次的缩略图画面的显示后)起为Tl时间(例如两秒)以内的接触移动检测(步骤Cl)。在此，如果是从初次的缩略图画面的显示后起两秒以内(步骤Cl中是)，则为了进行页切换而进行轻拂操作的可能性较高，因此进行对轻拂优先指针FP的值加“ I”的更新处理(步骤C2)，如果从初次的缩略图画面的显示后起超过两秒(步骤Cl中否)，则选择图像而使其放大显示的敲击操作的可能性较高，因此进行对敲击优先指针TP的值加“I”的更新处理(步骤C3)。
[0057]接下来，调查是否是从前次的轻拂操作起为T2时间(例如两秒)以内的接触移动检测(步骤C4)。在该情况下也是，如果从前次显示后起为两秒以内(步骤C4中是)，则进行轻拂操作的可能性较高，因此进行对轻拂优先指针FP的值加“I”的更新处理(步骤C5)，但如果从前次显示后起超过两秒(步骤C4中否)，则选择图像而使其放大显示的敲击操作的可能性较高，因此进行对敲击优先指针TP的值加“I”的更新处理(步骤C6)。
[0058]接下来，调查在通过接触移动而经过(trace)的位置上，作为规定的图像，例如是否存在印刷结束图像、未伸展图像、伸展错误图像的某一个(步骤C7)。S卩，在根据所接触移动的位置上存在的图像的显示位置来确定该图像之后，参照图像存储器GM而读出该图像的属性，并根据其属性来调查是印刷结束图像、未伸展图像、还是伸展错误图像。如此地对在通过接触移动而经过(trace )的位置上存在的图像的属性进行检查的理由，如下所述。
[0059]S卩，其原因为，印刷结束图像被再次进行图像选择而印刷的可能性较低，未伸展图像是过去未被选择的图像今后被选择的可能性也较低，伸展错误的图像是过去被选择要放大、但是由于某种原因成为错误的图像，知道该情况的用户再次选择该缩略图图像而进行伸展的可能性较低。如果是如此进行图像选择的可能性较低的图像上的接触移动(步骤C7中是)，则进行对轻拂优先指针FP的值加“ I ”的更新处理(步骤CS)，但如果不是这种图像上的接触移动(步骤C7中否)，则进行对敲击优先指针TP的值加“ I ”的更新处理(步骤C9)。
[0060]另一方面，输入事件如果不是轻拂(图5的步骤B4中否)，换句话说，在敲击操作的输入事件的情况下，调查是否为经由接触移动状态的接触检测(步骤B8)，如果是未经由接触移动状态的接触检测(步骤B8中否)，则敲击操作的可能性较高，因此进行对敲击优先指针TP的值加“I”的更新处理(步骤B9)。此外，如果是经由接触移动状态的接触检测(步骤B8中是)，则使敲击操作的可能性优先，但还存在轻拂操作的可能性，因此作为进一步的判断处理，而转移到敲击优先条件判断处理(步骤B10)。
[0061]图7是用于详细说明敲击优先条件判断处理(图5的步骤B10)的流程图。首先，CPUl调查从放大预览显示后起是否为T3时间(例如两秒)以内的接触检测(步骤D1)。在该情况下，通过放大预览显示而确认了图像的用户，在进行了选择该图像的敲击操作之后进行印刷的可能性较高，因此如果是从放大显示后起两秒以内的接触检测(步骤Dl中是)，则进行对敲击优先指针TP的值加“ I ”的更新处理(步骤D2)，如果是从放大显示后起超过两秒时的接触检测(步骤Dl中否)，则进行对轻拂优先指针FP的值加“I”的更新处理(步骤D3)。
[0062]接下来，调查接触位置所配置的图像是否为收藏文件夹内的图像(步骤D4)。在该情况下，在根据所接触的图像的显示位置确定该图像之后，参照图像存储器GM读出该图像的属性，并调查是否为收藏文件夹内的图像。在该情况下，收藏文件夹内的图像被进行图像选择的可能性较高，因此如果为收藏文件夹内的图像(步骤D4中是)，则进行对敲击优先指针TP的值加“ I ”的更新处理(步骤D5)，如果不是收藏文件夹内的图像(步骤D4中否)，则进行对轻拂优先指针FP的值加“ I ”的更新处理(步骤D6)。
[0063]接下来，调查所接触检测到的位置的图像是否为加工中(步骤D7)。在此，图像加工是指为放大预览显示中、旋转显示中等，如果是图像的加工中的接触检测(步骤D7中是)，则用于返回其图像显示的敲击操作的可能性较高，因此进行对敲击优先指针TP的值加“I”的更新处理(步骤D8)，如果不是图像的加工中的接触检测(步骤D7中否)，则进行对轻拂优先指针FP的值加“I”的更新处理(步骤D9)。
[0064]当如上述那样的处理状态的判别处理结束时(图4的步骤A10)，进行根据其处理状态来判断姿势操作种类的处理(步骤AU)。在该情况下，根据轻拂优先指针FP的值与敲击优先指针TP的值的比较结果来判断姿势操作种类。即，如果轻拂优先指针FP的值为敲击优先指针TP的值以上，则判断为进行了轻拂操作，如果为轻拂优先指针FP的值小于敲击优先指针TP的值，则判断为进行了敲击操作。
[0065]当如此进行判断姿势操作种类(轻拂操作/敲击操作)的处理时(步骤All)，调查该姿势操作种类是否为轻拂操作(步骤A12)，如果姿势操作种类是轻拂操作(步骤A12中是)，则例如进行缩略图画面的页切换，但此时，根据所检测到的轻拂方向(接触移动方向)来切换为下页的缩略图画面、或切换为前一页的缩略图画面(步骤A12)。
[0066]此外，在通过轻拂操作来进行显示滚动的情况下，根据轻拂方向(接触移动方向)而向左方向进行显示滚动、或者向右方向进行显示滚动。此外，如果姿势操作种类为敲击操作(步骤A12中否)，则进行用于选择图像而使其放大显示的图像选择处理(步骤A13)。然后，返回上述步骤A4，每当在缩略图画面上进行某种操作时，以后反复上述的动作。
[0067]如上所述，在第一实施方式中，CPUl判别检测到触摸面板5b上的姿势操作时的处理状态，并根据该处理状态来判断该姿势操作种类，并进行对应于该操作种类的数据处理，因此对于姿势操作的判断，不仅是该操作内容的检测结果、还能够考虑此时的处理状态，因此能够通过恰当的判断来进行按照用户意图的操作。
[0068]设置将姿势操作种类的判断评价点(评价累计值)按照姿势操作种类进行存储的轻拂优先指针FP以及敲击优先指针TP，CPUl按照每个处理状态对姿势操作种类进行判断评价，并更新轻拂优先指针FP、敲击优先指针TP的值(评价累计值)，并将该轻拂优先指针FP以及敲击优先指针TP的值进行比较，由此对某一个姿势操作种类进行判断，因此能够根据多种处理状态来恰当地判断姿势操作种类，能够更可靠地进行判断。
[0069]CPUl为，作为处理状态，判别从规定的数据被显示起的时间的经过状态，例如，判别是否是从初次显示后Tl时间以内的接触移动检测，是否是从前次的轻拂操作起T2时间以内的接触移动检测，是否是从放大预览显示后T3时间以内的接触检测，并根据该时间的经过状态来判断某一个姿势操作种类，因此如在规定时间以内被操作的可能性高的姿势操作种类那样，能够根据时间经过和操作之间的关系来恰当地判断姿势操作种类。
[0070]CPUl为，作为处理状态，根据是否是对于显示画面内所显示的数据的加工中(例如，放大预览显示中、旋转显示中等)，来判别显示数据的状态，并根据该显示数据的状态来判断某一个姿势操作种类，因此如在数据加工中被操作的可能性高的姿势操作种类那样，能够根据数据加工与操作之间的关系来恰当地判断姿势操作种类。
[0071]CPUl为，作为处理状态，在检测到姿势操作时判别其操作位置的图像的属性状态(例如，印刷结束图像、未伸展图像、伸展错误图像、收藏图像)，并根据其属性状态来判断某一个姿势操作种类，因此例如，能够根据印刷结束图像、未伸展图像、伸展错误图像被图像选择的可能性低、但反之收藏图像被图像选择的可能性变高等图像属性的关系，能够恰当地判断姿势操作种类。
[0072]CPUl为，作为处理状态，判别表示姿势操作是否是在图像上的操作位置状态，并根据该操作位置状态来判断某一个姿势操作种类，如果是在图像上的姿势操作，则图像选择的可能性变高，因此能够恰当地判断姿势操作种类。
[0073]CPUl根据由输入控制部5c检测的在触摸显示部5上的操作内容的检测结果来判断姿势操作种类，因此能够判断触摸显示部5上的姿势操作。
[0074]此外，在上述第一实施方式中，根据在触摸显示部5上的操作内容的检测结果，取出表示其姿势操作种类的输入事件之后，为了判断其真伪，而参照当前的处理状态来判断姿势操作种类，但也可以将根据姿势操作内容的检测结果来筛选一个姿势操作种类作为条件，开始根据处理状态来判断姿势操作种类的处理。如果不是每当进行姿势操作就如此进行根据处理状态来判断姿势操作种类的处理，而是根据需要来进行，则能够减少不需要的判断，能够进行更顺畅的判断。
[0075]此外，也可以在根据触摸显示部5上的姿势操作内容的检测结果进行了将多个姿势操作种类的组合作为判断候选的筛选之后，进行根据处理状态来判断姿势操作种类的处理。例如，也可以为，作为类似的姿势操作，在进行了将敲击操作与轻拂操作的组合、或者轻拂操作与滑动操作的组合作为判断候选的筛选之后，进行根据处理状态来从判断候选中筛选某一个姿势操作种类的判断。
[0076]例如，在判断候选为轻拂操作与滑动操作的组合的情况下，当将显示数据全体是否收纳到触摸显示部5的状态作为处理状态时，如果显示数据全体未被收纳，则显示滚动的可能性较高，因此判断为姿势操作种类是接触移动的滑动操作(拖动操作)，如果显示数据全体被收纳，则翻页的可能性较高，因此能够判断为姿势操作种类是轻拂操作。如此，如果在第一阶段，将类似的多个姿势操作种类(滑动操作、轻拂操作)作为判断候选而进行筛选，在第二阶段，进行根据处理状态从判断候选中筛选某一个姿势操作种类的判断，则该判断变得更加可靠。
[0077]此外，该情况不限于将多个姿势操作种类作为判断候选的情况，即使是I个种类的姿势操作种类，也能够根据其操作检测时的处理状态来进行不同的数据处理。即，也可以如上述例子那样，在将显示数据全体是否收纳于触摸显示部5的状态作为处理状态的情况下，在进行了轻拂操作时如果显示数据全体未被收纳，则进行显示滚动处理，如果显示数据全体被收纳，则进行页切换处理。
[0078]此外，在上述第一实施方式中，调查所接触检测的位置的图像是否为加工中，但并不限于加工中，也可以检查是否为刚被加工后。此外，并不限于图像，也可以对于文本、页、窗口等显示数据检查是否为其加工中、或者是否为刚被加工后。
[0079]此外，在上述第一实施方式中，作为图像的属性，设为印刷结束图像、未伸展图像、伸展错误图像、收藏图像，但并不局限于此，例如，也可以将图像的选择频度、选择次数等作为图像的属性。由此，选择频度、选择次数多的图像作为被选择的可能性高的图像，并将敲击操作判断为姿势操作即可。
[0080]此外，在上述第一实施方式中，根据触摸显示部5上的姿势操作内容来检测姿势操作，但不限于触摸显示部5上的姿势操作，也可以根据由拍摄部(省略图示)拍摄的用户的拍摄图像来检测姿势操作。
[0081]此外，作为上述的第一实施方式的处理状态，表示姿势操作的检测时刻的当前的处理状态，但也可以是将姿势操作的检测时作为基准的到此为止的一系列的处理状态(处理过程等)。
[0082](第二实施方式)
[0083]以下，参照图8?图10说明本发明的第二实施方式。
[0084]此外，上述第一实施方式为，在印刷装置中根据检测到姿势操作时的处理状态来判断其姿势操作种类，但该第二实施方式为，在平板终端装置中根据检测到姿势操作时的操作对象(图像、图标、窗口等)的属性来判断其姿势操作种类。在此，在两个实施方式中，基本相同或者名称相同的部分给予相同附图标记来表示，并省略其说明，并且以下以第二实施方式的特征部分为中心进行说明。
[0085]图8是表示在第二实施方式中平板终端装置的基本的构成要素的框图。
[0086]平板终端装置是其壳体全体例如为A5尺寸的便携式信息终端装置，具备触摸输入功能、无线通信功能等基本功能。CPUll通过来自电源部(二次电池)12的电力供给而动作，根据存储部13内的各种程序来控制该平板终端装置的全体动作，因此在该CPUll中设置有未图示的CPU (中央计算处理装置)、存储器等。[0087]存储部13例如是具有ROM、闪存等的构成，储存有用于根据图10所示的动作顺序来实现本实施方式的程序、各种应用等。此外，存储部13例如也可以是包括SD卡、IC卡等能够自由装卸的移动型存储器(记录介质)的构成，虽然未图示，但在经由通信功能与网络连接的状态下，也可以包括规定的服务器装置侧的存储区域。
[0088]操作部14为，作为按钮式的键，虽然省略图示，但具备使电源开/关的电源键等。触摸显不部15与第一实施方式同样,成为具备显不面板15a、触摸面板15b、输入控制部15c以及显不控制部15d的构成。无线LAN (Local Area Network,局域网)通信部16是能够进行高速大容量通信的无线通信模块，能够经由最近的无线LAN路由器(省略图示)与互联网等连接。
[0089]图9是用于说明在触摸显示部15上进行了姿势操作的情况下的操作对象的图。
[0090]在第二实施方式中，CPUlI为，当检测到在触摸显示部15上的姿势操作时，判别触摸显示部15上的操作对象的属性，根据该属性来判断其姿势操作种类。在图示的情况下，所谓触摸显示部15上的操作对象表示有:显示数据(页、图像)、显示对象(图像、图标、窗口)以及画面内的显示区域。
[0091]在此，在触摸显示部15所显示的显示数据(页、图像)上进行了姿势操作的情况下，显示数据(页、图像)成为操作对象，在显示对象上进行了姿势操作的情况下，显示对象(图像、图标、窗口)成为操作对象。此外，在触摸显示部15所显示的显示数据以及显示对象以外的显示区域上进行了姿势操作的情况下，显示区域成为操作对象。
[0092]此外，操作对象的属性例如是，如果操作对象为显示数据，则该属性表示其显示数据全体是否收纳在画面内，此外，在操作对象是图像的情况下，则该属性表示是否是收藏图像、是否是印刷结束图像、是否是未伸展图像、是否是图像以外的对象(图标、窗口等)。如果操作对象为显示对象，则该属性表示是否是图像、图标、窗口，如果操作对象为显示区域，则该属性表示是画面端部还是画面中央部。
[0093]图10是表示根据向触摸显示部15上的姿势操作而开始执行的平板终端装置的动作的流程图。
[0094]首先，CPUll为，当由输入控制部15c检测到触摸显示部15上的姿势操作内容时(步骤E1)，根据其接触位置来判别操作对象是显示数据(页、图像)、显示对象(图像、图标、窗口)以及画面内的显示区域的哪一个(步骤E2)，并且判别该操作对象的属性(步骤E3)。
[0095]然后，根据该操作对象的属性来判断姿势操作种类(步骤E4)，作为其结果，调查姿势操作种类是否为轻拂操作(步骤E5)，如果姿势操作种类是轻拂操作(步骤E5中是)，则转移到显示滚动处理(步骤E6)，根据轻拂方向(接触移动方向)使其向左方向显示滚动，或者向右方向显示滚动。此外，如果姿势操作种类为敲击操作(步骤E5中否)，则进行用于选择数据而使其放大显示的数据选择处理(步骤E7)。然后，从图10的流程退出，后面每当进行姿势操作时，则重复图10的流程。
[0096]如此，在第二实施方式中，根据触摸显示部15上的操作对象的属性来判断姿势操作种类，而进行对应于其姿势操作种类的数据处理，作为其具体例，如以下所述。例如，如果操作对象的属性为显示对象的窗口，则判断为姿势操作种类是轻拂操作而进行显示滚动处理，如果为显示对象的图标，则判断为姿势操作种类是敲击操作而进行显示对象选择处理。
[0097]此外，如果操作对象为显示区域、其属性为画面中央部，则判断为姿势操作种类是轻拂操作而进行显示滚动处理，如果是画面端部，则判断为姿势操作种类是敲击操作而进行显示对象选择处理。
[0098]此外，如果操作对象为显示数据的图像、其属性为收藏图像，则判断为姿势操作种类是敲击操作而进行图像选择处理，但如果是印刷结束图像、未伸展图像、伸展错误图像的某一个，则判断为姿势操作种类是敲击操作而进行图像选择处理。此外，如果作为操作对象的属性而显示数据(页、图像)的全体收纳在画面内，则判断为姿势操作种类是敲击操作而进行显示数据的选择处理，但如果未被收纳在画面内，则判断为姿势操作种类是轻拂操作而进行显示滚动处理。
[0099]如上所述，在第二实施方式中，CPUlI为，在检测到触摸面板15b上的姿势操作时，判别其操作对象的属性，并且根据该操作对象的属性来判断该姿势操作种类，进行对应于该操作种类的数据处理，对于姿势操作的判断，不仅是其操作内容的检测结果、还能够进一步考虑此时的操作对象的属性，能够通过恰当的判断来进行按照用户的意图的操作。
[0100]CPUll为，根据由输入控制部15c检测到的触摸显示部15上的操作内容的检测结果来判断姿势操作种类，因此能够判断触摸显示部15上的姿势操作。
[0101]操作对象是触摸显示部15所显示的图像数据，CPUll判别图像的属性，并根据该属性来判断敲击操作、轻拂操作中的某一个，来作为姿势操作种类，因此例如，如印刷结束图像、未伸展图像、伸展错误图像被图像选择的可能性低、但反之收藏图像被图像选择的可能性变高等那样，能够根据图像属性的关系来判断姿势操作种类等，能够进行恰当的判断。
[0102]操作对象是在触摸显示部15上显示的显示数据，CPUll判别显示数据的全体是否收纳在触摸显示部15内，来作为操作对象的属性，并根据该属性判断敲击操作、轻拂操作中的某一个，来作为姿势操作种类，因此例如，如果数据全体未被收纳，则被指示显示滚动的可能性高，因此判断为轻拂操作，如果数据全体被收纳，则数据被选择的可能性高，因此能够判断为敲击操作等，能够进行恰当的判断。
[0103]操作对象是触摸显示部15所显示的显示对象，CPUll判别显示对象的种类(例如图像、图标、窗口等)，来作为该显示对象的属性，并根据该属性来判断敲击操作、轻拂操作中的某一个，来作为姿势操作种类，因此例如，如果操作对象为图像、图标，则数据选择的可能性高，因此判断为敲击操作，如果为窗口，则显示滚动的可能性高，因此能够判断为轻拂操作等，能够进行恰当的判断。
[0104]操作对象是触摸显示部15内的显示区域，CPUll判别显示区域的属性，根据该属性来判断敲击操作、轻拂操作中的某一个，来作为姿势操作种类，因此例如，如果显示区域为画面端部，则选择显示对象的可能性高，因此判断为敲击操作，如果为画面中央部，则显示对象的显示滚动、翻页的可能性高，因此能够判断为轻拂操作等，能够进行恰当的判断。
[0105]此外，在上述第二实施方式中，作为显示对象的属性，例示了图像、图标、窗口，但也可以将文本、空白等作为显示对象。此外，在上述第二实施方式中，作为显示区域的属性，设为画面端部、画面中央部，但除此以外，例如也可以包含上下左右的角部等。
[0106]此外，在上述各实施方式中，判断敲击操作、轻拂操作中的某一个，来作为姿势操作种类，但除了敲击操作、轻拂操作以外，例如也可以将进行接触移动的操作(滑动操作:拖动操作)、将接触位置固定而继续的操作(保持操作)、用多个手指在多个显示位置同时进行接触的操作(双击操作)、指示显示数据的放大的操作(放大操作)、指示显示数据的缩小的操作(缩小操作)等判断为姿势操作种类。
[0107]此外，在上述各实施方式中，例示了使用对手指、笔等的接触、接触移动进行检测的接触型触摸面板的情况，但如上所述，也可以使用根据手指、笔的接近、接近移动导致的静电电容变化、明亮度变化等来检测手指、笔的位置的非接触型触摸面板、操作检测器件，或者使用对用户的手部动作、身体动作进行拍摄的拍摄器件。即，检测姿势操作的单元是任意的。
[0108]此外，在上述第一实施方式中例示了作为数据处理装置而应用于印刷装置的情况，在第二实施方式中例示了作为数据处理装置而应用于平板终端装置的情况，但数据处理装置并不局限于此，也可以为个人计算机、PDA (面向个人的便携式信息通信机器)、移动电话机、数字摄像机、音乐播放器等。
[0109]此外，在上述各实施方式中所示的“装置”、“部”，也可以按照功能不同分离为多个壳体，不限于单个壳体。此外，上述流程图所记述的各步骤，不限于时间序列的处理，也可以并列地处理多个步骤，或单个独立地进行处理。
[0110]以上，对本发明的实施方式进行了说明，但本发明不限定于此，包含专利请求范围记载的发明和其均衡范围。
【权利要求】
1.一种数据处理装置，具备检测姿势操作的检测单元，其特征在于，具备: 判别单元，基于由上述检测单元检测到姿势操作的检测时刻，判别该数据处理装置的处理状态； 判断单元，根据由上述判别单元判别的处理状态，从多个姿势操作种类中判断某一个姿势操作种类；以及 数据处理单元，进行与由上述判断单元判断的姿势操作种类相对应的数据处理。
2.如权利要求1记载的数据处理装置，其特征在于， 还具备评价点存储单元，该评价点存储单元按照姿势操作种类存储评价点，该评价点是按照该数据处理装置的多种处理状态中的每种处理状态对姿势操作种类进行了判断评价的评价点， 上述判别单元按照上述多种处理状态中的每种处理状态对姿势操作种类进行判断评价并更新姿势操作种类的评价点， 上述判断单元根据由上述判别单元更新的按姿势操作种类分的评价点，从多个姿势操作种类中判断上述某一个姿势操作种类。
3.如权利要求1记载的数据处理装置，其特征在于， 上述判别单元判别从规定的数据被显示开始的时间的经过状态，作为该数据处理装置的处理状态， 上述判断单元根据由上述判别单元判别的时间的经过状态来判断上述某一个姿势操作种类。`
4.如权利要求1记载的数据处理装置，其特征在于， 上述判别单元判别显示数据的状态，作为该数据处理装置的处理状态，该显示数据的状态表示在显示画面内所显示的数据是在加工中还是刚被加工后， 上述判断单元根据由上述判别单元判别的显示数据的状态来判断上述某一个姿势操作种类。
5.如权利要求1记载的数据处理装置，其特征在于， 上述判别单元判别在检测到上述姿势操作时其操作位置的显示数据的属性状态，作为该数据处理装置的处理状态， 上述判断单元根据由上述判别单元判别的显示数据的属性状态来判断上述某一个姿势操作种类。
6.如权利要求1记载的数据处理装置，其特征在于， 上述判别单元判别表示上述姿势操作是否在图像上的操作位置状态，作为该数据处理装置的处理状态， 上述判断单元根据由上述判别单元判别的操作位置状态来判断上述某一个姿势操作种类。
7.如权利要求1记载的数据处理装置，其特征在于， 上述检测单元根据在显示画面上的操作内容来检测姿势操作，或者根据由拍摄部拍摄的用户的拍摄图像来检测姿势操作。
8.如权利要求1记载的数据处理装置，其特征在于， 上述判断单元在对上述检测出的姿势操作的内容进行解析，并且根据其解析结果未筛选到一个姿势操作种类的情况下，根据由上述判别单元判别的处理状态来判断上述某一个姿势操作种类。
9.如权利要求1记载的数据处理装置，其特征在于， 上述判断单元在对上述检测出的姿势操作的内容进行解析，并且根据其解析结果而进行了将多个姿势操作种类的组合作为判断候选的筛选之后，根据由上述判别单元判别的处理状态从上述判断候选中判断上述某一个姿势操作种类。
10.一种数据处理装置，具备检测姿势操作的检测单元，其特征在于，具备: 判别单元，在由上述检测单元检测到姿势操作时，判别其操作对象的属性； 判断单元，根据由上述判别单元判别的操作对象的属性，从多个姿势操作种类中判断某一个姿势操作种类；以及 数据处理单元，进行与由上述判断单元判断的姿势操作种类相对应的数据处理。
11.如权利要求10记载的数据处理装置，其特征在于， 上述检测单元根据在显示画面上的操作内容来检测姿势操作。
12.如权利要求10记载的数据处理装置，其特征在于， 上述操作对象是显示画面上所显示的图像数据， 上述判别单元对上述图像数据的属性进行判别， 上述判断单元根据由上述判别单元判别的图像数据的属性，判断敲击操作、轻拂操作中的某一个，作为在上述显示画面上进`行的姿势操作种类。
13.如权利要求10记载的数据处理装置，其特征在于， 上述操作对象是在显示画面上显示的显示数据， 上述判别单元判别上述显示数据的全体是否收纳在上述显示画面内，作为该显示数据的属性， 上述判断单元根据由上述判别单元判别的显示数据的属性，判断敲击操作、轻拂操作中的某一个，作为在上述显示画面上进行的姿势操作种类。
14.如权利要求10记载的数据处理装置，其特征在于， 上述操作对象是显示画面上所显示的显示对象， 上述判别单元判别上述显示对象的种类，作为该显示对象的属性， 上述判断单元根据由上述判别单元判别的显示对象的属性，判断敲击操作、轻拂操作中的某一个，作为在上述显示画面上进行的姿势操作种类。
15.如权利要求10记载的数据处理装置，其特征在于， 上述操作对象是显示画面内的显示区域， 上述判别单元判别上述显示区域的属性， 上述判断单元根据由上述判别单元判别的显示区域的属性，判断敲击操作、轻拂操作中的某一个，作为在上述显示画面内的显示区域进行的姿势操作种类。
16.一种数据处理方法，是具备检测姿势操作的检测单元的数据处理装置中的数据处理方法，包括: 基于上述检测单元的姿势操作的检测时刻，判别该数据处理装置的处理状态的步骤；根据由上述判别步骤判别的处理状态，从多个姿势操作种类中判断某一个姿势操作种类的步骤；以及进行与由上述判断步骤判断的姿势操作种类相对应的数据处理的步骤。
17.一种数据处理方法，是具备检测姿势操作的检测单元的数据处理装置中的方数据处理法，包括: 在由上述检测单元检测到姿势操作时，判别其操作对象的属性的步骤； 根据由上述判别 步骤判别的操作对象的属性，从多个姿势操作种类中判断某一个姿势操作种类的步骤；以及 进行与由上述判断步骤判断的姿势操作种类相对应的数据处理的步骤。
【文档编号】G06F3/0484GK103631490SQ201310371472
【公开日】2014年3月12日 申请日期:2013年8月23日 优先权日:2012年8月23日
【发明者】菅野博树 申请人:卡西欧计算机株式会社