信息处理设备、信息处理方法和信息处理程序与流程

本发明涉及信息处理设备、信息处理方法和信息处理程序。

背景技术：

在上述技术领域中，专利文献1公开了一种技术，该技术选择由用户通过用手指在智能电话或平板计算机上圈定部分区域而指定的段落、句子、短语或单词。

引文列表

专利文献

专利文献1：日本专利公开号2013-186720

技术实现要素：

技术问题

然而，在上述文献中描述的技术中，如果用户从触摸到释放的笔划暂时延伸到触摸面板的区域外，则无法生成选择范围。

本发明能够提供一种解决上述问题的技术。

问题的解决方案

本发明的一个方面提供了一种信息处理设备，包括：

笔划捕获器，所述笔划捕获器从触摸面板上的用户操作捕获笔划；

检测器，所述检测器检测用户在画出该笔划时的手指轨迹延伸到该触摸面板之外；以及

补充器，所述补充器在用户的手指轨迹被估计为画出一个封闭区域时补充在该触摸面板之外的笔划。

本发明的另一方面提供了另一种信息处理设备，包括：

笔划捕获器，所述笔划捕获器从触摸面板上的用户操作捕获至少两个笔划；

确定器，所述确定器基于该至少两个笔划，确定用户的手指是否已经移出该触摸面板的区域继而返回到该触摸面板的区域；

连接器，所述连接器在该确定器确定该用户手指已经移出该触摸面板的区域继而返回该触摸面板的区域的情况下，则其连接该至少两个笔划；以及

被选择范围生成器，所述被选择范围生成器基于由该连接器所生成的笔划来生成被选择范围。

本发明的又一方面提供了一种方法，包括：

从触摸面板上的用户操作捕获笔划；

检测该笔划延伸到该触摸面板之外；以及

当该笔划被估计为画出一个封闭区域时，补充在该触摸面板之外的笔划。

本发明的还一方面提供了另一种方法，包括：

捕获由用户在触摸面板上做出的从触摸到释放的至少两个笔划；

基于该至少两个笔划，确定该用户的手指是否已经移出该触摸面板的区域继而返回到该触摸面板的该区域以画出封闭区域；以及

如果在所述确定步骤中确定该用户的手指已经移出该触摸面板的该区域继而返回该触摸面板的该区域来画出该封闭区域，则连接该至少两个笔划。

本发明的又一方面提供了一种用于致使计算机执行一种方法的程序，包括：

从触摸面板上的用户操作捕获笔划；

检测该笔划延伸到该触摸面板之外；以及

当该笔划被估计为要画出封闭区域时，补充在该触摸面板之外的笔划。

本发明的另一方面提供了用于致使计算机执行一种方法的另一种程序，包括：

捕获用户在触摸面板上做出的从触摸到释放的至少两个笔划；

基于该至少两个笔划，确定该用户的手指是否已经移出该触摸面板的区域继而返回该触摸面板的该区域以画出封闭区域；以及

如果在所述确定步骤中确定该用户的手指是否已经移出该触摸面板的该区域继而返回该触摸面板的该区域以画出该封闭区域，则连接该至少两个笔划。

本发明的有益效果

根据本发明，即使用户做出的从触摸到释放的笔划延伸到触摸面板的区域之外，也可以生成一个被选择的范围。

附图说明

图1A是一个框图，其示出了根据本发明的第一实施例的信息处理设备的布置；

图1B是一个框图，其示出了根据本发明的第二实施例的信息处理设备的布置；

图2是一个视图，其示出了由根据本发明的第三实施例的信息处理设备做出的笔划连接的概览；

图3是一个视图，其示出了由根据本发明的第三实施例的信息处理设备做出的笔划连接的概览；

图4A是一个视图，其示出了根据本发明的第三实施例的信息处理设备的外观；

图4B是一个框图，其示出了根据本发明的第三实施例的信息处理设备的布置；

图5是一个框图，其示出了根据本发明的第三实施例的屏幕操作处理器的功能布置；

图6是一个框图，其示出了根据本发明的第三实施例的操作接受器的功能布置；

图7是一个框图，其示出了根据本发明的第三实施例的操作分析器的功能布置；

图8A是一个框图，其示出了根据本发明的第三实施例的用户操作确定器的功能布置；

图8B是一个表格，其示出了根据本发明的第三实施例的封闭区域估计表格的结构；

图8C是一个表格，其示出了根据本发明的第三实施例的笔划连接表格的结构；

图9是一个框图，其示出了根据本发明的第三实施例的显示控制器的功能布置；

图10是一个框图，其示出了根据本发明的第三实施例的被选择范围设置单元的功能布置；

图11是一个流程图，其示出了由根据本发明的第三实施例的信息处理设备做出的屏幕操作处理的过程；

图12是一个流程图，其示出了根据本发明的第三实施例的笔划连接处理的过程；

图13是一个视图，其示出了由根据本发明的第四实施例的信息处理设备做出的笔划连接的概览；

图14是一个表格，其示出了根据本发明的第四实施例的笔划连接表格的结构；

图15是一个流程图，其示出了根据本发明的第四实施例的笔划连接处理的过程；

图16是一个视图，其示出了由根据本发明的第五实施例的信息处理设备做出的笔划连接的概览；

图17是一个表格，其示出了根据本发明的第五实施例的笔划连接表格的结构；

图18是一个流程图，其示出了由根据本发明的第五实施例的笔划连接处理的过程。

具体实施方式

现在，将参考附图详细地描述本发明的优选实施例。应当指出，除非其另有具体指出，这些实施例中阐述的组件、数字表达和数值的相对布置并不限制本发明的范围。注意，“笔划”在下文中将指示在触摸面板上从触摸到释放的轨迹。

[第一实施例]

将参考图1A描述根据本发明的第一实施例的信息处理设备100。信息处理设备100是用于控制来自触摸面板102的输入的设备。如图1A中所示，信息处理设备100包括笔划捕获器110、检测器160、补充器170。笔划捕获器110捕获在触摸面板102上的用户操作的笔划104。检测器160检测笔划104已经离开触摸面板102。如果估计笔划104画出一个封闭区域，则补充器170补充落在触摸面板102之外的笔划107。

例如，检测器160检测画出笔划104的用户手指已经移出触摸面板102，估计手指在触摸面板102之外的移动，继而在该笔划返回触摸面板102的该区域时，对触摸面板102上的笔划的两个点之间的部分进行补充。

根据该实施例，通过补充落在该触摸面板之外的笔划，即使在用户操作没有仅在显示屏之内被执行的情况下，生成指定区域也是可能的。

[第二实施例]

将参考图1B描述根据本发明的第二实施例的信息处理设备150。该信息处理设备150是用于控制来自触摸面板102的输入的设备。

如图1B所示，信息处理设备150包括笔划捕获器110、确定器120和连接器130。笔划捕获器110捕获用户在触摸面板102上做出的从触摸到释放的至少两个笔划103和104。基于该至少两个笔划103和104，确定器120确定用户的手指106是否已经移出触摸面板102的区域，继而返回触摸面板102的该区域。如果确定器120确定用户的手指106已经移出触摸面板102的区域继而返回触摸面板102的该区域，则连接器130连接笔划103和104。被选择范围生成器140基于由连接器130生成的笔划生成被选择范围105。

例如，笔划捕获器110捕获从靠近触摸面板102的中心到触摸面板102的左端部分的触摸的向左笔划，继而捕获到从触摸面板102的左端部分到其右端部分的笔划。例如，基于该笔划的这些末端部分的位置、在该末端部分处的矢量、在该末端部分处的离开时间和返回时间等等，确定器120确定是否连接笔划。例如，如果确定器120确定连接该笔划，则连接器130通过所生成的新笔划连接两个笔划。被选择范围生成器140生成包含在由连接生成的笔划所围绕的封闭区域中的内容(字符、单词、句子或对象图形)，将其作为被选择范围。

根据该实施例，通过将落在触摸面板的区域之外的笔划连接到落在触摸面板的区域之内的两个笔划，即使在用户笔划延伸到触摸面板的该区域之外的情况下，也可以生成被选择范围。

[第三实施例]

接下来将描述根据本发明的第三实施例的信息处理设备。当用户手指暂时移出触摸面板的区域时，根据该实施例的信息处理设备通过连接至少两个分开的笔划，从而生成围绕封闭区域的笔划。如果显示内容不适合该触摸面板(即显示内容可以滚动)，则可以通过生成显示区域外的虚拟笔划并将该虚拟笔划连接到该两个笔划，来将未被显示的区域包含在被选择范围内。注意，在这个示例中，“设备通过连接至少两个笔划来生成围绕封闭区域的笔划”。换言之，“为了生成围绕封闭区域的笔划，该设备对缺失部分进行补充(手指已经移出该触摸面板的该区域之外的部分)”。

<<处理概述>>

现在将参考图2，在下文中详细描述由根据本实施例的信息处理设备做出的处理的概述。图2是一个视图，其示出了由根据本实施例的信息处理设备200做出的笔划连接的概览。

文档203被显示在信息处理设备200的显示面板202上。假设用户手指210画出手指轨迹204来指定封闭区域，但是该手指轨迹204延伸到触摸面板201的区域外。

即使手指轨迹204延伸到触摸面板201的区域外，信息处理设备200估计该手指轨迹204并且设定被选择范围206。通过该处理，即使手指轨迹204延伸到触摸面板201的该区域之外，也能够设定用户希望的被选择范围206。

<<连接处理的实际示例>>

图3是一个视图，其示出了由根据实施例的信息处理设备200做出的笔划连接的概览。图3示出了这样一种情况，其中显示内容的整个宽度不适合该触摸面板，并且能够被滚动。

文档203被显示在信息处理设备200的显示面板202上。假设用户的手指210在触摸面板201上画出手指轨迹204，将其作为封闭区域以围绕被选择范围206。该手指轨迹204延伸到触摸面板201的该区域之外。

信息处理设备200检测到笔划301到303，整体地分析它们的末端部分位置、末端部分矢量和检测时间等等，并且检测到所述笔划是围绕被选择范围206的手指轨迹204的一部分。在本实施例中，通过补充地连接在触摸面板201的该区域之外的虚拟笔划305和306，生成一个大笔划。如果该大笔划画出一个封闭曲线，则包含在该封闭曲线中的被选择范围206被设定。通过本处理，即使手指轨迹204延伸到触摸面板201的区域之外，也可以设定用户希望的被选择范围206并且选择落在该触摸面板之外的信息。

<<信息处理设备>>

图4A是一个视图，其示出了根据本发明的第三实施例的信息处理设备的外观。注意，图4A示出了使用触摸面板的终端，比如智能电话或平板计算机。然而，根据本实施例的信息处理设备不限于智能电话或平板计算机。

在信息处理设备200中，触摸面板201和显示面板202分别充当操作单元和显示单元。信息处理设备200包括麦克风403和扬声器404作为声音输入/输出功能。信息处理设备200还包括开关组405，开关组405包括电源开关。此外，信息处理设备200包括用于外部输出/输出装置连接和通信连接的外部接口406。

(信息处理设备的功能布置)

图4B是一个框图，其示出了根据本实施例的信息处理设备200的布置。注意，图4B示出了诸如智能电话或平板计算机之类的使用触摸面板的便携式终端的基础布置。然而，本发明不限于此。图4B中示出的每个组件可以通过由单个硬件组件、通过包括执行程序的专用处理器由软件、或者通过结合硬件和软件由固件来实施。图4B中所示的每个组件与其他组件彼此分离以独立实施其功能。然而实际上，每个组件通过多层控制的组合来实施，该多层控制是从输入/输出控制以及基础硬件和OS(操作系统)的底层控制到应用程序的顶层控制。

处理器400包括至少一个CPU(中央处理单元)，并且控制总体的信息处理设备200。注意，处理器400理想地包含唯一存储器。屏幕操作处理器410是用于执行根据本实施例的处理的组件。屏幕操作处理器410接受来自触摸面板201的用户操作，与用户操作输入一致地改变显示屏幕，并且在显示面板202上显示该屏幕。注意，屏幕操作处理器410可以通过由处理器400执行相关联的程序来实施，然而理想状况下也可以提供一个独立的屏幕操作处理器。声音处理器420处理来自麦克风403的声音输入，以例如经由通信处理器440传输该声音，或者发送改变为来自触摸面板201的用户操作输入的用户声音指令。声音处理器420向用户生成通知/警告(视频重现声音等等)，并且输出来自扬声器的声音。理想地，声音处理器420还提供有独立于处理器400的声音处理处理器。

开关处理器430执行基于来自开关组405的开关输入的处理。通信处理器440经由网络传输/接收数据。接口控制器450控制在经由外部接口406连接的输入/输出装置之间往来的数据输入/输出。理想地，通信处理器440还提供有独立于处理器400的声音处理处理器。例如，存储器控制器460控制在处理器400和由闪存等形成的ROM(只读存储器)461、RAM(随机存取存储器)462和存储463之间的数据交换和程序。理想地，存储器控制器460还提供有独立于处理器400的声音处理处理器。

(屏幕操作处理器)

图5是一个框图，其示出了根据本实施例的屏幕操作处理器410的功能布置。

屏幕操作处理器410包括操作接受器520、操作分析器530、用户操作确定器540和显示控制器550。操作接受器520接受来自触摸面板201的用户操作，并且捕获触摸位置、操作等等。基于操作接受器520接受的用户操作和位置，操作分析器530鉴于显示屏幕的信息对操作内容进行分析。在本实施例中，特别地，操作分析器530在笔划离开触摸面板201的情况下捕获该用户的笔划的端点，并且提取每个笔划的分量。例如，操作分析器530提取在该笔划端点处的矢量。基于由操作分析器530分析得出的操作内容，用户操作确定器540估计用户希望的绘画。此外，基于由操作分析器530分析得出的操作内容，用户操作确定器540连接在触摸面板区域内的笔划。显示控制器550包括显示驱动器，并且读出来自储存463的内容数据，并且根据用户操作确定器540的确定结果控制显示面板202。

基于由用户操作确定器540取得的笔划所画出的封闭区域，被选择范围设定单元560获得并输出储存463的显示信息DB(数据库)570中的被选择范围的数据。

注意，图5中所示的功能组件可以通过屏幕操作处理器410的处理器的处理来实施，或者一些功能组件可以由专用处理器来处理以提升处理速度。图5中所示的每个功能组件被限制到屏幕操作处理器410的操作，但是可以与图4B中所示的信息处理设备200的其他组件交换数据。

(操作接受器)

图6是一个框图，其示出了根据本实施例的操作接受器520的功能布置。操作接受器520接受来自触摸面板201的用户操作，并且捕获触摸位置和操作。

操作接受器520包括事件检测器601，触摸位置检测器602和笔划检测器603。事件检测器601检测来自用户在触摸面板201上的一些操作的开始，并且开始接受操作数据。触摸位置检测器602检测用户手指在触摸面板201上触摸的位置坐标。笔划检测器603基于触摸位置的变化检测笔划。

(操作分析器)

图7是一个框图，其示出根据本实施例的操作分析器530的功能布置。基于操作接受器520所接受的用户操作和位置，操作分析器530鉴于显示屏幕的信息分析操作内容。

操作分析器530包括笔划端点捕获器701和笔划分量提取器702。笔划端点捕获器701从来自操作分析器520的触摸位置数据和笔划信息捕获该笔划离开触摸面板的离开点和该笔划返回触摸面板的返回点。笔划分量提取器702提取在离开点和返回点处的笔划信息，例如，倾斜度等等。注意，在本实施例中，笔划用离开点和返回点这两者来连接。然而，本发明不限于此。也可以使用离开点和返回点之一，或者结合其他信息来使用离开点和返回点。

(用户操作确定器)

图8A是一个框图，其示出了根据本实施例的用户操作确定器540的功能布置。基于操作分析器530分析得出的操作内容，用户操作确定器540估计用户希望的绘制，由此连接在触摸面板内的笔划。

用户操作确定器540包括封闭区域估计器801和笔划连接器802。封闭区域估计器801基于封闭区域估计表格810估计用户做出的绘制。在本实施例中，封闭区域估计器801估计封闭区域被绘画以设定被选择范围。使用笔划信息以及离开点和返回点的信息，笔划连接器802将落在触摸面板之外的笔划连接到该离开点和返回点，以便基于笔划连接表格820生成估计的封闭区域。

图8B是一个表格，其示出了根据本实施例的封闭区域估计表格810的结构。封闭区域估计表格810被封闭区域估计器801用来基于用户画出的笔划去估计：用户的手指轨迹已经画出一个封闭区域。

封闭区域估计表格810存储指示封闭区域是否已被画出的估计结果813、以及连接必要性/非必要性确定结果814——与触摸面板该区域内的笔划数据811和触摸面板该区域外的虚拟笔划数据812相关联。作为笔划数据811，一对信息(即笔划离开触摸面板之处的离开点的信息以及笔划返回该触摸面板之处的返回点的信息)被存储。离开点和返回点的每个信息块都包括触摸面板上的坐标、在每个点处的笔划的速度矢量，以及离开时间或返回时间。

封闭区域估计器801比较在预定时间内所捕获的笔划的开始点和结束点。如果一个笔划的开始点和结束点的位置彼此靠近(位置之间的距离等于或小于预定距离)，则确定这个笔划形成封闭区域，并且该确定结果被寄存在估计结果813中。继而，确定连接是非必要的，并且此确定结果被寄存在确定结果814中。另一方面，如果没有开始位置和结束点位置彼此靠近的笔划，则封闭区域估计器801提取开始点和结束点位置彼此靠近的笔划集合，针对该笔划集合，基于离开点和返回点的位置、笔划方向和离开/返回时间确定是否应该将另一笔划连接到所述笔划，并且将确定结果寄存在确定结果814中。特别地，连接条件是笔划方向彼此不同。即，如果在左端处存在离开点和返回点，则连接条件是到该离开点的向左笔划后跟随一个始于该返回点的向右笔划。此外，能够估计封闭区域(该封闭区域是通过将另一笔划连接到所述笔划而形成的)，并且将其寄存在估计结果813中。

图8C是一个表格，其示出根据本实施例的笔划连接表格820的结构。笔划连接表格820被笔划连接器802用来在用户画出的笔划被估计形成封闭区域时连接在触摸面板之内的笔划。

笔划连接表格820是这样一个表格，其被笔划连接器802用来基于封闭区域估计表格810确定已被确定将被连接的笔划的连接线。笔划连接表格820存储与触摸面板内已被确定将要被连接的笔划822相关联的连接确定因素823。离开点和返回点的位置、离开点和返回点之间的距离、离开点处的离开矢量、返回点处的返回矢量、离开时间、返回时间等被存储为连接确定因素823。基于这些信息块，确定是否要连接离开点和返回点。如果确定连接离开点和返回点，则连接线825基于离开点和返回点之间的距离以及在各点处的笔划方向被确定。例如，作为连接线825，可以使用二次或三次曲线、贝塞尔曲线，抛物线，样条曲线等等。然而，离开点和返回点可以通过圆弧补充地连接。

(显示控制器)

图9是一个框图，其示出了根据本实施例的显示控制器550的功能布置。显示控制器550包括显示驱动器，并且读出显示信息DB(数据库)570中的显示信息，并且通过改变图像存储器来控制显示面板202的屏幕，以便根据用户操作确定器540的确定结果在该显示屏幕上实施用户希望的操作。显示控制器550包括显示位置控制器901、笔划显示控制器902、和可识别显示控制器903。显示位置控制器901控制从显示信息DB(数据库)570读出的将要被显示的显示信息的位置。在本实施例中，显示位置控制器901控制该文档的显示位置。笔划显示控制器902控制由用户触摸的笔划的显示。可识别显示控制器903进行控制以可识别地在显示屏幕上显示该文档的被选择范围。

(被选择范围设定单元)

图10是一个框图，其示出了根据本实施例的被选择范围设定单元560的功能布置。基于由来自用户操作确定器540的被连接笔划所画出的封闭区域，被选择范围设定单元560获取并输出显示信息DB570中的被选择范围的数据。

被选择范围设定单元560包括被选择范围存储单元1001和在被选择范围捕获器1002中的数据。被选择范围存储单元1001将由笔划形成的封闭区域存储为一个被选择范围。被选择范围捕获器1002中的数据从显示信息DB(数据库)570捕获由被选择范围存储单元1001存储的被选择范围的数据。

注意，从被选择范围设定单元560输出的被选择范围的数据被用于复制/粘贴。

<<屏幕操作处理的过程>>

图11是一个流程图，其示出了根据本实施例的信息处理设备200的屏幕操作处理的过程。当由屏幕操作处理器410的CPU(中央处理单元)或处理器400执行时，该流程图实施屏幕操作处理器410的各个功能组件。将描述屏幕操作处理器410的CPU执行该流程图的情况。

在步骤S1101中，屏幕操作处理器410显示由用户指定将被显示的文档的预定部分。例如，如图2中所示，日语字典的“思考”的一页被显示。在步骤S1103中，屏幕操作处理器410监视用户是否触摸触摸面板201。如果检测到触摸，则屏幕操作处理器410在步骤S1105中确定该用户的笔划是否暂时离开该触摸面板并且继而返回。该笔划是否暂时离开触摸面板并继而返回能够通过监视离开和返回点来确定。

如果确定该笔划已经暂时离开并继而返回，则屏幕操作处理器410在步骤S1107中连接将该离开点作为结束点的笔划并将返回点作为开始点的笔划。进程前进到步骤S1109，并且确定该笔划是否将封闭区域作为一个整体画出。该确定处理能够根据图8A执行。如果确定该笔划画出一个封闭区域，则屏幕操作处理器410在步骤S1111中捕获包含在该封闭区域中的数据。

(笔划连接处理)

图12是一个流程图，其示出了根据本实施例的笔划连接处理(S1109)的过程。

在步骤S1221中，屏幕操作处理器410捕获离开点的坐标。在步骤S1223中，屏幕操作处理器410捕获该离开点的参数，例如笔划的倾斜度。在步骤S1225中，屏幕操作处理器410捕获返回点的坐标。在步骤S1227中，屏幕操作处理器410捕获该返回点的参数，例如，笔划的矢量(方向、速度等)。

在步骤S1229中，屏幕操作处理器410基于该离开点和返回点的坐标、笔划倾斜度等生成合适的连接曲线。例如，穿过离开点和返回点并且满足在离开点处的离开角度和在返回点处的返回角度的圆弧被适用为连接曲线。在步骤S1231，屏幕操作处理器410将该连接曲线连接到其他笔划。

根据本实施例，因为落在触摸面板之外的笔划被连接到离开点和返回点，所以即使不是只在显示屏幕内执行用户操作，也可以生成用户希望的被选择范围。

[第四实施例]

接下来将描述根据本发明第四实施例的信息处理设备。根据该实施例的信息处理设备与根据第三实施例的设备的不同之处在于，沿触摸面板框架的笔划被用作笔划之间的连接笔划。剩余的组件和操作与第三实施例中的那些相同。因此，相同的附图标记指示相同的组件和操作，并且其详细描述将被省略。

(笔划连接的实施例)

图13是一个视图，其显示了根据本实施例的信息处理设备的笔划连接。图13的上部显示了在笔划一侧延伸到触摸面板201之外时的处理。图13的下部显示了当笔划的两侧延伸到触摸面板201之外时的处理。注意，在图13中，相同的附图标记指示与图2或图3中相同的组件。

图13的左上视图示出了这样一种情况：其中用户画出的笔划由落在触摸面板201之内的笔划1311和落在触摸面板201之外的笔划1312形成。图13的右上视图示出了这样一种情况：其中通过将沿触摸面板201框架的笔划1313连接到笔划1311而不是落在触摸面板201外的笔划1312，封闭区域1314形成为一个被选择范围。

图13的左下视图示出了这样一种情况：其中用户画出的笔划由落在触摸面板201之内的笔划1321和1322以及落在触摸面板201之外的笔划1323和1324形成。图13的右下视图示出了这样一种情况：其中通过以下方式将封闭区域1327被形成为一个被选择范围：将沿触摸面板201的框架的笔划1325连接到笔划1321和1322而不是落在触摸面板201之外的笔划1323，并且通过将沿触摸面板201的框架的笔划1326连接到笔划1321和1322而不是落在触摸面板201之外的笔划1324。

如上所述，即使用户画出的笔划延伸到触摸面板201之外，也可以通过封闭区域来设定一个被选择范围。

(用户操作确定器)

图14是一个表格，其示出了根据本实施例的笔划连接表格1420的结构。笔划连接表格1420被用户操作确定器540的笔划连接器802用来连接在触摸面板201之内的笔划。

笔划连接表格1420存储与触摸面板内有连接必要性1421的每个笔划1422相关联的至少一个连接位置1423。连接位置1423存储离开点和返回点。连接离开点和返回点的沿触摸面板框架的笔划被用作连接线。

(笔划连接处理)

图15是流程图，其示出了根据本实施例的笔划连接处理(S1109)的过程。

在步骤S1501中，屏幕操作处理器410捕获离开点的坐标。在步骤S1503中，屏幕操作处理器410捕获对应的返回点的坐标。在步骤S1505，屏幕操作处理器410通过沿触摸面板框架的笔划来连接被捕获的离开点和返回点，并且将被选择范围设定为封闭区域。

注意，在本实施例中，离开点和返回点由触摸面板框架连接以设定封闭区域。然而，通过从触摸面板区域中排除由触摸面板框架和触摸面板内的笔划形成的封闭区域，也能够设定被选择范围的封闭区域。

根据本实施例，因为离开点和返回点由触摸面板框架连接，因此即使不只是在显示屏幕内执行用户操作，也能够通过简单的处理生成用户希望的被选择范围。注意，根据本实施例的笔划连接在显示内容落在触摸面板区域内时尤其有效。

[第五实施例]

接下来，将描述根据本发明的第五实施例的信息处理设备。根据该实施例的信息处理设备与根据第三和第四实施例中的那些设备的不同之处在于，该设备通过多个触摸面板和多个显示面板形成。剩余的组件和操作与第二和第三实施例中的那些相同。因此，相同的附图标记指示相同的组件和操作，并且其详细描述将被省略。

(实施例的笔划连接)

图16是一个视图，其示出了由根据本实施例的信息处理设备1600做出的笔划连接的概览。信息处理设备1600包括两个触摸面板/显示面板。

假设，用户手指210画出笔划1601和1602来设定跨越两个触摸面板的封闭区域。通过连接在接触点1603和1604处的笔划1601和1602来彼此补充，信息处理设备1600能够生成封闭区域1605，从而设定被选择范围。

(用户操作确定器)

图17是一个表格，其示出了根据本实施例的笔划连接表格1720的结构。笔划连接表格1420被用户操作确定器540的笔划连接器802用来连接在两个触摸面板上的笔划。

笔划连接表格1720存储确定结果1723，其参考第一屏幕(第一触摸面板)内的笔划信息1721和第二屏幕(第二触摸面板)内的笔划信息1722，指示是否将笔划连接为封闭区域。注意，每个笔划信息块1721和1722都包括笔划的形状、离开点、返回点、离开矢量和返回矢量。

(笔划连接处理)

图18是一个流程图，其示出了根据本实施例的笔划连接处理(S1107)的过程。

在步骤1801中，屏幕操作处理器410捕获第一屏幕(第一触摸面板)内的笔划。在步骤S1803，屏幕操作处理器410捕获在第一屏幕(第一触摸面板)内的笔划的参数(离开和返回点、在该点处的矢量等等)。在步骤S1805中，屏幕操作处理器410捕获在第二屏幕(第二触摸面板)内的笔划。在步骤S1807中，屏幕操作处理器410捕获在第二屏幕(第二触摸面板)内的笔划的参数(离开和返回点、在该点处的矢量等)

在步骤1809中，屏幕操作处理器410基于被捕获信息确定是否要将补充笔划作为封闭区域。如果确定补充该笔划，则屏幕操作处理器410在步骤S1811中通过连接第一屏幕内和第二屏幕内处于相同的离开点和返回点的笔划，将被选择范围设定为封闭区域。

根据本实施例，即使不只是在一个显示屏幕内执行在多个屏幕上的用户操作，也能够生成用户希望的被选择范围。

[其他实施例]

注意，在上述实施例中已经描述了以水平方式书写的情况。然而，相同的技术可以应用到以垂直方式书写的情况以获得相同的效果。

虽然本发明已参考示例性实施例被描述，但应当理解，本发明不限于所公开的示例性实施例。随后的权利要求书的范畴将被给予最宽广的解释，以便包含所有这样的更改和等效结构与功能。

本发明适用于包括单个装置或单个设备的系统。本发明甚至还适用在用于执行这些实施例的功能的信息处理程序被直接或从远程地点提供给该系统或设备的时候。因此，本发明还包含安装在计算机中以便该计算机实施本发明的功能的程序、存储该程序的介质、致使用户下载该程序的WWW(万维网)。特别地，本发明至少包含一个存储程序的非暂时性计算机可读介质，该程序致使计算机执行包含在上述实施例内的处理步骤。

本申请要求于2014年3月20日提交的日本专利申请号2014-059238的权利，其内容在此通过参考被全面并入。