专利名称：程序、信息处理装置、信息处理系统的制作方法
技术领域：
本发明涉及在信息处理装置中运行的程序、运行该程序的信息处理装置、以及通过该信息处理装置和显示装置、光学读取装置实现的信息处理系统。
背景技术：
发明人在专利文献I中提出了，通过将信息处理装置的桌面屏幕的截取图像与点阵图形重叠印刷做成纸键盘，并用光学读取装置读取所印刷的纸键盘的点阵图形，将所印刷的介质作为信息处理装置的触摸板来利用(段落0327等)。另外,还提出了一种技术，即，如Microsoft公司销售的操作系统Windows XP (注册商标)中搭载的“文件与设置的转移向导(非专利文献I)”和“备份或还原向导(非专利文献2)”所述，通过预先备份信息处理装置的设置，在因故障或转卖等而装配新的信息处理装置时，用户不用手动组装也可以还原所备份的设置，并照原样组装成为以前使用的信息处
理装置的设置。专利文献1:日本特开2008-152745号公报非专利文献 I http: //support, microsoft. com/kb/293118/ia (Windows XP (注册商标)的文件与设置的转移向导的使用方法)非专利文献 2 http: //support, microsoft. com/kb/882790/ia (让我们来备份重要的文件和文件夹吧)
发明内容
发明所要解决的课题但是，在专利文献I记载的技术中，所截取到的桌面的构成(图标的配置等)在印刷纸键盘时和进行操作时大部分是不同的，而且，对于多数用户来说并不清楚根据纸键盘和当前的桌面的构成中的哪一个来进行电脑操作比较好，从而对舒适的操作造成了妨碍。另外，通常在运行所期望的信息处理功能(专利文献2中记载的备份功能等)的情况下，首先需要的步骤是使存储在存储装置中的软件启动，并在该软件中进行多次操作。但那种操作对于不擅长电脑的用户来说是非常复杂的作业。本发明是鉴于上述几点问题提出的，其课题在于，通过记录进行截取时的电脑的运行环境，并对该运行环境、点阵图形以及截取图像进行关联，实现一种减少用户的操作次数，且富有能进行直观的恢复操作的便利性的信息处理技术。课题的解决方案为了解决所述课题，本发明采用了以下方案。(I)本发明的程序是一种在信息处理装置中运行的程序，其特征在于，使该信息处理装置的控制装置运行如下步骤将显示在与该信息处理装置连接的显示装置上图像存储到该信息处理装置的存储装置中，并且，将存储该图像时的该信息处理装置的运行环境存储到该存储装置中的步骤；使点阵图形与该图像重叠形成的步骤，其中，该点阵图形定义有包含至少对该运行环境进行特定的特定信息的代码值、以及与该图像对应的坐标值；从读取该点阵图形的、与该信息处理装置连接的光学读取装置中，取得该代码值及坐标值的步骤；和通过所取得的该代码值的至少一部分上定义的该特定信息来对该运行环境进行特定，并恢复到与该代码值及坐标值对应的该运行环境的步骤。(2)进一步地，其特征在于，显示在所述显示装置上的图像是能够进行指向动作的一个或多个软件运行图像，所述运行环境包括该软件的运行状况，所述恢复步骤是，将通过所述光学读取装置读取所述点阵图形时显示在该显示装置上的图像进行改换，根据所取得的所述特定信息而恢复到所述运行环境，并将其作为与所述代码值及坐标值对应的该软件运行图像。(3)进一步地，其特征在于，显示在所述显示装置上的图像是桌面图像，所述运行环境包括该桌面图像的图标的配置信息，所述恢复步骤是，将通过所述光学读取装置读取所述点阵图形时显示在该显示装置上的桌面的图标的配置进行改换，根据所取得的所述特定信息而恢复到所述运行环境，并将其作为与所述代码值及坐标值所对应的该桌面图像的图标的配置相同的配置。(4)进一步地，其特征在于，所述显示装置能够实现向图像显示面进行的写入，所述存储步骤进一步包括如下步骤将通过用该信息处理装置进一步具有的识别装置识别向该图像显示面进行的写入操作得到的写入图像数据存储到所述存储装置中；所述形成步骤是使该写入图像与所述定义代码值及坐标值的点阵图形、所述图像重叠形成；所述恢复步骤是根据所取得的所述特定信息而恢复到所述运行环境，并将与该代码值及坐标值对应的该写入图像数据显示在该显示装置上。(5)进一步地，其特征在于，在所述图像显示面上形成有定义坐标值的点阵图形，所述识别装置根据由该光学读取装置读取到的点阵图形所定义的该坐标值，将通过所述光学读取装置向该图像显示面进行的写入操作作为所述写入图像数据来识别。(6)进一步地，其特征在于，显示在所述显示装置上的图像是桌面图像，所述代码值包括向该桌面图像上的图标进行的对应关联，所述运行环境包括与该桌面图像上的图标对应的程序的运行信息，所述恢复步骤是，根据所取得的所述特定信息而恢复到所述运行环境，并运行与由所述点阵图形定义的代码值对应的该图标所对应的程序。(7)进一步地，其特征在于，所述运行环境进一步包括与桌面图像上的图标对应的程序的运行信息，所述恢复步骤除了上述形成相同配置的步骤外，还进一步包括如下步骤根据所取得的所述特定信息而恢复到所述运行环境，将由所述点阵图形定义的坐标值转换成所述显示装置的坐标值，将显示在该显示装置上的光标移动到该显示装置的坐标值的位置上，并运行与位于所移动的该光标的坐标值上的图标对应的程序。(8)进一步地，其特征在于，显示在所述显示装置上的图像是接受输入的软件的运行图像，所述运行环境包括该软件的运行状况、以及到达该运行状况之前由用户输入的分层信息，所述恢复步骤是，根据所取得的所述特定信息而恢复到所述运行环境，将由所述点阵图形定义的坐标值转换成所述显示装置的坐标值，并根据与所述代码值对应的该分层信息运行位于该显示装置的坐标值上的软件。(9)进一步地，其特征在于，所述形成步骤是，在介质上将所述定义代码值及坐标值的点阵图形与所述图像重叠印刷。
(10)本发明的信息处理装置，能够从运行环境恢复到过去的状态，并能利用过去的操作，其特征在于，该信息处理装置至少具有存储装置、控制装置，该控制装置将与该信息处理装置连接的显示在显示装置上的图像存储到该存储装置中，并且，将存储该图像时的该信息处理装置的该运行环境存储到该存储装置中，使点阵图形与该图像重叠形成，其中，该点阵图形定义有包含至少对该运行环境进行特定的特定信息的代码值、以及与该图像对应的坐标值，从读取该点阵图形的、与该信息处理装置连接的光学读取装置中，取得该代码值及坐标值，通过所取得的该代码值的至少一部分上定义的所述特定信息来对所述运行环境进行特定，并恢复到与该代码值及坐标值对应的该运行环境。(11)本发明的信息处理系统，由能够从运行环境恢复到过去的状态并能利用过去的操作的信息处理装置、和与该信息处理装置连接的显示装置、光学读取装置构成，其特征在于，该信息处理装置至少具有存储装置、控制装置，该控制装置将显示在该显示装置上的图像存储到该存储装置中，并且，将存储该图像时的该信息处理装置的该运行环境存储到该存储装置中，使点阵图形与该图像重叠形成，其中，该点阵图形定义有包含至少对该运行环境进行特定的特定信息的代码值、以及与该图像对应的坐标值，从读取该点阵图形的光学读取装置中取得该代码值及坐标值，通过所取得的该代码值的至少一部分上定义的所述特定信息来对所述运行环境进行特定，并恢复到与该代码值及坐标值对应的该运行环境。(12)进一步地，其特征在于，所述控制装置使校准标记至少暂时地显示在所述显示装置的两个以上的角落及/或中央，通过所述光学读取装置对重叠形成有所述定义代码值及坐标值的点阵图形与所述图像的介质上的、与该校准标记一致的位置进行读取，则将由所读取的位置上的该点阵图形定义的坐标值转换成该显示装置上显示校准标记的位置的坐标值，通过对所有显示在该显示装置上的校准标记进行上述处理，求出将该点阵图形的坐标值转换成该显示装置的坐标值的坐标转换函数或坐标值转换一览表,并且,进一步包括如下处理根据该坐标转换函数或坐标转换一览表，将之后用该光学读取装置读取的点阵图形的坐标值转换成该显示装置上的坐标值，并恢复到对应的所述运行环境。(13)进一步地，其特征在于，所述显示装置由投影仪和投影板构成，该投影板形成有定义代码值及坐标值的点阵图形，通过在该投影板上投影所述图像，使该定义代码值及坐标值的点阵图形与该图像重叠形成，在所述控制装置中，通过该代码值对该投影板进行特定。(14)进一步地，其特征在于，所述投影板是白板。(15)进一步地，其特征在于，所述投影板是活动挂图。(16)进一步地，其特征在于，所述点阵图形是通过排列多个流式点阵图形而形成的，其中，该流式点阵图形按照如下步骤进行排列按照预先确定的规则呈线状连续配置多个基准点的步骤；设置对该多个基准点进行连结的由直线、折线及/或曲线构成的第一虚拟基准线的步骤；设置根据该基准点及/或该第一虚拟基准线而在预先确定的位置上定义的、由直线及/或曲线构成的至少一个以上的第二虚拟基准线的步骤；在该第二虚拟基准线上的预先确定的位置上设置多个虚拟基准点的步骤；和在以该虚拟基准点为起点且由矢量表示的终点上，以相对于该虚拟基准点的距离和方向来对定义XY坐标值及/或代码值的信息点进行配置的步骤。由此，通过将基准点间隔一定的流式点阵图形以多个排列的方式形成，能够在投影板上无间隙地定义XY坐标值并生成轨迹信息。进一步地，如果在投影板上印刷文字、五线谱、地图、图形等，并用扫描笔在其线段上进行描画或触摸的操作，则通过仅沿着该线段形成流式点阵图形，能够合理地配置点阵图形。另外，无需制约于将定义有XY坐标的点阵图形形成为二维代码时(作为索引使用)的矩形区域的形状，就能实现与在介质表面上可视地形成的信息区域相配合的任意形状的、通过一定信息的集合的重复而形成点阵图形。(17)进一步地，其特征在于，为了定义第二虚拟基准线，及/或为了定义所述点阵图形的方向和一个XY坐标值及/或代码值，所述流式点阵图形进一步在预先确定的位置上设置有作为基准的基准点。由此，通过设置新的基准点，而不使用信息点就能简单地对流式点阵图形的朝向和一定信息的集合进行定义，并能控制多余信息的减少。进一步地，通过新的基准点的配置，能够准确地表示作为信息点的起点的虚拟基准点的位置。发明效果如上所述，本发明通过记录进行截取时的电脑的运行环境，并对该运行环境、点阵图形以及截取图像进行关联，能够实现一种减少用户的操作次数，且富有能进行直观的恢复操作的便利性的信息处理技术。
图1是示意性地表示本发明的信息处理系统的构成的框图。图2是通过图1的信息处理系统运行的信息处理的流程图。图3是说明本发明的信息处理系统的实施方式的图。图4是说明本发明的信息处理系统的实施方式的图。图5是表示截取图像的例子的图。图6是对表示代码值与启动程序的对应的一览表进行说明的图。图7是对启动程序、分层信息的定义方法进行说明的图。图8是对进行校准的方法进行说明的图。图9是说明本发明的信息处理系统的实施方式的图。图10是说明本发明的信息处理系统的实施方式的图。图11是表示点阵图形的例子的图。图12是表示信息点以及由其定义的数据的比特表示的例子的图。图13是表示点阵图形的代码值与XY坐标值的关系的图。图14是按顺序表示形成点阵图形的步骤的一例的图。图15是按顺序表示形成点阵图形的步骤的一例的图。图16是表示通过贝塞尔曲线设置定义虚拟基准线的例子的图。图17是表示将流式点阵图形沿着上下方向进行排列的状态的一例的图。图18是示意性地表示笔型扫描器的结构的例子的图。
具体实施例方式以下，参照附图对本发明的实施方式进行详细描述。图1是示意性地表示本发明的信息处理系统的构成的框图。
图1的信息处理系统由信息处理装置1、显示装置9、印刷装置11、和光学读取装置13构成，信息处理装置I包括控制装置3、存储装置5、识别装置7。显示装置9与信息处理装置I连接，并显示桌面图像和应用程序的运行图像等。存储装置3存储显示在显示装置9上的图像和信息处理装置I的运行环境。识别装置7在显示装置9的图像显示面能够写入的情况下，将用户的写入操作作为写入图像数据来识别。该写入图像数据也同样存储在存储装置3中。印刷装置11及光学读取装置13和显示装置9 一样也与信息处理装置I连接。作为这些装置的连接方式，除了经由USB接口的有线的连接之外，红外线通信、光通信、蓝牙(BLUETOOTH (注册商标))、紫蜂(ZigBee)、微弱电波等无线通信也可考虑在内。印刷装置11将由存储装置3存储的图像与定义代码值及/或坐标值的点阵图形进行重叠印刷。光学读取装置13从通过印刷装置11印刷的介质上将点阵图形作为图像数据来读取。所读取的图像数据被再次转换成代码值及/或坐标值。图2是通过图1的信息处理系统运行的信息处理的流程图。在图2中，首先，控制装置3根据用户的操作(信息处理装置I的启动和网络的浏览等)在显示装置9上显示图像(步骤S201)。图像上除了上述内容外，发明人还提出了与FLASH、文章/图画、网页、各种设置、文件/文件夹、运行环境有关的图像。其次，控制装置3辨别是否有来自用户的截取操作(步骤S202)。关于截取操作，除了按下与信息处理装置I连接的键盘的“屏幕截图(Print Screen)”键之外，还列举了用于运行本发明的程序的图标的双击和键盘的其他按键的操作、安装在具有光学读取装置13的笔型扫描器上的按键的操作、重叠印刷有点代码和各种图标的纸键盘的读取等。若步骤S202的辨别结果是有截取操作，则控制装置3在进行截取操作时将显示在显示装置9上的图像存储到存储装置5中(步骤S203)。另外，控制装置3将存储图像时的信息处理装置I的运行环境存储到存储装置5中(步骤S204)。运行环境是指信息处理装置I的动作环境、程序的内容和启动/控制/运行状况、应用程序的内容和运行状况、图标的配置信息、网页的浏览状况、文件的开关状况等。此外，如下详述，运行环境也包括各种分层信息，能够根据代码值定义其信息。由此，用户即使不从桌面屏幕上进行多次操作，也能通过一次点阵图形的读取移动至基于处理流程的分层部分。接着，控制装置3辨别是否有来自用户的印刷操作(步骤S205)。关于印刷操作，除了通过鼠标操作或键盘输入来进行之外，还可以通过所述纸键盘的读取来进行。在纸键盘上与点阵图形重叠地印刷形成有向用户暗示印刷的文字或图形等，通过用笔型扫描器进行读取，能够根据由与该文字或图形等重叠形成的点阵图形定义的坐标值和代码值在更易懂地提高便利性的同时进行印刷操作。这种情况下，由适合之处的点阵图形定义的坐标值和代码值与进行印刷开始的操作命令关联登记在链接表中。若步骤S205的辨别结果是有印刷操作，则控制装置3将在步骤S203中由存储装置5存储的图像与定义代码值及/或坐标值的点阵图形重叠，并通过印刷装置11进行印刷(步骤 S206)。这时，控制装置3对图标、应用程序和网页位于在步骤S203中由存储装置5存储的图像的哪个位置上进行识别，并算出显示它们的位置的坐标值。然后，使图像的XY坐标与印刷介质的XY坐标对应，生成与显示图像相对应的点阵图形。
此外，在步骤S206中，优选为将定义不同代码值的点阵图形重叠印刷在每个显示在图像中的图标和窗口上。由此，不使用坐标值就能从该代码值直接定义图标和窗口，因此无需进行后述的校准。接着，控制装置3通过光学读取装置13进行步骤S206中形成的印刷介质的读取，并辨别是否有由点阵图形定义的坐标值的发送、或者是否有由点阵图形定义的代码值及坐标值的发送(步骤S207)。若步骤S207的辨别结果是有坐标值的发送、或者有代码值及坐标值的发送，则接着辨别是否有用户进行的按键操作(步骤S208)。按键操作是指设置在笔型扫描器上的按键的操作(按下、滑动、长按、按两次等)，但当然也可以在纸键盘的读取和点阵图形的读取之前进行模式变更而不辨别按键操作的有无(步骤S208)就进行处理。若步骤S208的辨别结果是有按键操作，则控制装置3将点阵图形的坐标值转换成显示装置9的坐标值(步骤S209)。这时，优选为存储上述步骤S206中通过算出坐标值而进行的图像的XY坐标与印刷介质的XY坐标的对应，并用对应关联中使用的算式进行转换。接着，控制装置3使显示在显示装置9上的光标移动到转换后的显示装置9的坐标值的位置(步骤S210)。接着，控制装置3辨别是否有用户进行的点击操作(步骤S211)。关于点击操作，提出了设置在笔型扫描器上的按键的按下、和形成在纸键盘上的点击图标的读取等。若步骤S211的辨别结果是有点击操作，则进行位于显示在显示装置9上的光标的位置上的图标的程序的启动等(步骤S212)。若位于光标的位置上的图标例如是网络浏览器，则启动该浏览器。启动结束后再次重复步骤S207之后的处理。若步骤S208的辨别结果是无按键操作，则控制装置3进行与所发送的代码值及/或坐标值相对应的运行环境的恢复(步骤S213)。例如，若发送了第一代码值，则将信息处理装置I的桌面环境恢复成步骤S202至步骤S204等中的桌面环境。若用户用笔型扫描器触摸印刷介质，则能够立即使信息处理装置I恢复成印刷在该印刷介质上的环境，因此，能够很容易地在过去的环境下进行电脑操作。若印刷在印刷介质上的图像与显示在显示装置9上的图像相对应，则之后就能根据坐标值进行指向操作、和根据第二代码值进行各种软件的运行等。另外，例如，当在通过光学读取装置13读取了印刷介质的地方印刷有文档创建过程中的窗口时，控制装置3以步骤S204中存储的运行环境为基础，将该文档显示在显示装置9上。即使该文件在步骤S204 步骤S213之间被删除了，但由于步骤S204中存储了信息处理装置I的运行环境，所以也能将该文件显示在显示装置9上。在该文档的基本软件被删除等的情况下，由于无法浏览文档，所以这种情况下优选为较浅地显示文档的窗口、或者显示提示消息等。另外，若有以其他扩展名(WORD6PDF)来保存与所删除的文件相同的内容的数据，则也能检索并显示文件名。另外，还能通过各种按键的操作来显示该文档的最新版本。另外，例如，在步骤S206中，在显示在图像中的每个图标和窗口上重叠印刷有定义不同代码值的点阵图形的情况下(不只是对图像整体进行特定的代码值，还定义有对图像整体中的图标和窗口进行特定的代码)，能够根据对图像整体进行特定的代码值从具体数目的截取图像中对与本印刷介质相对应的图像、运行环境进行特定，甚至能够对其中的图标进行特定。由此，无需如上所述将信息处理装置I的桌面环境恢复成步骤S202至步骤S204等中的桌面环境，也无需用根据坐标值进行的指向来特定图标和窗口，就能直接进行过去的运行环境下的文档浏览和文件参照等。通过步骤S213恢复运行环境，则本处理结束。本处理结束之后，也可以返回至步骤S207。例如，在通过相同的印刷介质进行反复恢复的情况下，无需在每次恢复时都进行步骤S201 步骤S206，能够谋求可用性的提高。另外，也可以反复进行步骤S213。另外，还可以在由步骤S213恢复的运行环境内进行步骤S209 步骤S212的处理。在图3 (a)中，作为显示装置的液晶显示器19例如显示了表示通过信息处理装置I的控制装置3启动了操作系统(OS)后的显示结果的桌面图像。在桌面图像中显示着开始键(START)和各种图标(运行文档浏览/生成和浏览器等程序)。在信息处理装置I上经由USB接口连接有印刷装置11 (打印机)，该印刷装置11除了通常的印刷外，还能进行例如使用了隐形墨水的点阵图形的印刷。关于点阵图形的点印刷，优选为通过吸收红外线的隐形墨水(看不见的墨水)或炭黑来进行，用于通常的图示和文本的印刷的墨水优选为反射或透过红外线的非碳素墨水。只需在通常的印刷工序上增加点印刷这一道工序，而无需特殊的印刷技术，可以用胶印机乃至喷墨打印机等大部分的印刷机来印刷。点阵图形由直径0. 04mm (使用喷墨打印机的话为0. 05mm左右)的极小点构成，因此很难看到，如果使用为高品质输出而开发的无色透明的红外线吸收隐形墨水的话，则还能实现完全看不到点。另外，若完全不想改变墨水和印刷工序(四色印刷)，则将CMYK的K (炭黑)用于点。这时，将CMY用于CAD图和文字/符号/图形、地图、照片、图示，并在其上用K印刷点即可。黑色是通过100%混合CMY以合成黑色来表现的。但是，由于无法再现完全的黑色，所以有时不突出黑色而形成不严谨的图画。另外，印刷有点的区域由于用K印刷点而成为网点状，仔细看的话则成为用浅灰色描画的图案。若要将其消除，则仅在必要的最小限度的区域内印刷点，而未印刷点的区域如以往一样使用CMYK即可。但这样会造成只能在印刷有点的限定区域内用扫描器进行触摸。另外，由于使用在红外线区域内发生反应的墨水而无法复制，所以能够高级别地维持安全性。作为印刷介质，印刷的纸不论种类，铜版纸、哑粉纸、高档文化纸、普通纸、新闻纸、印相纸、打印纸等，对哪种纸都可以进行点印刷。另外，除了纸以外，不管任何东西，只要是无伸缩性的介质，就可以在其上进行印刷。在图3 (a)中，示意性地表示了图2的步骤S201 步骤S206的处理的影像。截取显示在液晶显示器19上的图像，并将截取图像与进行截取操作时的信息处理装置I的运行环境一起存储到存储装置5中，当有用户进行的印刷操作时，就会从印刷装置11生成印刷介质21。当然，也可以不辨别印刷操作的有无，当进行截取操作时也自动进行图2的步骤S202 步骤S206。在印刷介质21上如上所述重叠印刷有截取图像与点阵图形。这时，通过进一步设置在印刷装置11上的控制装置，也可以在每个图标上粘贴并印刷定义不同代码值的点阵图形。通过用代码值定义各图标，不用在点阵图形中定义坐标值，用户就能运行程序。另外，无需使点阵图形的坐标值与显示装置上的坐标值相对应，也能谋求处理速度的提高。在图3 (b)中，示意性地表示了使用图3 (a)中生成的印刷介质21的信息处理方法，与图2的步骤S207、步骤S208、步骤S213的处理的图像相对应。在信息处理装置I上，通过例如使用了蓝牙(BLUETOOTH (注册商标))的无线通信而连接有至少具有光学读取装置13的笔型扫描器33。用户用笔型扫描器33读取印刷介质21，则该笔型扫描器33仅读取所触及之处的用红外线吸收墨水印刷的点，并将其转换成代码值及/或坐标值。所转换的代码值及/或坐标值通过无线通信而被发送至信息处理装置I。在液晶显示器19上，显示有与图3 Ca)中显示的图像即印刷在印刷介质21上的图像不同的图标配置的桌面图像，运行环境也与进行截取操作时不同。由此，控制装置3优选为通过预先确定的操作来切换是全部恢复进行截取操作时的运行环境，还是将所触及到的图标的程序在进行截取操作时的运行环境下运行、或者在当前的运行环境下运行，或者通知用户由于所触及之处的文档已被删除所以不可使用，又或者显示该文档的最新版本
坐 寸o例如，可以考虑通过进一步设置在笔型扫描器33上的按键的操作方法(半按、长按、按两次、按着触摸印刷介质21等)来进行切换，或者使多个按键负责各自的功能(设置恢复键等)。当然，也可以通过触摸插入有易懂的说明文字和图示的纸键盘来进行模式的切换。还可以在印刷介质21上印刷这种纸键盘。在图3 (b)的图示例中，进行了恢复至进行截取操作时的运行环境的处理。S卩，进行了使显示在液晶显示器19上的图标配置成为与印刷介质21上的图标配置相同的配置的处理。在当前的信息处理装置I内不存在与印刷介质21上的图标相对应的程序时，优选为仅将现有的图标按照印刷介质上的图标配置进行配置。在进行了运行环境的恢复之后，用户便以图2的步骤S20扩步骤S212的处理(鼠标模式)为中心进行电脑操作。当然，在印刷介质21上定义有坐标值的情况下，即使不恢复运行环境，也可以用笔型扫描器33作为定点设备发挥功能。由于不是像通常的鼠标那样通过相对的移动量来进行指向，而是以印刷介质21的坐标值与液晶显示器19上的坐标值的关系来进行指向，所以用户可以根据直观的绝对值来进行指向。此外，这种情况下，优选为在笔型扫描器33上设置鼠标键，并进行鼠标模式与恢复模式(运行图2的步骤S213)的切换。图4 (a)示意性地表示图2的步骤S201 步骤S206的处理的图像。图4 (b)示意性地表示图2的步骤S207、步骤S208、步骤S213的处理的图像。其构成与图3基本相同，对于同一技术特征省略重复说明，并在下述内容中仅对与图3不同的部分进行说明。图4 Ca)中，在显示在液晶显示器19上的桌面图像中，显示有多个图标和标题为“ if ''J ^ ^ ^ 特許d P T (关于商业模式专利)”的Word文件制作中的窗口。截取桌面图像并生成印刷介质21(图示例(a))，用笔型扫描器33触摸印刷介质21上的Word文件制作中的窗口，就会在液晶显示器19上显示该窗口(图示例(b))。此外，通过上述预先确定的操作(例如按着按键进行触摸)，能够切换是显示最新版本还是显示进行截取操作时的版本。
图5表示显示在显示装置上的图像的例子，即截取图像的例子。(a)显示了浏览器窗口和文字处理器的窗口，(b)显示了各种图标和CAD运行中的窗口。另外，(c)显示了文件夹名为“杉気入>9 (收藏夹)”的文件夹窗口和显示“Gridmark”主页的窗口，(d)中整体地显示了机票的预订画面。在如本图示例(d)所示的接受机票预订画面等的输入的软件(浏览器等)的运行图像的情况下，到达该图像之前输入的信息具有重要意义。因此，并不是直接对该图像(画面)进行特定，而是也需要存储到此为止之前的过程，并最终到达该画面。因此，优选为用代码值来定义作为对以怎样的路径到达当前画面进行保留的数据的分层信息。如通常的网络检索结果显示画面所示，若处理过程中没有特别的必要性，则即使不考虑分层信息而直接恢复该画面也没问题。另，除此之外，若处理过程仅有一条路径或者软件是面向对象软件，则也能直接恢复画面。例如，用户用笔型扫描器触摸印刷介质中写有“ 7 7 4卜(航班)”和“杉客様情報(客户信息)”的部分，则通过由点阵图形定义的代码值，基于在到达该画面之前所输入的搭乘日和姓名等分层信息而在显示装置上恢复该画面。接着，触摸写有性别的栏中的“男(男)”部分的〇，则由点阵图形定义的坐标值被转换成显示装置的坐标值，用普通的鼠标点击该部分就会将输入的结果显示在显示装置上。当然，首次触摸“男(男)”部分的〇时，也可以不恢复进行截取操作时的运行环境，而在显示装置上显示表示该触摸输入的结果的画面。 这样，截取图像的构成有无数的组合，可以在本发明的范围内进行各种改变。SP，通过组合在权利要求所述的范围内适当改变的技术方案而得到的实施方式也包含在本发明的技术范围内。图6 (a)是对表示代码值与启动程序的对应的一览表进行说明的图。若生成点阵图形，就会在存储装置内生成例如使点阵图形的代码值与图标表示的启动程序(图标的功能)相对应的一览表。例如，若生成与表不文字处理器的图标相对应的点阵图形，并分配代码值0001，则制作成代码值0001与启动程序Warpro. exe对应的一览表。关于表示因特网、表单计算的图标也一样。通过制作这种一览表，用户例如用扫描器点击图3 (b)所示的印刷介质21上的图表的图案，就会启动表单计算程序。图6 (b)是对表示代码值/坐标值与启动程序的对应的一览表进行说明的图。能够用XY坐标值对启动程序进行特定，并用代码值定义程序的分层信息。关于该启动程序、分层信息的定义方法，参照图7进行以下说明。首先，为了用XY坐标值定义启动程序，必须用由印刷介质21上的点阵图形定义的坐标值来定义索引(index)。图7 (a)说明了用户用笔型扫描器在形成于印刷介质21上的矩形区域(假设了图标和窗口)的范围内进行了触摸的情况下的索引(index)的定义方法。在本图示例中，坐标〔X、Y〕表示用笔型扫描器触摸的位置，坐标〔X1、Y1〕表示矩形区域的最小点，坐标〔X2、Y2〕表示矩形区域的最大点。这时，若坐标〔X、Y〕为〔125、225〕，则〔XI彡 X 彡 X2) = (100 ^ 125 彡 200〕、〔Yl ^ Y2) =〔200彡225彡300〕，可以得知坐标〔X、Y〕存在于矩形区域内。因此，索引(index)被定义为563，能够用XY坐标值对启动程序进行特定。其次，用代码值定义程序的分层信息。为了用代码值定义分层信息，以启动某程序后立即出现的画面为O，继而出现的画面为1，输入了某信息的画面为11，这样在每个画面中分配代码值即可。在图6 (b)图示例的上层，通过XY坐标值“01100111”定义启动程序“Chrome,exe”,通过代码值“0001”定义网页的分层信息“http://www. gridmark. co. jp/”。在下层，通过代码值“0002” 定义 “http://www. gridmark. co. jp/sol/”。此外，为了定义矩形区域内的索引(index)，需要至少登记有最小值和最大值的坐标的坐标一览表，若图标和窗口的形状不为矩形，则需要在坐标一览表中进一步设置作为多个点的基准的坐标(〔乂3、￥3〕……)，并定义索引(index)。因此，优选为在点阵图形中定义能够直接定义索引(index)的代码值。图8是对进行印刷介质21与显示在液晶显示器19上的图像的校准的方法进行说明的图。在通过印刷装置11进行点阵图形与截取图像的重叠印刷时，以由点阵图形定义的坐标值与液晶显示器1 9上的坐标值准确对应的形式来形成印刷介质21即可，但是，由于印刷用纸的尺寸或者印刷用纸插入的时机、液晶显示器19的分辨率等某些情况，有时无法进行正确的印刷。因此，信息处理装置I的控制装置3需要在有来自用户的校准指示的情况下、或者仅对显示背景图像的地方进行了多次触摸等情况下进行校准。首先，如图所示，在液晶显示器19上的任意处显示校准标记35。为了以更少的触摸来进行校准，优选为使校准标记暂时显示在用户易触及的角落及/或中央来进行。其次，用户如图所示使用笔型扫描器33触摸印刷介质21上的与校准标记一致的位置。通过笔型扫描器33内的光学读取装置13来读取所触及之处的点阵图形，并经由无线通信向信息处理装置I发送由点阵图形定义的坐标值。控制装置3进行使所发送的坐标值与液晶显示器19显示的图像上的坐标值对应的处理，用户在所有的校准标记处进行该触摸操作。本图示例中显示有四处校准标记，若用户触摸这四处所有的校准标记，则控制装置3能够求出将点阵图形的坐标值转换成液晶显示器19上的坐标值的坐标转换函数或坐标转换一览表。若求出坐标转换函数或坐标转换一览表，则以后用笔型扫描器33读取的点阵图形的坐标值就会转换成液晶显示器19的坐标值，并且进行显示在对应处的图标的程序的运行等。这时，若在点阵图形中定义有代码值(对截取图像整体进行特定)，则优选为将代码值与通过校准得到的从点阵图形的坐标值向液晶显示器19显示的图像的坐标值转换的坐标转换函数或坐标转换一览表进行关联。此外，在印刷阶段，也可以使图像的XY坐标与印刷介质的XY坐标对应，使代码值与在生成与显示图像相对应的点阵图形时使用的坐标转换函数或坐标转换一览表对应，并存储到存储装置5中，当再次读取时从代码值读出坐标转换函数或坐标转换一览表并进行坐标值的转换。图9是对第二实施例进行说明的图。图9中的结构与图3基本相同，对于同一技术特征省略重复说明，并在下述内容中仅对与图3不同的部分进行说明。在图9中，显示装置与图3所示的液晶显示器不同，是由白板25和液晶投影仪31构成的。在白板25上形成有用于识别写入操作的点阵图形。在需要对该白板进行特定的情况下，也可以在该点阵图形中定义代码值。当然，如果只有一张则无需对该介质进行特定，因此也可以不定义代码值。另外，信息处理装置I中进一步具有将向图像显示面进行的写入操作作为写入图像数据来识别的识别装置。该识别装置根据由笔型扫描器33内的光学读取装置读取到的点阵图形定义的坐标值的变化等，将用户使用笔型扫描器33在白板上进行的写入操作(在板上描画、触摸)作为写入图像数据来识别。此外，在图3所示的情况下，能够在液晶显示器上设置触摸面板，感知用户的写入操作并将其作为信息信号向识别装置输出，再将其作为写入图像数据来识别。在用户进行了写入操作之后，当进行截取操作时，将所识别的写入图像数据与截取图像以及信息处理装置I的运行环境一起存储到存储装置中。接着，当进行印刷操作时，通过印刷装置11将写入图像与定义代码值及/或坐标值的点阵图形、以及截取图像重叠印刷。此外，写入图像可以根据用户的希望印刷或不印刷。再接着，用笔型扫描器触摸如图所示的印刷介质21，则恢复例如通过整体定义的代码值来进行截取操作时的运行环境。也可以在印刷介质21上印刷对显示的0N/0FF进行切换的纸键盘，并用笔型扫描器触摸，由此进行写入图像的显示。之后，用笔型扫描器触摸白板的点阵图形或印刷介质的点阵图形，并进行对应的图标的程序、或再次写入操作，然后再次存储并印刷更新后的内容/图像。此外，在本图示例中显示了信息处理装置的桌面图像，但是，通过显示图画、地图、教科书等教育机关使用的资料或其摘录等，能够以富有便利性的操作来谋求学习效率的提高。如果通过写入操作将每次授课的日期和时间等印刷在印刷介质21上，并将这些多个印刷介质21整理汇编，则日后只需通过触摸印刷介质21就可以显示当时的学习内容等，复习也变得很容易。图10是对第三实施例进行说明的图。图10中的结构与图3、图9基本相同，对于同一技术特征省略重复说明，并在下述内容中仅对与图3、图9不同的部分进行说明。在图10中，显示装置与图3的液晶显示器、图9的白板不同，是由活动挂图27和液晶投影仪31构成的。活动挂图27中数十页纸张29重叠构成显示部分，并在纸张29上形成有用于进行写入操作的点阵图形。在该点阵图形中定义有例如对纸张29进行特定的代码值和坐标值。在利用活动挂图27的本实施例中，由于是将预先印刷有点阵图形的纸张29作为写入操作以及笔型扫描器读取的介质(图3的印刷介质21)来使用，所以无法进行上述那种分别在各种图标上定义代码值的使用方法。因此，使用前需要进行图8所示的校准。图10 (a)示出了用铅笔37记载了文字“経営会議(管理会议)”，并用笔型扫描器33记载了 “( I)海外販売網乃強化(海外销售网的强化)”、“(2 ) ”、“(3 ) ”、“(4) ”的例子。在用笔型扫描器33进行了写入操作的部分上，信息处理装置I的识别装置从由写入操作连续读取的点阵图形的坐标值的变化中识别写入操作，将由此存储的写入图像数据从液晶投影仪31投影并显示在活动挂图27上的纸张29上。
在图10 (b)中，示意性地表示了用于恢复图10 Ca)的环境的操作过程。用户将图10 (a)中进行了写入的纸张29揭下并如图3所示的印刷介质21那样使用。在纸张29上仅留下了用铅笔37进行的写入，用户能够以该写入的内容来掌握该纸张29是什么时候使用的。当然，即使是忘记了纸张29的使用时间等的情况下，由于该纸张29上定义有代码值，所以用笔型扫描器33进行读取就可以恢复当时的内容。除此之外，还能在纸张29上粘贴例如管理会议之后收集的资料39 (照片等)。接下来，通过触摸所揭下来的纸张29，能够使形成有点阵图形的、位于当前活动挂图上的纸张29与截取图像重叠形成。该步骤与图2所示的步骤S206对应。在完成重叠形成之后，可以直接使用当前活动挂图上的纸张29进行新的写入操作或应用程序的运行，或者将所揭下来的纸张29作为定点设备使用并恢复过去的运行环境等。例如，通过触摸与点阵图形重叠形成的显示在投影板上的图像，读取印刷在图像显示面上的点阵图形，并在所触摸的图像是图标的情况下，运行与该图标相对应的程序。通过以上结构，可以仅通过触摸操来简单地切换过去几天所截取的图像以及在那里写出的资料等，并一边对照核查一边同时参照上述资料39 (照片或图表)和用铅笔37写入的内容，还可以同时实现作为纸介质的便利性和数据的便利性。在图11中，表示本发明的点阵图形的例子(GRID5)。在图11 Ca)中，表示点阵图形中的基准点73a 73e、虚拟基准点74a 74d、以及信息点72的位置关系。该点阵图形通过块(block)的形状定义了点阵图形的方向。在GRID5中，首先配置基准点73a 73e。通过依次连结基准点73a 73e的线来定义表示块朝向的形状(在此为朝向上方的五边形)。其次，根据基准点73a 73e的配置来定义虚拟基准点74a 74d。接着，定义以各个虚拟基准点74a 74d作为起点且具有方向和长度的矢量。最后，在矢量的终点上配置信息点72。这样，在GRID5中，能够根据基准点73a 73e的配置方法来定义块的朝向。而且，通过定义块的朝向，还能定义块整体的大小。在图11 (b)中，表示根据在块的虚拟基准点74a 74d上是否存在信息点72来定义信息的例子。在图11 (C)中，表示将GRID5的块在纵横方向上每两个连结的例子。但是，将块连结配置的方向并不限定于纵横方向，可以在任何方向上配置连结。此外，在图11中，基准点73a 73e以及信息点72均表示为相同的形状，但是，基准点73a 73e与信息点72也可以是不同的形状，例如，基准点73a 73e也可以是与信息点72相比较大的形状。另外，只要能够识别，基准点73a 73e与信息点72可以是任何形状，可以是圆形、三角形、四边形、或者其他的多边形。图12 Ca)是表示信息点以及在该处定义的数据的比特表示的例子的图。关于信息点，如果使用与从基准点导出的虚拟基准点相距较长(图的上层)和较短(图的下层)的两种，且矢量方向设为8个方向的话，则能够表示4比特。这时，距离较长一方的优选为相邻的虚拟基准点之间的距离的25 30%左右，距离较短的一方优选为15 20%左右。但是，距离较长和距离较短的信息点的中心间隔优选为比这些点的直径长。考虑到美观，信息点优选为一个点。但是，如果忽略美观而想使信息量增多的话，通过给每一矢量分配I比特，并用多个点表示信息点，能够拥有大量的信息。例如，在同心圆8个方向的矢量上，能够用从基准点定义的信息点表示28的信息，用一个一定信息的集合的信息点的话则表示264的信息。图12 (b)是信息点以及在该处定义的数据的比特表示的例子，〈1>表示配置了两个点，<2>表示配置了 4个点，以及〈3>表示配置了 5个点。图13示出了点阵图形的代码值与XY坐标值的关系。图13 (a)通过表格示出了由本点阵图形的C(TC31的32比特定义的值。如同图所示，分别以C0 C7表示Y坐标，C8 C15表示X坐标，C16 C29表示代码值，C30 C31表示奇偶性。这些数值配置在(b )所示的格子区域内。图14、图15依次表示本发明的点阵图形的示例(流式点阵图形)的形成步骤的一例。本发明的点阵图形与上述点阵图形(GRID5)不同，首先，作为步骤一，与介质表面上的可视信息(例如窗口或图标)对应，在希望输入输出信息的地方呈线状连续配置多个基准点40。在图14 Ca)中呈曲线状配置有基准点40，但是，基准点40的配置并不限定于此，为了将点阵图形形成为与输入输出信息的区域相配合的形状，还可以将直线与曲线交织，或者形成由多条线段构成的折线状等，可以进行各种变化。另外，也可以在可视地形成在介质表面上的实有线上配置基准点40，还可以沿着实有线按照预先确定的的规则来配置基准点40。此外，从提高读取精度的观点出发，基准点40优选为等间隔地配置，但并不限定于此，还可以使多个间隔混在一起来定义点阵图形的一定信息的集合，或者根据一定信息的集合内的三个不同的基准点的配置间隔来同时定义点阵图形的一定信息的集合和点阵图形的方向。接着，作为步骤二，设置对呈线状配置的基准点40进行连结的第一虚拟基准线42。在图14 (b)中通过曲线来设置第一虚拟基准线42，但第一虚拟基准线42并不限定于此，也可以相对于呈曲线状配置的基准点40而设置直线的第一虚拟基准线42，还可以相对于呈直线状配置的基准点40而设置曲线的第一虚拟基准线42。即，可以根据将后述的步骤三 步骤五中的第二虚拟基准线44、虚拟基准点74、信息点72配置在哪个位置上，而自由定义连结基准点的由直线、折线及/或曲线构成的第一虚拟基准线42。此外，如图16的示例所示，如果是曲线的话，则优选为以贝塞尔曲线来设置第一虚拟基准线42。S卩，首先，以第一虚拟基准线上的基准点作为PO、P3，并以PU P2作为已给出的控制点。其次，求出分别将通过依次连结控制点而得到的三条线段即P0-P1、P1-P2、P2-P3按照1:1的比例进行分割的点P4、P5、P6。接着，求出分别将通过依次连结这些点而得到的两条线段即P4-P5、P5-P6按照1:1的比例进行分割的点P7、P8。最后，求出进一步将连结这两点的线段即P7-P8按照1:1的比例进行分割的点P9，且该点成为贝塞尔曲线上的点。 通过反复进行该步骤，能够得到以P0、P1、P2、P3作为控制点的贝塞尔曲线。此外，并不仅限于贝塞尔曲线，还可以使用利用样条函数求得的样条曲线、n次多项式、椭圆弧等各种算法来设置第一虚拟基准线。另外，即使在后述第二虚拟基准线上，也可以使用与第一虚拟基准线相同的该方法来定义曲线。接着，作为步骤三，设置根据呈线状配置的基准点40及/或第一虚拟基准线42而在预先确定的位置上定义的第二虚拟基准线44。在图14 (c)中，以相对于相邻的基准点40的中间点上的第一虚拟基准线42的切线而朝向垂直线上的预先确定的位置的方式，将第二虚拟基准线44从相邻的基准点40以任意角度进行设置。但是，第二虚拟基准线44并不限定于此，为了如后所述以与希望根据点阵图形输入输出信息的区域相配合的方式设置虚拟基准点，也可以通过各种方法来进行定义。另外，也可以相对于第一虚拟基准线42仅在其一侧设置第二虚拟基准线44，并定义点阵图形的方向，还可以为了增加信息量而在其两侧分别设置。接着，作为步骤四，在第二虚拟基准线44上的预先确定的位置上设置多个虚拟基准点74。在图15 (a)中，在以连结第二虚拟基准线44的交点即相邻的基准点40的直线作为底边，且以第二虚拟基准线44作为对边的等腰三角形的顶点上，设置有虚拟基准点74。但是，虚拟基准点74的位置并不限定于此，也可以设置在第二虚拟基准线44的中点上，或者不设置在第二虚拟基准线44上而是设置在基准点40上等，可以进行各种变化。接着，作为步骤五，在以虚拟基准点74为起点且由矢量表示的终点上配置信息点72。在图15 (b)中，以将从虚拟基准点74开始的矢量方向设为8个方向，且与虚拟基准点74的距离为等距离的方式，相对于一个虚拟基准点74配置有一个信息点72。但是，信息点72的配置并不限定于此，也可以配置在虚拟基准点74上，或者将矢量方向设为16个方向来配置，又或者相对于一个虚拟基准点74配置两个信息点等，可以在任意方向上任意长度上多个配置。这样，本发明的流式点阵图形不同于以往的点阵图形中的形成为格子状的基准点，是根据呈线状(包括曲线在内)连续配置的基准点形成的。由此，无需制约于将点阵图形形成为二维代码时的矩形区域的形状，就可以形成与在介质表面上可视地形成的信息区域相配合的任意形状的点阵图形。此外，本发明的虚拟基准线以及虚拟基准点实际上并没有印刷形成在介质表面上，只是当配置点阵图形时或读取点阵图形时虚拟设定在电脑的图像存储器上的。图17是表示将流式点阵图形在上下方向上排列的状态的一例的图。同图中，除了基准点、信息点外，还配置有关键点以及副点。关键点是配置在一定信息的集合的两端的点。该关键点是表示一个集合的信息点群的一个区域单位的点阵图形I的代表点。副点是配置在关键点2的偏移的正负延长线上的点。同图(b)中将基准点以及流式点阵图形等间隔地排列。这样，通过排列形成基准点间隔一定的多个流式点阵图形，而能够无间隙地定义XY坐标值。但是，本发明的流式点阵图形并不仅限于此，如同图(a)所示，也可以对点阵图形彼此之间的间隔进行任意设定。另外，基准点彼此之间的间隔也能任意设定。由此，无需制约于将定义有XY坐标的点阵图形形成为二维代码时(作为索引使用)的矩形区域的形状，就可以形成与在介质表面上可视地形成的信息区域相配合的任意形状的、通过一定信息的集合的重复而形成点阵图形。
图18是示意性地表示笔型扫描器33的结构的例子的图。在笔型扫描器33中，内设有蓄电池50、扬声器52、PCB (印刷电路板)54。在PCB54上以拼版的方式安装有中央处理装置(CPU)和存储器。另外，在笔型扫描器33的后端(图中为左上部)内置有音频数据输入用话筒56。虽省略了图示，但也可以以能够拆装的方式安装盒式存储器，也可以更换为盒式只读存储器、盒式话筒单元等。在表面上设置有按键58a 58f，能够用于图2所示的步骤S202、步骤S205、步骤S208、步骤S211等的辨别。即使不设置功能各不相同的按键，也可以根据预先确定的操作方法(触摸、滑动、长按等)而使按键58a 58f的任意一个承担其作用。另外，在笔型扫描器33的顶端(图中为右下端部)，当倾斜约45度左右与介质面抵接时，沿着介质面的垂直轴设置有C-MOS照相机单元以及圆锥状的尖端60。在尖端60内的空间内，以面对该空间的方式安装有C-MOS照相机单元的透镜62，由此可以通过尖端60顶端的窗口部来进行摄像。
尖端60内的空间内具有IRLED (红外发光二极管)64，IRLED64的照射光向扩散器66内入射。由于扩散器66壁面，导致照射光的扩散成分(相对于光轴大于45度的角度的光成分)从扩散器66壁面通过并向外部放射。而且，照射光的直线传播成分(相对于光轴小于45度的角度的光成分)被扩散器66壁面反射而在管内行进。在扩散器66内仅照射光的与光轴大致平行的成分从顶端面向尖端60的开口部照射。这样，照射光通过从由透明树脂构成的曲柄状的扩散器66通过而成为与光轴平行的聚焦光，因此，能够以涉及尖端60部的开口部整个区域的方式来供给均匀的光量。这样，根据本实施方式，由于不存在像扩散光那样的情况下产生的周边部的阴影，所以能够提高点阵图形部的读取准确度。附图标记说明I信息处理装置3 控制装置5存储装置7 识别装置9显示装置11 印刷装置13 光学读取装置19 液晶显示器21 印刷介质23 点阵图形25 白板27 活动挂图29 纸张31 投影仪33 笔型扫描器35 校准标记37 铅笔39 资料
40基准点42第一虚拟基准线44第二虚拟基准线50蓄电池52扬声器54 PCB56话筒58 按键
60尖立而62 透镜64IRLED66扩散器72信息点 73 基准点74 虚拟基准点
权利要求
1.一种在信息处理装置中运行的程序，其特征在于，使该信息处理装置的控制装置运行如下步骤将显示在与该信息处理装置连接的显示装置上图像存储到该信息处理装置的存储装置中，并且，将存储该图像时的该信息处理装置的运行环境存储到该存储装置中的步骤；使点阵图形与该图像重叠形成的步骤，其中，该点阵图形定义有包含至少对该运行环境进行特定的特定信息的代码值、以及与该图像对应的坐标值；从读取该点阵图形的、与该信息处理装置连接的光学读取装置中，取得该代码值及坐标值的步骤；和通过所取得的该代码值的至少一部分上定义的该特定信息来对该运行环境进行特定，并恢复到与该代码值及坐标值对应的该运行环境的步骤。
2.根据权利要求1所述的程序，其特征在于，显示在所述显示装置上的图像是能够进行指向动作的一个或多个软件运行图像，所述运行环境包括该软件的运行状况，所述恢复步骤是，将通过所述光学读取装置读取所述点阵图形时显示在该显示装置上的图像进行改换，根据所取得的所述特定信息而恢复到所述运行环境，并将其作为与所述代码值及坐标值对应的该软件运行图像。
3.根据权利要求1所述的程序，其特征在于，显示在所述显示装置上的图像是桌面图像，所述运行环境包括该桌面图像的图标的配置信息，所述恢复步骤是，将通过所述光学读取装置读取所述点阵图形时显示在该显示装置上的桌面的图标的配置进行改换，根据所取得的所述特定信息而恢复到所述运行环境，并将其作为与所述代码值及坐标值所对应的该桌面图像的图标的配置相同的配置。
4.根据权利要求1所述的程序，其特征在于，所述显示装置能够实现向图像显示面进行的写入，所述存储步骤进一步包括如下步骤将通过用该信息处理装置进一步具有的识别装置识别向该图像显示面进行的写入操作而得到的写入图像数据存储到所述存储装置中，所述形成步骤是，使该写入图像与所述定义代码值及坐标值的点阵图形、所述图像重叠形成，所述恢复步骤是，根据所取得的所述特定信息而恢复到所述运行环境，并将与该代码值及坐标值对应的该写入图像数据显示在该显示装置上。
5.根据权利要求4所述的程序，其特征在于，在所述图像显示面上形成有定义坐标值的点阵图形，所述识别装置根据由该光学读取装置读取到的点阵图形所定义的该坐标值，将通过所述光学读取装置向该图像显示面进行的写入操作作为所述写入图像数据来识别。
6.根据权利要求1所述的程序，其特征在于，显示在所述显示装置上的图像是桌面图像，所述代码值包括向该桌面图像上的图标进行的对应关联，所述运行环境包括与该桌面图像上的图标对应的程序的运行信息，所述恢复步骤是，根据所取得的所述特定信息而恢复到所述运行环境，并运行与由所述点阵图形定义的代码值对应的该图标所对应的程序。
7.根据权利要求3所述的程序，其特征在于，所述运行环境进一步包括与桌面图像上的图标对应的程序的运行信息，所述恢复步骤除了上述形成相同配置的步骤外，还进一步包括如下步骤根据所取得的所述特定信息而恢复到所述运行环境，将由所述点阵图形定义的坐标值转换成所述显示装置的坐标值，将显示在该显示装置上的光标移动到该显示装置的坐标值的位置上，并运行与位于所移动的该光标的坐标值上的图标对应的程序。
8.根据权利要求1所述的程序，其特征在于，显示在所述显示装置上的图像是接受输入的软件的运行图像，所述运行环境包括该软件的运行状况、以及到达该运行状况之前由用户输入的分层信息，所述恢复步骤是，根据所取得的所述特定信息而恢复到所述运行环境，将由所述点阵图形定义的坐标值转换成所述显示装置的坐标值，并根据与所述代码值对应的该分层信息而运行位于该显示装置的坐标值上的软件。
9.根据权利要求1所述的程序，其特征在于，所述形成步骤是，在介质上将所述定义代码值及坐标值的点阵图形与所述图像重叠印刷。
10.一种信息处理装置，能够从运行环境恢复到过去的状态，并能利用过去的操作，其特征在于，该信息处理装置至少具有存储装置、控制装置，该控制装置将与该信息处理装置连接的显示在显示装置上的图像存储到该存储装置中，并且，将存储该图像时的该信息处理装置的该运行环境存储到该存储装置中，使点阵图形与该图像重叠形成，其中，该点阵图形定义有包含至少对该运行环境进行特定的特定信息的代码值、以及与该图像对应的坐标值，从读取该点阵图形的、与该信息处理装置连接的光学读取装置中，取得该代码值及坐标值，通过所取得的该代码值的至少一部分上定义的所述特定信息来对所述运行环境进行特定，并恢复到与该代码值及坐标值对应的该运行环境。
11.一种信息处理系统，由能够从运行环境恢复到过去的状态并能利用过去的操作的信息处理装置、和与该信息处理装置连接的显示装置、光学读取装置构成，其特征在于，该信息处理装置至少具有存储装置、控制装置，该控制装置将显示在该显示装置上的图像存储到该存储装置中，并且，将存储该图像时的该信息处理装置的该运行环境存储到该存储装置中，使点阵图形与该图像重叠形成，其中，该点阵图形定义有包含至少对该运行环境进行特定的特定信息的代码值、以及与该图像对应的坐标值，从读取该点阵图形的光学读取装置中取得该代码值及坐标值，通过所取得的该代码值的至少一部分上定义的所述特定信息来对所述运行环境进行特定，并恢复到与该代码值及坐标值对应的该运行环境。
12.根据权利要求11所述的信息处理系统，其特征在于，所述控制装置使校准标记至少暂时地显示在所述显示装置的两个以上的角落及/或中央，通过所述光学读取装置对重叠形成有所述定义代码值及坐标值的点阵图形与所述图像的介质上的、与该校准标记一致的位置进行读取，则将由所读取的位置上的该点阵图形定义的坐标值转换成该显示装置上显示校准标记的位置的坐标值，通过对所有显示在该显示装置上的校准标记进行上述处理，求出将该点阵图形的坐标值转换成该显示装置的坐标值的坐标转换函数或坐标值转换一览表，并且，进一步包括如下处理根据该坐标转换函数或坐标转换一览表，将之后用该光学读取装置读取的点阵图形的坐标值转换成该显示装置上的坐标值，并恢复到对应的所述运行环境。
13.根据权利要求11所述的信息处理系统，其特征在于，所述显示装置由投影仪和投影板构成，该投影板形成有定义代码值及坐标值的点阵图形，通过在该投影板上投影所述图像，使该定义代码值及坐标值的点阵图形与该图像重叠形成，在所述控制装置中，通过该代码值对该投影板进行特定。
14.根据权利要求13所述的信息处理系统，其特征在于，所述投影板是白板。
15.根据权利要求13所述的信息处理系统，其特征在于，所述投影板是活动挂图。
16.根据权利要求1、中任一项所述的程序、权利要求10所述的信息处理装置、或者权利要求1f 15中任一项所述的信息处理系统，其特征在于，所述点阵图形是通过排列多个流式点阵图形而形成的，其中，该流式点阵图形按照如下步骤进行排列按照预先确定的规则呈线状连续配置多个基准点的步骤；设置对该多个基准点进行连结的由直线、折线及/或曲线构成的第一虚拟基准线的步骤；设置根据该基准点及/或该第一虚拟基准线而在预先确定的位置上定义的、由直线及/或曲线构成的至少一个以上的第二虚拟基准线的步骤；在该第二虚拟基准线上的预先确定的位置上设置多个虚拟基准点的步骤；和在以该虚拟基准点为起点且由矢量表示的终点上，以相对于该虚拟基准点的距离和方向来对定义XY坐标值及/或代码值的信息点进行配置的步骤。
17.根据权利要求16所述的程序、信息处理装置或信息处理系统，其特征在于，为了定义第二虚拟基准线，及/或为了定义所述点阵图形的方向和一个XY坐标值及/或代码值，所述流式点阵图形进一步在预先确定的位置上设置有作为基准的基准点。
全文摘要
通过记录进行截取时的电脑的运行环境，并对该运行环境、点阵图形以及截取图像进行关联，而实现一种减少用户的操作次数，且富有能进行直观的恢复操作的便利性的信息处理技术。在信息处理装置中运行的程序使信息处理装置的控制装置运行如下步骤将显示在与信息处理装置连接的显示装置上图像存储到信息处理装置的存储装置中，并且，将存储图像时的信息处理装置的运行环境存储到存储装置中的步骤；使点阵图形与图像重叠形成的步骤；从读取点阵图形的光学读取装置中取得代码值及坐标值的步骤；和通过所取得的代码值的至少一部分上定义的特定信息来对运行环境进行特定，并恢复到与代码值及坐标值对应的运行环境的步骤。
文档编号G06F3/0488GK103038733SQ201180034399
公开日2013年4月10日 申请日期2011年7月13日 优先权日2010年7月13日
发明者吉田健治 申请人:吉田健治