专利名称：显示控制设备和显示控制方法
技术领域：
本发明涉及一种回放在用于绘制物体的绘制区域中绘制 的内容的显示控制i殳备和显示控制方法。
背景技术：
近年来，以等离子体显示器为代表并还包括背投显示器和 前投式投影仪的大屏幕显示设备已经普及。使用这样的大屏幕 显示设备的演讲、会议和学校课程正日渐流行。
在使用大屏幕显示设备的会议或学校课程上，用户通常使 用指示棒或激光指示器作为用于指示显示画面上的特定位置的 工具。
然而，最近开发出了具有用于检测用户所指示的显示画面 上的位置(指示位置)的数位器的指示系统，并且经常使用该指 示系统。该指示系统可以与用户所指示的位置相对应地移动显 示画面上的光标，或者通过启动与指示位置相对应的工具，在 显示画面上生成字符或图形图案等绘制物体。该系统还可以自 由地编辑所生成的绘制物体。
这样的指示系统通常将大屏幕显示设备连接到个人计算 机等显示控制设备的视频输出端，从而将由个人计算机生成的 显示数据显示在大屏幕显示设备上。该系统还使用接口线缆将 数位器连接到个人计算机，并且通过接口线缆发送关于指示位 置的信息。
另外，在个人计算机侧安装用于将通过接口线缆输入的关 于指示位置的信息反映在光标移动或者字符或图形图案等绘制 物体的生成的应用程序。具有上述结构的指示系统可以通过扩展安装的应用程序 的功能来实现各种功能。
例如，与显示画面上的指示位置相对应的直接绘制实现手 写输入功能。这使得大屏幕显示设备能够作为电子白板。
当在显示画面上显示的绘制内容根据用户操作而改变时， 与时间数据一起记录该改变内容，并且沿时间数据回》文该改变 内容。这样的系统结构实现回放功能。该回放功能允许沿会议 的时间经过，回放会议期间在显示画面上显示的绘制内容。因 此，例如，如果使用大屏幕显示设备作为电子白板，则可以使 用回放内容作为会议才艮告。
对于用于回》文与时间数据一起记录的改变内容的回》文功 能已提出了各种提案。
例如，日本特开2004-336289公开了作为为了通过回放功能 进行回放而记录的对象的白板的快照。这使得能够回放会议或 学校课程。日本特开平6-20515 l也公开了 一种用于回放会议期 间的语音/图像信息的结构。
也提出了用于提高使用回放功能的回放的用户便利性的 提案。例如，为了缩短回放时间，不仅提出了正常速度回放模 式，而且还提出了快进模式和双倍速度回放模式等功能。
日本特开平11-112922公开了 一种根据输入图像或语音流 数据分析图像改变点或语音发声者改变点等事件点的结构。根 据该现有技术，当在回放期间检测到事件点时，緩慢回放该事 件点附近的流，从而允许用户容易地识别特定流。
然而，在将旨在提高用户便利性的回放功能应用于指示系 统时存在若干问题。例如，该回放功能甚至回放用户临时手写 输入并立即清除的绘制物体，即，与掌握例如会议内容没有直 接关系的绘制物体。如果用户通过手写逐一输入字符的笔划，则顺序逐一 回放手写输入的各绘制物体的笔划，结果导致长的 回方t时间。
在使用快进模式或双倍速度回放模式的回放时，回放时间 短。然而，也高速回放掌握回》文内容所必需的部分。这妨碍了 用户对回放内容的掌握。
如曰本特开平11-112922中所述，还有一种分析记录的各绘 制物体并检测事件点，从而緩慢回放事件点附近的数据的结构。 然而，该方法需要对记录的绘制物体进行分析，结果导致复杂 的处理。
发明内容
考虑到上述问题做出了本发明，并且本发明的目的是使能 够顺序回放绘制内容的显示控制设备通过简单方法在缩短回放 时间的同时实现易于掌握回放内容的回放。
根据本发明的一个方面，提供一种连接到显示设备的显示 控制设备，包括
获取部件，用于从在获取表示用于绘制物体的绘制区域中 的操作的操作信息时记录所述绘制区域中的改变内容的记录设 备获取关于所述改变内容的信息；
判断部件，用于在所述获取部件获取的信息中，判断要用 于回放绘制内容的信息，并且基于该信息确定所述绘制内容的 回》文定时；以及
回放部件，用于提取所述判断部件判断为要用于回放的信 息，并且使用所提取的信息在所确定的回放定时在所述显示设 备上回放所述绘制内容。
根据本发明的另 一方面，提供一种连接到显示设备的显示 控制设备，包括的操作的操作信息时记录所述绘制区域中的改变内容的记录设 备获取关于所述改变内容的信息；
输入部件，用于输入第一条件，以^v所述获:f又部件获取的 信息中提取要用于回放绘制内容的信息；以及
回放部件，用于从所述获取部件获取的信息中提取满足所 述第 一条件的信息，并且使用所提取的信息在所述显示设备上 连续回放所述绘制内容。
根据本发明的另一方面，提供一种连接到显示设备的显示
控制设备中的显示控制方法，包括以下步骤
的操作的操作信息时记录所述绘制区域中的改变内容的记录设 备获取关于所述改变内容的信息；
判断步骤，用于在所述获取步骤中所获取的信息中，判断 要用于回放绘制内容的信息，并且基于该信息确定所述绘制内 容的回》文定时；以及
回放步骤，用于提取在所述判断步骤中判断为要用于回放 的信息，并且使用所提取的信息在所确定的回放定时在所述显 示设备上回放所述绘制内容。
根据本发明的另 一方面，提供一种连接到显示设备的显示 控制设备中的显示控制方法，包括以下步骤
获取步骤，用于从在获取表示用于绘制物体的绘制区域中 的操作的操作信息时记录所述绘制区域中的改变内容的记录设 备获取关于所述改变内容的信息；
输入步骤，用于输入第一条件，以从在所述获取步骤中所 获取的信息中提取要用于回放绘制内容的信息；以及
回放步骤，用于从在所述获取步骤中所获取的信息中提取满足所述第一条件的信息，并且使用所提取的信息在所述显示 设备上连续回放所述绘制内容。
根据本发明，可以使能够顺序回放显示内容的显示控制设 备通过简单方法在缩短回放时间的同时实现易于掌握内容的回放。
通过以下(参考附图)对典型实施例的说明，本发明的其它 特征将显而易见。
包括在说明书中并构成说明书的 一部分的附图示出本发 明的实施例，并与说明书一起用来解释本发明的原理。
图l是示出具有根据本发明的第 一 实施例的显示控制设备
的会议系统100的外) 见的图2是示出会议系统100中所包括的单元的结构的框图3是示出通过在会议系统100中启动电子白^反应用程序 的绘制模式显示在背投显示器101上的UI的例子的图4是示出在电子白板应用程序2 4 0的绘制模式的执行期 间，当绘制在绘制区域301中的绘制内容随着用户操作而改变 时，记录操作信息的操作信息表251的例子的图5是示出记录关于在会议系统IOO中的电子白板应用程 序2 4 0的绘制模式的执行期间所生成或编辑的绘制物体的信息 的绘制物体表252的例子的图6是示出基于会议系统10 0中的操作信息表2 51和绘制物 体表252回放会议期间绘制在绘制区域301中的内容的回放窗口 600的例子的图7是示出会议系统IOO的电子白板应用程序240的回放模 式中的会议回》文处理过程的流程图；图8是示出基于指定的操作信息表中的操作信息所执行的 回放处理过程的流程图9是详细示出会议系统100的回放处理过程的回放处理 (步骤S804)的流程图IO是示出临时绘制物体显示画面的例子的图11是示出使用根据本发明的第二实施例的显示控制设 备的会议系统的总体结构的图12是示出具有根据本发明的第三实施例的显示控制设 备的会议系统(显示控制系统)1200的外观的图13是示出用作显示控制设备的计算机设备1220的结构 的框图14是示出通过在会议系统1200中启动电子白板应用程 序的绘制模式显示在显示设备1210上的UI的例子的图15是示出记录关于在电子白板应用程序1310的绘制模 式的执行期间所进行的用户操作的操作信息的操作信息表1321 的例子的图16是示出记录关于在会议系统1200中的电子白板应用 程序1310的绘制模式的执行期间由于生成或编辑操作而改变的 绘制物体的绘制物体信息的绘制物体信息表1322的例子的图17是示出计算机设备1220中的记录内容回放处理的序 列的流程图18是示出用于选择回放方法的UI的例子的图19是示出用于设置提取在所提取的操作信息前后的预 定时间内所记录的操作信息的条件的UI的例子的图20是示出用于设置提取与所提取的操作信息前后的预 定数量的操作相对应的操作信息的条件的UI的例子的图21是沿时间轴示出使用所提取的操作信息的连续回放的概念图22是沿时间轴示出使用所提取的操作信息的连续回放 的概念图23是示出根据本发明的第四实施例的计算机设备中的 回放处理的序列的流程图24是示出用于选择搜索类型的UI的例子的图25是示出用于输入与所选择的搜索类型相对应的搜索 条件的画面的例子的图26是示出用于输入与所选择的搜索类型相对应的搜索 条件的画面的例子的图；以及
图27是示出用于输入与所选择的搜索类型相对应的搜索 条件的画面的例子的图。
具体实施例方式
现在将根据附图详细说明本发明的优选实施例。
第一实施例
1.会议系统的外观
图l是示出具有根据本发明的第 一实施例的显示控制设备 的会议系统(显示控制系统)100的外观的图。
背投显示器101具有将存储在个人计算机(后面说明)中的
用以实现电子白板的应用程序(控制程序)的执行结果显示在显 示画面上的显示单元的功能。
背投显示器101包含光学系统，该光学系统包括光源灯、
彩色滤光片、液晶面板、光学镜头和反射镜。通过彩色滤光片
等将从光源灯发射的光分离成RGB的三色光分量。光分量照射 液晶面板。该光学系统对经液晶面板调制后的光进行放大，并 将其投射在背投显示器101的显示画面上，从而将电子白板应用程序的执行结果显示在该显示画面上。
数位器模块102和103配置在显示画面的左上角和右上角。 数位器模块102和103发射红外光，并且扫描显示画面的表面。 显示画面上的障碍物遮挡所发射的红外光，并改变接收信号的 电平。这可以检测障碍物的位置和大小。也就是说，具有如上 配置的数位器102和103的背投显示器IOI具有接收显示画面上 的用户指令的输入单元的功能。
结果，当用户使用例如指头或指示棒指示显示画面上的预 定位置时，背投显示器101可以检测到该位置和大小。
数位笔107指示显示画面上的位置。数位笔107用作用于在 显示画面上输入指示的指示装置。数位笔107在尖端具有点击判 断开关，并且在侧面具有清除器开关108。当用户按下清除器开 关108时，临时设置清除器模式。如果用户在这种状态下指示显 示画面上的位置，则清除与所指示的位置相对应的绘制物体。
个人计算机104用作基于例如利用数位笔107输入的指示 对待显示在背投显示器101上的绘制物体的显示进行控制的显 示控制设备。个人计算机104通过图像信号线缆105和通信线缆 106与背投显示器101连接。个人计算机104还与用作个人计算机 104的输入装置的键盘(未示出)连接。基于来自键盘的输入，对 个人计算机104中的各种类型的应用程序的操作进行控制。
2.会议系统100的单元的结构
图2是示出会议系统100中包括的单元的结构的框图。如上 所述，会议系统100包括用作指示装置的数位笔107和用作电子 白板的背投显示器101 。会议系统10 0还包括用作显示控制设备 的个人计算机104和用作个人计算机104的输入装置的键盘220。
2.1数位笔
当数位器模块10 2和10 3用作用于检测指示位置的输入单元232时，用作指示装置的数位笔107可以指示显示画面上的预定位置。2.2背投显示器背投显示器101包括显示单元231、输入单元232和输出单元233。输入单元232接收来自数位笔107的指示。输出单元233将 所接收到的关于指示位置的信息输出给个人计算机104。当个人 计算机104执行电子白板应用程序的绘制模式，并且执行与关于 指示位置的信息相对应的各种类型的处理时，显示单元231接收 并显示执行结果。因此，背投显示器101可以通过例如将光标移动至所检测 到的指示位置，生成或清除字符或图形图案等绘制物体，或者 生成或清除通过手写输入的绘制物体，来执行显示。因此，背 投显示器101用作电子白板。背投显示器101的显示单元231还接收在执行个人计算机 104中的电子白板应用程序的回放模式时所输出的回放内容，并 显示该回放内容。也就是说，背投显示器101还用作用于显示回 放内容的回ii装置。2.3个人计算机用作显示控制设备的个人计算机104包括CPU 201、 RAM 202、 ROM 203、闪存204、输入单元205、硬盘206和网络接口 单元207。输入单元205接收从背投显示器101的输出单元233输出的 关于指示位置的信息。输入单元205还从用作个人计算机1 (M的 输入装置的键盘220接收指令。存储在闪存204中的电子白板应用程序240具有在绘制模 式中执行的功能和在回放模式中执行的功能。绘制模式使背投显示器101用作电子白板。回放模式使背投显示器101用作回放装置。作为在绘制模式中执行的功能，电子白板应用程序240包 括识别单元241、处理执行单元242、绘制控制单元243和记录单 元244。识别单元2 41识别输入单元2 0 5接收到的各种操作指令。更 具体地，识别单元241识别用于移动在绘制区域中所定义的页面 的页面操作指令、绘制物体生成指令、或者用于编辑已生成的 绘制物体的指令。处理执行单元242执行与识别单元241识别出的各种指令 相对应的处理。如果处理执行单元242所执行的处理改变了待显示在显示 单元231上的绘制物体，则绘制控制单元243生成改变后的物体， 并且将改变后的物体输出到显示单元231。如果待显示在显示单元231上的绘制物体根据识别单元 241识别出的各种操作指令发生了改变，则记录单元244将操作 信息顺序记录在硬盘206中的操作信息表251中。记录单元244 同样将关于改变后的绘制物体的信息顺序记录在绘制物体表 252中。作为在回放模式中执行的功能，电子白板应用程序240包 括操作信息获取单元245 、回放部分提取单元246和回放单元 247。操作信息获取单元245从在各个会议中记录在硬盘206中 的多个操作信息表251和绘制物体表252获取用户指定的操作信 息表和绘制物体表。回放部分提取单元246基于所获取的操作信息表251和绘 制物体表252,区分回放绘制内容所使用的操作信息和回放不需要的操作信息，并且确定绘制内容的回力文定时。下面是用以区分回放所使用的操作信息和回放不需要的操作信息的条件。所生成或编辑的绘制物体是否分组。所生成或编辑的绘制物体是否是临时绘制物体。页面操作是否是连续页面操作。绘制物体编辑操作是否是预定编辑操作。绘制物体是否是字符、和字符识别处理)，并且回放部分提取单元246执行该字符处理。回放单元247提取所确定的用于回放的才乘作信息，并且使 用该操作信息在所确定的回放定时回i文绘制内容。在C P U 2 01的控制下，根据需要将电子白板应用程序2 4 0 、 操作信息表251和绘制物体表252载入RAM 202,并且由CPU 201执行。网络接口单元207与外部装置进行通信。 3.显示窗口的结构图3是示出通过在会议系统IOO中启动电子白板应用程序的 绘制模式显示在背投显示器101上的UI的例子的图。参考图3，附图标记300表示显示窗口 。区域(绘制区域)301 允许显示窗口 300中的绘制输入。在绘制模式中，用户可以通过 使用数位笔107的指示输入，生成绘制物体。附图标记302和303 表示所生成的绘制物体的例子。绘制物体302是包括在手写输入模式中通过手写输入的5 个笔划的字符串"01010"。绘制物体303是在工具输入模式中输 入的直线，并包括一个笔划。利用菜单(未示出)在手写输入模 式和工具输入模式之间进行切换。该菜单可以位于显示窗口 300上，或者当用户按下设置在
数位笔107上的开关时，将该菜单显示为上下文菜单(context mcnu)。数位笔107可以单独具有输入才莫式切换专用开关。工具 输入模式不仅可以具有直线绘制工具，而且还可以具有绘制圓 和矩形的图形工具。
可以对绘制在绘制区域301中的绘制物体302和303进行编 辑。具体地，用户选择绘制物体，并从菜单(未示出)选择项目， 从而执行移动、调整大小、清除、剪切和复制等编辑操作。
页面操作区域304使得能够进行绘制区域301中所定义的 页面的页面操作。页面操作区域304显示页面的缩略图305。用 户可以使用页面操作按钮306来进行页面的切换、移动和删除、 以及新页面的添加等页面才乘作。
附图标记306表示页面操作按钮，包括正在显示的页面的 编码、以及还可用于页面切换的页面^兆过和返回4要4丑。
4.操作信息表251的结构
图4是示出在电子白板应用程序240的绘制模式的执行期 间，当绘制在绘制区域301中的内容随着用户操作而改变时，记 录操作信息的操作信息表251的例子的图。
在每个会议中生成操作信息表251。当绘制在绘制区域301 中的内容由于绘制物体生成操作、编辑操作和页面操作而改变 时，记录单元244将该改变内容作为才喿作信息顺序记录在硬盘 206中，从而生成操作信息表。
记录在操作信息表25 1中的各操作信息具有项"操作开始时 间"、"操作结束时间"、"操作类型"、"物体ID"、"页码"和"用 户ID"。
"操作开始时间"表示操作开始的时间。"操作结束时间"表 示操作结束的时间。"操作类型"表示操作的类型。"物体ID"表示通过用户操作改变的绘制物体的标识符，并 且对应于图5所示的绘制物体表。"页码"表示操作的页面或切换 目的地页面的编码。"用户ID"表示操作者的ID。
5.绘制物体表252的结构
图5是示出记录关于在会议系统100中的电子白板应用程序 240的绘制模式的执行期间所生成或编辑的绘制物体的信息的 绘制物体表252的例子的图。
为绘制区域301中所生成的绘制物体自动分配ID。绘制物 体表252记录"绘制物体ID"、"数据类型"、"组ID"和生成绘制物 体所需的数据("绘制物体数据")，作为关于绘制物体的信息。
"数据类型"表示绘制物体的类型，包括笔划或者直线、矩 形或圆等图形工具类型。"绘制物体数据"保存手写的笔划的X 和Y坐标、直线的起点和终点的坐标、或矩形的左上坐标和右 下坐标。还可以保存颜色数据、线型数据和填充颜色等。
将"组ID "分配给包括多个绘制物体的组。
作为分组方法，将邻近时间在绘制区域301中所生成的绘 制物体或在邻近位置处绘制的笔划分进一组中，或者使用这些 方法的组合。可以利用通过字符识别程序的字符识别处理，通 过组合上述方法以字符串为单位进行分组。后面将说明该处理。 可选地，可以向显示窗口 300中的菜单添加项"分组"和"取消分 组"，从而使得用户手动执行分组操作。例如，用户可以手动选 择多个绘制物体，并且选择该菜单中的"分组"，以对这些绘制 物体进行分组。
在本实施例中，在每个会议中都创建操作信息表(图4)和绘 制物体表(图5),并且在会议期间或会议结束时将它们记录在会 议系统100的石更盘206中。然而，记录目的地不局限于硬盘206。 可以通过网络接口单元207将这些表记录在网络上的服务器等记录设备(未示出)中。
6. 回ii窗口的结构
图6是示出基于会议系统10 0中的操作信息表2 51和绘制物 体表252回》文在会议期间在绘制区域301中所绘制的绘制内容的 回放窗口 600的例子的图。图6示出电子白板应用程序240的回放 模式中的UI的例子。
如图6所示，在画面的上部显示回》丈结果显示区域601。在 画面的下部显示回放操作区域602。
各种类型的操作按钮603对回放方法进行控制。用于控制 回放方法的操作按钮603不仅包括正常回放按钮和停止按钮，而 且还包括快进按钮和倒带按钮等用于改变回放速度的按钮。操 作按钮603还包括提取回放按钮604,该按钮仅提取回放所需的 部分，并且回》文该部分，以缩少豆回》文时间。
滑块605表示回放期间的回放点。用户可以通过拖动滑块 605改变回放点。附图标记606表示与操作信息表251中的页码相 对应的页面转换。在图6所示的例子中，/人会议开始，4要照1、 2、 3、 4、 3、 2、 1、 3和4的顺序切换页面，并且当前正在回》丈页面 3。
7. 会议系统100中的总体处理的序列
图7是示出会议系统IOO的电子白板应用程序240的回放模 式中的会议回放处理过程的流程图。
在步骤S701 ，执行电子白板应用程序240的操作所需的初 始化，并且读出并显示操作信息表的列表。
在步骤S702,用户指定会议以开始回放。会议指定方法没 有特别限制。用户可以从在步骤S701中所显示的操作信息表列 表直接指定会议，或者可以通过基于预定搜索条件的搜索指定 会议。在步骤S703,基于在步骤S702指定的操作信息表中所记录 的操作信息进行回放。后面将参考图8详细说明基于操作信息的 回i文处理的序列。
在步骤S704，对电子白板应用程序240的结束进行判断。 如果电子白板应用程序240没有结束，则处理返回到步骤S702, 以基于另 一操作信息表再次执行回放。
8. 回》文处理的序列
图8是示出基于指定的操作信息表中的操作信息所执行的 回放处理过程的流程图。
在步骤S801 ，读出指定的操作信息表251和相应的绘制物 体表252，并且初始化用于回放时间控制的进度定时器。
在步骤S802，累进回放时间控制定时器。在步骤S803,按 照操作开始时间的顺序，从操作信息表顺序读出操作信息，并 且判断是否存在下一操作信息。如果不存在下一操作信息，则 处理进入步骤S805。在步骤S805,如果当前操作信息的操作结 束时间是会议的结束时间，则判断为会议结束。结束该回放处 理。
如果判断为存在下一操作信息，则处理进入步骤S804。接 着将参考图9中的流程图说明步骤S804中的回放处理。
9. 回》文处-里的i羊细i兌明
图9是详细示出会议系统IOO的回》文处理过程的回放处理 (步骤S804)的流程图。
如图9所示，在步骤S901,如果读出的操作信息的操作类 型表示页面操作，则处理进入步骤S902。
在步骤S902,判断是不是根据连续页面操作记录了该操作 信息。操作者进行连续页面操作，以通过连续切换页面来搜索 目标页面。当除第一页面和最后页面以外的中间部分的页面显示时间短时，或者当在页面切换操作之间没有生成或编辑其它 绘制物体时，将该页面操作判断为连续页面操作。
在图4所示的操作信息表的例子中，按照1 — 2 — 3 ~> 4 — 3 — 2 — l的顺序切换页面。由于显示时间短，并且在它们之间 没有插入其它才乘作，因而将从页面2到3、从3到4、从4到3和从3 到2的页面切换操作判断为连续页面操作。
如果在步骤S902中将页面操作判断为连续页面操作，则处 理进入步骤S903。
在步骤S903，跳过回放不需要的操作信息，并且将回放的 操作信息和回放时间控制定时器改变成最终页面切换操作。因 此，在回放中，回力丈与页面2的操作信息相对应的绘制内容。然 后，回放与页面l的操作信息相对应的绘制内容。
在步骤S904,判断是不是根据长编辑操作记录了多条操作 信息。例如，通过利用长时间的拖放来移动绘制物体，执行长 编辑操作。
在这种情况下，记录拖动期间的绘制物体的移动的操作信 息是回放不需要的操作信息。只需要回放与在绘制物体位于开 始位置处时所记录的操作信息相对应的绘制内容。
例如，当改变绘制物体的颜色时，在从颜色选择对话框选 择颜色并按下OK按钮时所记录的操作信息是回放所不需要的。 在这种情况下，将在颜色改变的操作开始时间和操作结束时间 之间所记录的操作信息判断为回放不需要部分。通过仅基于在 编辑操作的开始和结束时所记录的操作信息回放绘制内容，执
行跳过回》文。
如上所述，将在操作开始时间和操作结束时间之间具有大 的差异的编辑操作当作为长编辑操作。处理进入步骤S905,以 执行跳过回放。如果在步骤S 9 04判断为编辑操作不是长编辑操作，则处理
进入步骤S906,以执行正常回放。在上述连续页面切换操作的 例子中，在步骤S903中改变处理，以回》文/人页面2到页面l的切 换操作。因此，正常回;^到页面1的切换^搡作。
如果在步骤S901判断为操作类型不表示页面操作，则处理 进入步骤S 9 0 7 ，以判断绘制物体是否是临时绘制物体。
临时绘制物体是绘制并通过清除操作立即清除的绘制物 体。在本实施例中，即使当用户使用数位笔107输入不正确的手 写笔划时，他/她可以通过在按下数位笔10 7的清除器按钮的同 时跟踪该不正确的手写笔划来立即清除它们。
图IO是示出临时绘制物体显示画面的例子的图。图IO示出 在图4中的操作信息表中用户在绘制了五个手写笔划之后错误 地输入下一绘制物体1001(物体ID = 0006)的状态。
参考图4 ,在生成后立即清除绘制物体IOOI(物体ID = 0006)。在清除之后，绘制正确的物体(物体ID- 0007)。在这种 情况下，将绘制物体10 01当作为临时绘制物体。
将绘制物体当作为临时绘制物体的其它条件有例如，绘 制物体生成后预定时间内的清除、生成后的预定数量的操作中 的清除、生成后没有预定操作的清除、以及通过特定操作的清 除(通过清除器开关或菜单的清除)。如上所述，将在绘制区域 3 01中临时绘制并立即清除的绘制物体判断为临时绘制物体。因 此，将生成绘制物体时所记录的操作信息(与该生成操作有关的 操作信息)和清除绘制物体时所记录的操作信息(与该清除操作 有关的操作信息)判断为是回放所不需要的。
如果在步骤S907将绘制物体判断为临时绘制物体，则处理 进入步骤S908。在步骤S908，跳过判断为回放所不需要的操作 信息，并且将操作信息和回放时间控制定时器改变成清除后的下一操作信息。
步骤S904、 S905和S906中的处理与上述的相同，并且不再 重复对其的说明。
在图4和10所示的例子中，进行回放以在生成绘制物体(物 体ID = 0005)之后生成绘制物体(物体ID = 0007)。
如果在步骤S 9 0 7判断为绘制物体不是临时绘制物体，则处 理进入步骤S909。在步骤S909,判断绘制物体是否是手写笔划。
如果判断为绘制物体是手写笔划，则处理进入步骤S910。 如果绘制物体是手写笔划以外的图形数据或文本数据，则处理 进入步骤S912。
在步骤S910,进行字符识别程序的字符处理。字符处理包 括字符提取单元和字符识别单元，其中，该字符提取单元从绘 制在绘制区域301中的一个或多个手写笔划提取形成字符或字 符串的笔划，并且对所提取的笔划进行分组，该字符识别单元 基于所提取的笔划识别字符。将通过字符处理识别为形成字符 的一个或多个手写笔划作为一个字符或字符串进行处理。
可以通过在该字符处理之后，使用字典或语义词典根据多 个识别候选字符计算具有最可能的字符组合的字符串，并且分 割该字符串，来进行更精确的字符处理。可选地，可以执行语 义分析以将字或直线识别为字符串。作为组对以上述方式处理 的手写笔划进行处理。
在本实施例中，在执行电子白板应用程序240(回放模式) 期间，动态进行字符处理和分组。然而，本发明不局限于此。 例如，可以预先执行这些处理，以在会议期间或会议结束时， 在将操作信息记录在硬盘206中时或在启动电子白板应用程序 240(回放模式)时，保存字符串数据。
在步骤S911,执行用于立即回放分组的绘制物体的处理，以缩短回力文时间。然后，在步骤S905中进^亍短时间内的回》文。 更具体地，在与现在将回放的绘制物体的回放相同的定时，回 放该组的剩余绘制物体。将回放时间控制定时器设置为该组中 的最终操作结束时间。因此，在回放被分进一组中的绘制物体 的过程中，可以通过跳过针对各绘制物体所记录的操作信息并 累进回放时间控制定时器来缩短回放时间。
入步骤S912。在步骤S912，判断绘制物体是否分组。基于图5 所示的绘制物体表中的组ID,判断绘制物体是否分组。如上所 述，可以自动或手动进4于组ID分配。
如果在步骤S 912判断为绘制物体已分组，则处理进入步骤 S911，以拭J亍与上述相同的处理。
如果在步骤S912判断为绘制物体未分组，则处理进入步骤 S906,以基于操作信息执行正常回放。
通过上述说明显而易见，在根据本实施例的会议系统中， 当绘制区域中的绘制内容发生改变时，将改变内容记录在操作 信息表中。如果绘制内容的改变是绘制区域中的绘制物体的改 变，则将该改变内容记录在绘制物体表中。因此，在回放绘制 内容的过程中，可以基于操作信息表和绘制物体表判断操作信 息是否是回放所需要的，并且确定回放定时。
这使得能够在适当定时仅回放回放所需要的操作信息，缩 短回放时间，并且简单实现易于掌握内容的回》文。
第二实施例
在第一实施例中，与背投显示器101连接的个人计算机104 记录操作信息表251和绘制物体表252，并且回放绘制内容。然 而，本发明不局限于此。例如，可以通过网络分别设置记录操 作信息表和绘制物体表的装置以及回放绘制内容的装置。现在说明根据本实施例的显示控制设备。下面仅说明与第 一 实施例 的不同点。
图1 1是示出使用根据本实施例的显示控制设备的会议系 统(显示控制系统)的总体结构的图。参考图11,各会议系统1101
和1102均包括背投显示器、个人计算机和数位笔，并且均具有
与图l相同的结构。
附图标记1103表示因特网等网络。会议服务器1104存储从 各个位置的会议系统1101和110 2接收到的操作信息表和绘制物 体表。个人计算机1105用作显示控制设备。
将会议保持在各个位置的会议系统1101和1102中。通过会 议系统的网络接口单元和网络110 3将所记录的操作信息表和绘 制物体表存储在会议服务器1104中。
可通过网络1103与会议服务器1104连接的装置，即，会议 系统1101和1102以及个人计算机1105可以回放绘制内容。这些 装置具有执行电子白板应用程序的回放模式的功能。
在本实施例中，个人计算机1105在回放绘制内容中进行操 作信息获取和回放部分提取。然而，本发明不局限于此。例如， 会议服务器1104等外部信息处理设备可以执行一 些或全部处理 (操作信息获取和回放部分提取)，并且个人计算机可以仅执行 回》文显示。
如上所述，根据本实施例，在使用在包括电话会议的会议 系统中所记录的操作信息回放绘制内容的过程中，可以缩短回 放时间，并实现易于掌握内容的回放。还可以通过使回放装置 以外的显示控制设备执行一 些或全部除显示以外的处理，降低 回放装置的处理负荷。
第三实施例
在第一和第二实施例中，通过在适当定时仅回放回放所需的操作信息，来缩短回放时间。然而，本发明不局限于此。例 如，可以通过在适当定时仅回放所记录的才喿作信息中具有用户 所指定的属性的操作信息，来缩短回放时间。下面将说明第三 实施例。
1. 显示控制系统的外观
图12是示出具有根据本发明的第三实施例的显示控制设备 的会议系统(显示控制系统)1200的外观的图。参考图12,附图 标记1210表示显示设备。显示设备1210是具有安装在屏幕周围 的数位器1240的装配有数位器的显示设备。
计算机设备1220用作对显示设备1210上的显示进行控制 的显示控制设备，并且可通信地连接到显示设备1210。计算机 设备1220具有能够绘制字符或图形图案等物体并能够编辑绘制 物体的电子白板应用程序。该电子白板应用程序使显示设备 1210用作电子白4反。
数位笔1230用作输入装置。用户可以使用数位笔1230在用 作电子白板的显示设备1210上绘制字符或图形图案等物体，并 对绘制物体进行编辑。
除数位笔1230以外，输入装置还包括与计算机设备1220连 接用以向计算机设备1220输入指令的键盘1250和鼠标1260 。
2. 显示控制设备的结构
图13是示出用作显示控制设备的计算机设备1220的结构的 框图。计算机设备1220包括CPU 1301、 RAM 1302、 ROM 1303、 HDD 1304、输入装置I/F单元1305、网络接口单元1306、以及 显示I/F单元1307。
输入装置1/F单元1305接收从数位器1240输出的关于指示 位置的信息。输入装置I/F单元1305还从用作计算机设备1220的 输入装置的键盘1250或鼠标1260接收指令。存储在HDD 1304中的电子白板应用程序1310具有在绘制 模式中执行的功能和在回放模式中执行的功能。绘制模式使显 示设备1210用作电子白板。回放模式使显示设备1210用作回放装置。
作为在绘制模式中执行的功能，电子白板应用程序13 10包 括识别单元1311、处理执行单元1312、绘制控制单元1313和记 录单元1314。
识别单元1311识别输入装置I/F单元1305接收到的各种操 作指令。更具体地，识别单元1311识别页面纟喿作指令、绘制物 体生成指令或者用于编辑已生成的绘制物体的指令。
处理执行单元1312执行与识别单元1311所识别出的各种 操作指令相对应的处理。
如果处理执行单元1312所执行的处理改变了待显示在显 示设备1210上的绘制物体，则绘制控制单元1313生成改变后的 物体。然后，绘制控制单元1313通过显示I/F单元1307将所生成 的绘制物体输出到显示设备1210。
记录单元1314将关于识别单元1311所识别出的各种操作 指令的信息(操作信息)记录在HDD 1304中的操作信息表1321 中。当绘制物体根据操作指令发生改变时，记录单元1314将关 于绘制物体的信息(绘制物体信息)记录在绘制物体信息表13 2 2中。
作为在回放模式中执行的功能，电子白板应用程序1310包 括操作信息获耳又单元1315、回i文部分拔:耳又单元1316、以及回放 单元1317。
操作信息获取单元1315从在各个会议中记录在HDD 1304 中的多个操作信息表1321和绘制物体信息表1322中，获取用户 所指定的操作信息表和绘制物体信息表。
28回放部分提取单元1316基于所获取的操作信息表1321和 绘制物体信息表1322，提取回放记录内容所使用的操作信息。 回放记录内容所使用的操作信息包括具有用户所指定的属性的 操作信息和在该操作信息前后所记录的操作信息(后面将就此 进行详细说明)。
回放单元1317提取确定为用于回放的操作信息，并且使用 该操作信息在显示设备1210上回》文记录内容。
在CPU 1301的控制下根据需要将电子白板应用程序1310、 操作信息表1321和绘制物体信息表1322载入RAM 1302，并且由 CPU 1301执行。
3.显示窗口的结构
图14是示出通过在会议系统1200中启动电子白板应用程序 的绘制模式显示在显示设备1210上的UI的例子的图。
参考图14,附图标记1400表示显示窗口 。区域1401(绘制区 域)允许显示窗口 1400中的绘制输入。在绘制模式中，用户可以 使用数位笔1230生成绘制物体。附图标记1402和1403表示所生 成的绘制物体的例子。
绘制物体1402是包括在手写输入模式中通过手写输入的 五个笔划的字符串"01010"。绘制物体1403是在工具输入模式中 输入的直线，并且包括一个笔划。通过菜单(未示出)进行手写 输入模式和工具输入模式之间的切换。
可以对绘制在绘制区域1401中的绘制物体1402和1403进 行编辑。更具体地，用户选择绘制物体，并且从菜单(未示出) 选择项，从而执行移动、调整大小、清除、剪切和复制等编辑 操作。
页面操作区域1404使得能够在绘制区域1401中进行页面 操作。页面操作区域1404显示页面的缩略图。用户可以通过使用数位笔1230输入指令，进行页面的切换、移动和删除、以及 新页面的添加等页面操作。
附图标记1405表示页面操作按钮，该页面操作按钮包括正 在显示的页面的编码、以及同样可用于页面切换的页面跳过和 返回按钮。
4. 操作信息表1321的结构
的执行期间所进行的用户操作的操作信息的操作信息表1321的
例子的图。
在每个会议中生成操作信息表1321。将绘制物体生成操 作、编辑操作和页面操作等操作顺序记录在操作信息表1321中，
作为操作信息。
记录在操作信息表1321中的各操作信息具有项"操作开始 时间"、"操作结束时间"、"操作类型"、"物体ID"、"页码"、以 及"用户ID"。
"操作开始时间"表示操作开始的时间。"操作结束时间"表 示操作结束的时间。"操作类型"表示操作的类型。
"物体ID"表示在绘制区域1401中生成并通过用户才喿作改变 (生成或编辑)的绘制物体的标识符，并且对应于图16所示的绘 制物体信息表。
"页码"表示操作的页面或切换目的地页面的编码。"用户 ID"表示操作者的ID。
5. 绘制物体信息表1322的结构
图16是示出记录关于在会议系统1200中的电子白板应用程 序1310的绘制模式的执行期间由于生成或编辑操作而改变的绘 制物体的绘制物体信息的绘制物体信息表的例子的图。物体信息表1 322记录"绘制物体ID"、"数据类型"和生成绘制物 体所需的数据("绘制物体数据")，作为绘制物体信息。
"数据类型"表示绘制物体的类型，包括笔划或者直线、矩
形或圆等图形工具类型。"绘制物体数据"记录手写笔划的X和Y
坐标、直线的起点和终点的坐标、或者矩形的左上坐标和右下 坐标。还可以记录颜色数据、线型数据和填充颜色等。
6.回》欠处理的序列
图17是示出计算机设备1220中的记录内容回放处理的序列 的流程图。启动电子白板应用程序1310的回放模式。在步骤 S1701,计算机设备1220接收用户的会议指定，以选择记录用 户想要回放的会议的记录内容。
在步骤S1702，读出与在步骤S1701所指定的会议相对应的 操作信息表和绘制物体信息表。
在步骤S1703，显示用于选4,回放方法的UI以接收用户的 回放方法选择。图18是示出用于选择回放方法的UI的例子的 图。
如图18所示，在本实施例中，用户可以选择是基于记录的 所有操作信息回放记录内容，还是提取具有特定属性的操作信 息，并仅基于所提取的操作信息回放记录内容(例如，1801)。
在提取具有特定属性的操作信息中，用户可以选择属性(例 如，1802)。在图18所示的例子中，显示"笔划"、"特殊标记"、 "搜索"和"识别"等作为可选择的属性(例如，1803)。
在步骤S1704，提取具有在步骤S1703中所选择的属性的操 作信息。在步骤S1704中提取具有特定属性的操作信息之后， 显示用于设置选择所提取的操作信息前后的操作信息的条件 (第二条件)的UI。
图19是示出用于设置提取在步骤S1704所提取的操作信息前后的预定时间内所记录的操作信息的条件的UI的例子的图。 在图19中，可以设置用户所期望的时间长度。
图20是示出用于设置提取与步骤S1704所提取的操作信息 前后的预定数量的操作相对应的操作信息的条件的UI的例子 的图。在图20中，可以设置用户所期望的操作数量。
如上所述，在本实施例中，不仅提取在步骤S1704中所提 取的操作信息，而且还提取所提取的操作信息前后的时间或预 定数量的操作内所记录的多条操作信息。这是因为根据所选 择的属性，用户不一定能仅基于所提取的具有该属性的操作信 息就掌握回放的记录内容。
例如，属性"笔划"表示使用用作输入装置的数位笔12 3 0或 其它输入装置所进行的绘制物体生成操作。在这种情况下，即 使当仅提取通过笔划输入的部分并回放该部分时，用户也可以 掌握笔划绘制的转变。
类似地，属性"编辑"表示对绘制物体执行了放大、缩小或 移动等编辑操作。在这种情况下，即使当仅提取所编辑的部分 并回放该部分时，用户也可以掌握编辑的转变。
然而，使用"特殊标记"以指示例如会议期间的重要部分， 并且在非常短的时间内进行了所提取的特殊标记添加操作。因 此，瞬间进行仅基于所提取的操作信息的回放，并且用户不能 掌握回放结果。在本实施例中，考虑到这一问题，还提取根据 属性所提取的操作信息前后的预定时间或预定数量的操作内所 记录的操作信息，从而可以使用所提取的操作信,包、执行回放。
在步骤S1705,判断是否在图19所示的UI中指定了时间长 度。如果在步骤S1705判断为指定了时间长度，则处理进入步 骤S1707。在步骤S1707,进一步提取指定时间内所记录的操作 信息，作为在步骤S17 0 4中所提取的操作信息前后的操作信息。如果在步骤S1705判断为没有指定时间长度，则处理进入
步骤S1706。在步骤S1706,判断是否在图20所示的UI中指定了 操作的数量。如果在步骤S1706判断为指定了操作的数量，则 处理进入步骤S1708。
在步骤S1708，进一步提取与指定数量的操作相对应的操 作信息，作为在步骤S1704所提取的操作信息前后的操作信息。
如果在步骤S1706判断为没有指定操作的数量，则处理进 入步骤S1709。
在步骤S1709,按照操作信息的记录顺序，基于所提取的 操作信息，回放记录内容。如果在步骤S1705为"是"，则这里所 提取的操作信息包括在步骤S1704所提取的操作信息和在步骤 S1707所提取的操作信息。如果在步骤S1706为"是"，则所提取 的操作信息包括在步骤S1704所提取的操作信息和在步骤 S1708所提取的操作信息。如果在步骤S1706为"否"，则所提取 的操作信息仅包括在步骤S1704所提取的操作信息。
对于基于所提取的操作信息的回放，显示与所提取的操作 信息(或所提取的操作信息前后的时间或预定数量的操作内所 记录的操作信息)有关的时间处的整个电子白板应用程序的状 态。
电子白板应用程序的状态表示这样 一 种状态显示在记录 所提取的操作信息时已在单个页面中生成的绘制物体。
更具体地，电子白板应用程序的状态表示这样一种状态 使用下述所有操作信息，同时回放记录内容，其中，在切换到
后，直到所提取的操作信息的操作开始时间之前，记录各操作信息。
因此，例如，如果没有清除与该操作开始时间前所记录的操作信息相对应的任何绘制物体，则同时回》t它们，作为记录 内容。可以将该系统设计为仅基于所提取的操作信息和该操作 信息前后的操作信息进行回放。然而，通常，用户可以通过查 看整个电子白板容易地掌握回放结果。因此，以上述方式进行 回放。
图21和2 2是沿时间轴示出使用所提取的操作信息的连续 回放的概念图。图21示出没有指定时间长度或操作的数量的情 况下的连续回放。图22示出指定了时间长度或操作的数量的情 况下的连续回》丈。
参考图21, a沿时间轴直观示出从会议开始到会议结束用户 所执行的操作。沿图21中的a的时间轴排列的各矩形表示连续用 户操作。各矩形的左边表示连续操作的操作开始时间，而右边 表示操作结束时间。在矩形中的菱形中，实心菱形表示与具有 在步骤S1703中所选择的属性的绘制物体信息相对应的操作信 息。空心菱形表示与不具有在步骤S1703中所选择的属性的绘 制物体信息相对应的操作信息。
也就是说，操作信息2101 ~ 2104是待提取的操作信息。在 切换到包括待提取的操作信息的页面之后，在待提取的操作信 息的操作开始时间之前，记录操作信息2111 ~ 2114中的各条信 息。使用操作信息2111 ~ 2114以在使用操作信息2101 ~ 2104回 放记录内容中显示整个电子白板应用程序的状态。
参考图21, b示出使用所提取的操作信息的记录内容的连 续回放。如图21中的b所示，首先，为了显示整个电子白板应用 程序的状态，基于操作信息2111同时回放记录内容，然后，基 于操作信息2101回放记录内容。接着，为了显示整个电子白板 应用程序的状态，基于操作信息2112同时回放记录内容，然后， 基于操作信息2102回放记录内容。当以相同方式基于操作信息2104回方文记录内容时，结束回》文处理。
这样，基于通过选择属性所提取的操作信息，按照时间顺 序连续回放记录内容。这使得能够以比总时间短很多的时间回 顾记录内容。通过参考操作信息的项以及执行提取、连结和回 放处理，实现i己录内容的回》文。
另一方面，当用户指定时间长度或操作的数量时，连续回 放记录内容，包括所提取的各操作信息前后的操作信息，如图
22所示。
例如，如果在步骤S1705中设置"3秒"，则还提取在步骤 S1704中所提取的各条操作信息2201 ~ 2204的才乘作开始时间之 前3秒和操作结束时间之后3秒内的操作信息。更具体地，提取 操作信息2201'、 2201"、 2202'、 2202"、 2203'、 2203"、 2204' 和2204"。
为了在所提取的操作信息2201' ~ 2204'中的各条信息的操 作开始时间处显示整个电子白板应用程序的状态，执行基于操 作信息2211 ~ 2214的同时回ii。
如果在步骤S1706中设置"5个操作"，则提取与在步骤 S1704中所提取的操作信息2201 ~ 2204中的各条信息前后5个 操作相对应的操作信息2201' ~ 2204"。
为了显示所提取的操作信息2201' ~ 2204'中的各条操作信 息的操作开始时间处的整个电子白板应用程序的状态，执行基 于操作信息2211 ~ 2214的同时回放。
通过以上说明显而易见，在本实施例中，用户基于电子白 板应用程序的绘制模式的执行期间所记录的操作信息，在回放 记录内容中指定属性。提取具有指定属性的操作信息，从而连 续回放基于所提取的操作信息的记录内容。这允许用户回放他/ 她想要的记录内容，并且易于掌握该内容。在本实施例中，在选4奪性连续回放用户所期望的记录内容 时，还提取适当的操作信息前后的操作信息，并且使用该操作 信息回放记录内容。这使得用户能够容易地掌握回放结果。
在本实施例中，在基于所提取的操作信息回放记录内容的 同时，回》文在记录所拔^又的#:作信息时在单个页面中已生成的 绘制物体。这允许用户查看整个电子白板应用程序的状态，并 容易地掌握回放结果。
在本实施例的连续回放中，优选显示表示在回放连结部分 中的所提取的操作信息的切换的数据。例如，在图21中，连续
执行基于操作信息2101 ~ 2104的回放。为了易于理解，可以在 例如向各连结部分插入表示场景变化的字幕(telop)或使用淡入 或淡出等图像效果的同时，进行回放。
可选择的属性不局限于图18所示的这些属性。例如，它们 可以包括"字符识别属性"，其为用于识别由绘制在电子白板 上的物体所形成的字符、并且将字符转换成文本信息的操作的 属性；和"图形识别属性"，其为用于识别图形图案的操作的属 性。
属性的其它例子有"材料搜索属性"，其为用于搜索例如 材料文件的操作的属性；和"位置搜索属性"，其为用于搜索特 定位置处的操作的操作的属性。属性的其它例子还有"复制(剪 切)和粘贴属性"，其为复制(或剪切)和粘贴操作的属性；和"页 面切换属性"，其为页面切换操作的属性。
如上所述，可以根据可在电子白板上执行的操作的类型定 义属性。还可以细分属性。例如，对于"笔划属性"，可以定义 颜色类型和笔尖厚度。对于"文本输入属性"，可以定义字体类 型等属性。然而，由于与会议期间很少发生的操作相对应的属 性或在回顾会议中不重要的属性具有较小影响，因而这些属性对于实现本发明的目的更为有效。 第四实施例
在上述第三实施例中，用户在提取他/她想要的操作信息中 指定属性。然而，本发明不局限于此，并且用户可以指定绘制物体。
在本实施例中，通过基于使用电子白板应用程序所记录的 操作信息和绘制物体信息的特定绘制物体提取操作信息，进行 回放。会议系统的外观和计算机设备的结构与第三实施例中的 相同，并且不再重复对其的说明。
图23是示出根据本实施例的计算机设备中的回放处理的 序列的流程图。
启动电子白板应用程序1310的回放模式。在步骤S1701 ， 计算机设备接收用户的会议指定，以选择记录了用户想要回放 的会议的记录内容。在步骤S1702,读出与在步骤S1701中所指 定的会议相对应的搡作信息表和绘制物体信息表。
在步骤S2303,显示用于选择搜索类型的UI,以接收用户 的搜索类型选择。图24是示出用于选择搜索类型的UI的例子的 图。
如图24所示，在本实施例中，用户可以选择基于记录的所 有操作信息来回放记录内容(例如，2401)。用户还可以选择提 取在生成或编辑与特定图形图案、字符或绘制位置相对应的绘 制物体时所记录的操作信息，并且仅基于所提取的操作信息来 回放记录内容(例如，2402)。
在步骤S2304，显示用于输入与在步骤S2302中所选择的搜 索类型相对应的搜索条件(第 一 条件)的画面(参考图2 5 ~ 2 7其
中一个)，以接收搜索条件输入。
现在说明搜索类型和搜索条件。使用图形搜索以搜索任意图形图案。例如，围绕标记或下 划线用于高可能性的指示。通过指定这样的图形图案作为搜索 对象，可以对在会议期间生成指定的绘制物体的部分进行搜索， 并提取该部分。例如，显示图25所示的输入画面作为搜索条件 输入画面，以4吏得用户可以在该输入画面中输入搜索目标图形
图案。在该图形搜索中，使用图25中用户所输入的图形图案作
为关键字搜索绘制物体信息表，从而提取该会议期间在生成类 似绘制物体时所记录的操作信息。
使用字符搜索以搜索任意字符。可以搜索并提取会议期间 在绘制指定搜索目标字符时所记录的操作信息。例如，显示图
26所示的输入画面作为搜索条件输入画面，以4吏得用户可以在 该输入画面中输入搜索目标字符。在该字符搜索中，使用图26 中用户输入的字符作为关键字，搜索绘制物体信息表，从而提 取该会议期间在绘制类似字符时所记录的操作信息。在搜索绘 制物体信息表中，同时执行字符识别处理。将通过手写输入的 字符(笔划)识别为文本信息。
使用位置搜索以搜索任意位置处的绘制物体。可以搜索并 提取在电子白板的任意位置处生成或编辑绘制物体时所记录的 生成操作或编辑操作的操作信息。例如，显示图27所示的输入 画面作为搜索条件输入画面，以使得用户可以在该输入画面中 输入搜索目标位置。在该位置搜索中，在图27中输入的位置信 息用作关键字。结果，搜索绘制物体信息表，从而提取该会议 期间在生成或编辑绘制物体时所记录的操作信息。
参考图23,在步骤S1709,按照操作信息的记录顺序，基 于在步骤S 2 3 0 5所提取的操作信息，执行连续回放。
对于基于所提取的操作信息的回放，显示与所提取的操作 信息有关的时间处的整个电子白板应用程序的状态。然而，可以仅基于通过搜索所提取的操作信息回放记录内 容，而不显示整个电子白板的状态。尤其在位置搜索中，由于 仅可以回放基于在特定位置处生成或编辑绘制物体时所记录的 操作信息的记录内容，因而仅基于所提取的操作信息回放记录 内容更为有效。
可以将位置搜索与其它搜索或第三实施例中所述的回放 方法相组合。例如，可以基于指定范围和指定图形图案进行搜 索和回放。可选地，可以基于指定范围和指定操作属性进行回放。
通过上面的说明显而易见，根据该实施例，用户可以在基 于电子白板应用程序所记录的操作信息回放记录内容中，基于 绘制物体指定搜索条件。
第五实施例
在第三和第四实施例中，电子白板应用程序与操作信息表 相对应地记录绘制物体信息。然而，本发明不局限于此。可以 一起记录语音数据和语音数据的属性信息(例如，关于扬声器的 信息)。
在这种情况下，当开始执行电子白板应用程序时，与时间 信息相对应地，顺序记录语音数据和语音数据的属性信息。结 果，在基于所提取的操作信息回放记录内容中， 一起回放在操 作信息的操作开始时间和操作结束时间之间所记录的语音数据。
这使得在更短的回放时间中甚至可以回放语音数据。在提 取操作信息中，可以选择语音数据的属性信息。 其它实施例
本发明还可应用于包括多个装置(例如，主计算机、接口装 置、读取器和打印机)的系统或包括单个装置的设备(例如，复印机或传真设备)。
甚至通过将记录用于实现上述实施例的功能的软件程序 代码的存储介质提供给系统或设备，来实现本发明的目的。在
这种情况下，通过使该系统或设备的计算机(或CPU或MPU)读
出并执行存储在存储介质中的程序代码，来实现这些功能。在 这种情况下，存储程序代码的存储介质构成本发明。
用于提供该程序代码的存储介质的例子有软(floppy⑧)盘、 硬盘、光盘、磁光盘、CD-ROM、 CD-R、磁带、非易失性存储 卡和ROM。
不仅当计算机执行读出的程序代码时，而且还在例如运行 在计算机上的OS(操作系统)基于该程序代码的指令执行部分或 全部实际处理时，实现上述实施例的功能。
当将从存储介质读出的程序代码写入插入计算机中的功 能扩展板或与计算机连接的功能扩展单元的存储器中时，同样 实现上述实施例的功能。更具体地，在将该程序代码写入该存 储器中之后，功能扩展板或功能扩展单元的C P U基于该程序代 码的指令执行部分或全部实际处理，从而实现这些功能。
尽管参考典型实施例说明了本发明，但是应该理解，本发
明不局限于所公开的典型实施例。所附权利要求书的范围符合 最宽的解释，以包含所有这类修改、等同结构和功能。
权利要求
1. 一种连接到显示设备的显示控制设备中的显示控制方法，包括以下步骤获取步骤，用于从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录所述绘制区域中的改变内容的记录设备获取关于所述改变内容的信息；判断步骤，用于在所述获取步骤中所获取的信息中，判断要用于回放绘制内容的信息，并且基于该信息确定所述绘制内容的回放定时；以及回放步骤，用于提取在所述判断步骤中判断为要用于回放的信息，并且使用所提取的信息在所确定的回放定时在所述显示设备上回放所述绘制内容。
2. 根据权利要求l所述的显示控制方法，其特征在于，关 于所述改变内容的信息包括操作信息表，所述操作信息表顺 序记录改变了所述绘制区域中的所述绘制内容的用户操作信 息；以及绘制物体表，所述绘制物体表顺序记录关于所述绘制 区域中的通过操作改变了的物体的信息。
3. 根据权利要求2所述的显示控制方法，其特征在于，当 记录在所述操作信息表中的所述操作信息是关于移动在所述绘 制区域中所定义的页面的页面操作的操作信息，并且所述页面 操作表示连续页面操作时，在所述判断步骤中，将关于所述连 续页面操作的第 一 页面操作的操作信息和关于最终页面操作的 操作信息判断为要用于回放所述绘制内容。
4. 根据权利要求2所述的显示控制方法，其特征在于，当 记录在所述操作信息表中的所述操作信息包括关于所述绘制区 域中的物体的生成操作的操作信息、以及关于通过所述生成操 作所生成的物体的清除操作的操作信息时，在所述判断步骤中， 将关于所述生成操作的操作信息和关于所述清除操作的操作信息判断为不用于回放所述绘制内容。
5. 根据权利要求l所述的显示控制方法，其特征在于，还 包括分组步骤，所述分组步骤用于对记录在所述绘制物体表中 的多条关于物体的信息进行分组，其中，在所述判断步骤中，将在所述分组步骤中分组后的 多条关于物体的信息的回放定时确定为该组中的记录在所述绘 制物体表中的第 一 条关于物体的信息的回放定时。
6. 根据权利要求5所述的显示控制方法，其特征在于，在息中的、关于在回放时形成字符和单词之一的多个物体的信息 分成一组。
7. 根据权利要求2所述的显示控制方法，其特征在于，当 记录在所述操作信息表中的所述操作信息是关于所述绘制区域 中的物体的编辑操作的操作信息时，在所述回放步骤中，在使 用关于所述编辑操作的所述操作信息回放所述绘制内容中，回 放通过所述编辑操作编辑后的物体。
8. —种连接到显示设备的显示控制设备，包括的操作的操作信息时记录所述绘制区域中的改变内容的记录设 备获取关于所述改变内容的信息；判断部件，用于在所述获取部件获取的信息中，判断要用 于回放绘制内容的信息，并且基于该信息确定所述绘制内容的 回》文定时；以及回放部件，用于提取所述判断部件判断为要用于回放的信 息，并且使用所l是取的信息在所确定的回放定时在所述显示设 备上回放所述绘制内容。
9. 一种连接到显示设备的显示控制设备中的显示控制方法，包括以下步骤的操作的操作信息时记录所述绘制区域中的改变内容的记录设备获取关于所述改变内容的信息；输入步骤，用于输入第一条件，以从在所述获取步骤中所 获取的信息中提取要用于回放绘制内容的信息；以及回放步骤，用于从在所述荻取步骤中所获取的信息中提取 满足所述第一条件的信息，并且使用所提取的信息在所述显示 设备上连续回放所述绘制内容。
10. 根据权利要求9所述的显示控制方法，其特征在于，在 所述获取步骤中所获取的信息包括所述操作信息和关于所述绘 制区域中的通过操作改变了的物体的物体信息。
11. 根据权利要求10所述的显示控制方法，其特征在于， 在所述输入步骤中，可以输入所述物体信息中包含的物体的属性，作为所述第一条件，以及在所述回放步骤中，提取具有所输入的属性的所述物体信 息，并且按照相应操作信息的记录顺序，使用所提取的所述物 体信息执行连续回放，从而在所述显示设备上连续回放所述绘 制内容。
12. 根据权利要求10所述的显示控制方法，其特征在于， 在所述输入步骤中，可以输入图形图案和字符之一，作为所述第一条件，以及在所述回放步骤中，提取关于形成与所输入的图形图案或 字符相同或类似的图形图案和字符之一 的物体的物体信息，并 且按照相应操作信息的记录顺序，使用所提取的所述物体信息 执行连续回放，从而在所述显示设备上连续回放所述绘制内容。
13. 根据权利要求10所述的显示控制方法，其特征在于，在所述输入步骤中，可以输入所述绘制区域中的位置，作 为所述第一条件，以及在所述回放步骤中，提取关于在所输入的位置处绘制的物 体的物体信息，并且按照相应操作信息的记录顺序，使用所提 取的所述物体信息执行连续回放，从而在所述显示设备上连续 回放所述绘制内容。
14. 根据权利要求9所述的显示控制方法，其特征在于， 所述输入步骤还包括设置步骤，所述设置步骤用于设置第二条件，以提取在满足所述第 一条件的信息前后所记录的信息， 以及在所述回》丈步骤中，除满足所述第一条件的信息以外，还 提取满足所述第二条件的信息，并且使用该信息在所述显示设 备上连续回放所述绘制内容。
15. 根据权利要求14所述的显示控制方法，其特征在于， 在所述设置步骤中，可以设置时间和操作数量之一，作为所述第二条件，以及在所述回放步骤中，提取在满足所述第一条件的信息前后 的所设置的时间内或所设置的操作数量内所记录的信息，作为 满足所述第二条件的信息。
16. —种连接到显示设备的显示控制设备，包括获取部件，用于从在获取表示用于绘制物体的绘制区域中 的操作的操作信息时记录所述绘制区域中的改变内容的记录设 备获取关于所述改变内容的信息；输入部件，用于输入第一条件，以从所述获取部件获取的 信息中提取要用于回放绘制内容的信息；以及回放部件，用于从所述获取部件获取的信息中提取满足所 述第一条件的信息，并且使用所提取的信息在所述显示设备上连续回放所述绘制内容。
全文摘要
本发明提供一种显示控制设备和显示控制方法。本发明的目的是使能够顺序回放绘制内容的显示控制设备通过简单方法在缩短回放时间的同时实现易于掌握内容的回放。本发明的显示控制设备包括操作信息获取单元，其从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录该绘制区域中的改变内容的硬盘获取关于该改变内容的信息；回放部分提取单元，其在所获取的信息中判断要用于回放绘制内容的信息，并且确定该信息的回放定时；回放单元，其提取判断为要用于回放的信息，并且使用所提取的信息在预定回放定时在显示设备上回放该绘制内容。
文档编号G06F17/30GK101295313SQ20081009355
公开日2008年10月29日 申请日期2008年4月24日 优先权日2007年4月25日
发明者安达启史, 武藤洋平 申请人:佳能株式会社