投影仪，图形输入·显示装置，便携终端和程序的制作方法
投影仪，图形输入·显示装置，便携终端和程序的制作方法
【专利摘要】本发明防止向白板写入的参加者的位置妨碍白板阅览，为了之后利用包括写入的记录的途中经过的过程而保存参加者全员的写入记录过程。参加者全员的终端将所输入的任意的线描分割为线段并依次发送到上述控制器，此外具有带有触摸面板的终端，其具有在带有触摸面板的终端的显示器上显示从上述控制器发送的线描信息的功能，此外使用内置或能够连接控制器的液晶投影仪，其中该控制器具有如下功能：将从各带有触摸面板的终端发送的线描信息依次记录在数据库中，并追加记录在白板图像的图像存储器中，用上述液晶投影仪在墙面上投影上述图像存储器内容，同时对各带有触摸面板的终端发送上述数据库。
【专利说明】投影仪，图形输入?显示装置，便携终端和程序
【技术领域】
[0001] 本发明涉及在会议或发表会等中能够由多名参加者同时通过手写输入自由地进 行写入或修正的电子构建的图形输入?显示装置。
【背景技术】
[0002] 通常，特别是在要求边提出新的事项边进行的会议和发表会中，优选在如黑板那 样大尺寸的屏幕上存在能够通过手写直接写入或订正、删除或变更等、参加者全员能够同 时阅览的画面。
[0003] -般而言，小规模至中规模的会议等中有效地利用能够在白色的面板上用水性笔 书写或订正、擦除的白板。该白板中，进而具有用图像扫描仪读取书写的内容的最终结果、 印刷在纸上而保留会议结果的记录（备忘录）的功能的白板得到了使用。
[0004] 进而，作为将会议结果的记录作为电子信息保存?管理的方法，在现有技术文献的 专利文献1中，记载了如下发明：将多个具备手写输入装置的终端装置、和用各终端装置手 写输入的信息集中在服务器中，对该服务器的显示窗口内的每个指定区域设定各终端的手 写输入区域，显示用各个终端输入的信息。
[0005] 此外，专利文献2中，记载了适合由静态图像通信装置以数字信号发送用电传书 写（Telewriting)装置输入的手写线的数据格式。
[0006] 现有技术文献
[0007] 专利文献
[0008] 专利文献1 :日本特开2008-269525号公报
[0009] 专利文献2 :日本特开平6-296210号公报
【发明内容】
[0010] 发明想要解决的技术问题
[0011] 本发明想要解决的技术问题在于，不会因参加者全员一同能够阅览的白板进行书 写或编辑作业而妨碍白板的阅览。此外，还在于：设置用于之后阅览连书写的记录的中途过 程也包括在内的过程的单元，为了有效率地进行会议和基于会议结果的活动，而提供能够 更有效地利用会议中的议论等信息的手段（装置、方法）。
[0012] 于是，本发明的目的在于，提高使用投影仪和终端的会议等中的用户（使用者）的 便利性。
[0013] 用于解决问题的技术方案
[0014] 本发明的目的作为其一例能够通过权利要求中记载的结构达成。
[0015] 发明效果
[0016] 根据本发明，能够提高使用投影仪和终端的会议等中的用户的便利性。
【专利附图】
【附图说明】
[0017] 图1是表示构成图形输入?显示装置、便携终端的各设备之间的连接和具体的动 作图像的说明图。
[0018] 图2是说明图形输入?显示装置、便携终端中用于同时输入多条线段而显示的数 据的处理和格式（format)的说明图。
[0019] 图3是表示图形输入?显示装置、便携终端的、从各终端输出数据包、对投影仪发 送数据、以及从投影仪对终端再次分发数据包的说明图。
[0020] 图4是表示图形输入?显示装置、便携终端中对带有触摸面板的终端装置输入线 描时的显示方法的说明图。
[0021] 图5是表示图形输入?显示装置、便携终端的系统结构的框图的例子。
[0022] 图6是表示图形输入?显示装置、便携终端的智能液晶投影仪的系统结构的框图 的例子。
[0023] 图7是说明图形输入?显示装置的软件的结构与硬件的关系的第一实施例的说明 图。
[0024] 图8是说明表示图形输入?显示装置、便携终端的软件的结构与硬件的关系的第 二实施例的说明图。
[0025] 图9是说明表示使用图形输入?显示装置、便携终端的构成设备，在会议中仅在指 定终端彼此之间进行会话的UI的说明图。
[0026] 图10是表示在图形输入?显示装置、便携终端中，显示正在进行描绘的线是由哪 位用户书写的方法的说明图。
[0027] 图11是表示图形输入?显示装置、便携终端中处理的描绘数据的流的说明图。
[0028] 图12是用流程图表示图形输入?显示装置、便携终端中对处理的描绘数据的流进 行操作的动作的说明图。
[0029] 图13是表示图形输入?显示装置、便携终端的会议进行途中的白板图像的倒回再 现动作的说明图。
[0030] 图14是表示在图形输入?显示装置、便携终端中，在描绘了参加者描绘的一定单 位的全部线描之后一并显示的方法的说明图。
[0031] 图15是表示图形输入?显示装置、便携终端的终端的显示屏幕（画面）的例子的 说明图。
[0032] 图16是表示图形输入?显示装置、便携终端的禁止利用指定终端进行书写?删除 的状态的说明图。
[0033] 图17是表示图形输入?显示装置、便携终端的按照操作者的意愿暂时停止终端操 作的方法的说明图。
[0034] 图18是表示图形输入?显示装置、便携终端的各终端的操作者个人记录备忘录的 情况的画面的说明图。
[0035] 图19是表示图形输入?显示装置、便携终端的自动誊清标准图形的画面的说明 图。
[0036] 图20是表示图形输入?显示装置、便携终端的文字输入时的画面例的说明图。
[0037] 图21是表示图形输入?显示装置、便携终端的显示会议参加者的ID的例子的说 明图。
[0038] 图22是表示图形输入?显示装置、便携终端的事先设定会议开始时的画面的情况 的例子的说明图。
[0039] 图23是表示使用图形输入?显示装置、便携终端的构成设备，在会议中仅在指定 终端彼此之间进行会话的情况下的终端内结构的说明图。
[0040] 图24是表示图形输入?显示装置、便携终端的与自动比例尺（scale)变更相关的 动作的说明图。
[0041] 图25是表示图形输入?显示装置、便携终端的使用摄像机确认参加者的动作的说 明图。
[0042] 图26是表示图形输入?显示装置、便携终端的使用摄像机确认参加者的摄像机部 的具体动作的说明图。
【具体实施方式】
[0043] 以下用【专利附图】
【附图说明】本发明的图形输入?显示装置的具体实施例。
[0044] 图1是表示构成本发明的图形输入?显示装置、便携终端的各设备之间的连接和 具体动作图像的说明图。
[0045] 在墙面或屏幕上投影白板的装置是智能液晶投影仪10010。它由液晶投影仪 10020和控制器10030构成，液晶投影仪10020和控制器10030既可以内置在同一壳体内， 也可以是分开构成，从控制器10030用模拟或数字信号向液晶投影仪10020传输投影图像 数据的方式，可以是任意的。传输而来的投影图像被投影在墙面上（10011)，成为大画面 (大屏幕）的图像，能够由会议的参加者全员阅览。
[0046] 会议的参加者各自具有使触摸面板和同尺寸的显示器一体化而成的带有触摸面 板的终端（10040?10070)，在触摸面板上能够用笔（10041,10042)进行手写线描（线条 画）的输入和编辑。
[0047] 在本实施例中，智能液晶投影仪10010内的控制器与各带有触摸面板的终端 (10040?10070)之间，通过无线构成的LAN(Local AreaNetwork :局域网）连接。该LAN环 境可以使用一般的办公室等中共享使用的无线LAN环境，但本实施例中，由将控制器10030 作为路由器从该控制器得到IP地址仅在被连接的各带有触摸面板的终端（10040?10070) 之间形成闭合的连接环境的LAN构成。会议开始时的动作是，通过已经在控制器中注册了 MAC地址等的多个带有触摸面板的终端之间分配IP地址，对于会议参加者带来的带有触摸 面板的终端，利用控制器上设置的操作开关、通过从控制器对终端输入由液晶投影仪投影 的ID码等，由此构建通信连接环境。
[0048] 以下说明具体动作。对各带有触摸面板的终端（10040?10070)用笔（10041、 10042)输入的线，在本例中，是用带有触摸面板的终端（10040)和带有触摸面板的终端 (10070)这两台终端同时进行线描的输入的状态。即，最终显示的白板图像上，两条线描同 时持续延伸，以与犹如两名参加者同时在以往的白板上物理书写的情况相同的状态显示。
[0049] 与投影的白板图像10011相同的图像，同时显示在各带有触摸面板的终端 (10040?10070)上，会议参加者能够一边观看最新的白板图像，一边对其进行加工?修正。
[0050] 在投影和带有触摸面板的终端（10040?10070)上显示的图像上，重叠显示 有表示参加会议的参加者的各带有触摸面板的终端（10040?10070)的状况的图标 (icon) 10012。本实施例中有4个终端参加，但本例中的会议系统中最多能够有6个终端参 力口，其中4号和6号是参加者缺席或者带有触摸面板的终端不工作的状态。参加会议的参加 者所具有的各带有触摸面板的终端（10040?10070)，此处是标识为终端ID#1 (10040)、终 端 ID#2 (10050)、终端 ID#3 (10060)、终端 ID#5 (10070)，其中 ID#1 (10040)和 ID#2 (10050) 的终端处于正在同时输入线描的状态。
[0051] 图2是说明本发明的图形输入?显示装置、便携终端中用于同时输入并显示多条 线段的数据的处理和格式的说明图。
[0052] 如图2(a)所示，用笔20001对带有触摸面板的终端输入的线描（线条画）20000， 通过终端内的转换处理20010,被转换为由多条直线构成的线段20030的集合体20020。
[0053] 各线段被作为起点Xstart (以下称为Xs)、Ystart (以下称为Ys)、Xend (以下称为 Xe)、Yend (以下称为Ye)处理。
[0054] 图2(b)表示将输入的线描分割而得到的各线段按每个线段作为数据包（data packet) 20040处理的数据格式。各数据包由输入了该线段的终端的终端ID、起点和终点的 坐标、后述的线的粗细、颜色、种类、以及根据橡皮擦、激光指示器（laser pointer)等多种 使用方法而定的线条种类的数据构成。
[0055] 这些线段数据由各终端按照时间轴20050输入。各终端中，在用户看来是一笔输 入作为一条线描（图2(a) 20060)的，而能够当作书写进行输入，但实际上是按以规定的 采样时间间隔分割得到的每个线段，以来自终端1的输入（20060)和来自终端2的输入 (20070)混合的状态，由上述控制器10030接收。
[0056] 接收到的包20040在控制器10030内按接收顺序保存为数据列表，由此按接收顺 序时序地向构建白板图像的未图示的影像存储器、各带有触摸面板的终端输出（20080)。接 收了输出后的影像存储器按照接收的包数据顺序，在自身的影像存储器内将各线段数据作 为图像数据写入。此外，接收的各终端也同样地在自身的影像存储器内将各线段构建为图 像数据并输出。
[0057] 通过该方法，能够进行使多名参加者同时写入的线描在外观上看起来像是同时有 多条线在画面（屏幕）上持续延伸的处理。
[0058] 图3是表示本发明的图形输入?显示装置、便携终端的、从各终端输出数据包、对 投影仪发送数据、以及从投影仪对终端再次分发数据包的说明图。
[0059] 从终端#1(30001)输出的表示线段数据的数据包，在每个规定的采样定时（时刻） 生成，如30010、30011、30012所示，按各线段单位发送到智能液晶投影仪的控制器30003。 与该发送数据非同步地，从终端#2如30020、30021所示向控制器30003发送同样地在每个 规定的采样定时（时刻）静止（生成）的表示线段数据的数据包。
[0060] 控制器按接收顺序接收并保存这些数据包，按照其顺序在液晶投影仪上显示，并 且再次分发到各终端30004。该分发定时（timing)可以按规定的定时间隔动作，例如以按 照投影仪或各终端的显示部的显示装置的帧定时对准的速度发送。
[0061] 由此，在墙面上投影的大屏幕的投影仪图像、和各参加者的带有触摸面板的终端 装置的显示部上，用终端#1和终端#2同时写入、并且随着写入而延伸的线能够以在相同画 面上同时延伸的方式显示，并且能够在外观上看起来像是从多个终端输入的线描同时被显 不一样。
[0062] 图4是表示本发明的图形输入?显示装置、便携终端中对带有触摸面板的终端装 置输入线描时的显示方法的说明图。
[0063] 如图3中所说明的，利用各终端的触摸面板输入的线段数据，先被发送到控制器， 与来自其他终端的输入合成之后，再送到各终端并显示。该情况下，从用笔在触摸面板上画 线到实际显示为止，在用笔输入线的时刻与实际在终端上显示的线的显示时刻之间，会发 生相当于对控制器的数据的往返、以及控制器对数据合成所需的时间量的轻微延迟，画线 并不会立刻显示，造成使用不便。
[0064] 本实施例中，首先在图4(a)中，带有触摸面板的终端装置，基于用笔输入的线描 数据，进行即刻的线显示。通过该终端内数据显示40000,没有上述时间差，即刻显示用笔描 绘的线描，所以能够像用铅笔直接书写线描一般，进行自然的输入。
[0065] 接着，显示从控制器再次分发而来的线段数据。接收数据显示40010以按临摹已 在用笔书写时显示的线描的方式，具有上述延迟时间差地追踪的方式显示线描。基本上该 线显示与最初用笔写入线描时相同的线，但为了与终端内的显示区分，用区分开颜色或粗 细等显示格式的线显示接收的线。从此后起显示的接收数据显示40010是正式向白板写入 的线描。
[0066] 图5是表示本发明的图形输入?显示装置、便携终端的便携终端的系统结构的框 图的例子。
[0067] 本实施例中，便携终端使用一般的计算机系统的结构，以CPU50000为中心，用总 线50001连接了各种硬件，各硬件内置有未图示的硬件接口，按照在CPU上运行的程序的控 制进行数据的输入、保存、输出等控制。
[0068] 终端以CPU为核心，由作为显示装置的IXD50010、构建在显示装置上显示的图像 的V-RAM(Video-RAM) 50050、以在IXD上重叠的状态检测笔或手指的接触作为坐标值的触 摸面板50020、保存CPU50000所执行的程序和基本数据的闪存50060、进行终端的电源开/ 关（0N/0FF)和背光源的调整等的各种开关50030、CPU50000用作工作区的RAM50070、例如 摄像机50040等上述触摸面板以外的图像数据的输入装置、以及发送和接收对输入的线描 进行转换后的线段数据的无线LAN50080构成。各装置中，如上所述具有未图示的接口，通 过与CPU总线50001连接，CPU上运行的程序能够处理各装置的输入输出数据。
[0069] 图6是表示本发明的图形输入?显示装置、便携终端的智能液晶投影仪的系统结 构的框图的例子。
[0070] 本实施例中，智能液晶投影仪也与图5所示的终端同样，使用一般的计算机系统 的结构，以CPU60000为中心，用总线60001连接了各种硬件，各硬件内置有未图示的硬件接 口，按照在CPU上运行的程序的控制进行数据的输入、保存、输出等控制。
[0071] 智能液晶投影仪以CPU为核心，由内置或外接的投影仪60010、构建发送到投影仪 进行显示的图像的V-RAM (Video-RAM) 60040、进行电源开/关（0N/0FF)和各种操作的各种 开关60020、保存CPU60000所执行的程序和基本数据的闪存60050、CPU60000用作工作区 的RAM60060、以及对各带有触摸面板的终端赋予IP地址而构建LAN并进行从各终端发送的 线段包的接收的再次发送的无线LAN路由器60030构成。各装置中，如上所述具有未图示 的接口，通过与CPU总线60001连接，CPU上运行的程序能够处理各装置的输入输出数据。
[0072] 图7是说明表示本发明的图形输入?显示装置、便携终端的软件的结构与硬件的 关系的第一实施例的说明图。
[0073] 图7(a)表示终端装置的结构，在操作系统（以下称为0S) 70010的整体控制下工 作，在该0S的管理下，执行白板应用（application)70000。白板应用与0S之间，每个硬件 通过应用接口（以下称为4?1)70001、70002、70003连接，白板应用经由05与各硬件进行数 据的发送和接收。
[0074] 构成利用触摸面板70021输入的手写线描的数据，通过触摸面板驱动器70011被 输入到0S，经由API70001被输入到白板应用。此时，图3中说明的采样定时（时刻）按照 指示将触摸面板上的坐标从白板应用导入到0S的定时（时刻）进行，导入笔或手指是接 触还是离开了触摸面板、和接触的情况下的坐标，转换为图2中说明的每个线段的包数据， 经由 API70002、0S70010、LCD 驱动器 70013,在 LCD 上显示（70023)。同时经由 API70002、 0S70010、无线LAN驱动器70012,由无线LAN70022向智能液晶投影仪发送。
[0075] 图7(b)表示智能液晶投影仪的结构，特别是控制器的结构，在0S70050的整体控 制下工作，在该0S的管理下执行白板应用70040。白板应用与0S之间，每个硬件通过应用 接口（以下称为API)70041、70042连接，白板应用经由0S与各硬件进行数据的发送和接 收。
[0076] 无线LAN路由器80062中，与各终端连接，从连接的终端发送的构成输入的手写线 描的线段数据，通过无线LAN驱动器70052输入到0S，经由API70042输入到白板应用。该 数据从多个终端发送，但对其按接收的时间序列顺序进行数据列表化，用白板应用进行保 存，同时经由API70041、0S70050通过液晶投影仪驱动器70051发送到液晶投影仪硬件，作 为投影画面70061显示。
[0077] 同时，从多个终端接收的线段数据的集合，经由API70042、0S70050,通过无线LAN 驱动器70052利用来自无线LAN路由器70062的电波发射（发送），向各终端再次分发。
[0078] 转换为图2中说明的每个线段的包数据，经由API70003、0S70010、IXD驱动器 70013,在 LCD 上显示（70023)。同时，经由 API70002、0S70010、无线 LAN 驱动器 70012,由 无线LAN70022向智能液晶投影仪发送。
[0079] 此处，在图7(b)中保存的数据包，在液晶投影仪进行了显示或向各终端进行了再 次发送的时刻可以丢弃，但通过保存会议中的所有数据，能够保留为按时序（时间序列）保 存会议中对白板写入的内容的会议记录，此外有会议途中参加的终端的情况下，也能够通 过发送从会议开始时起的数据包，用白板书写信息确认参加时刻以前的议论（内容）。这通 过在图7(a)所示的各终端上也进行保存，能够在会议途中随时重新确认从会议开始时起 的议事进程，并且还能够按每个终端保留会议记录。
[0080] 图8是表示示出本发明的图形输入?显示装置、便携终端的软件结构与硬件的关 系的第二实施例的说明图。
[0081] 图8(a)示出图7(b)的智能液晶投影仪、特别是控制部的结构，其结构与图7(b) 的结构相同，省略详细说明。
[0082] 本实施例中，特征在于，对在液晶投影仪上显示的显示图像进行处理的程序，不是 使用白板应用80000,而是使用作为通用的显示程序的web浏览器。
[0083] HTML5这样的网页（hom印age)描述语言中，除了迄今为止的按图像数据显示图形 图像（graph image)的功能以外，还存在如图8(b)所示设定线段的起点和终点、颜色和宽 度等属性而显示任意线段的功能。使用该功能，将从白板应用输出的线段数据转换为HTML5 的描述语言之后，经由API80002、0S80010、API80031输入到浏览器80030,浏览器80030经 由API80031、0S80010、液晶投影仪驱动器80013,被投影作为白板图像80023。
[0084] 虽然图8中未图示，但终端装置也同样能够通过在图7 (a)中加入浏览器和API，使 用通用的浏览器，特别是能够提供不依赖于输出设备的硬件规格的方式的设备。
[0085] 图9是表示使用本发明的图形输入?显示装置、便携终端的构成设备，在会议中仅 在指定终端彼此之间进行会话的UI的说明图。
[0086] 虽然没有图示硬件和通信应用的动作，但通过无线LAN路由器分配IP地址，具有 单独的IP地址的终端，例如从终端1对终端5进行会话的请求和会话的情况下，可以进行 该IP地址之间的直接通信、或者进行经由白板应用的利用通信路由（route)的通信，无论 使用哪一种方法均可。
[0087] 本实施例中示出2个终端的Π 的例子。此处表示从终端1对终端5发出呼叫的 情况的事例。
[0088] 如图1中所说明的，在终端的画面（屏幕）（90000)上部，参加同一会议的终端的 ID名90002以图标的形状排列。各终端的区别除了编号以外，也可以用图标的颜色来区分， 另外没有参加或电源关闭的终端以用X号勾去的形式显示。然后，本终端的图标周围的框 线用粗线显示。
[0089] 图9(a)中，左侧的终端1要与终端5的用户取得联络的情况下，用笔90001触碰 终端5的图标。右侧的终端5的画面（屏幕）90010是还未接受呼叫的状态，所以显示如图 1等中说明的与投影的白板相同的画面（90010)。
[0090] 图9 (b)中从终端1开始对终端5进行呼叫时，在终端1的画面（屏幕）上，显示 表示正在呼叫的窗口 90020。然后，在终端5的画面（屏幕）上，显示表示从终端1发出了 呼叫的窗口 90021。同时，在终端1的画面（屏幕）上，终端5的图标闪烁，并且在终端5的 画面（屏幕）上，终端1的图标闪烁，对用户进行明示呼叫的发生的显示。
[0091] 此处，终端5响应终端1的呼叫的情况下，例如触碰正在闪烁的终端1的图标即 可，此外要取消呼叫的情况下，可以触碰终端1的呼叫窗口 90021。终端1要在中途中断呼 叫的情况下，可以触碰窗口 90020,此外虽然没有图示，但在呼叫中也可以显示在窗口或画 面（屏幕）的边角等处另外显示的表示响应呼叫的图标、拒绝呼叫的图标、以及呼叫方中断 呼叫的图标，并触碰该图标。
[0092] 图9(c)是终端5响应终端1的呼叫，开始联络的画面。两个终端上分别显示显示 为CHAT-l、CHAT-5的窗口 90030、90031。该窗口也可以直接由图9(b)的呼叫显示窗口转 移而成。该窗口是仅在终端1与终端5之间进行显示的具有与白板同样功能的输入画面，2 个终端通过在该窗口中手写输入文字，而能够进行相互联络。此时的数据的发送和接收方 法，能够利用与图1、图2所示的图形输入?显示装置的将输入的线描分割为线段并将其发 送和接收的方法相同的方法实现。
[0093] 窗口 90030、90031在此处以覆盖会议整体的白板的形式显示，从而在两个终端之 间联络时成为不能够阅览白板的显示。该情况下，例如也能够通过在用笔或手指触碰的状 态下拖拽（drag)位于两个终端上显示的窗口上部的写作"CHAT-#5"、"CHAT-#1"的部分，移 动窗口的位置，参考背面的会议整体的白板，此外虽然未图示，但也能够通过使窗口成为半 透明地覆盖触摸面板整体的显示方式，以在会议整体的白板上追加记录的形式实现仅在两 个终端之间进行联络的动作。这些动作能够由图7所示的白板应用执行。
[0094] 图10是表示本发明的图形输入?显示装置、便携终端中，显示正在进行描绘的线 是由哪位用户书写的方法的说明图。
[0095] 图10(a)表示终端#1的显示画面100000,是正在用笔100001写入画面（屏幕） 左侧的线的状态。
[0096] 图10(b)是用图形输入?显示装置投影的画面和其他终端上显示的画面，左侧是 正在由终端#1画线的画面，右侧是终端#1画线完成后的画面，具体而言是笔离开后经过了 规定时间后的画面。
[0097] 正在进行描绘的线，以指示终端#1的颜色、具体而言以显示终端#1的图标的颜色 进行画线。然后，画线完成时，该线的颜色切换为预先由终端#1指定的颜色，通常的情况下 为物理书写的白板上使用的笔的颜色，例如全员相同的颜色，例如使用黑色书写的情况下， 切换为用黑色描绘的线的颜色。在该时刻，终端#1的画线完成，在会议的议事进程上，作为 用于议论的画面处理。
[0098] 此处，假设有终端#1和终端#2等两个以上的终端同时画线的情况下，在左侧的图 中，正在分别描绘的线的颜色，以与表示正在描绘的终端ID的图标相同的颜色进行，在描 绘结束并分别经过了规定时间时，变化为各终端设定的颜色，表示描绘完成。
[0099] 图10(c)是表示同时有多个终端进行描绘时的，进行描绘显示的与图10(b)不同 的方法的例子。画面（屏幕）左侧描绘的线表示正在用终端#1画线，画面右侧描绘的线表 示正在用终端#2画线。
[0100] 此时，在各所描绘的线的终点、即线随着时间流逝按照各终端的画线而延伸的端 点，显示表示终端#1正在描绘的弹出消息100030和100040,随着端点的移动，消息的位置 也移动。然后，描绘完成后，在经过了规定时间时，与图10(b)同样地颜色发生变化，在会议 的议事进程上，作为用于议论的画面处理。
[0101] 图11是表示本发明的图形输入?显示装置、便携终端中处理的描绘数据的流的说 明图。
[0102] 本图的说明中说明数据的流，因此该图为数据移动的目的地中软件和硬件混在一 起的图。
[0103] 首先，输入到触摸面板110032的手写描绘，经由触摸面板驱动器110030输入到应 用110000。此处，描绘数据被分割为图2中说明的线段，经由无线LAN驱动器110040,由无 线LAN110041，发送到智能液晶投影仪的控制器。
[0104] 控制器接收通过无线LAN110051发送的线段包数据，经由无线LAN驱动器110050 输入到应用110010内，在线段数据包110001中统一保存。所保存的线段数据包如图2(b) 所示，以混有从多个终端输入的线段包数据的状态被保存。
[0105] 被保存的线段包数据按保存的顺序被调用（110005)，经由投影仪驱动器110060 输入到投影仪110061，作为大画面白板图像110062投影。同时经由无线LAN驱动器110050 和无线LAN110051，再次分发到各终端（110004)，经由各终端的无线LAN110041和无线LAN 驱动器110040,在终端内的线段包数据110001中统一保存。然后，与控制器同样地，该数据 按输入顺序被调用，经由显示器驱动器110010,在终端的IXD110020上显示。
[0106] 此处，如图4(a)所示，手写输入的描绘数据先发送到控制器后，描绘再次分发的 数据的情况下，为了防止手写的时刻（定时）与显示的时刻（定时）中产生时差，描绘操作 不自然，而如虚线110002所示，将用触摸面板110032输入的数据发送到控制器的同时也在 IXD110020上显示。之后，通过显示送回的数据，如图4(b)所示，能够以追踪实时描绘的线 的延伸的方式进行描绘再次分发的描绘数据的显示。
[0107] 图12是用流程图表示本发明的图形输入?显示装置、便携终端中对处理的描绘数 据的流进行操作的说明图。
[0108] 图12(a)是带有触摸面板的终端中进行描绘数据的输入和发送的部分，与图11的 110003对应。即，将用触摸面板接受的描绘作为线段接收（120000)，将其按每个线段发送 (120001)。
[0109] 图12(b)是同样地带有触摸面板的终端中进行描绘数据的输入和发送的部分。这 是如图4 (a)所示在终端内先显示描绘数据的情况，包括图11的110002。即，将用触摸面板 接受的描绘作为线段接收（120010)，在终端的LCD上将其显示（120011)，然后按每个线段 发送（120012)。
[0110] 图12(c)表示接受从投影仪再次发送而来的线段数据的终端的动作，与以图11的 对线段包数据110001保存和读取为中心的动作对应。终端首先接收线段数据（120020)，将 其保存在线段包数据中（120021)，然后读取该数据（120022)，在IXD上显示读取的线段数 据（120023)。
[0111] 图12(d)是投影仪的接收动作例，与以图11的对线段包数据110011保存和读取 为中心的动作对应。投影仪接收从各终端发送而来的线段数据（120030)，每次接收一个包 时，都在线段包数据中堆叠（stack、栈）保存（120031)。
[0112] 图12(e)表示投影仪再次发送数据，与图11的110004对应。在线段包数据中堆叠 保存的线段数据中，混有在该时刻来自多个终端的线段数据，但按写入顺序读取（120040)， 然后将混有来自各终端的数据的读取数据，再次分发到各个终端。
[0113] 图13是表示本发明的图形输入?显示装置、便携终端的会议进行途中的白板图像 的倒回再现动作的说明图。
[0114] 图7(b)中说明的线段数据包，如图11、图12中所说明的那样，通过从会议最初起 全部进行记录，例如从会议途中参加的参加者能够再次确认从会议开头起的白板写入的进 程，此外从最初参加的参加者也能够回放从会议开头起的记录。本实施例中说明用于进行 该操作的UI。
[0115] 图13(a)表示图1的各带有触摸面板的终端的屏幕（画面）。此处，特征在于，在画 面（屏幕）左下设置并显示倒回（rewind)指示（130010)按钮。在会议途中触碰倒回指示 按钮时，画面如图13(b)所示那样变化。此处，在画面（屏幕）下方显示横轴表示以从会议 开始到当前为止的时间为横轴的时间轴的条130020,在其上显示指针（pointer) 130040。 通过用笔指定该指针并左右拖动，能够使显示的画面从最新画面变化为回溯到规定时间以 前的时刻的画面。回溯的时间如130050所示那样显示，此处处于显示距最新时刻12分钟 前的画面（屏幕）的状态。
[0116] 这些动作能够通过图7所示的白板应用执行。
[0117] 图14是表示本发明的图形输入?显示装置、便携终端中，不是连同描绘过程也包 括在内，实时地显示参加者所描绘的线，而是在描绘了一定单位的全部线描之后，再一并显 示的方法的说明图。
[0118] 图14(a)表示某个终端的显示画面140000。此处，右侧描绘的线140011表示参加 者使用该终端正在用笔140011输入线描。此处，该终端的动作模式用在图15中后述的方 法，切换为SUBMIT模式，在该状态下，在终端描绘的线不是即刻分割为线段并发送，而是在 终端的操作者完成了全部的描绘之后，再一并发送，在此之前终端不进行发送。
[0119] 图14(b)表示图14(a)中参加者正在描绘时的投影仪的投影画面（屏幕）140030。 如上所述，因为没有从终端发送描绘数据，所以在投影仪上不进行任何显示。
[0120] 图14(c)表示图14(a)中操作者完成了一系列描绘，希望显示而用笔或手指触 碰"SUBMIT"按钮之后的画面（屏幕），该画面在投影仪和其他终端上也相同，一并描绘图 14(a)中输入的一定端的线描（140040)并显示。此时为了表示是终端#2的用户输入的，而 在此处如图10(c)所示，在一并描绘之后的规定时间期间，显示表示由终端#2描绘的弹出 消息140041，这与已说明的实施例同样，在规定时间的显示之后，弹出消息消失，显示为预 先设定的颜色的线。
[0121] 图15是表示本发明的图形输入?显示装置、便携终端的终端的显示画面（屏幕） 的例子的说明图。
[0122] 虽然在之前的附图中省略，但进行手写描绘的带有触摸面板的终端装置中，指定 手写线的种类等的菜单画面150010以能够选择的形式在屏幕（画面）150000上显示，本实 施例中在该屏幕的左侧显示。
[0123] 显示的菜单的构成元素，除了线条种类（直线、虚线2种）以外，还有橡皮擦、激光 指示器（laser pointer)模式的选择菜单。此处，在描绘的线条的种类之外,也可以用笔代 替橡皮擦，由此能够擦除已记载的描绘。此时，利用橡皮擦的擦除也作为线段的移动数据进 行保存，由此能够保存擦除以前的记述，在图13所示的回放再现时，能够再次确认过去的 记述。此外，激光指示器模式的特征在于，在对投影仪投影图像直接进行激光指示器照射以 夕卜，还能够在手边的带有触摸面板的终端的屏幕（画面）上进行相同的操作。
[0124] 之后的构成元素以线条的粗细和线条的颜色各有3种的情况为例进行描述。之后 是"DRAW"模式和"SUBMIT"模式的切换按钮，通过选择SUBMIT模式，能够切换为如图14所 示的进行一并描绘的模式。
[0125] 最后是"ENABLE"，这是在其他终端、特别是设定了主终端的情况下、和与液晶投影 仪分开，由一个带有触摸面板的终端构成投影仪的控制器的情况下，该终端起到主机的作 用，通过来自它的指示能够控制指定的终端的白板写入?删除的允许/禁止，"ENABLE"显 示该状况。
[0126] 图16是表示本发明的图形输入?显示装置、便携终端的用指定的终端的写入?删 除的禁止状态的说明图。
[0127] 图16 (a)表示图15中对白板写入?删除受到禁止的终端的屏幕（画面），图16所 示的"ENABLE"的文字变为"DISABLE"（160030)。同时表示输入模式的"DRAW" "SUBMIT" 按钮也被掩盖（mask)，表示不能够对终端输入。
[0128] 图16(b)表示图16(a)中终端#2成为禁止写入?删除状态时的投影仪显示 160050，也在其他终端上显示相同内容。
[0129] 终端#2的图标被规定颜色涂暗，通过其他终端和投影仪显示，其他参加者可以知 道终端#2处于不能够参加写入（写入）的状态。
[0130] 图17是表示本发明的图形输入?显示装置、便携终端的按照操作者的意愿暂时停 止终端操作的方法的说明图。
[0131] 图17(a)中，在会议中中途离开的操作者的终端屏幕（画面）170000上，在菜单画 面170010内显示操作者操作的项目。由操作者选择"OFFLINE"，由此不能在该终端上进行 写入?删除操作，此外进行控制使得画面上显示的白板图像也不可见。由此，操作者中途离 开而离席时，例如直接放下终端时，能够使其他参加者不能进行写入、删除等操作，或者在 操作者带出终端，例如放置在自己的座位时，即使通信通过无线LAN处于连接，也能够使会 议参加者以外的人不能进行白板的阅览和写入、删除。
[0132] 图17(b)是因为在会议中中途离开而按下"OFFLINE"后的终端的屏幕（画面）。 本实施例中，为了在每次中途离开时实现单独地锁定的功能，而显示离席指示画面170020， 促使参加者输入在中途离开后返回时使用的电子签名（sign)。通过输入电子签名、按下离 席指示画面右下的"ENTER"，终端屏幕成为中途离开状态的画面，成为以与离席指示画面同 样的布局在将白板的描绘全部隐藏的位置显示恢复指示画面的状态。关于所输入的电子签 名，检测其特征点并保存数据，用于与图17(c)所示的恢复指示中输入的电子签名对照。
[0133] 图17(c)是表不对恢复指不画面170040输入电子签名的图，此处表不输入了不同 的电子签名的情况。即使输入电子签名并按下"ENTER"，也因为电子签名与图17(b)不同， 所以终端显示为"INVALID ! "，不允许恢复。正确输入了电子签名的情况下，恢复指示画面 消失，返回进行白板显示的离席前的画面。
[0134] 图18是表示本发明的图形输入?显示装置、便携终端的各终端的操作者个人记录 备忘录的情况的屏幕（画面）的说明图。
[0135] 图18(a)示出了在本实施例中，在菜单画面180000的一部分设置"MEMO"按钮，通 过按下该按钮切换为"MEMO"模式。
[0136] 图18(b)是"MEMO"模式下的对终端的写入画面（屏幕），180030中记载的线描是 仅属于该终端的操作者的备忘录。该备忘录不在图18(c)所示的投影仪画面（屏幕）180040 和其他终端上显示。
[0137] 虽然没有图示，但该备忘录数据的格式与图2起所示的线段包数据相同，特别在 包数据中追加保有表示是在另行保存的白板的线段包数据的哪一时刻（显示哪个包时）进 行了写入的时间轴方向的关系的链接信息。在进行备忘录的显示时，也能够进行与如图13 所示的回放重合的显示，对于会议的全员参考的白板图像和自身的备忘录，不仅限于现在 时刻的画面（屏幕），也能够回放过去画面的显示而进行。
[0138] 图19是表示本发明的图形输入?显示装置、便携终端的自动誊清标准图形的画面 (屏幕）的说明图。
[0139] 终端屏幕190000中，有时将会议中描绘时要关注的点用圆形记号包围，或者在文 字的情况下用双重下划线等强调，存在这种使用标准的描绘形状的线的情况。
[0140] 这类描绘并不是描绘的线的形状的微小差异特别具有意义，反而是正确描绘的图 形更为有效。本实施例中，对于如手写线描190010所示的为了强调图形的一部分而记载 的圆形记号，自动识别为不是图形而是强调的标记，从而改写为准确的椭圆作为誊清结果 190020,由此能够保持白板写入的手写所致的布局的散乱。该誊清如图19(c)所示也显示 在投影仪上。
[0141] 虽然未图示，但在保存的数据包中，除了分割为线段后保存的方法以外，也可以保 存为表达标准图形的包括中心点坐标值和直径值的包数据。
[0142] 图20是表示本发明的图形输入?显示装置、便携终端的文字输入时的画面（屏 幕）例的说明图。
[0143] 使用白板的会议中，基本上全部用手写进行写入，但输入文字的情况下，将线描作 为数字信息处理，所以能够进行防止书写者的文字工整与否所引起的辨认障碍的处理。
[0144] 图20 (a)是首先用手写输入了文字（字符）的终端屏幕200000。因为用手写线 描200010输入文字（字符），所以会带有书写者的个性，大多情况下并不是易于辨认的文字 (字符）。此处，如图19(b)所示，通过对输入的文字自动地或者由写入者选择、转换，利用 0CR(0ptical Character Reader)附带的线描?文字（字符）转换功能，转换为字符码，誊 清与该字符码对应的字符串并显示（20020)。由此，在输入难以辨认的文字（字符）时自动 地进行转换，由此能够进一步改善使用白板的会议的环境。
[0145] 虽然未图示，但输入的文字（字符）可以不是作为线描而是作为字符码，与图 19(c)中说明的同样地，在保存的数据包中，以字符串的起点坐标、文字（字符）尺寸、字符 码串这样的格式保存即可。
[0146] 图20(c)表示了在输入文字（字符）时从一开始就不使用手写输入，而是用软键 盘直接输入文字（字符）进行誊清的方法。例如，特别是在该会议中使用通用的便携终端 的情况下，如果使程序构成为使用标准配置搭载的软键盘200030,通过专用的API经由0S 导入白板应用，则能够容易地实现誊清的文字（字符）的显示（200040)。输入的文字（字 符）数据的保存方法可以与图20(b)中记载的相同。
[0147] 图21是表示本发明的图形输入?显示装置、便携终端的显示会议参加者的ID的 例子的说明图。
[0148] 以上说明的图中，用终端ID编号表示了在投影仪和终端上显示的会议参加者。在 会议开始时，或者各自携带并使用自身保有的便携终端的情况下，能够不显示终端ID，而是 直接用个人名图标210010显示参加者的姓名。这在会议开始时，能够通过用图20所示的 方法各自输入姓名来实现。
[0149] 图22是表示本发明的图形输入?显示装置、便携终端的事先设定会议开始时的画 面的情况的例子的说明图。
[0150] 以往的使用白板的会议中，大多情况下在会议开始前由主办者事先在白板上记载 题目和日期、议题列表等之后进行会议。本实施例中，表示了在会议开始前，指定的参加者 (主办者）预先使用手写描绘和图20等的誊清功能，事先记载议事所需的资料（220010)， 举办会议的功能。
[0151] 事先记载的信息，除了文字和描绘以外，也能够准备从表计算软件的页面复制的 工程管理表等图。当然也可以以继续上次会议的形式，描绘直至上次为止保存的线段包数 据。
[0152] 此处，虽然未图示，但如图22所示在表中输入个人名的情况下，因为图21所示的 个人名图标中记载了姓名，所以如果还设置能够用笔将其拖动，拖入表中的"Member"而直 接写入的UI，则使用方便性好。这都能够用图形输入?显示装置应用的处理来实现。
[0153] 图23是表示使用本发明的图形输入?显示装置、便携终端的构成设备，在会议中 仅在指定终端之间进行会话的情况下的终端内结构的说明图。
[0154] 本实施例中，表示了进行用图9说明的指定终端之间的会话时，终端内的数据的 结构和数据的流。在左侧的第一终端的应用内，存在线段数据包1100001，在右侧的第二终 端的应用内，存在线段数据包1100003,这是用图11说明的控制器和所有带有触摸面板的 终端共享保有的保存了白板上显示的描绘数据的数据包。
[0155] 本实施例中，在该数据包以外，第一终端和第二终端还具有与白板数据同样地保 存图9(c)中说明的聊天板（chat board)上记载的线描的线段数据包（230000U2300011)。 该数据包是与上述保存有白板上显示的描绘数据的数据包独立的数据包，该数据包记录第 一终端和第二终端之间通过线描进行的会话，而不在白板上显示。
[0156] 该数据包（2300001、2300011)，在如图9(d)的右侧的终端那样同时与多个终端进 行会话时，保有对方终端数量的量（的数据包）。
[0157] 另外，表示该聊天板中记载的线描的线段数据包，也能够以与图14所示的一并描 绘的动作相同的方法，将第一终端与第二终端商讨后的结果，直接发送到全员共享的白板 数据，由此在白板和全员的终端屏幕上显示，保存在作为会议的议事数据的线段数据包中。
[0158] 图24是表示本发明的图形输入?显示装置、便携终端的与自动比例尺（scale)变 更相关的动作的说明图。
[0159] 本实施例中，示出了会议的参加者全员共享的白板图像的尺寸不是与便携终端或 白板的尺寸对应的固定像素数的尺寸，而是具有更大的图像尺寸的情况下的动作。
[0160] 图24(a)表示了以上说明的带有触摸面板的终端装置的屏幕（画面）。此处，如图 24(b)所示进一步画线，描绘了伸出到图24(a)的画面（屏幕）外的线的情况下，带有触摸 面板的终端装置的屏幕（画面）自动地滚动，对更大图像尺寸的白板进行写入。
[0161] 此时，用投影仪投影的白板图像，如图24(c)所示，为了显示描绘的线描整体而自 动地进行尺寸缩小显示。其他终端也与白板同样地自动转移到缩小显示，但也能够从各终 端的未图示的菜单切换为放大显示，此外，也能够从各终端对控制器发出放大显示的指示， 从如图24(c)所示的缩小显示切换为与图24(b)的终端显示同样的放大显示。
[0162] 图25是表示本发明的图形输入?显示装置、便携终端的使用摄像机确认参加者的 动作的说明图。
[0163] 智能液晶投影仪10010和会议的参加者使用的带有触摸面板的终端（10040? 10070)的动作与图1同样，所以此处省略说明。
[0164] 本实施例中，特征在于，表示参加者250002的各带有触摸面板的终端（10040? 10070)的状况的图标10012显示利用各参加者使用的带有触摸面板的终端（10040? 10070)中内置或安装的摄像机250001拍摄的参加者自身的图像。
[0165] 该图像可以是在会议开始时一次拍摄的静态图像，也可以是在会议中一直拍摄的 动态图像，会议参加者成员作为全员的共享信息显示，全员都能够确认参加者是谁、以及是 否有不准参加的人参加。
[0166] 图26是表示本发明的图形输入?显示装置、便携终端的使用摄像机确认参加者的 摄像机部的具体动作的说明图。
[0167] 如图26(a)所示，本实施例中的带有触摸面板的终端10070中，为了能够用于其他 用途、例如TV电话等，而在触摸面板侧内置或能够搭载摄像机25001。摄像机25001的朝向 通常不可动，是固定的，减少了部件数量，该情况下，为了不过度限制用摄像机25001拍摄 的范围，其拍摄视角26001通过广角镜头能够广范围地拍摄。
[0168] 用该摄像机拍摄参加者时，如图26(b)所示，相对于摄像机的拍摄区域260002,参 加者250002被拍得相当小。本实施例中，利用作为摄像机的人脸检测功能已知的技术，在 拍摄区域260002中，对参加者的脸部附近的影像260003进行提取、截出，显示在图25所示 的图标10012上。由此，能够有效地使用与画面整体相比较小的图标的面积，各参加者能够 确认参加者的脸。
[0169] 如图25所示，拍摄的图像可以是静态图像也可以是动态图像，如果是静态图像， 则通信流量（traffic)在图像传输中的占有度只需要会议开始时的临时传输即可。此外，动 态图像的情况下，其他参加者能够确认在会议途中参加者替换、或者哪一名参加者正在注 视此时的展示（presentation)或白板写入内容等状况，能够更流畅地推进会议。
[0170] 此外，本实施例也能够如下所述那样表达。即，也能够作为如下所述的程序发挥作 用：一种程序，其安装到便携终端，为了与利用标识信息确定的其他便携终端和投影仪进行 通信而被执行，上述程序的特征在于：控制触摸面板单元、显示单元和发送和接收单元，使 得按规定的间隔将从触摸面板输入的线描（线条画）信息分割成线段，与该线段的起点与 终点的坐标值和描绘线的种类、颜色等属性信息一同生成线段数据包，并将其发送到投影 仪，控制触摸面板单元、显示单元和发送和接收单元，使得在上述显示单元显示利用上述标 识信息标识的其他便携终端的用户信息，确定该用户信息，按规定的间隔将从上述触摸面 板输入的线描信息分割成线段，与该线段的起点与终点的坐标值和描绘线的种类、颜色等 属性信息一同生成线段数据包，并将其发送到该其他便携终端的用户，控制显示单元和发 送和接收单元，使得在上述显示单元显示来自利用上述标识信息标识的其他便携终端的用 户的接收数据。此外，上述程序也可以如下：在该程序中，能够执行如下功能：在上述多个 便携终端上，在上述终端内的存储器中保存由上述其他便携终端或投影仪分发的数据，通 过上述便携终端的操作，沿着时间轴返回到过去，来再现利用线段数据包描绘的线延伸的 过程。此外，上述程序也可以如下：该程序具有发起用于仅在上述多个便携终端中的作为 任意终端的第一便携终端与同为任意终端的第二便携终端之间进行直接通信的呼叫处理 的功能，受到呼叫的第二便携终端的程序具有对第一便携终端的程序的呼叫处理进行响应 的功能，第一终端和第二终端的程序能够执行从上述呼叫处理和响应完成的时刻起，使用 终端上的触摸面板和显示器，仅在该终端之间发送和接收上述包含文字（字符）和图形的 起点与终点的坐标值和描绘线的种类、颜色等属性信息的数据并将其显示的功能。此外，上 述程序也可以如下：上述程序能够执行在执行该程序的便携终端的屏幕上，利用ID编号、 颜色、图案、影像中的任一个或多个来显示连接到网络的便携终端的ID的列表的功能。此 夕卜，上述程序也可以如下：在便携终端中在朝向使用者的方向上内置或搭载有摄像机的情 况下，上述程序能够执行控制上述摄像机来拍摄能够确定使用者的影像，并在上述显示的 便携终端的ID的列表中，显示能够确定正在使用上述触摸面板的使用者的影像的功能。上 述程序也可以如下：能够执行以下处理：内置或搭载于上述便携终端的摄像机所拍摄的能 够确定使用者的影像，利用从拍摄的图像中自动检测出能够确定使用者的部位并将其截出 而生成的影像。此外，上述程序是本实施例的一例，执行将本实施例的硬件结构作为软件结 构的程序的结构也包括在本实施例中。
[0171] 附图标记说明
[0172] 10010智能液晶投影仪
[0173] 10040带有触摸面板的终端
[0174] 20040线段包数据
【权利要求】
1. 一种投影仪，其能够与多个便携终端进行通信，所述投影仪的特征在于，包括： 发送和接收单元，其与所述多个便携终端进行数据的发送和接收； 分析单元，其对从所述多个便携终端输入的文字和图形进行分析； 输出单元，其将所述分析单元分析后的文字和图形进行外部输出；和 控制器，其控制所述发送和接收单元、输出单元和分析单元， 所述控制器接收关于从所述多个便携终端中的一个便携终端输入的文字和图像的数 据，对该接收数据中包含的文字和图形的起点与终点的坐标值和描绘线的种类、颜色等属 性信息进行分析，基于该分析数据，将从所述一个便携终端输入的文字和图形依次输出到 输出单元，并发送到所述多个便携终端。
2. 如权利要求1所述的投影仪，其特征在于： 所述接收到的包含文字和图形的起点与终点的坐标值和描绘线的种类、颜色等属性信 息的数据，按接收的时间序列顺序输出并发送到所述多个便携终端。
3. 如权利要求2所述的投影仪，其特征在于： 所述接收到的包含文字和图形的起点与终点的坐标值和描绘线的种类、颜色等属性信 息的数据，按接收的时间序列顺序输出并发送到所述多个便携终端，并且按接收的时间序 列顺序保存所述接收到的数据。
4. 如权利要求1所述的投影仪，其特征在于： 所述多个便携终端通过无线通信与所述控制器连接， 所述控制器赋予所述多个便携终端的各个便携终端以单独的地址， 以使用所述地址在网络上区别所述多个便携终端进行信息通信的方式，构建仅由控制 器和所述多个便携终端构成的局域网环境。
5. 如权利要求4所述的投影仪，其特征在于： 在由进行所述外部输出或发送到所述便携终端的文字和图形构成的画面上，利用ID 编号、颜色、图案、影像中的任一个或多个来显示连接到网络的便携终端的ID的列表。
6. -种便携终端，其能够与利用标识信息确定的其他便携终端和投影仪进行通信，所 述便携终端的特征在于，包括： 显示单元，其显示文字和图形； 触摸面板，其接受来自用户的指示； 发送和接收单元，其与所述其他便携终端和投影仪进行数据的发送和接收；和 分析单元，其进行所述数据的分析， 所述便携终端按规定的间隔将从所述触摸面板输入的线描信息分割成线段，与该线段 的起点与终点的坐标值和描绘线的种类、颜色等属性信息一同生成线段数据包，并将其发 送到投影仪， 所述分析单元对从所述投影仪发送来的数据中包含的文字和图形的起点与终点的坐 标值和描绘线的种类、颜色等属性信息进行分析， 在所述显示单元，显示基于所述分析信息的文字和线段。
7. 如权利要求6所述的便携终端，其特征在于： 所述多个便携终端在所述终端内的存储器中保存由所述其他便携终端或投影仪分发 的数据， 通过所述便携终端的操作，沿着时间轴返回到过去，来再现利用线段数据包描绘的线 延伸的过程。
8. 如权利要求6所述的便携终端，其特征在于： 作为所述多个便携终端中的任意终端的第一便携终端具有对同为任意终端的第二便 携终端发起用于仅在第一终端与第二终端之间进行直接通信的呼叫处理的功能， 受到呼叫的第二便携终端具有对第一便携终端的呼叫处理进行响应的功能， 第一终端和第二终端具有：从所述呼叫处理和响应完成的时刻起，使用终端上的触摸 面板和显示器，仅在该终端之间发送和接收所述包含文字和图形的起点与终点的坐标值和 描绘线的种类、颜色等属性信息的数据并将其显示的功能。
9. 如权利要求6所述的便携终端，其特征在于： 在所述便携终端的屏幕上，利用ID编号、颜色、图案、影像中的任一个或多个来显示连 接到网络的便携终端的ID的列表。
10. 如权利要求9所述的便携终端，其特征在于： 所述便携终端能够在朝向使用者的方向上内置或搭载摄像机，并具有利用所述摄像机 拍摄能够确定使用者的影像，并在所述显示的便携终端的ID的列表中，显示能够确定正在 使用所述触摸面板的使用者的影像的功能。
11. 如权利要求10所述的便携终端，其特征在于： 内置或搭载于所述便携终端的摄像机所拍摄的能够确定使用者的影像，利用从拍摄的 图像中自动检测出能够确定使用者的部位并将其截出而生成的影像。
12. -种程序，其安装到便携终端，为了与利用标识信息确定的其他便携终端和投影仪 进行通信而被执行，所述程序的特征在于： 控制触摸面板单元、显示单元和发送和接收单元，使得按规定的间隔将从触摸面板输 入的线描信息分割成线段，与该线段的起点与终点的坐标值和描绘线的种类、颜色等属性 信息一同生成线段数据包，并将其发送到投影仪， 控制触摸面板单元、显示单元和发送和接收单元，使得在所述显示单元显示利用所述 标识信息标识的其他便携终端的用户信息，确定该用户信息，按规定的间隔将从所述触摸 面板输入的线描信息分割成线段，与该线段的起点与终点的坐标值和描绘线的种类、颜色 等属性信息一同生成线段数据包，并将其发送到该其他便携终端的用户， 控制显示单元和发送和接收单元，使得在所述显示单元显示来自利用所述标识信息标 识的其他便携终端的用户的接收数据。
13. 如权利要求12所述的程序，其特征在于，能够执行如下功能： 在所述多个便携终端上，在所述终端内的存储器中保存由所述其他便携终端或投影仪 分发的数据， 通过所述便携终端的操作，沿着时间轴返回到过去，来再现利用线段数据包描绘的线 延伸的过程。
14. 如权利要求12所述的程序，其特征在于： 具有发起用于仅在所述多个便携终端中的作为任意终端的第一便携终端与同为任意 终端的第二便携终端之间进行直接通信的呼叫处理的功能， 受到呼叫的第二便携终端的程序具有对第一便携终端的程序的呼叫处理进行响应的 功能， 第一终端和第二终端的程序能够执行从所述呼叫处理和响应完成的时刻起，使用终端 上的触摸面板和显示器，仅在该终端之间发送和接收所述包含文字和图形的起点与终点的 坐标值和描绘线的种类、颜色等属性信息的数据并将其显示的功能。
15. 如权利要求12所述的程序，其特征在于： 所述程序能够执行在执行该程序的便携终端的屏幕上，利用ID编号、颜色、图案、影像 中的任一个或多个来显示连接到网络的便携终端的ID的列表的功能。
16. 如权利要求15所述的程序，其特征在于： 在便携终端中在朝向使用者的方向上内置或搭载有摄像机的情况下，所述程序能够执 行控制所述摄像机来拍摄能够确定使用者的影像，并在所述显示的便携终端的ID的列表 中，显示能够确定正在使用所述触摸面板的使用者的影像的功能。
17. 如权利要求16所述的程序，其特征在于： 能够执行以下处理：内置或搭载于所述便携终端的摄像机所拍摄的能够确定使用者的 影像，利用从拍摄的图像中自动检测出能够确定使用者的部位并将其截出而生成的影像。
【文档编号】H04N7/15GK104106037SQ201280069430
【公开日】2014年10月15日 申请日期:2012年2月13日 优先权日:2012年2月13日
【发明者】清水宏, 吉泽和彦, 铃木基之, 西岛英男, 益冈信夫 申请人:日立麦克赛尔株式会社
【专利摘要】本发明防止向白板写入的参加者的位置妨碍白板阅览，为了之后利用包括写入的记录的途中经过的过程而保存参加者全员的写入记录过程。参加者全员的终端将所输入的任意的线描分割为线段并依次发送到上述控制器，此外具有带有触摸面板的终端，其具有在带有触摸面板的终端的显示器上显示从上述控制器发送的线描信息的功能，此外使用内置或能够连接控制器的液晶投影仪，其中该控制器具有如下功能：将从各带有触摸面板的终端发送的线描信息依次记录在数据库中，并追加记录在白板图像的图像存储器中，用上述液晶投影仪在墙面上投影上述图像存储器内容，同时对各带有触摸面板的终端发送上述数据库。
【专利说明】投影仪，图形输入?显示装置，便携终端和程序
【技术领域】
[0001] 本发明涉及在会议或发表会等中能够由多名参加者同时通过手写输入自由地进 行写入或修正的电子构建的图形输入?显示装置。
【背景技术】
[0002] 通常，特别是在要求边提出新的事项边进行的会议和发表会中，优选在如黑板那 样大尺寸的屏幕上存在能够通过手写直接写入或订正、删除或变更等、参加者全员能够同 时阅览的画面。
[0003] -般而言，小规模至中规模的会议等中有效地利用能够在白色的面板上用水性笔 书写或订正、擦除的白板。该白板中，进而具有用图像扫描仪读取书写的内容的最终结果、 印刷在纸上而保留会议结果的记录（备忘录）的功能的白板得到了使用。
[0004] 进而，作为将会议结果的记录作为电子信息保存?管理的方法，在现有技术文献的 专利文献1中，记载了如下发明：将多个具备手写输入装置的终端装置、和用各终端装置手 写输入的信息集中在服务器中，对该服务器的显示窗口内的每个指定区域设定各终端的手 写输入区域，显示用各个终端输入的信息。
[0005] 此外，专利文献2中，记载了适合由静态图像通信装置以数字信号发送用电传书 写（Telewriting)装置输入的手写线的数据格式。
[0006] 现有技术文献
[0007] 专利文献
[0008] 专利文献1 :日本特开2008-269525号公报
[0009] 专利文献2 :日本特开平6-296210号公报
【发明内容】
[0010] 发明想要解决的技术问题
[0011] 本发明想要解决的技术问题在于，不会因参加者全员一同能够阅览的白板进行书 写或编辑作业而妨碍白板的阅览。此外，还在于：设置用于之后阅览连书写的记录的中途过 程也包括在内的过程的单元，为了有效率地进行会议和基于会议结果的活动，而提供能够 更有效地利用会议中的议论等信息的手段（装置、方法）。
[0012] 于是，本发明的目的在于，提高使用投影仪和终端的会议等中的用户（使用者）的 便利性。
[0013] 用于解决问题的技术方案
[0014] 本发明的目的作为其一例能够通过权利要求中记载的结构达成。
[0015] 发明效果
[0016] 根据本发明，能够提高使用投影仪和终端的会议等中的用户的便利性。
【专利附图】
【附图说明】
[0017] 图1是表示构成图形输入?显示装置、便携终端的各设备之间的连接和具体的动 作图像的说明图。
[0018] 图2是说明图形输入?显示装置、便携终端中用于同时输入多条线段而显示的数 据的处理和格式（format)的说明图。
[0019] 图3是表示图形输入?显示装置、便携终端的、从各终端输出数据包、对投影仪发 送数据、以及从投影仪对终端再次分发数据包的说明图。
[0020] 图4是表示图形输入?显示装置、便携终端中对带有触摸面板的终端装置输入线 描时的显示方法的说明图。
[0021] 图5是表示图形输入?显示装置、便携终端的系统结构的框图的例子。
[0022] 图6是表示图形输入?显示装置、便携终端的智能液晶投影仪的系统结构的框图 的例子。
[0023] 图7是说明图形输入?显示装置的软件的结构与硬件的关系的第一实施例的说明 图。
[0024] 图8是说明表示图形输入?显示装置、便携终端的软件的结构与硬件的关系的第 二实施例的说明图。
[0025] 图9是说明表示使用图形输入?显示装置、便携终端的构成设备，在会议中仅在指 定终端彼此之间进行会话的UI的说明图。
[0026] 图10是表示在图形输入?显示装置、便携终端中，显示正在进行描绘的线是由哪 位用户书写的方法的说明图。
[0027] 图11是表示图形输入?显示装置、便携终端中处理的描绘数据的流的说明图。
[0028] 图12是用流程图表示图形输入?显示装置、便携终端中对处理的描绘数据的流进 行操作的动作的说明图。
[0029] 图13是表示图形输入?显示装置、便携终端的会议进行途中的白板图像的倒回再 现动作的说明图。
[0030] 图14是表示在图形输入?显示装置、便携终端中，在描绘了参加者描绘的一定单 位的全部线描之后一并显示的方法的说明图。
[0031] 图15是表示图形输入?显示装置、便携终端的终端的显示屏幕（画面）的例子的 说明图。
[0032] 图16是表示图形输入?显示装置、便携终端的禁止利用指定终端进行书写?删除 的状态的说明图。
[0033] 图17是表示图形输入?显示装置、便携终端的按照操作者的意愿暂时停止终端操 作的方法的说明图。
[0034] 图18是表示图形输入?显示装置、便携终端的各终端的操作者个人记录备忘录的 情况的画面的说明图。
[0035] 图19是表示图形输入?显示装置、便携终端的自动誊清标准图形的画面的说明 图。
[0036] 图20是表示图形输入?显示装置、便携终端的文字输入时的画面例的说明图。
[0037] 图21是表示图形输入?显示装置、便携终端的显示会议参加者的ID的例子的说 明图。
[0038] 图22是表示图形输入?显示装置、便携终端的事先设定会议开始时的画面的情况 的例子的说明图。
[0039] 图23是表示使用图形输入?显示装置、便携终端的构成设备，在会议中仅在指定 终端彼此之间进行会话的情况下的终端内结构的说明图。
[0040] 图24是表示图形输入?显示装置、便携终端的与自动比例尺（scale)变更相关的 动作的说明图。
[0041] 图25是表示图形输入?显示装置、便携终端的使用摄像机确认参加者的动作的说 明图。
[0042] 图26是表示图形输入?显示装置、便携终端的使用摄像机确认参加者的摄像机部 的具体动作的说明图。
【具体实施方式】
[0043] 以下用【专利附图】
【附图说明】本发明的图形输入?显示装置的具体实施例。
[0044] 图1是表示构成本发明的图形输入?显示装置、便携终端的各设备之间的连接和 具体动作图像的说明图。
[0045] 在墙面或屏幕上投影白板的装置是智能液晶投影仪10010。它由液晶投影仪 10020和控制器10030构成，液晶投影仪10020和控制器10030既可以内置在同一壳体内， 也可以是分开构成，从控制器10030用模拟或数字信号向液晶投影仪10020传输投影图像 数据的方式，可以是任意的。传输而来的投影图像被投影在墙面上（10011)，成为大画面 (大屏幕）的图像，能够由会议的参加者全员阅览。
[0046] 会议的参加者各自具有使触摸面板和同尺寸的显示器一体化而成的带有触摸面 板的终端（10040?10070)，在触摸面板上能够用笔（10041,10042)进行手写线描（线条 画）的输入和编辑。
[0047] 在本实施例中，智能液晶投影仪10010内的控制器与各带有触摸面板的终端 (10040?10070)之间，通过无线构成的LAN(Local AreaNetwork :局域网）连接。该LAN环 境可以使用一般的办公室等中共享使用的无线LAN环境，但本实施例中，由将控制器10030 作为路由器从该控制器得到IP地址仅在被连接的各带有触摸面板的终端（10040?10070) 之间形成闭合的连接环境的LAN构成。会议开始时的动作是，通过已经在控制器中注册了 MAC地址等的多个带有触摸面板的终端之间分配IP地址，对于会议参加者带来的带有触摸 面板的终端，利用控制器上设置的操作开关、通过从控制器对终端输入由液晶投影仪投影 的ID码等，由此构建通信连接环境。
[0048] 以下说明具体动作。对各带有触摸面板的终端（10040?10070)用笔（10041、 10042)输入的线，在本例中，是用带有触摸面板的终端（10040)和带有触摸面板的终端 (10070)这两台终端同时进行线描的输入的状态。即，最终显示的白板图像上，两条线描同 时持续延伸，以与犹如两名参加者同时在以往的白板上物理书写的情况相同的状态显示。
[0049] 与投影的白板图像10011相同的图像，同时显示在各带有触摸面板的终端 (10040?10070)上，会议参加者能够一边观看最新的白板图像，一边对其进行加工?修正。
[0050] 在投影和带有触摸面板的终端（10040?10070)上显示的图像上，重叠显示 有表示参加会议的参加者的各带有触摸面板的终端（10040?10070)的状况的图标 (icon) 10012。本实施例中有4个终端参加，但本例中的会议系统中最多能够有6个终端参 力口，其中4号和6号是参加者缺席或者带有触摸面板的终端不工作的状态。参加会议的参加 者所具有的各带有触摸面板的终端（10040?10070)，此处是标识为终端ID#1 (10040)、终 端 ID#2 (10050)、终端 ID#3 (10060)、终端 ID#5 (10070)，其中 ID#1 (10040)和 ID#2 (10050) 的终端处于正在同时输入线描的状态。
[0051] 图2是说明本发明的图形输入?显示装置、便携终端中用于同时输入并显示多条 线段的数据的处理和格式的说明图。
[0052] 如图2(a)所示，用笔20001对带有触摸面板的终端输入的线描（线条画）20000， 通过终端内的转换处理20010,被转换为由多条直线构成的线段20030的集合体20020。
[0053] 各线段被作为起点Xstart (以下称为Xs)、Ystart (以下称为Ys)、Xend (以下称为 Xe)、Yend (以下称为Ye)处理。
[0054] 图2(b)表示将输入的线描分割而得到的各线段按每个线段作为数据包（data packet) 20040处理的数据格式。各数据包由输入了该线段的终端的终端ID、起点和终点的 坐标、后述的线的粗细、颜色、种类、以及根据橡皮擦、激光指示器（laser pointer)等多种 使用方法而定的线条种类的数据构成。
[0055] 这些线段数据由各终端按照时间轴20050输入。各终端中，在用户看来是一笔输 入作为一条线描（图2(a) 20060)的，而能够当作书写进行输入，但实际上是按以规定的 采样时间间隔分割得到的每个线段，以来自终端1的输入（20060)和来自终端2的输入 (20070)混合的状态，由上述控制器10030接收。
[0056] 接收到的包20040在控制器10030内按接收顺序保存为数据列表，由此按接收顺 序时序地向构建白板图像的未图示的影像存储器、各带有触摸面板的终端输出（20080)。接 收了输出后的影像存储器按照接收的包数据顺序，在自身的影像存储器内将各线段数据作 为图像数据写入。此外，接收的各终端也同样地在自身的影像存储器内将各线段构建为图 像数据并输出。
[0057] 通过该方法，能够进行使多名参加者同时写入的线描在外观上看起来像是同时有 多条线在画面（屏幕）上持续延伸的处理。
[0058] 图3是表示本发明的图形输入?显示装置、便携终端的、从各终端输出数据包、对 投影仪发送数据、以及从投影仪对终端再次分发数据包的说明图。
[0059] 从终端#1(30001)输出的表示线段数据的数据包，在每个规定的采样定时（时刻） 生成，如30010、30011、30012所示，按各线段单位发送到智能液晶投影仪的控制器30003。 与该发送数据非同步地，从终端#2如30020、30021所示向控制器30003发送同样地在每个 规定的采样定时（时刻）静止（生成）的表示线段数据的数据包。
[0060] 控制器按接收顺序接收并保存这些数据包，按照其顺序在液晶投影仪上显示，并 且再次分发到各终端30004。该分发定时（timing)可以按规定的定时间隔动作，例如以按 照投影仪或各终端的显示部的显示装置的帧定时对准的速度发送。
[0061] 由此，在墙面上投影的大屏幕的投影仪图像、和各参加者的带有触摸面板的终端 装置的显示部上，用终端#1和终端#2同时写入、并且随着写入而延伸的线能够以在相同画 面上同时延伸的方式显示，并且能够在外观上看起来像是从多个终端输入的线描同时被显 不一样。
[0062] 图4是表示本发明的图形输入?显示装置、便携终端中对带有触摸面板的终端装 置输入线描时的显示方法的说明图。
[0063] 如图3中所说明的，利用各终端的触摸面板输入的线段数据，先被发送到控制器， 与来自其他终端的输入合成之后，再送到各终端并显示。该情况下，从用笔在触摸面板上画 线到实际显示为止，在用笔输入线的时刻与实际在终端上显示的线的显示时刻之间，会发 生相当于对控制器的数据的往返、以及控制器对数据合成所需的时间量的轻微延迟，画线 并不会立刻显示，造成使用不便。
[0064] 本实施例中，首先在图4(a)中，带有触摸面板的终端装置，基于用笔输入的线描 数据，进行即刻的线显示。通过该终端内数据显示40000,没有上述时间差，即刻显示用笔描 绘的线描，所以能够像用铅笔直接书写线描一般，进行自然的输入。
[0065] 接着，显示从控制器再次分发而来的线段数据。接收数据显示40010以按临摹已 在用笔书写时显示的线描的方式，具有上述延迟时间差地追踪的方式显示线描。基本上该 线显示与最初用笔写入线描时相同的线，但为了与终端内的显示区分，用区分开颜色或粗 细等显示格式的线显示接收的线。从此后起显示的接收数据显示40010是正式向白板写入 的线描。
[0066] 图5是表示本发明的图形输入?显示装置、便携终端的便携终端的系统结构的框 图的例子。
[0067] 本实施例中，便携终端使用一般的计算机系统的结构，以CPU50000为中心，用总 线50001连接了各种硬件，各硬件内置有未图示的硬件接口，按照在CPU上运行的程序的控 制进行数据的输入、保存、输出等控制。
[0068] 终端以CPU为核心，由作为显示装置的IXD50010、构建在显示装置上显示的图像 的V-RAM(Video-RAM) 50050、以在IXD上重叠的状态检测笔或手指的接触作为坐标值的触 摸面板50020、保存CPU50000所执行的程序和基本数据的闪存50060、进行终端的电源开/ 关（0N/0FF)和背光源的调整等的各种开关50030、CPU50000用作工作区的RAM50070、例如 摄像机50040等上述触摸面板以外的图像数据的输入装置、以及发送和接收对输入的线描 进行转换后的线段数据的无线LAN50080构成。各装置中，如上所述具有未图示的接口，通 过与CPU总线50001连接，CPU上运行的程序能够处理各装置的输入输出数据。
[0069] 图6是表示本发明的图形输入?显示装置、便携终端的智能液晶投影仪的系统结 构的框图的例子。
[0070] 本实施例中，智能液晶投影仪也与图5所示的终端同样，使用一般的计算机系统 的结构，以CPU60000为中心，用总线60001连接了各种硬件，各硬件内置有未图示的硬件接 口，按照在CPU上运行的程序的控制进行数据的输入、保存、输出等控制。
[0071] 智能液晶投影仪以CPU为核心，由内置或外接的投影仪60010、构建发送到投影仪 进行显示的图像的V-RAM (Video-RAM) 60040、进行电源开/关（0N/0FF)和各种操作的各种 开关60020、保存CPU60000所执行的程序和基本数据的闪存60050、CPU60000用作工作区 的RAM60060、以及对各带有触摸面板的终端赋予IP地址而构建LAN并进行从各终端发送的 线段包的接收的再次发送的无线LAN路由器60030构成。各装置中，如上所述具有未图示 的接口，通过与CPU总线60001连接，CPU上运行的程序能够处理各装置的输入输出数据。
[0072] 图7是说明表示本发明的图形输入?显示装置、便携终端的软件的结构与硬件的 关系的第一实施例的说明图。
[0073] 图7(a)表示终端装置的结构，在操作系统（以下称为0S) 70010的整体控制下工 作，在该0S的管理下，执行白板应用（application)70000。白板应用与0S之间，每个硬件 通过应用接口（以下称为4?1)70001、70002、70003连接，白板应用经由05与各硬件进行数 据的发送和接收。
[0074] 构成利用触摸面板70021输入的手写线描的数据，通过触摸面板驱动器70011被 输入到0S，经由API70001被输入到白板应用。此时，图3中说明的采样定时（时刻）按照 指示将触摸面板上的坐标从白板应用导入到0S的定时（时刻）进行，导入笔或手指是接 触还是离开了触摸面板、和接触的情况下的坐标，转换为图2中说明的每个线段的包数据， 经由 API70002、0S70010、LCD 驱动器 70013,在 LCD 上显示（70023)。同时经由 API70002、 0S70010、无线LAN驱动器70012,由无线LAN70022向智能液晶投影仪发送。
[0075] 图7(b)表示智能液晶投影仪的结构，特别是控制器的结构，在0S70050的整体控 制下工作，在该0S的管理下执行白板应用70040。白板应用与0S之间，每个硬件通过应用 接口（以下称为API)70041、70042连接，白板应用经由0S与各硬件进行数据的发送和接 收。
[0076] 无线LAN路由器80062中，与各终端连接，从连接的终端发送的构成输入的手写线 描的线段数据，通过无线LAN驱动器70052输入到0S，经由API70042输入到白板应用。该 数据从多个终端发送，但对其按接收的时间序列顺序进行数据列表化，用白板应用进行保 存，同时经由API70041、0S70050通过液晶投影仪驱动器70051发送到液晶投影仪硬件，作 为投影画面70061显示。
[0077] 同时，从多个终端接收的线段数据的集合，经由API70042、0S70050,通过无线LAN 驱动器70052利用来自无线LAN路由器70062的电波发射（发送），向各终端再次分发。
[0078] 转换为图2中说明的每个线段的包数据，经由API70003、0S70010、IXD驱动器 70013,在 LCD 上显示（70023)。同时，经由 API70002、0S70010、无线 LAN 驱动器 70012,由 无线LAN70022向智能液晶投影仪发送。
[0079] 此处，在图7(b)中保存的数据包，在液晶投影仪进行了显示或向各终端进行了再 次发送的时刻可以丢弃，但通过保存会议中的所有数据，能够保留为按时序（时间序列）保 存会议中对白板写入的内容的会议记录，此外有会议途中参加的终端的情况下，也能够通 过发送从会议开始时起的数据包，用白板书写信息确认参加时刻以前的议论（内容）。这通 过在图7(a)所示的各终端上也进行保存，能够在会议途中随时重新确认从会议开始时起 的议事进程，并且还能够按每个终端保留会议记录。
[0080] 图8是表示示出本发明的图形输入?显示装置、便携终端的软件结构与硬件的关 系的第二实施例的说明图。
[0081] 图8(a)示出图7(b)的智能液晶投影仪、特别是控制部的结构，其结构与图7(b) 的结构相同，省略详细说明。
[0082] 本实施例中，特征在于，对在液晶投影仪上显示的显示图像进行处理的程序，不是 使用白板应用80000,而是使用作为通用的显示程序的web浏览器。
[0083] HTML5这样的网页（hom印age)描述语言中，除了迄今为止的按图像数据显示图形 图像（graph image)的功能以外，还存在如图8(b)所示设定线段的起点和终点、颜色和宽 度等属性而显示任意线段的功能。使用该功能，将从白板应用输出的线段数据转换为HTML5 的描述语言之后，经由API80002、0S80010、API80031输入到浏览器80030,浏览器80030经 由API80031、0S80010、液晶投影仪驱动器80013,被投影作为白板图像80023。
[0084] 虽然图8中未图示，但终端装置也同样能够通过在图7 (a)中加入浏览器和API，使 用通用的浏览器，特别是能够提供不依赖于输出设备的硬件规格的方式的设备。
[0085] 图9是表示使用本发明的图形输入?显示装置、便携终端的构成设备，在会议中仅 在指定终端彼此之间进行会话的UI的说明图。
[0086] 虽然没有图示硬件和通信应用的动作，但通过无线LAN路由器分配IP地址，具有 单独的IP地址的终端，例如从终端1对终端5进行会话的请求和会话的情况下，可以进行 该IP地址之间的直接通信、或者进行经由白板应用的利用通信路由（route)的通信，无论 使用哪一种方法均可。
[0087] 本实施例中示出2个终端的Π 的例子。此处表示从终端1对终端5发出呼叫的 情况的事例。
[0088] 如图1中所说明的，在终端的画面（屏幕）（90000)上部，参加同一会议的终端的 ID名90002以图标的形状排列。各终端的区别除了编号以外，也可以用图标的颜色来区分， 另外没有参加或电源关闭的终端以用X号勾去的形式显示。然后，本终端的图标周围的框 线用粗线显示。
[0089] 图9(a)中，左侧的终端1要与终端5的用户取得联络的情况下，用笔90001触碰 终端5的图标。右侧的终端5的画面（屏幕）90010是还未接受呼叫的状态，所以显示如图 1等中说明的与投影的白板相同的画面（90010)。
[0090] 图9 (b)中从终端1开始对终端5进行呼叫时，在终端1的画面（屏幕）上，显示 表示正在呼叫的窗口 90020。然后，在终端5的画面（屏幕）上，显示表示从终端1发出了 呼叫的窗口 90021。同时，在终端1的画面（屏幕）上，终端5的图标闪烁，并且在终端5的 画面（屏幕）上，终端1的图标闪烁，对用户进行明示呼叫的发生的显示。
[0091] 此处，终端5响应终端1的呼叫的情况下，例如触碰正在闪烁的终端1的图标即 可，此外要取消呼叫的情况下，可以触碰终端1的呼叫窗口 90021。终端1要在中途中断呼 叫的情况下，可以触碰窗口 90020,此外虽然没有图示，但在呼叫中也可以显示在窗口或画 面（屏幕）的边角等处另外显示的表示响应呼叫的图标、拒绝呼叫的图标、以及呼叫方中断 呼叫的图标，并触碰该图标。
[0092] 图9(c)是终端5响应终端1的呼叫，开始联络的画面。两个终端上分别显示显示 为CHAT-l、CHAT-5的窗口 90030、90031。该窗口也可以直接由图9(b)的呼叫显示窗口转 移而成。该窗口是仅在终端1与终端5之间进行显示的具有与白板同样功能的输入画面，2 个终端通过在该窗口中手写输入文字，而能够进行相互联络。此时的数据的发送和接收方 法，能够利用与图1、图2所示的图形输入?显示装置的将输入的线描分割为线段并将其发 送和接收的方法相同的方法实现。
[0093] 窗口 90030、90031在此处以覆盖会议整体的白板的形式显示，从而在两个终端之 间联络时成为不能够阅览白板的显示。该情况下，例如也能够通过在用笔或手指触碰的状 态下拖拽（drag)位于两个终端上显示的窗口上部的写作"CHAT-#5"、"CHAT-#1"的部分，移 动窗口的位置，参考背面的会议整体的白板，此外虽然未图示，但也能够通过使窗口成为半 透明地覆盖触摸面板整体的显示方式，以在会议整体的白板上追加记录的形式实现仅在两 个终端之间进行联络的动作。这些动作能够由图7所示的白板应用执行。
[0094] 图10是表示本发明的图形输入?显示装置、便携终端中，显示正在进行描绘的线 是由哪位用户书写的方法的说明图。
[0095] 图10(a)表示终端#1的显示画面100000,是正在用笔100001写入画面（屏幕） 左侧的线的状态。
[0096] 图10(b)是用图形输入?显示装置投影的画面和其他终端上显示的画面，左侧是 正在由终端#1画线的画面，右侧是终端#1画线完成后的画面，具体而言是笔离开后经过了 规定时间后的画面。
[0097] 正在进行描绘的线，以指示终端#1的颜色、具体而言以显示终端#1的图标的颜色 进行画线。然后，画线完成时，该线的颜色切换为预先由终端#1指定的颜色，通常的情况下 为物理书写的白板上使用的笔的颜色，例如全员相同的颜色，例如使用黑色书写的情况下， 切换为用黑色描绘的线的颜色。在该时刻，终端#1的画线完成，在会议的议事进程上，作为 用于议论的画面处理。
[0098] 此处，假设有终端#1和终端#2等两个以上的终端同时画线的情况下，在左侧的图 中，正在分别描绘的线的颜色，以与表示正在描绘的终端ID的图标相同的颜色进行，在描 绘结束并分别经过了规定时间时，变化为各终端设定的颜色，表示描绘完成。
[0099] 图10(c)是表示同时有多个终端进行描绘时的，进行描绘显示的与图10(b)不同 的方法的例子。画面（屏幕）左侧描绘的线表示正在用终端#1画线，画面右侧描绘的线表 示正在用终端#2画线。
[0100] 此时，在各所描绘的线的终点、即线随着时间流逝按照各终端的画线而延伸的端 点，显示表示终端#1正在描绘的弹出消息100030和100040,随着端点的移动，消息的位置 也移动。然后，描绘完成后，在经过了规定时间时，与图10(b)同样地颜色发生变化，在会议 的议事进程上，作为用于议论的画面处理。
[0101] 图11是表示本发明的图形输入?显示装置、便携终端中处理的描绘数据的流的说 明图。
[0102] 本图的说明中说明数据的流，因此该图为数据移动的目的地中软件和硬件混在一 起的图。
[0103] 首先，输入到触摸面板110032的手写描绘，经由触摸面板驱动器110030输入到应 用110000。此处，描绘数据被分割为图2中说明的线段，经由无线LAN驱动器110040,由无 线LAN110041，发送到智能液晶投影仪的控制器。
[0104] 控制器接收通过无线LAN110051发送的线段包数据，经由无线LAN驱动器110050 输入到应用110010内，在线段数据包110001中统一保存。所保存的线段数据包如图2(b) 所示，以混有从多个终端输入的线段包数据的状态被保存。
[0105] 被保存的线段包数据按保存的顺序被调用（110005)，经由投影仪驱动器110060 输入到投影仪110061，作为大画面白板图像110062投影。同时经由无线LAN驱动器110050 和无线LAN110051，再次分发到各终端（110004)，经由各终端的无线LAN110041和无线LAN 驱动器110040,在终端内的线段包数据110001中统一保存。然后，与控制器同样地，该数据 按输入顺序被调用，经由显示器驱动器110010,在终端的IXD110020上显示。
[0106] 此处，如图4(a)所示，手写输入的描绘数据先发送到控制器后，描绘再次分发的 数据的情况下，为了防止手写的时刻（定时）与显示的时刻（定时）中产生时差，描绘操作 不自然，而如虚线110002所示，将用触摸面板110032输入的数据发送到控制器的同时也在 IXD110020上显示。之后，通过显示送回的数据，如图4(b)所示，能够以追踪实时描绘的线 的延伸的方式进行描绘再次分发的描绘数据的显示。
[0107] 图12是用流程图表示本发明的图形输入?显示装置、便携终端中对处理的描绘数 据的流进行操作的说明图。
[0108] 图12(a)是带有触摸面板的终端中进行描绘数据的输入和发送的部分，与图11的 110003对应。即，将用触摸面板接受的描绘作为线段接收（120000)，将其按每个线段发送 (120001)。
[0109] 图12(b)是同样地带有触摸面板的终端中进行描绘数据的输入和发送的部分。这 是如图4 (a)所示在终端内先显示描绘数据的情况，包括图11的110002。即，将用触摸面板 接受的描绘作为线段接收（120010)，在终端的LCD上将其显示（120011)，然后按每个线段 发送（120012)。
[0110] 图12(c)表示接受从投影仪再次发送而来的线段数据的终端的动作，与以图11的 对线段包数据110001保存和读取为中心的动作对应。终端首先接收线段数据（120020)，将 其保存在线段包数据中（120021)，然后读取该数据（120022)，在IXD上显示读取的线段数 据（120023)。
[0111] 图12(d)是投影仪的接收动作例，与以图11的对线段包数据110011保存和读取 为中心的动作对应。投影仪接收从各终端发送而来的线段数据（120030)，每次接收一个包 时，都在线段包数据中堆叠（stack、栈）保存（120031)。
[0112] 图12(e)表示投影仪再次发送数据，与图11的110004对应。在线段包数据中堆叠 保存的线段数据中，混有在该时刻来自多个终端的线段数据，但按写入顺序读取（120040)， 然后将混有来自各终端的数据的读取数据，再次分发到各个终端。
[0113] 图13是表示本发明的图形输入?显示装置、便携终端的会议进行途中的白板图像 的倒回再现动作的说明图。
[0114] 图7(b)中说明的线段数据包，如图11、图12中所说明的那样，通过从会议最初起 全部进行记录，例如从会议途中参加的参加者能够再次确认从会议开头起的白板写入的进 程，此外从最初参加的参加者也能够回放从会议开头起的记录。本实施例中说明用于进行 该操作的UI。
[0115] 图13(a)表示图1的各带有触摸面板的终端的屏幕（画面）。此处，特征在于，在画 面（屏幕）左下设置并显示倒回（rewind)指示（130010)按钮。在会议途中触碰倒回指示 按钮时，画面如图13(b)所示那样变化。此处，在画面（屏幕）下方显示横轴表示以从会议 开始到当前为止的时间为横轴的时间轴的条130020,在其上显示指针（pointer) 130040。 通过用笔指定该指针并左右拖动，能够使显示的画面从最新画面变化为回溯到规定时间以 前的时刻的画面。回溯的时间如130050所示那样显示，此处处于显示距最新时刻12分钟 前的画面（屏幕）的状态。
[0116] 这些动作能够通过图7所示的白板应用执行。
[0117] 图14是表示本发明的图形输入?显示装置、便携终端中，不是连同描绘过程也包 括在内，实时地显示参加者所描绘的线，而是在描绘了一定单位的全部线描之后，再一并显 示的方法的说明图。
[0118] 图14(a)表示某个终端的显示画面140000。此处，右侧描绘的线140011表示参加 者使用该终端正在用笔140011输入线描。此处，该终端的动作模式用在图15中后述的方 法，切换为SUBMIT模式，在该状态下，在终端描绘的线不是即刻分割为线段并发送，而是在 终端的操作者完成了全部的描绘之后，再一并发送，在此之前终端不进行发送。
[0119] 图14(b)表示图14(a)中参加者正在描绘时的投影仪的投影画面（屏幕）140030。 如上所述，因为没有从终端发送描绘数据，所以在投影仪上不进行任何显示。
[0120] 图14(c)表示图14(a)中操作者完成了一系列描绘，希望显示而用笔或手指触 碰"SUBMIT"按钮之后的画面（屏幕），该画面在投影仪和其他终端上也相同，一并描绘图 14(a)中输入的一定端的线描（140040)并显示。此时为了表示是终端#2的用户输入的，而 在此处如图10(c)所示，在一并描绘之后的规定时间期间，显示表示由终端#2描绘的弹出 消息140041，这与已说明的实施例同样，在规定时间的显示之后，弹出消息消失，显示为预 先设定的颜色的线。
[0121] 图15是表示本发明的图形输入?显示装置、便携终端的终端的显示画面（屏幕） 的例子的说明图。
[0122] 虽然在之前的附图中省略，但进行手写描绘的带有触摸面板的终端装置中，指定 手写线的种类等的菜单画面150010以能够选择的形式在屏幕（画面）150000上显示，本实 施例中在该屏幕的左侧显示。
[0123] 显示的菜单的构成元素，除了线条种类（直线、虚线2种）以外，还有橡皮擦、激光 指示器（laser pointer)模式的选择菜单。此处，在描绘的线条的种类之外,也可以用笔代 替橡皮擦，由此能够擦除已记载的描绘。此时，利用橡皮擦的擦除也作为线段的移动数据进 行保存，由此能够保存擦除以前的记述，在图13所示的回放再现时，能够再次确认过去的 记述。此外，激光指示器模式的特征在于，在对投影仪投影图像直接进行激光指示器照射以 夕卜，还能够在手边的带有触摸面板的终端的屏幕（画面）上进行相同的操作。
[0124] 之后的构成元素以线条的粗细和线条的颜色各有3种的情况为例进行描述。之后 是"DRAW"模式和"SUBMIT"模式的切换按钮，通过选择SUBMIT模式，能够切换为如图14所 示的进行一并描绘的模式。
[0125] 最后是"ENABLE"，这是在其他终端、特别是设定了主终端的情况下、和与液晶投影 仪分开，由一个带有触摸面板的终端构成投影仪的控制器的情况下，该终端起到主机的作 用，通过来自它的指示能够控制指定的终端的白板写入?删除的允许/禁止，"ENABLE"显 示该状况。
[0126] 图16是表示本发明的图形输入?显示装置、便携终端的用指定的终端的写入?删 除的禁止状态的说明图。
[0127] 图16 (a)表示图15中对白板写入?删除受到禁止的终端的屏幕（画面），图16所 示的"ENABLE"的文字变为"DISABLE"（160030)。同时表示输入模式的"DRAW" "SUBMIT" 按钮也被掩盖（mask)，表示不能够对终端输入。
[0128] 图16(b)表示图16(a)中终端#2成为禁止写入?删除状态时的投影仪显示 160050，也在其他终端上显示相同内容。
[0129] 终端#2的图标被规定颜色涂暗，通过其他终端和投影仪显示，其他参加者可以知 道终端#2处于不能够参加写入（写入）的状态。
[0130] 图17是表示本发明的图形输入?显示装置、便携终端的按照操作者的意愿暂时停 止终端操作的方法的说明图。
[0131] 图17(a)中，在会议中中途离开的操作者的终端屏幕（画面）170000上，在菜单画 面170010内显示操作者操作的项目。由操作者选择"OFFLINE"，由此不能在该终端上进行 写入?删除操作，此外进行控制使得画面上显示的白板图像也不可见。由此，操作者中途离 开而离席时，例如直接放下终端时，能够使其他参加者不能进行写入、删除等操作，或者在 操作者带出终端，例如放置在自己的座位时，即使通信通过无线LAN处于连接，也能够使会 议参加者以外的人不能进行白板的阅览和写入、删除。
[0132] 图17(b)是因为在会议中中途离开而按下"OFFLINE"后的终端的屏幕（画面）。 本实施例中，为了在每次中途离开时实现单独地锁定的功能，而显示离席指示画面170020， 促使参加者输入在中途离开后返回时使用的电子签名（sign)。通过输入电子签名、按下离 席指示画面右下的"ENTER"，终端屏幕成为中途离开状态的画面，成为以与离席指示画面同 样的布局在将白板的描绘全部隐藏的位置显示恢复指示画面的状态。关于所输入的电子签 名，检测其特征点并保存数据，用于与图17(c)所示的恢复指示中输入的电子签名对照。
[0133] 图17(c)是表不对恢复指不画面170040输入电子签名的图，此处表不输入了不同 的电子签名的情况。即使输入电子签名并按下"ENTER"，也因为电子签名与图17(b)不同， 所以终端显示为"INVALID ! "，不允许恢复。正确输入了电子签名的情况下，恢复指示画面 消失，返回进行白板显示的离席前的画面。
[0134] 图18是表示本发明的图形输入?显示装置、便携终端的各终端的操作者个人记录 备忘录的情况的屏幕（画面）的说明图。
[0135] 图18(a)示出了在本实施例中，在菜单画面180000的一部分设置"MEMO"按钮，通 过按下该按钮切换为"MEMO"模式。
[0136] 图18(b)是"MEMO"模式下的对终端的写入画面（屏幕），180030中记载的线描是 仅属于该终端的操作者的备忘录。该备忘录不在图18(c)所示的投影仪画面（屏幕）180040 和其他终端上显示。
[0137] 虽然没有图示，但该备忘录数据的格式与图2起所示的线段包数据相同，特别在 包数据中追加保有表示是在另行保存的白板的线段包数据的哪一时刻（显示哪个包时）进 行了写入的时间轴方向的关系的链接信息。在进行备忘录的显示时，也能够进行与如图13 所示的回放重合的显示，对于会议的全员参考的白板图像和自身的备忘录，不仅限于现在 时刻的画面（屏幕），也能够回放过去画面的显示而进行。
[0138] 图19是表示本发明的图形输入?显示装置、便携终端的自动誊清标准图形的画面 (屏幕）的说明图。
[0139] 终端屏幕190000中，有时将会议中描绘时要关注的点用圆形记号包围，或者在文 字的情况下用双重下划线等强调，存在这种使用标准的描绘形状的线的情况。
[0140] 这类描绘并不是描绘的线的形状的微小差异特别具有意义，反而是正确描绘的图 形更为有效。本实施例中，对于如手写线描190010所示的为了强调图形的一部分而记载 的圆形记号，自动识别为不是图形而是强调的标记，从而改写为准确的椭圆作为誊清结果 190020,由此能够保持白板写入的手写所致的布局的散乱。该誊清如图19(c)所示也显示 在投影仪上。
[0141] 虽然未图示，但在保存的数据包中，除了分割为线段后保存的方法以外，也可以保 存为表达标准图形的包括中心点坐标值和直径值的包数据。
[0142] 图20是表示本发明的图形输入?显示装置、便携终端的文字输入时的画面（屏 幕）例的说明图。
[0143] 使用白板的会议中，基本上全部用手写进行写入，但输入文字的情况下，将线描作 为数字信息处理，所以能够进行防止书写者的文字工整与否所引起的辨认障碍的处理。
[0144] 图20 (a)是首先用手写输入了文字（字符）的终端屏幕200000。因为用手写线 描200010输入文字（字符），所以会带有书写者的个性，大多情况下并不是易于辨认的文字 (字符）。此处，如图19(b)所示，通过对输入的文字自动地或者由写入者选择、转换，利用 0CR(0ptical Character Reader)附带的线描?文字（字符）转换功能，转换为字符码，誊 清与该字符码对应的字符串并显示（20020)。由此，在输入难以辨认的文字（字符）时自动 地进行转换，由此能够进一步改善使用白板的会议的环境。
[0145] 虽然未图示，但输入的文字（字符）可以不是作为线描而是作为字符码，与图 19(c)中说明的同样地，在保存的数据包中，以字符串的起点坐标、文字（字符）尺寸、字符 码串这样的格式保存即可。
[0146] 图20(c)表示了在输入文字（字符）时从一开始就不使用手写输入，而是用软键 盘直接输入文字（字符）进行誊清的方法。例如，特别是在该会议中使用通用的便携终端 的情况下，如果使程序构成为使用标准配置搭载的软键盘200030,通过专用的API经由0S 导入白板应用，则能够容易地实现誊清的文字（字符）的显示（200040)。输入的文字（字 符）数据的保存方法可以与图20(b)中记载的相同。
[0147] 图21是表示本发明的图形输入?显示装置、便携终端的显示会议参加者的ID的 例子的说明图。
[0148] 以上说明的图中，用终端ID编号表示了在投影仪和终端上显示的会议参加者。在 会议开始时，或者各自携带并使用自身保有的便携终端的情况下，能够不显示终端ID，而是 直接用个人名图标210010显示参加者的姓名。这在会议开始时，能够通过用图20所示的 方法各自输入姓名来实现。
[0149] 图22是表示本发明的图形输入?显示装置、便携终端的事先设定会议开始时的画 面的情况的例子的说明图。
[0150] 以往的使用白板的会议中，大多情况下在会议开始前由主办者事先在白板上记载 题目和日期、议题列表等之后进行会议。本实施例中，表示了在会议开始前，指定的参加者 (主办者）预先使用手写描绘和图20等的誊清功能，事先记载议事所需的资料（220010)， 举办会议的功能。
[0151] 事先记载的信息，除了文字和描绘以外，也能够准备从表计算软件的页面复制的 工程管理表等图。当然也可以以继续上次会议的形式，描绘直至上次为止保存的线段包数 据。
[0152] 此处，虽然未图示，但如图22所示在表中输入个人名的情况下，因为图21所示的 个人名图标中记载了姓名，所以如果还设置能够用笔将其拖动，拖入表中的"Member"而直 接写入的UI，则使用方便性好。这都能够用图形输入?显示装置应用的处理来实现。
[0153] 图23是表示使用本发明的图形输入?显示装置、便携终端的构成设备，在会议中 仅在指定终端之间进行会话的情况下的终端内结构的说明图。
[0154] 本实施例中，表示了进行用图9说明的指定终端之间的会话时，终端内的数据的 结构和数据的流。在左侧的第一终端的应用内，存在线段数据包1100001，在右侧的第二终 端的应用内，存在线段数据包1100003,这是用图11说明的控制器和所有带有触摸面板的 终端共享保有的保存了白板上显示的描绘数据的数据包。
[0155] 本实施例中，在该数据包以外，第一终端和第二终端还具有与白板数据同样地保 存图9(c)中说明的聊天板（chat board)上记载的线描的线段数据包（230000U2300011)。 该数据包是与上述保存有白板上显示的描绘数据的数据包独立的数据包，该数据包记录第 一终端和第二终端之间通过线描进行的会话，而不在白板上显示。
[0156] 该数据包（2300001、2300011)，在如图9(d)的右侧的终端那样同时与多个终端进 行会话时，保有对方终端数量的量（的数据包）。
[0157] 另外，表示该聊天板中记载的线描的线段数据包，也能够以与图14所示的一并描 绘的动作相同的方法，将第一终端与第二终端商讨后的结果，直接发送到全员共享的白板 数据，由此在白板和全员的终端屏幕上显示，保存在作为会议的议事数据的线段数据包中。
[0158] 图24是表示本发明的图形输入?显示装置、便携终端的与自动比例尺（scale)变 更相关的动作的说明图。
[0159] 本实施例中，示出了会议的参加者全员共享的白板图像的尺寸不是与便携终端或 白板的尺寸对应的固定像素数的尺寸，而是具有更大的图像尺寸的情况下的动作。
[0160] 图24(a)表示了以上说明的带有触摸面板的终端装置的屏幕（画面）。此处，如图 24(b)所示进一步画线，描绘了伸出到图24(a)的画面（屏幕）外的线的情况下，带有触摸 面板的终端装置的屏幕（画面）自动地滚动，对更大图像尺寸的白板进行写入。
[0161] 此时，用投影仪投影的白板图像，如图24(c)所示，为了显示描绘的线描整体而自 动地进行尺寸缩小显示。其他终端也与白板同样地自动转移到缩小显示，但也能够从各终 端的未图示的菜单切换为放大显示，此外，也能够从各终端对控制器发出放大显示的指示， 从如图24(c)所示的缩小显示切换为与图24(b)的终端显示同样的放大显示。
[0162] 图25是表示本发明的图形输入?显示装置、便携终端的使用摄像机确认参加者的 动作的说明图。
[0163] 智能液晶投影仪10010和会议的参加者使用的带有触摸面板的终端（10040? 10070)的动作与图1同样，所以此处省略说明。
[0164] 本实施例中，特征在于，表示参加者250002的各带有触摸面板的终端（10040? 10070)的状况的图标10012显示利用各参加者使用的带有触摸面板的终端（10040? 10070)中内置或安装的摄像机250001拍摄的参加者自身的图像。
[0165] 该图像可以是在会议开始时一次拍摄的静态图像，也可以是在会议中一直拍摄的 动态图像，会议参加者成员作为全员的共享信息显示，全员都能够确认参加者是谁、以及是 否有不准参加的人参加。
[0166] 图26是表示本发明的图形输入?显示装置、便携终端的使用摄像机确认参加者的 摄像机部的具体动作的说明图。
[0167] 如图26(a)所示，本实施例中的带有触摸面板的终端10070中，为了能够用于其他 用途、例如TV电话等，而在触摸面板侧内置或能够搭载摄像机25001。摄像机25001的朝向 通常不可动，是固定的，减少了部件数量，该情况下，为了不过度限制用摄像机25001拍摄 的范围，其拍摄视角26001通过广角镜头能够广范围地拍摄。
[0168] 用该摄像机拍摄参加者时，如图26(b)所示，相对于摄像机的拍摄区域260002,参 加者250002被拍得相当小。本实施例中，利用作为摄像机的人脸检测功能已知的技术，在 拍摄区域260002中，对参加者的脸部附近的影像260003进行提取、截出，显示在图25所示 的图标10012上。由此，能够有效地使用与画面整体相比较小的图标的面积，各参加者能够 确认参加者的脸。
[0169] 如图25所示，拍摄的图像可以是静态图像也可以是动态图像，如果是静态图像， 则通信流量（traffic)在图像传输中的占有度只需要会议开始时的临时传输即可。此外，动 态图像的情况下，其他参加者能够确认在会议途中参加者替换、或者哪一名参加者正在注 视此时的展示（presentation)或白板写入内容等状况，能够更流畅地推进会议。
[0170] 此外，本实施例也能够如下所述那样表达。即，也能够作为如下所述的程序发挥作 用：一种程序，其安装到便携终端，为了与利用标识信息确定的其他便携终端和投影仪进行 通信而被执行，上述程序的特征在于：控制触摸面板单元、显示单元和发送和接收单元，使 得按规定的间隔将从触摸面板输入的线描（线条画）信息分割成线段，与该线段的起点与 终点的坐标值和描绘线的种类、颜色等属性信息一同生成线段数据包，并将其发送到投影 仪，控制触摸面板单元、显示单元和发送和接收单元，使得在上述显示单元显示利用上述标 识信息标识的其他便携终端的用户信息，确定该用户信息，按规定的间隔将从上述触摸面 板输入的线描信息分割成线段，与该线段的起点与终点的坐标值和描绘线的种类、颜色等 属性信息一同生成线段数据包，并将其发送到该其他便携终端的用户，控制显示单元和发 送和接收单元，使得在上述显示单元显示来自利用上述标识信息标识的其他便携终端的用 户的接收数据。此外，上述程序也可以如下：在该程序中，能够执行如下功能：在上述多个 便携终端上，在上述终端内的存储器中保存由上述其他便携终端或投影仪分发的数据，通 过上述便携终端的操作，沿着时间轴返回到过去，来再现利用线段数据包描绘的线延伸的 过程。此外，上述程序也可以如下：该程序具有发起用于仅在上述多个便携终端中的作为 任意终端的第一便携终端与同为任意终端的第二便携终端之间进行直接通信的呼叫处理 的功能，受到呼叫的第二便携终端的程序具有对第一便携终端的程序的呼叫处理进行响应 的功能，第一终端和第二终端的程序能够执行从上述呼叫处理和响应完成的时刻起，使用 终端上的触摸面板和显示器，仅在该终端之间发送和接收上述包含文字（字符）和图形的 起点与终点的坐标值和描绘线的种类、颜色等属性信息的数据并将其显示的功能。此外，上 述程序也可以如下：上述程序能够执行在执行该程序的便携终端的屏幕上，利用ID编号、 颜色、图案、影像中的任一个或多个来显示连接到网络的便携终端的ID的列表的功能。此 夕卜，上述程序也可以如下：在便携终端中在朝向使用者的方向上内置或搭载有摄像机的情 况下，上述程序能够执行控制上述摄像机来拍摄能够确定使用者的影像，并在上述显示的 便携终端的ID的列表中，显示能够确定正在使用上述触摸面板的使用者的影像的功能。上 述程序也可以如下：能够执行以下处理：内置或搭载于上述便携终端的摄像机所拍摄的能 够确定使用者的影像，利用从拍摄的图像中自动检测出能够确定使用者的部位并将其截出 而生成的影像。此外，上述程序是本实施例的一例，执行将本实施例的硬件结构作为软件结 构的程序的结构也包括在本实施例中。
[0171] 附图标记说明
[0172] 10010智能液晶投影仪
[0173] 10040带有触摸面板的终端
[0174] 20040线段包数据
【权利要求】
1. 一种投影仪，其能够与多个便携终端进行通信，所述投影仪的特征在于，包括： 发送和接收单元，其与所述多个便携终端进行数据的发送和接收； 分析单元，其对从所述多个便携终端输入的文字和图形进行分析； 输出单元，其将所述分析单元分析后的文字和图形进行外部输出；和 控制器，其控制所述发送和接收单元、输出单元和分析单元， 所述控制器接收关于从所述多个便携终端中的一个便携终端输入的文字和图像的数 据，对该接收数据中包含的文字和图形的起点与终点的坐标值和描绘线的种类、颜色等属 性信息进行分析，基于该分析数据，将从所述一个便携终端输入的文字和图形依次输出到 输出单元，并发送到所述多个便携终端。
2. 如权利要求1所述的投影仪，其特征在于： 所述接收到的包含文字和图形的起点与终点的坐标值和描绘线的种类、颜色等属性信 息的数据，按接收的时间序列顺序输出并发送到所述多个便携终端。
3. 如权利要求2所述的投影仪，其特征在于： 所述接收到的包含文字和图形的起点与终点的坐标值和描绘线的种类、颜色等属性信 息的数据，按接收的时间序列顺序输出并发送到所述多个便携终端，并且按接收的时间序 列顺序保存所述接收到的数据。
4. 如权利要求1所述的投影仪，其特征在于： 所述多个便携终端通过无线通信与所述控制器连接， 所述控制器赋予所述多个便携终端的各个便携终端以单独的地址， 以使用所述地址在网络上区别所述多个便携终端进行信息通信的方式，构建仅由控制 器和所述多个便携终端构成的局域网环境。
5. 如权利要求4所述的投影仪，其特征在于： 在由进行所述外部输出或发送到所述便携终端的文字和图形构成的画面上，利用ID 编号、颜色、图案、影像中的任一个或多个来显示连接到网络的便携终端的ID的列表。
6. -种便携终端，其能够与利用标识信息确定的其他便携终端和投影仪进行通信，所 述便携终端的特征在于，包括： 显示单元，其显示文字和图形； 触摸面板，其接受来自用户的指示； 发送和接收单元，其与所述其他便携终端和投影仪进行数据的发送和接收；和 分析单元，其进行所述数据的分析， 所述便携终端按规定的间隔将从所述触摸面板输入的线描信息分割成线段，与该线段 的起点与终点的坐标值和描绘线的种类、颜色等属性信息一同生成线段数据包，并将其发 送到投影仪， 所述分析单元对从所述投影仪发送来的数据中包含的文字和图形的起点与终点的坐 标值和描绘线的种类、颜色等属性信息进行分析， 在所述显示单元，显示基于所述分析信息的文字和线段。
7. 如权利要求6所述的便携终端，其特征在于： 所述多个便携终端在所述终端内的存储器中保存由所述其他便携终端或投影仪分发 的数据， 通过所述便携终端的操作，沿着时间轴返回到过去，来再现利用线段数据包描绘的线 延伸的过程。
8. 如权利要求6所述的便携终端，其特征在于： 作为所述多个便携终端中的任意终端的第一便携终端具有对同为任意终端的第二便 携终端发起用于仅在第一终端与第二终端之间进行直接通信的呼叫处理的功能， 受到呼叫的第二便携终端具有对第一便携终端的呼叫处理进行响应的功能， 第一终端和第二终端具有：从所述呼叫处理和响应完成的时刻起，使用终端上的触摸 面板和显示器，仅在该终端之间发送和接收所述包含文字和图形的起点与终点的坐标值和 描绘线的种类、颜色等属性信息的数据并将其显示的功能。
9. 如权利要求6所述的便携终端，其特征在于： 在所述便携终端的屏幕上，利用ID编号、颜色、图案、影像中的任一个或多个来显示连 接到网络的便携终端的ID的列表。
10. 如权利要求9所述的便携终端，其特征在于： 所述便携终端能够在朝向使用者的方向上内置或搭载摄像机，并具有利用所述摄像机 拍摄能够确定使用者的影像，并在所述显示的便携终端的ID的列表中，显示能够确定正在 使用所述触摸面板的使用者的影像的功能。
11. 如权利要求10所述的便携终端，其特征在于： 内置或搭载于所述便携终端的摄像机所拍摄的能够确定使用者的影像，利用从拍摄的 图像中自动检测出能够确定使用者的部位并将其截出而生成的影像。
12. -种程序，其安装到便携终端，为了与利用标识信息确定的其他便携终端和投影仪 进行通信而被执行，所述程序的特征在于： 控制触摸面板单元、显示单元和发送和接收单元，使得按规定的间隔将从触摸面板输 入的线描信息分割成线段，与该线段的起点与终点的坐标值和描绘线的种类、颜色等属性 信息一同生成线段数据包，并将其发送到投影仪， 控制触摸面板单元、显示单元和发送和接收单元，使得在所述显示单元显示利用所述 标识信息标识的其他便携终端的用户信息，确定该用户信息，按规定的间隔将从所述触摸 面板输入的线描信息分割成线段，与该线段的起点与终点的坐标值和描绘线的种类、颜色 等属性信息一同生成线段数据包，并将其发送到该其他便携终端的用户， 控制显示单元和发送和接收单元，使得在所述显示单元显示来自利用所述标识信息标 识的其他便携终端的用户的接收数据。
13. 如权利要求12所述的程序，其特征在于，能够执行如下功能： 在所述多个便携终端上，在所述终端内的存储器中保存由所述其他便携终端或投影仪 分发的数据， 通过所述便携终端的操作，沿着时间轴返回到过去，来再现利用线段数据包描绘的线 延伸的过程。
14. 如权利要求12所述的程序，其特征在于： 具有发起用于仅在所述多个便携终端中的作为任意终端的第一便携终端与同为任意 终端的第二便携终端之间进行直接通信的呼叫处理的功能， 受到呼叫的第二便携终端的程序具有对第一便携终端的程序的呼叫处理进行响应的 功能， 第一终端和第二终端的程序能够执行从所述呼叫处理和响应完成的时刻起，使用终端 上的触摸面板和显示器，仅在该终端之间发送和接收所述包含文字和图形的起点与终点的 坐标值和描绘线的种类、颜色等属性信息的数据并将其显示的功能。
15. 如权利要求12所述的程序，其特征在于： 所述程序能够执行在执行该程序的便携终端的屏幕上，利用ID编号、颜色、图案、影像 中的任一个或多个来显示连接到网络的便携终端的ID的列表的功能。
16. 如权利要求15所述的程序，其特征在于： 在便携终端中在朝向使用者的方向上内置或搭载有摄像机的情况下，所述程序能够执 行控制所述摄像机来拍摄能够确定使用者的影像，并在所述显示的便携终端的ID的列表 中，显示能够确定正在使用所述触摸面板的使用者的影像的功能。
17. 如权利要求16所述的程序，其特征在于： 能够执行以下处理：内置或搭载于所述便携终端的摄像机所拍摄的能够确定使用者的 影像，利用从拍摄的图像中自动检测出能够确定使用者的部位并将其截出而生成的影像。
【文档编号】H04N7/15GK104106037SQ201280069430
【公开日】2014年10月15日 申请日期:2012年2月13日 优先权日:2012年2月13日
【发明者】清水宏, 吉泽和彦, 铃木基之, 西岛英男, 益冈信夫 申请人:日立麦克赛尔株式会社
相关技术
网友询问留言
已有0条留言
- 还没有人留言评论。精彩留言会获得点赞！
1