能够连接外部显示装置的显示终端装置及方法
【专利摘要】本发明涉及能够连接外部显示装置的显示终端装置及方法，其目的是要解决即使将在显示终端装置侧进行的触摸操作的内容发送到外部显示装置来进行显示时，也能在不损害该终端侧的操作性的同时维持显示的易见性。在本发明中，显示终端装置(11)在设定成外部发送模式的状态下，当检测出触摸操作时，生成将表示该触摸操作的内容的操作信息(操作图标或动画图像)(14)与显示画面(终端画面)上显示的显示内容进行合成而得的合成画面内容，将该合成画面内容发送到外部显示装置(12)，改变该外部显示装置(12)侧的显示内容(屏幕13上的显示内容)。
【专利说明】能够连接外部显示装置的显示终端装置及方法
【技术领域】
[0001]本发明涉及能够连接外部显示装置的显示终端装置及方法。
【背景技术】
[0002]一般地，在会议等进行演示的时候，会使用显示终端装置，该显示终端装置可在显示画面上配设触摸面板的便携终端装置等，例如当将连接到投影仪(外部显示装置)上的该终端画面的显示内容投影到屏幕上时，由于只能将终端画面的显示内容进行投影，因此触摸操作与显示内容之间的关系，也就是在该终端画面上如何进行触摸操作其显示内容就如何变化的关系，通过屏幕将该关系呈现给演示的参加者是很困难的。
[0003]因此，为了示范在终端画面上的触摸操作，也考虑通过照相机拍摄该触摸操作的情况，然后将该拍摄的图像投影到屏幕上，但是触摸操作时显示画面的一部分经常被手指或手掌遮住，难以完整地看到投影内容。
[0004]目前，为了与这种触摸操作的示范相适应，在将外部显示装置连接在显示终端装置的情况下，当在显示终端侧进行触摸操作时，表示其触摸位置的标记就会同时显示在该显示终端画面和外部显示装置的对应位置上，为此提出了上述技术(日本特开2007-310903 号公报)。
[0005]然而，在上述专利文献的技术下，在外部显示装置上显示表示触摸位置的标记，所以对于其观众来说能够知晓触摸操作的状态，但是对于终端侧的操作者来说总是在不同的显示内容上进行操作变得困难，此外也可能难以看见触摸位置附近的显示内容。
[0006]本发明的问题是:即使将在显示终端装置侧进行的触摸操作的内容发送到外部显示装置来进行显示时，也能在不损害该终端侧的操作性的同时维持显示的易见性。
【发明内容】
[0007]为了解决上述问题，本发明的显示终端装置具有下述结构。
[0008]本发明的第一特征是一种能够连接外部显示装置的显示终端装置，其特征在于，
[0009]该显示终端装置具备:
[0010]检测单元，其检测显示画面上的触摸操作；
[0011]判断单元，其判断是否设定外部发送模式，该外部发送模式是将上述显示画面上正在显示的显示内容发送给上述外部显示装置的模式；
[0012]合成单元，在上述判断单元判断为设定成外部发送模式的状态下，当上述检测单元检测到触摸操作时，该合成单元生成将表示该触摸操作的内容的操作信息与上述显示画面正显示的显示内容进行合成而得的合成画面内容；以及
[0013]显示控制单元，其将上述合成单元生成的合成画面内容发送到上述外部显示装置，来改变该外部显示装置侧的显示内容。
[0014]本发明的第二特征是一种能够连接外部显示装置的显示终端装置，其特征在于，
[0015]该显示终端装置具备:[0016]检测单元，其检测显示画面上的触摸操作；
[0017]判断单元，其判断是否连接了上述外部显示装置；
[0018]合成单元，在上述判断单元判断为连接了上述外部显示装置的状态下，当上述检测单元检测到触摸操作时，该合成单元生成将该触摸操作内容与上述显示画面正显示的显示内容进行合成而得的合成画面内容；以及
[0019]显示控制单元，其将上述合成单元生成的合成画面内容发送到上述外部显示装置，由此来改变该外部显示装置侧的显示内容。
[0020]通过本发明，即使将在显示终端装置侧进行的触摸操作的内容发送到外部显示装置来进行显示时，也能在不损害该终端侧的操作性的同时维持显示的易见性，可以满足操作性和易见性两方面，具有实用性。
【专利附图】
【附图说明】
[0021]图1是表示便携终端装置(智能电话)的基本结构部件的方框图。
[0022]图2是表示将在便携终端装置11上显示的显示内容发送到外部显示装置(投影仪)12并在屏幕13上投影的状态的图。
[0023]图3是示意性表示执行用以指示改变便携终端装置11上显示的显示内容的触摸操作(手势操作)时的图。
[0024]图4是用于描述触摸操作表Tl的图。
[0025]图5是表示在便携终端装置11的整体动作中，本实施方式的特征部分的动作概要(便携终端装置11与外部显示装置12之间的联动显示)的流程图。
[0026]图6是接在图5的动作后面的流程图。
[0027]图7是表示在第2实施方式中代替图5的动作的流程图。
【具体实施方式】
[0028]下面参照附图详细描述本发明的实施方式。
[0029](实施方式I)
[0030]首先，参照图1-图6描述本发明的第I实施方式。
[0031]本实施方式适用于以便携终端装置(例如多功能便携手机:智能电话)作为显示终端装置的情况，因此图1是表示便携终端装置的基本结构部件的方框图。
[0032]便携终端装置(显示终端装置)具备:作为其基本功能的通话功能，以及触摸输入功能、电子邮件功能、连接互联网功能(Web访问功能)等，CPUl通过来自装备了充电电池的电源部2的电力供给来进行动作，按照存储部3内的各种程序控制该便携终端装置的整体动作。
[0033]存储部3包括3个区域，存储后述图5和图6的流程图中所示的程序等各种程序的程序区域，存储该便携终端装置中必要的各种数据的数据区域，以及临时存储用的工作区域，在该数据区域中存储着后述的触摸操作表Tl。并且，存储部3可以由包含SD卡等的存储媒体来构成，也可以是包含预定服务器装置(省略图示)侧的存储区域。
[0034]无线通信部4在执行通话功能、电子邮件功能、连接互联网功能等的动作时，将声音或数据进行调制从天线部AT向外发送无线电波，同时将通过天线AT接收到的无线电波解调为声音或数据，由此进行通话或数据的通信。
[0035]操作部5具有按键式的电源键等的各种键。外部连接部6是连接外部机器用的连接部，例如具有HDMI (高清晰度多媒体接口)，可以与外部机器之间进行双方向通信。CPUl通过访问该外部连接部6来检验是否连接了外部机器，并基于外部机器的应答信号来判断连接的机器的类型。
[0036]触摸显示部7具有层叠配置在显示面板7a上的触摸面板7b，显示面板7a例如是具有不同纵横比(横4:纵3)的画面的高清晰液晶显示器或者有机EL(电致发光)显示器，显示作为软件按键(软按键)的功能名，以及显示各种图标等。
[0037]触摸显示部7的触摸面板7b具有触摸屏，其能够检测拍摄者的手指等(除了手指之外还包括笔等操作元件)的触摸操作的位置，并输入该位置的坐标数据，因此虽然采用了例如静电电容方式或者薄膜电阻方式，但可以采用其它的方式。
[0038]而且，触摸操作并不限于手指或笔等在触摸面板7b上接触或接触移动的接触操作，还指的是与该接触操作相似的操作，例如，由于手指或笔的接近或接近移动导致了静电电容的变化或明暗度的变化等，据此检测出手指或笔的位置的非接触操作。也就是，不限制于检测接触操作的接触型触摸面板，还可以是检测非接触操作的非接触型触摸面板或操作检测设备，但是在本实施方式中，以接触操作的情况为示例。
[0039]CPUl在检测出对触摸显示部7的触摸操作时，判断是否执行指示了触摸显示部7的显示画面(终端画面)内的位置的触摸操作，是否执行指示了改变显示画面(终端画面)上显示的显示内容的触摸操作，是否执行指示了输入命令或者数据的触摸操作，以作为该触摸操作的内容(类型)。
[0040]在这里，指示了触摸显示部7的显示画面(终端画面)内的位置的触摸操作指的是，例如，在软按键显示的位置上的单点触摸操作(包含光标移动操作)、多根手指在多个显示位置上同时触摸的多点触摸操作等。
[0041]此外,指示了改变显示画面上显示的显示内容的触摸操作指的是,例如,指示显示滚动的手势操作(轻拂操作(flick operation))、指示显示内容的放大的手势操作(扩大操作(pinch-out operation))、指示显示内容的缩小的手势操作(收缩操作(pinch-1noperation))等。
[0042]另外，指示了命令或者数据的输入的触摸操作指的是，指示了与手势相应的输入命令(应用程序的切换等)或者数据(数字、文字等的数据)的手势操作。
[0043]图2表示将在便携终端装置11上显示的显示内容发送到外部显示装置(投影仪)12并在屏幕(例如白板)13上投影的状态的图。
[0044]便携终端装置11可以通过安装在该外部连接部6上的线缆14与外部显示装置(外部机器，例如是投影仪)12相连，因此该便携终端装置11与外部显示装置12之间就可以实现显示的联动。并且，便携终端装置11与外部显示装置12之间不限于通过线缆14进行有线连接的情形，也可以通过无线LAN(局域网)、红外通信等进行无线连接。
[0045]这里，进行演示的人员一边将便携终端装置11的显示画面(终端画面)上正在显示的显示内容投影到外部显示装置(投影仪)12上，一边描述便携终端装置11的操作顺序或操作方法等，而且，此时，与触摸操作有关信息也发送到外部显示装置(投影仪)12上并在屏幕13上投影显示。[0046]S卩，便携终端装置11在将可以这样实行的各种处理内容在会议等演示现场进行发布时，演示人员执行何种触摸操作，就会在进行演示的同时将得到的何种处理结果的状态投影显示在屏幕上。
[0047]这里，便携终端装置11判断是否设定了外部发送模式(动作模式:示范模式)，该外部发送模式将该显示画面(终端画面)上正在显示的显示内容发送到外部显示装置12。
[0048]该外部发送模式可以根据用户的操作进行任意的切换和设定，因此当便携终端装置11被设定成该外部发送模式的状态下时，如果检测到对触摸显示部7的触摸操作，就生成将表示触摸操作的内容的操作信息(操作图标或者动画图像)14与显示画面(终端画面)上显示的显示内容进行合成而得的合成画面内容，将该合成画面内容发送到外部显示装置12上，以此改变外部显示装置12侧的显示内容(屏幕13上的显示内容)。
[0049]图中示例表示在触摸显示部7上显示了将多个处理图标一览显示出来的菜单画面的状态下，用食指在该菜单画面上在需要进行处理的处理图标的显示位置上进行单点触摸操作的情况。
[0050]这样，当执行了指示菜单画面内的位置的触摸操作(例如单点操作)时，便携终端装置11就生成将操作图标作为表示该触摸操作内容以及触摸位置的操作信息14与菜单画面的显示内容进行合成而得的合成画面内容，并将该合成画面内容发送到外部显示装置12。
[0051]由此，屏幕13上的显示内容就如图所示的那样，指示菜单画面内的触摸位置的操作信息14，就显示成以食指触摸的状态进行图案化之后的图标。
[0052]在这种情况下，在便携终端装置11的显示画面(终端画面)侧，所触摸的处理图标由于操作手指的遮挡而难以看见，但是在屏幕13上，为了布置显示操作信息(操作标记)14，在所触摸的处理图标附近，在位置上将操作图标偏离处理图标。
[0053]并且，指示显示画面内的位置的触摸操作不限制于上述的单点触摸操作，还可以是操作软按键(soft key)的按键操作、光标移动操作、多个手指的多点触摸操作等等。在这里，在触摸位置附近布置显示表示该触摸操作的内容的操作图标，该操作图标是对触摸操作的按键的类型进行图案化的图标，或是对光标的移动方向进行图案化的图标，或是对多个手指触摸的状态进行图案化的图标。
[0054]图3是示意性表示在便携终端装置11侧上，执行用以指示改变终端画面上显示的显示内容的触摸操作(手势显示操作)的图。
[0055]图中示例表示为了将显示内容放大拇指和食指互相向外侧缓慢扩大的扩大操作(手势显示操作)的情况。这样，当执行了指示改变终端画面上显示的显示内容的手势显示操作(例如扩大操作)时，就生成将表示该触摸操作的内容的操作信息(动画图像)14与终端内容进行合成而得的合成画面内容，并将该合成画面内容发送到外部显示装置12。
[0056]由此，屏幕13上的显示内容就如图所示的那样，显示拇指和食指互相向外侧缓慢扩大的动画图像。而且，指示改变终端画面上显示的显示内容的触摸操作(手势显示操作)不限于扩大操作，也可以是拇指和食指互相向内侧缓慢缩小的收缩操作、指示显示内容的滚动的滚动操作等。在这里，虽然布置显示了指示触摸操作的内容的动画图像，但是动画图像也可以用来表现触摸操作(手势显示操作)。
[0057]图4是用于描述触摸操作表Tl的图。[0058]触摸操作表Tl是存储了与“触摸操作内容”相应的、表示该触摸操作的内容的“操作信息”的表，可以根据预定的用户操作进行任意的设定。
[0059]在该“触摸操作内容”的项目中，具有“指示画面内的位置的触摸操作(位置指示操作)”、“指示改变画面上显示的显示内容的触摸操作(手势显示操作)”、“指示输入命令或者数据的触摸操作(手势输入操作)”，特别地，在“位置指示操作”中，存储着“键触摸操作”、“光标移动操作”、“多点触摸操作”等。接着，与该“键触摸操作”、“光标移动操作”、“多点触摸操作”相对应的“操作信息”中，存储着“A图标” “B图标”、“C图标”等。
[0060]另外，在“手势显示操作”的项目中，存储着“轻拂操作”、“收缩操作”、“扩大操作”等，与它们相对应的“操作信息”中存储着“A动画图像”、“B动画图像”、“C动画图像”等。此外，在“手势输入操作”的项目中，存储着“命令W的输入操作”、“命令E的输入操作”、“数值I的输入操作”等，与它们相对应的“操作信息”中存储着“X动画图像”、“Y动画图像”、“Z动画图像”等。而且，“命令W的输入操作”是输入启动文章制作应用程序的命令W的触摸操作。“命令E的输入操作”是输入启动表计算应用程序的命令E的触摸操作。
[0061]接下来，参照图5和图6所示的流程图来描述第I实施方式中的便携终端装置11的动作概念。这些流程图中记述的各种功能是以可读的程序代码的形式进行记录，并根据该程序代码顺序执行动作。
[0062]另外，也可以根据通过网络等传送媒介传送来的上述程序代码来顺序执行动作。这些同样适用于后述的其它实施方式，除了存储媒介之外，还可以使用通过传送媒介由外部所提供的程序/数据，来执行本实施方式所特有的动作。
[0063]图5和图6是表示在便携终端装置11的全部动作中的本实施方式的特征部分的动作概要(便携终端装置11与外部显示装置12之间的显示联动)的流程图，从接通电源开始执行。首先，CPUl在触摸显示部(终端画面)7上显示初始画面(例如初始菜单画面)，同时执行清空预定的存储器等的初始化处理(图5的步骤SI)，随后判断是否设定成将触摸显示部(终端画面)7正在显示的显示内容发送到外部显示装置12的外部发送模式(动作模式:示范模式)中(步骤S2)。
[0064]这里，如果未设定成外部发送模式(步骤S2为否)，那么移至执行其它处理，例如执行切换到外部发送模式的设定处理、执行发派电话处理、执行发送电子邮件的处理、制作编辑演示资料等，执行外部发送模式之外的处理(步骤S3)。
[0065]现在，在使用外部显示装置(投影仪)12来描述便携终端装置11的操作顺序或操作方法等的情况下，操作模式切换键(省略图示)切换设定到外部发送模式。在如此设定了外部发送模式时(步骤S2为是)，访问外部连接部6以调查是否连接了外部显示装置(投影仪)12(步骤S4)。
[0066]这里，即使设定成外部发送模式但并未连接外部显示装置12时(步骤S4为否)，在显示了用以催促连接外部显示装置12的消息(步骤S5)之后，返回到上述步骤S2。
[0067]现在，当设定成外部发送模式(步骤S2为是)且连接了外部显示装置12的时候(步骤S4为是)，读取触摸显示部7上正在显示的显示内容(步骤S6)，并将该画面内容从外部连接部6发送到外部显示装置12 (步骤S7)。
[0068]在这种情况下，如果在触摸显示部7上显示的是初始菜单画面，由于将该初始菜单画面发送到外部显示装置12上，因此就在屏幕13上投影显示出该菜单画面。在该状态下，调查是否对触摸显示部7进行了触摸操作(步骤S8)，调查后述的5秒计时器(省略图示)是否超时(步骤S9)，调查是否解除了外部发送模式(步骤SlO)，并且调查是否连接了外部显示装置12 (步骤Sll)。
[0069]上述5秒计时器用来计量从向外部显示装置12发送将表示该触摸操作内容的操作信息(操作图标或者动画图像)与终端画面上显示的显示内容进行合成而得的画面内容起的经过时间，从进行该发送起经过5秒钟时变为超时状态。
[0070]现在，在超时前(步骤S9为否)，当解除外部发送模式时(步骤SlO为是)或者解除外部显示装置12的连接时(步骤Sll为否)，返回上述的步骤S2。此外，在超时前(步骤S9为否)，未解除外部发送模式时(步骤SlO为否)并且连接了外部显示装置12时(步骤Sll为是)，返回上述步骤S2，等待触摸操作并等待超时。
[0071]现在，当检测出触摸操作时(步骤S8为是)，移至图6的流程，检测该触摸位置的坐标(步骤S12)，同时判断触摸操作的内容(步骤S13)。也就是，触摸操作的内容就是判断是执行了指示触摸显示部7的显示画面内的位置的触摸操作，执行了指示改变显示画面上显示的显示内容的触摸操作，还是执行了指示输入命令或数据的触摸操作。基于如此判断出的触摸操作的内容，参照触摸操作表Tl，对应地读取“操作信息”(步骤S14)。
[0072]接下来，将获得的操作信息(操作图标/动画图像)与显示画面上正显示的显示内容进行合成(步骤S15)。这时，在显示画面的触摸位置或者其附近合成操作信息(操作图标/动画图像)，但是如果触摸位置是在处理图标上的话，就在该处理图标的附近合成操作信息。
[0073]接着，将这样产生的合成画面内容发送到外部显示装置12上，由此改变外部显示装置12侧的显示内容(屏幕13上的显示内容)(步骤S16)。然后，在符合该合成画面内容的发送定时时，开始上述5秒计时器的计量动作(步骤S17)，执行与触摸操作相应的处理(步骤S18)。
[0074]例如，当对处理图标进行触摸操作时，启动该应用程序，将该应用程序的画面显示在触摸显示部7上，在该应用程序画面上，例如执行缩小操作、扩大操作等的手势操作时，缩小或扩大该操作所指定的显示部分(例如表或图)，此外，在执行轻拂操作等的手势操作时，使显示内容向着该操作方向滚动显示等，执行与触摸操作相应的处理。随后，将触摸显示部7的显示画面切换显示为与该处理结果相应的画面(步骤S19)。
[0075]下面返回图5的步骤S8，每次执行触摸操作(步骤S8为是)，就重复上述动作(图6的步骤S12?步骤S19)。这里，当检测出超时时(步骤S9为是)，返回上述步骤S6，现在，将终端画面上显示的显示内容发送到外部显示装置12，由此改变外部显示装置12侧的显示内容(屏幕13上的显示内容)(步骤S7)。
[0076]据此外部显示装置12侧的显示内容(屏幕13上的显示内容)替换掉上述的合成画面内容，切换到当前终端画面的内容，也就是，与上次触摸操作相应的处理结果的画面内容(图6的步骤S18、S19)。另外，当在超时前执行了触摸操作时(步骤S8为是)，切换到合成显示了表示该触摸操作内容的操作信息的画面(图6的步骤S12?S16)。
[0077]如上所述，当第I实施方式的便携终端装置11设定成外部发送模式的状态时，在检测出触摸操作的情况下，生成将表示该触摸操作的内容的操作信息(操作图标或动画图像)14与显示画面(终端画面)上显示的显示内容进行合成而得的合成画面内容，将该合成画面内容发送到外部显示装置12，改变该外部显示装置12侧的显示内容(屏幕13上的显示内容)，从而，不必对表示在便携终端装置11的显示画面上触摸操作的内容的操作信息进行显示，不会使触摸位置附近的显示内容难以看见，能够在不损害该终端侧的操作性的同时保持显示内容的易见性，可以满足操作性和易见性两方面的要求，具有实用性。
[0078]便携终端装置11以设定成外部发送模式以及连接外部显示装置12为前提条件，将终端画面上正显示的显示内容发送到外部显示装置12，从而除了能够防止向外部显示装置12侧发出未作准备的显示之外，也不需要在便携终端装置11侧执行指示开始发送的操作。
[0079]当用于对将合成了操作信息的合成画面内容发送到外部显示装置12起的经过时间进行计量的5秒计时器为超时时，便携终端装置11将终端画面正在显示的显示内容发送到外部显示装置12上，从而如果没有执行下一个触摸操作的话，就可以持续投影显示屏幕13上的操作信息5秒钟的时间，对于演示的参加者来说，可以容易地对操作内容进行目视确认，容易地理解执行了何种操作。
[0080]便携终端装置11在指示终端画面内的位置的触摸操作、指示改变终端画面上正显示的显示内容的触摸操作、以及指示输入命令或数据的触摸操作中，检测至少一个触摸操作，这样就可以与多个触摸操作相对应，或者可以与缩小到特定类型的触摸操作相对应。
[0081]在执行指示终端画面内的位置的触摸操作作为触摸操作内容时，便携终端装置11将表示该位置的图标与终端画面正显示的显示内容进行合成，在执行指示改变终端画面显示的显示内容的触摸操作作为触摸操作内容时，便携终端装置11将表示该改变的类型的动画图像与终端画面正显示的显示内容进行合成，在执行指示输入命令或数据的触摸操作作为触摸操作内容时，便携终端装置11将表示这种输入的类型的动画图像与终端画面正显示的显示内容进行合成，因此对于演示的参加者来说，能够容易地对操作内容进行直观地理解，能够容易地理解执行了何种操作。
[0082]进一步地，在上述第I实施方式中，可以根据用户操作任意地切换设定外部发送模式(示范模式(demonstration mode)),但并不局限于根据用户操作,例如也可以根据连接到外部显示装置12而自动设定该外部发送模式。
[0083](第2实施方式)
[0084]下面参照图7描述本发明的第2实施方式。
[0085]进一步地，在上述第I实施方式中，以发送合成了操作信息14的合成画面内容、并且在设定于外部发送模式的状态下执行触摸操作为条件，但是在该第2实施方式中，是以在外部显示装置12连接到便携终端装置11上的状态下执行触摸操作为条件。
[0086]这里，在两个实施方式中，基本的或名称相同的部分用相同的符号来表示，并省略对它们的描述，下面将以第2实施方式的特征部分为中心进行描述。
[0087]图7是表示在第2实施方式中代替图5的动作的流程图，之后的动作与图6的流程相同。
[0088]首先，CPUl在触摸显示部(终端画面)7上显示初始画面(例如初始菜单画面)，同时执行清空预定的存储器等的初始化处理(步骤S20)，随后访问外部连接部6以便调查是否连接了外部显示装置(投影仪)12 (步骤S21)，如果没有连接外部显示装置12 (步骤S21为否)，就移至其它处理的执行，例如执行发派电话处理、执行发送电子邮件的处理等(步骤S22)。
[0089]如果连接了外部显示装置12(步骤S21为是)，就根据与该外部显示装置12之间的交互判断连接装置是否为投影仪(步骤S23)，如果连接装置不是投影仪(步骤S23为否)，就执行针对该连接装置所对应的外部显示装置12的显示处理(步骤S24)，如果连接装置是投影仪(步骤S23为是)就读取触摸显示部7上正在显示的显示内容(步骤S25)，将该画面内容从外部连接部6发送到外部显示装置12(步骤S26)。
[0090]在这种状态下，调查是否对触摸显示部7进行了触摸操作(步骤S27)，调查上述的5秒计时器(省略图示)是否超时(步骤S28)，并且调查是否连接了外部显示装置(投影仪)12(步骤S29)。
[0091]现在，在超时前(步骤S28为否)，当解除了与外部显示装置(投影仪)12的连接时(步骤S29为否)，返回上述的步骤S21，而在超时前(步骤S28为否)，如果连接了外部显示装置(投影仪)12 (步骤S29为是)，返回上述步骤S27，等待触摸操作并等待超时。
[0092]现在，当检测出触摸操作时(步骤S27为是)，移至图6的流程，移至下面与第I实施方式相同的处理(步骤Sll?19)。也就是，检测触摸位置坐标(步骤S12)，判断触摸操作内容(步骤S13)，基于触摸操作的内容，从触摸操作表Tl中对应地获取“操作信息”(步骤 S14)。
[0093]接下来，将该操作信息与显示画面上正显示的显示内容进行合成(步骤S15)，将该合成后的合成画面内容发送到外部显示装置12 (步骤S16)上。然后，在开始上述5秒计时器的计量动作(步骤S17)之后，执行与触摸操作相应的处理(步骤S18)，切换到显示与该处理结果相应的画面(步骤S19)。下面返回图7的步骤S27，每次执行触摸操作(步骤S27为是)，就重复上述动作(图6的步骤S12?步骤S19)。
[0094]如上，第2实施方式的便携终端装置11在连接了外部显示装置12的状态下，当检测出触摸操作时，生成将表示该触摸操作的内容的操作信息(操作图标或动画图像)与显示画面(终端画面)上正显示的显示内容进行合成而得的合成画面内容，将该合成画面内容发送到外部显示装置12上，由此改变外部显示装置12侧的显示内容(屏幕13上的显示内容)，具有与第I实施方式相同的效果。
[0095]S卩，不必对表示在便携终端装置11的显示画面(终端画面)上触摸操作的内容的操作信息进行显示，不会使触摸位置附近的显示内容难以看见，能够在不损害该终端侧的操作性的同时保持显示内容的易见性，可以满足操作性和易见性两方面的要求。
[0096]便携终端装置11以连接了外部显示装置12并且该连接装置为预定的装置(投影仪)为前提条件，将终端画面上正显示的显示内容发送到外部显示装置12，从而除了能够防止向外部显示装置12侧发出未作准备的显示之外，也不需要在便携终端装置11侧执行指示开始发送的操作。
[0097]另外，在第2实施方式中，还具有与上述第I实施方式相同的效果。也就是，当5秒计时器超时的时候，将终端画面上正在显示的显示内容发送到外部显示装置12，从而如果没有执行下一个触摸操作的话，就可以持续投影显示屏幕13上的操作信息5秒钟的时间。
[0098]另外，在指示终端画面内的位置的触摸操作、指示改变终端画面上正显示的显示内容的触摸操作、以及指示输入命令或数据的触摸操作中，检测至少一个触摸操作，这样就可以与多个触摸操作相对应，或者可以与缩小到特定类型的触摸操作相对应。进一步地，图标或动画图像作为操作信息，与终端画面上正显示的显示内容进行合成，从而容易地对操作内容进行直观地理解，可以容易地理解执行了何种操作。
[0099]而且，在上述的各实施方式中，虽然示出图标、动画图像用以作为表示触摸操作内容的操作信息，但是操作信息也可以是例如文字信息、静止图像、动态图像等，或者也可以是它们的组合，进一步地，也可以根据用户操作显示任意选择指定的操作信息。
[0100]此外，在上述的各实施方式中，虽然示例了采用便携电话来作为显示终端装置11的情况，但并不限制于此，显示终端装置11也可以是个人计算机、手写板终端等的PDA(个人数字助理)、数码相机等。
[0101]另外，虽然以投影仪来作为外部显示装置12的示例，但是并不限制于此，外部显示装置12也可以是个人计算机、手写板终端、电视接收机、便携终端装置等显示装置。例如，在以电子手表作为显示终端装置11、以手写板终端作为外部显示装置12的情况下，相比于电子手表的画面，手写板终端画面更大，因此用户就可以在较大的画面(手写板终端画面)上一边确认手表上的操作状态，一边观察处理结果，就可以满足操作性和易见性两方面的要求。
[0102]此外，在上述各实施方式中示出的“装置”或“部”可以是根据功能而分离的多个框体，不限制于单一框体。另外，上述流程图中描述的各步骤不限于按时间顺序进行处理，也可以并行处理多个步骤，或分别独立地进行处理。
[0103]上面对本发明的实施方式进行了描述，但本发明并不限制于此，还包含在权利要求书中所记载的技术方案和与其等同的范围。
【权利要求】
1.一种能够连接外部显示装置的显示终端装置，其特征在于， 该显示终端装置具备: 检测单元，其检测显示画面上的触摸操作； 判断单元，其判断是否设定外部发送模式，该外部发送模式是将上述显示画面上正在显示的显示内容发送给上述外部显示装置的模式； 合成单元，在上述判断单元判断为设定成外部发送模式的状态下，当上述检测单元检测到触摸操作时，该合成单元生成将表示该触摸操作的内容的操作信息与上述显示画面正显示的显示内容进行合成而得的合成画面内容；以及 显示控制单元，其将上述合成单元生成的合成画面内容发送到上述外部显示装置，来改变该外部显示装置侧的显示内容。
2.根据权利要求1所述的显示终端装置，其特征在于， 该显示终端装置进一步具备:发送单元，当上述判断单元判断为设定成外部发送模式时，以连接了外部显示装置为前提条件，该发送单元将上述显示画面中正显示的显示内容发送到上述外部显示装置。
3.根据权利要求1所述的显示终端装置，其特征在于， 该显示终端装置进一步具备:时间计量单元，其计量从将上述合成单元所生成的合成画面内容发送到上述外部显示装置起的经过时间， 在上述时间计量单元检测到经过了预定时间时，上述显示控制单元将上述显示画面上正在显示的显示内容发送到上述外部显示装置。
4.根据权利要求1所述的显示终端装置，其特征在于， 上述检测单元检测以下触摸操作中的至少一个触摸操作:指示上述显示画面内的位置的触摸操作、指示改变上述显示画面上正显示的显示内容的触摸操作、以及指示输入命令或数据的触摸操作。
5.根据权利要求1所述的显示终端装置，其特征在于， 在执行指示上述显示画面内的位置的触摸操作作为触摸操作内容时，上述合成单元将表示该位置的图标与上述显示画面正显示的显示内容进行合成，在执行指示改变上述显示画面正显示的显示内容的触摸操作作为触摸操作内容时，上述合成单元将表示该改变的类型的动画图像与上述显示画面上正显示的显示内容进行合成，在执行指示输入命令或数据的触摸操作作为触摸操作内容时，上述合成单元将表示该输入的类型的动画图像与上述显示画面正显示的显示内容进行合成。
6.一种能够连接外部显示装置的显示终端装置，其特征在于， 该显示终端装置具备: 检测单元，其检测显示画面上的触摸操作； 判断单元，其判断是否连接了上述外部显示装置； 合成单元，在上述判断单元判断为连接了上述外部显示装置的状态下，当上述检测单元检测到触摸操作时，该合成单元生成将该触摸操作内容与上述显示画面正显示的显示内容进行合成而得的合成画面内容；以及 显示控制单元，其将上述合成单元生成的合成画面内容发送到上述外部显示装置，由此来改变该外部显示装置侧的显示内容。
7.根据权利要求6所述的显示终端装置，其特征在于， 该显示终端装置进一步具备:发送单元，当上述判断单元判断为连接了外部显示装置时，以所连接的外部显示装置是预定装置为前提条件，该发送单元将上述显示画面中正显示的显示内容发送到上述外部显示装置。
8.根据权利要求6所述的显示终端装置，其特征在于， 该显示终端装置进一步具备:时间计量单元，其计量从将上述合成单元所生成的合成画面内容发送到上述外部显示装置起的经过时间， 在上述时间计量单元检测到经过了预定时间时，上述显示控制单元将上述显示画面上正在显示的显示内容发送到上述外部显示装置。
9.根据权利要求6所述的显示终端装置，其特征在于， 上述检测单元检测以下触摸操作中的至少一个触摸操作:指示上述显示画面内的位置的触摸操作、指示改变上述显示画面上正显示的显示内容的触摸操作、以及指示输入命令或数据的触摸操作。
10.根据权利要求6所述的显示终端装置，其特征在于， 在执行指示上述显示画面内的位置的触摸操作作为触摸操作内容时，上述合成单元将表示该位置的图标与上述显示画面正显示的显示内容进行合成，在执行指示改变上述显示画面正显示的显示内容的触摸操作作为触摸操作内容时，上述合成单元将表示该改变的类型的动画图像与上述显示画面上正显示的显示内容进行合成，在执行指示输入命令或数据的触摸操作作为触摸操作内容时，上述合成单元将表示该输入的类型的动画图像与上述显示画面正显示的显示内容进行合成。
11.一种能够连接外部显示装置的显示终端装置中的方法，其特征在于， 该方法具备以下步骤: 检测步骤，检测显示画面上的触摸操作； 判断步骤，判断是否设定成外部发送模式，该外部发送模式是将上述显示画面上正在显示的显示内容发送给上述外部显示装置的模式； 生成步骤，在上述判断步骤判断为设定成外部发送模式的状态下，当上述检测步骤检测到触摸操作时，生成将表示该触摸操作的内容的操作信息与上述显示画面正显示的显示内容进行合成而得的合成画面内容；以及 改变步骤，将上述生成步骤生成的合成画面内容发送到上述外部显示装置，来改变该外部显示装置侧的显示内容。
12.一种能够连接外部显示装置的显示终端装置中的方法，其特征在于， 该方法具备以下步骤: 检测步骤，检测显示画面上的触摸操作； 判断步骤，判断是否连接了上述外部显示装置； 生成步骤，在上述判断步骤判断为连接了上述外部显示装置的状态下，当上述检测步骤检测到触摸操作时，生成将该触摸操作内容与上述显示画面正显示的显示内容进行合成而得的合成画面内容；以及 改变步骤，将上述生成步骤生成的合成画面内容发送到上述外部显示装置，由此来改变该外部显示装置侧的显示内容。
【文档编号】G06F3/0488GK103577140SQ201310367280
【公开日】2014年2月12日 申请日期:2013年7月29日 优先权日:2012年7月30日
【发明者】广谷孝幸 申请人:卡西欧计算机株式会社