操作支援装置以及操作支援方法

文档序号:6359209阅读:124来源:国知局
专利名称:操作支援装置以及操作支援方法
技术领域
本发明涉及用于支援成为操作支援的对象的用户(以下称为“操作支援对象用户”)对操作画面进行的操作的操作支援装置以及操作支援方法。
背景技术
近些年,随着家电产品等设备的高功能化、复杂化,老年人等无操作技能的操作支援对象用户操作这样的设备变得困难。
因此,设想出了这样一种技术,即与经由网络来连接的通信终端之间共享作为用于操作设备的GUI (图形用户界面)来发挥功能的操作画面。通过该技术,操作通信终端的用户(以下称为“操作支援用户”)能够对设备的操作画面进行远程操作,能够支援操作支援对象用户的操作。
但是,存在如果不多次接受上述的操作支援则操作支援对象用户不能确实地学会操作方法的情况。此时,因为经由网络来共享操作画面的次数增多,因此通信负荷增大。
因此,提出了这样一种技术,即在操作画面被共享时,通过记录该操作画面来生成影像数据,并将所生成的影像数据保存到存储部(例如,参照专利文献1)。根据专利文献 1记述的技术,通过再生过去操作画面被记录的影像数据,从而能够显示用于支援操作对象用户的操作的影像(以下称为“操作支援影像”),操作支援对象用户能够再次确认操作内容。其结果,能够抑制为了接受某一操作的操作支援而多次经由网络来共享操作画面,能够减轻通信负荷。
专利文献1 (日本)特开2005-208883号公报
然而,对于操作支援对象用户,自己从过去被记录的影像数据中找出用于支援所期望的操作的影像数据很困难。其结果,再生不需要的影像数据,或者执行存储有用于支援所期望的操作的影像数据却与通信终端之间共享操作画面等无用的处理,使装置负荷或者通信负荷增大。发明内容
本发明鉴于上述课题,目的在于提供能够通过有效地支援操作支援对象用户来减轻装置负荷以及通信负荷的操作支援装置。
为了达成上述目的,本发明的一个方面所涉及的操作支援装置,具有画面共享部, 该画面共享部,通过将作为图形用户界面发挥功能的操作画面的数据发送到经由网络连接的通信终端,从而能够在与所述通信终端之间共享该操作画面,所述操作支援装置具备画面生成部,按照经由输入部接受的用户的操作来生成操作画面;影像记录部,在被生成的所述操作画面在与所述通信终端之间被共享时,通过记录被生成的所述操作画面来生成影像数据,并将所生成的影像数据保存到存储部;显示控制部,使显示部显示被生成的所述操作画面;以及影像再生部,在被生成的所述操作画面在与所述通信终端之间不被共享时,从由所述影像记录部保存到所述存储部的影像数据中,搜索与被生成的所述操作画面对应的影像数据,并再生搜索到的影像数据,所述显示控制部,在被生成的所述操作画面在与所述通信终端之间不被共享时,使所述显示部同时显示所述操作画面和被再生的所述影像数据所示的操作支援影像。
根据此构成,在操作画面在与通信终端之间不被共享时,能够按照当前的操作画面来自动地显示过去操作画面在与通信终端之间被共享时被记录的操作支援影像,能够有效地支援操作支援对象用户。其结果,能够抑制与当前的操作画面没有关系的操作支援影像被显示,能够减轻装置负荷。而且,在与当前的操作画面对应的影像数据已被存储的情况下,能够抑制操作画面在与通信终端之间被共享,减轻通信负荷。
并且,优选为,所述操作支援装置还具备操作信息记录部,该操作信息记录部将示出对所述操作画面进行的操作的内容的操作信息与所述影像数据对应起来保存到所述存储部,所述影像再生部,进一步从所述存储部读出与搜索到的影像数据对应的操作信息,所述显示控制部,在使所述显示部显示所述操作支援影像时,进一步使所述显示部显示由所述影像再生部读出的操作信息。
根据此构成,因为能够与操作支援影像一同显示操作信息,因此能够进一步有效地支援操作支援对象用户,能够更加减轻装置负荷以及通信负荷。
并且,优选为,所述输入部是触摸屏,该输入部将示出所述触摸屏的接触面中的接触位置的信息作为所述操作信息来输出。
根据此构成,能够将触摸屏的接触位置作为操作信息来显示,因此在经由触摸屏来操作操作画面时,能够有效地支援操作支援对象用户,能够减轻装置负荷以及通信负荷。
并且,优选为,所述显示控制部,通过以使所述操作信息被输出的时刻与所述操作画面被记录的时刻同步的方式,使预先规定的操作图像重叠在所述操作支援影像被显示的且与所述操作信息所示的接触位置相对应的区域,从而使所述显示部显示所述操作信息。
根据此构成,能够基于操作信息所示的接触位置来使操作图像重叠于操作支援影像来显示,因此能够模拟地再现操作画面被共享时操作支援用户等对触摸屏进行的操作。 因此,操作支援对象用户,能够通过按照操作图像的运动来运动手等,从而执行用于实现所期望的功能的操作。也就是说,能够有效地支援操作支援对象用户,因此能够更加减轻装置负荷以及通信负荷。
并且,优选为,所述输入部是具有多个操作键的远程控制器,该输入部将用于确定所述多个操作键中的被用户操作的操作键的信息作为所述操作信息来输出。
根据此构成,能够将用于确定操作键的信息作为操作信息来显示,因此在经由远程控制器来操作操作画面时,能够有效地支援操作支援对象用户,能够更加减轻装置负荷以及通信负荷。
并且,优选为,所述显示控制部,通过以使所述操作信息被输出的时刻与所述操作画面被记录的时刻同步的方式,使示出由所述操作信息确定的操作键的操作图像显示,从而使所述显示部显示所述操作信息。
根据此构成,因为能够使示出被操作的操作键的操作图像与操作支援影像同步地显示,因此操作支援对象用户能够通过按被显示的顺序操作操作图像所示的操作键,从而执行用于实现所期望的功能的操作。也就是说,能够有效地支援操作支援对象用户,因此能够更加减轻装置负荷以及通信负荷。5
并且,优选为,所述显示控制部,在由所述影像再生部读出了多个影像数据的情况下,使所述显示部同时显示所述操作画面和所述多个影像数据所示的多个操作支援影像。
根据此构成,在能够对操作画面进行多个操作的情况下,能够使进行互相不同的操作时被记录的多个操作支援影像同时被显示。其结果,因为能够以短时间有效地支援操作支援对象用户,因此能够更加减轻装置负荷以及通信负荷。
并且,优选为,所述显示控制部,在由所述影像再生部读出了多个影像数据的情况下,以使所述多个影像数据所示的多个操作支援影像依次被显示的方式,使所述显示部同时显示所述操作画面和所述多个操作支援影像中的任一个操作支援影像。
根据此构成,在能够对操作画面进行多个操作的情况下,能够使进行互相不同的操作时被记录的多个操作支援影像依次被显示。其结果,能够使多个操作支援影像被显示而不必大幅度地减小操作画面被显示的区域,能够有效地支援操作支援对象用户。
并且,优选为,所述操作支援装置还具备输入部,该输入部从用户接受用于变更被显示在所述显示部的操作支援影像的再生状态的操作,所述影像再生部,按照由所述输入部所接受的操作来变更所述影像数据的再生状态。
根据此构成,能够接受对操作支援影像进行的操作,因此操作支援对象用户能够变更操作支援影像的再生状态。其结果,能够有效地支援操作支援对象用户,能够更加减轻装置负荷以及通信负荷。
并且,优选为,所述显示控制部,通过使所述操作支援影像显示到所述操作画面被显示的区域内的一部分,从而使所述显示部同时显示所述操作画面和所述操作支援影像。
根据此构成,能够同时显示操作画面和操作支援影像从而使操作支援对象用户容易看到。其结果,能够有效地支援操作支援对象用户,能够更加减轻装置负荷以及通信负荷。
并且,优选为,所述影像再生部,反复再生所述影像数据。
根据此构成,能够反复再生影像数据,因此能够反复显示操作画面被记录的操作支援影像。因此,操作支援对象用户,即使在只看到一次操作支援影像就不能执行用于实现所期望的功能的操作的情况下,也能够通过反复地观看操作支援影像而执行用于实现所期望的功能的操作。也就是说,能够有效地支援操作支援对象用户,因此能够更加减轻装置负荷以及通信负荷。
并且,优选为,所述影像再生部,在所述操作画面之前被生成的操作画面是第一操作画面且所述操作画面是第二操作画面的情况下,将从所述第一操作画面迁移到所述第二操作画面时被记录的所述第二操作画面的影像数据,作为与所述操作画面对应的影像数据而从所述存储部读出。
根据此构成,在从第一操作画面迁移到第二操作画面的情况下,能够使进行同一迁移时被记录的操作支援影像被显示。因此,能够提高适合于支援用于实现所期望的功能的操作的操作支援影像被显示的可能性。也就是说,能够有效地支援操作支援对象用户,因此能够更加减轻装置负荷以及通信负荷。
并且,也可以是,所述操作支援装置,作为集成电路来被构成。
并且,本发明的一个方面所涉及的操作支援方法,通过将作为图形用户界面发挥功能的操作画面的数据发送到经由网络来连接的通信终端,从而能够与所述通信终端之间共享该操作画面,所述操作支援方法包括以下步骤画面生成步骤,按照经由输入部接受的用户的操作来生成操作画面;影像记录步骤,在被生成的所述操作画面在与所述通信终端之间被共享时,通过记录被生成的所述操作画面来生成影像数据,并将所生成的影像数据保存到存储部;显示控制步骤,使显示部显示被生成的所述操作画面;以及影像再生步骤, 在被生成的所述操作画面在与所述通信终端之间不被共享时,从在所述影像记录步骤中保存到所述存储部的影像数据中,搜索与被生成的所述操作画面对应的影像数据,并再生搜索到的影像数据,在所述显示控制步骤中,在被生成的所述操作画面在与所述通信终端之间不被共享时,使所述显示部同时显示所述操作画面和被再生的所述影像数据所示的操作支援影像。
据此,能够达到与上述操作支援装置同样的效果。
并且,本发明也能够作为使计算机执行上述操作支援方法中包括的各步骤的程序来实现。并且,不言而喻,这些程序能够通过CD-ROM等记录介质或互联网等传输介质来分发。
根据本发明,在操作画面在与通信终端之间不被共享时,按照当前的操作画面来自动地显示过去操作画面在与通信终端之间被共享时被记录的操作支援影像,能够有效地支援操作支援对象用户。其结果,能够抑制与当前的操作画面无关的操作支援影像被显示, 能够减轻装置负荷。而且,在与当前的操作画面对应的影像数据已被存储的情况下,能够抑制操作画面在与通信终端之间被共享,从而能够减轻通信负荷。


图1是示出本发明的实施例所涉及的操作支援系统的构成的框图。
图2A是示出被显示在本发明的实施例所涉及的显示器的操作画面的迁移的一个例子的图。
图2B是示出被显示在本发明的实施例所涉及的显示器的操作画面的迁移的一个例子的图。
图2C是示出被显示在本发明的实施例所涉及的显示器的操作画面的迁移的一个例子的图。
图2D是示出被显示在本发明的实施例所涉及的显示器的操作画面的迁移的一个例子的图。
图3是示出本发明的实施例所涉及的操作支援影像文件的构成例的图。
图4是本发明的实施例所涉及的操作支援影像管理信息的构成例的图。
图5是示出本发明的实施例所涉及的操作支援装置的处理的流程的流程图。
图6是示出本发明的实施例中操作支援影像被显示的区域的一个例子的图。
图7是示出本发明的实施例中操作支援影像被显示的区域的另外的一个例子的图。
图8是示出被显示在本发明的实施例所涉及的显示器的操作支援影像和操作信息的一个例子的图。
图9是示出再生本发明的实施例所涉及的影像时的处理的流程的流程图。
图10是示出在本发明的实施例所涉及的操作支援系统中用于共享操作画面的处理的流程的流程图。
图11是示出被显示在本发明的实施例所涉及的显示器的操作支援影像和操作信息的另外一个例子的图。
图12是示出本发明的实施例的变形例1所涉及的操作支援装置的功能构成的框图。
图13是示出本发明的实施例的变形例2所涉及的操作支援装置的功能构成的框图。
具体实施方式
以下,参照附图来说明本发明的实施例。
(实施例)
图1是示出本发明的实施例所涉及的操作支援系统10的构成的框图。如图1所示,操作支援系统10具备操作支援对象用户操作的操作支援装置100以及与操作支援对象用户不同的操作支援用户操作的通信终端150。操作支援装置100与通信终端150经由网络来连接,一般而言被设置在相互分开的场所。
在此,作为操作支援对象用户设想的是无操作技能或操作技能低的老年人等用户。并且,作为操作支援用户,设想的是熟悉操作支援装置100的操作的用户或者支持工程师等。
操作支援装置100,通过将作为GUI发挥功能的操作画面的图像数据发送到通信终端150,从而能够与通信终端150之间共享操作画面。操作支援装置100具备的各构成要素的详细情况之后叙述。
通信终端150具备输入部151和显示器153。通信终端150,基于从操作支援装置 100发送来的操作画面的图像数据,使显示器153显示操作画面。而且,通信终端150,经由输入部151从操作支援用户接受操作,并将示出接受的操作的操作信息发送到操作支援装置100。其结果,操作支援用户,能够经由通信终端150,远程操作操作支援装置100。
另外,操作支援装置100以及通信终端150都是能够经由远程控制器(以下单称为“遥控器”)或者触摸屏等输入部而从用户接受操作的设备。具体而言,操作支援装置100 以及通信终端150,例如相当于TV (Television 电视机)、HDD (Hard Disk Drive :硬盘)记录器、家庭服务器、PC (Personal Computer 个人计算机)等。
另外,遥控器是以红外线等无线来发送用于远程操作成为操作对象的设备的信号的输入装置,一般而言,在距成为操作对象的设备比较近的位置使用。并且,触摸屏是输出示出接触面上的被触摸的位置(以下称为“接触位置”)的信号的输入装置。
在此,说明从用户接受了操作的情况下的操作画面的迁移的一个例子。
图2A 图2D是示出被显示在本发明的实施例所涉及的显示器103的操作画面的迁移的一个例子的图。具体而言,图2A 2D中示出从用户接受了用于以自动展示(slide show)方式来显示照片的操作(以下称为“自动展示操作”)的情况下的操作画面的迁移。
首先,如图2A所示,在操作画面ID “1”的操作画面中,选择操作一览菜单中的“照片”。接着,如图2B所示,在操作画面ID “2”的操作画面中,选择示出对要显示的照片进行分类的方法的“事件”。
而且,如图2C所示,在操作画面ID “3”的操作画面中,从被显示的多个照片中选择一部分的照片,并指示开始对所选择的照片进行“自动展示”。最后,如图2D所示,在操作画面ID “4”的操作画面中,执行对在操作画面ID “3”的操作画面中所选择的照片的自动展不。
更加具体地说明图2A 2D。
首先,如图2A所示,在起动了示出多个操作的操作一览菜单的操作画面211中,通过按下三次遥控器的下按键等,从而光标向下方移动(操作画面212 214)。另外,以后的图中,光标被作为阴影线部分来显示,表示由遥控器等来选择的菜单项目。
在作为目的的菜单项目的“照片”被选择的操作画面214中,通过按下决定按键等,从而从操作画面ID “1”的操作画面214迁移到图2B所示的操作画面ID “2”的操作画面 221。
然后,在迁移后的操作画面221中,通过按下右按键等,从而光标向右方移动(操作画面22 。而且,在操作画面222中,通过按下下按键等,从而光标向下方移动(操作画面 223)。
在作为目的的菜单项目的“事件”被选择的操作画面223中,通过按下决定按键等,从而从操作画面ID “2”的操作画面223迁移到图2C所示的操作画面ID “3”的操作画面 231。
接着,在迁移后的操作画面231中,通过执行用于选择成为自动展示的对象的照片的操作,从而选择多个照片(操作画面232)。在操作画面232中,通过按下辅助菜单按键等,从而使用于起动自动展示的菜单显示(操作画面23 。在操作画面233中,通过按下下按键等,从而光标移动到“自动展示”(操作画面234)。
在操作画面234中,通过按下决定按键等,从而开始自动展示。也就是说,从操作画面ID “3”的操作画面234迁移到图2D所示的操作画面ID “4”的操作画面Ml。操作画面241是执行了自动展示的状态的操作画面。如操作画面242所示,例如执行具有将镜头移向脸的效果的自动展示。
另外,以后,以操作操作支援装置100的操作支援对象用户,向操作支援用户委托图2A 图2D所示的“自动展示操作”的操作支援的用例为前提来进行说明。
接着,返回图1,说明操作支援装置100具备的各构成要素。
如图1所示,操作支援装置100具备输入部101、操作画面生成部102、显示器 103、收发部104、操作画面共享部105、操作支援影像记录部106、操作支援影像管理信息记录部107、存储部108、操作支援影像再生部110以及显示控制部111。
输入部101从操作支援对象用户接受对被显示在显示器103的操作画面进行的操作。例如,输入部101,是触摸屏,将示出该触摸屏的接触面上的接触位置的信息作为操作信息来输出。
并且,也可以是,例如,输入部101是具有多个操作键的遥控器。此时,例如,输入部101将用于确定多个操作键中的被用户操作的操作键的信息作为操作信息来输出。
另外,输入部101,不必一定是触摸屏或遥控器,例如也可以是键盘或者鼠标等。
操作画面生成部102相当于画面生成部。操作画面生成部102基于经由输入部 101、151来接受的用户的操作来生成操作画面。9
具体而言,操作画面生成部102,基于从输入部101输出的操作信息,来生成或更新操作画面。被生成或更新的操作画面,通过显示控制部111被显示到显示器103。
并且,操作画面生成部102,基于经由收发部104以及操作画面共享部105从通信终端150接收的操作信息来生成或更新操作画面。其结果,经由通信终端150,由操作支援用户远程操作操作支援装置100。
另外,生成操作画面意味着生成与之前生成的操作画面的操作画面ID不同的操作画面ID的操作画面(例如,操作画面211、221等)。并且,更新操作画面意味着更新已被显示在显示器103的操作画面(例如,操作画面212、222等)。
显示器103相当于显示部,例如液晶显示器或等离子显示器等。显示器103,由显示控制部111来控制,显示操作画面、操作支援影像等。
收发部104是用于与经由网络来连接的通信终端150之间进行通信的通信接口。
操作画面共享部105,通过将操作画面的数据发送到通信终端150,从而与通信终端150之间共享操作画面。具体而言,操作画面共享部105,将由操作画面生成部102生成的操作画面的数据(例如,与已向通信终端150发送的操作画面的图像数据之间的差分数据等),经由收发部104发送到通信终端150。其结果,被显示在操作支援装置100的显示器103的操作画面也被显示在通信终端150的显示器153。
而且,操作画面共享部105,经由收发部104接收示出操作支援用户对通信终端 150进行的操作的内容的操作信息,并输出到操作画面生成部102。
另外,为了开始与通信终端150共享操作画面,例如,由操作支援对象用户以电话等与操作支援用户联络。并且,接受了联络的操作支援用户,将通信终端150连接到网络, 并起动通信终端150的操作画面共享功能,与操作支援装置100连接。并且,在通信终端 150与网络连接且操作支援装置100保持了通信终端150的地址的情况下,操作支援装置 100也可以发送用于经由网络来开始操作画面的共享的委托。
操作支援影像记录部106,相当于影像记录部,在通过操作画面共享部105而操作画面在与通信终端150之间被共享时,通过记录该操作画面从而生成影像数据。而且,操作支援影像记录部106,将所生成的影像数据保存到存储部108。
具体而言,操作支援影像记录部106,在操作画面在与通信终端150之间被共享时,通过记录由操作画面生成部102生成的操作画面来生成影像数据。并且,操作支援影像记录部106,将所生成的影像数据作为操作支援影像文件300保存到存储部108。
操作支援影像管理信息记录部107,相当于操作信息记录部,将示出对操作画面进行的操作的内容的操作信息与影像数据对应起来保存到存储部108。具体而言,操作支援影像管理信息记录部107,在操作画面被记录时,作为与操作支援影像文件300有关的管理信息,生成并记录包含操作信息的操作支援影像管理信息400。
存储部108,例如是HDD或SSD (Solid State Drive 固态硬盘)等,是用于存储操作支援影像文件300以及操作支援影像管理信息400的存储部。
操作支援影像再生部110,相当于影像再生部,在操作画面在与通信终端150之间不被共享时,从由操作支援影像记录部106保存到存储部108的影像数据中,搜索与被生成的操作画面对应的影像数据。而且,操作支援影像再生部110,再生搜索到的影像数据,并输出到显示控制部111。操作支援影像再生部110,进一步,从存储部108读出与搜索到的影,并输出到显示控制部111。
显示控制部111,在操作画面在与通信终端150之间被共享时,使显示器103显示操作画面,在操作画面在与通信终端150之间不被共享时,使显示器103同时显示操作画面和被再生的影像数据所示的操作支援影像。
接着,利用图3以及图4详细地说明被保存到存储部108的操作支援影像文件300 以及操作支援影像管理信息400。
图3是示出本发明的实施例所涉及的操作支援影像文件300的构成例的图。操作支援影像文件300,在开头部分具有头部区域301,在头部区域301之后具有数据区域302。
头部区域301中保存有示出操作支援影像文件300的版本的版本信息以及用于唯一地识别操作支援影像文件300的识别信息(操作支援影像ID)等关联数据。数据区域 302中保存有通过操作画面被记录而被生成的影像数据。另外,也可以是,数据区域302中, 进一步,保存有声音数据等附加性的数据。
在图3中,在数据区域302中保存有记录了进行了如图2A 2D所示的“自动展示操作”时的操作画面的影像数据。附带地,影像数据的记录格式可以是一般的格式,也可以是独创的格式。例如,也可以是,记录格式是MPEG-2或者H. 264等格式。
图4是本发明的实施例所涉及的操作支援影像管理信息400的构成例的图。如图 4所示,操作支援影像管理信息400包含操作支援影像ID401、操作支援者名402、操作支援标题403、操作画面切换位置信息404以及操作支援信息408。
操作支援影像ID401是用于唯一地识别操作支援影像文件300的识别信息。通过该操作支援影像ID401,操作支援影像文件300与操作支援影像管理信息400相关联。
操作支援者名402,是利用通信终端150进行了操作支援的操作支援用户的名字。
操作支援标题403是有关操作支援的内容的信息。例如,操作支援标题403是“观看自动展示”、“预约录像”等标题。另外,操作支援标题403,基于操作画面的迁移,由操作支援装置100自动地决定。或者,也可以是,操作支援标题403,由支援用户或者支援对象用户来输入。
操作画面切换位置信息404是示出记录了操作画面的影像数据的时间上的位置的信息。在从某一操作画面ID的操作画面迁移到与该操作画面ID不同的操作画面ID的操作画面时,操作画面切换位置信息404按照由操作画面生成部102通知的信息来被决定。 具体而言,操作画面切换位置信息404,如图4所示,至少包含一组操作画面ID405、时间戳信息406以及影像位置信息407的组合。
操作画面ID405是用于识别操作画面的识别信息。
时间戳信息406示出该操作画面ID405的操作画面被记录的时间。具体而言,时间戳信息406,示出该操作画面ID405的操作画面从开始被记录到切换为下一个操作画面 ID的操作画面为止的时间(例18时20分30秒 18时21分15秒)。
影像位置信息407,示出在操作支援影像文件300内记录了该操作画面ID405的操作画面的影像数据被保存的位置(例“偏移(offset) 128K字节、大小511字节”)。
每当操作画面ID被切换为不同的操作画面时,该操作画面ID405、时间戳信息406 以及影像位置信息407的组合,就会被新追加到操作画面切换位置信息404。
操作支援信息408包含示出操作支援用户对操作画面进行的操作的定时的时间11戳信息409和示出操作的内容的操作信息410。具体而言,时间戳信息409示出支援用户利用遥控器或者触摸屏等对操作画面进行了操作的时刻(例18时20分45秒)。并且,操作信息410是用于确定在时间戳信息409所示的时刻被操作的操作键的信息或者是示出触摸屏的接触位置的坐标位置信息等。
接着,说明按上述内容构成的操作支援装置100的各种动作。
图5是示出本发明的实施例所涉及的操作支援装置100的处理的流程的流程图。
首先,操作画面生成部102,基于经由输入部101、151等接受的用户的操作来生成操作画面(S101)。具体而言,操作画面生成部102,例如,在操作画面在与通信终端150之间被共享的情况下,按照经由输入部151接受的操作支援用户的操作(经由收发部104从通信终端150接收的操作信息)来生成操作画面。并且,操作画面生成部102,例如,在操作画面在与通信终端150之间不被共享的情况下,按照经由输入部101接受的操作支援对象用户的操作来生成操作画面。
接着,操作画面共享部105,判定被生成的操作画面在与通信终端150之间是否被共享(S102)。例如,操作画面共享部105,基于被生成的操作画面的数据是否被发送到通信终端150,来判定操作画面是否在与通信终端150之间被共享。
在此,操作画面被共享的情况下(S102的“是”),操作支援影像记录部106,通过记录操作画面来生成影像数据。而且,操作支援影像记录部106,将包含被生成的影像数据的操作支援影像文件300和包含操作信息的操作支援影像管理信息400保存到存储部 108(S103)。并且,显示控制部111,使显示器103显示操作画面(S104),并返回到步骤SlOl 的处理。
另一方面,在操作画面不被共享的情况下(S102的“否”),操作支援影像再生部 110,再生被存储到存储部108且与操作画面相对应的影像数据(S105)。
具体而言,操作支援影像再生部110,从由操作支援影像记录部106过去保存到存储部108的操作支援影像文件300中,搜索包含与被生成的操作画面对应的影像数据的操作支援影像文件300,并读出搜索到的操作支援影像文件300。而且,操作支援影像再生部 110,从存储部108读出与搜索到的操作支援影像文件300对应的操作支援影像管理信息 400。并且,操作支援影像再生部110,再生包含在所读出的操作支援影像文件300中的、与被生成的操作画面对应的影像数据。
接着,显示控制部111,使显示器103同时显示被生成的操作画面、被再生的影像数据所示的操作支援影像以及被读出的操作支援影像管理信息400中包含的操作信息 (S106),并返回到步骤SlOl的处理。具体而言,显示控制部111,例如如图6 8所示,使显示器103显示操作画面、操作支援影像以及操作信息。
图6是示出本发明的实施例中操作支援影像被显示的区域的一个例子的图。在图 6中,操作支援影像被显示到在操作画面501内的一部分区域形成的辅助画面502。
也就是说,显示控制部111,通过使操作支援影像重叠显示在操作画面被显示的区域内的一部分,从而使显示器103同时显示操作画面和操作支援影像。据此,操作支援装置 100,能够同时显示操作画面和操作支援影像从而使操作支援对象用户容易看到。
另外,也可以是,在步骤S105中多个影像数据被读出的情况下,如图7所示,显示控制部111使显示器103显示多个操作支援影像。
图7是示出本发明的实施例中操作支援影像被显示的区域的另外的一个例子的图。也可以是,如图7所示,显示控制部111使操作支援影像显示在多个辅助画面502、503, 而不是仅显示在一个辅助画面。也就是说,也可以是,在多个影像数据被搜索到的情况下, 显示控制部111使显示器103同时显示操作画面和被再生的该多个影像数据所示的多个操作支援影像。
据此,操作支援装置100,在能够对操作画面进行多个操作的情况下,能够同时显示进行互相不同的操作时被记录的多个操作支援影像。其结果,操作支援装置100能够以短时间有效地支援操作支援对象用户。
并且,也可以是,在步骤S105中多个影像数据被读出的情况下,显示控制部111, 以被再生的多个影像数据所示的多个操作支援影像依次被显示的方式,使显示器103同时显示操作画面和多个操作支援影像中的任一个操作支援影像。据此,操作支援装置100,在能够对操作画面进行多个操作的情况下,能够依次显示进行互相不同的操作时被记录的多个操作支援影像。其结果,操作支援装置100,能够显示多个操作支援影像而不必大幅度地减小操作画面被显示的区域,能够有效地支援操作支援对象用户。
图8是示出被显示在本发明的实施例所涉及的显示器103的操作支援影像和操作信息的一个例子的图。在图8中,由操作支援用户经由通信终端150来操作操作支援装置 100时被记录的操作支援影像被显示在辅助画面502。
并且,基于操作支援影像管理信息400中包含的操作支援信息408,操作图像701、 702以及操作字符703被显示在辅助画面502中。在此,对操作支援信息408包含示出触摸屏的接触面的接触位置的操作信息和示出操作支援用户名以及操作标题的操作信息的情况进行说明。
操作图像701是被重叠显示在操作支援影像被显示的且与操作信息所示的接触位置相对应的区域的手的图像。操作图像701以使操作位置被检测的时刻与操作画面被记录的时刻同步的方式被显示。
另外,操作图像701,只要是能够示出接触位置的预先规定的图像即可,并非一定要是手的图像。例如,操作图像701也可以是箭头等图像。
操作图像702,是基于操作信息所示的接触位置,重叠于操作支援影像而被显示的箭头的图像。操作图像702表示接触位置的时间上的变化。也就是说,显示控制部111,使显示器103显示示出接触位置的时间上的变化的操作图像702。
操作字符703,是示出操作支援影像被记录时的操作支援用户名或操作标题等的字符。
这样,显示控制部111,在使显示器103显示操作支援影像时,使显示器103也同时显示由操作支援影像再生部110读出的操作信息。据此,操作支援装置100能够有效地支援操作支援对象用户。
并且,操作支援装置100,能够使示出触摸屏的接触位置的信息被显示,因此在经由触摸屏来操作操作画面时,能够有效地支援操作支援对象用户。
而且,显示控制部111,如操作图像701,以使操作信息被输出的时刻与操作画面被记录的时刻同步的方式,使显示器103显示操作图像701。而且,显示控制部111,通过使操作图像701重叠在操作支援影像被显示的且与操作信息所示的接触位置相对应的区域,从而使显示器103显示操作信息。
其结果,操作支援装置100,能够模拟再现操作支援用户对触摸屏进行的操作,能够有效地支援操作支援对象用户对操作画面进行的操作。也就是说,操作支援对象用户,通过使手与在操作支援影像中被显示的手的运动同样地运动,从而能够实现所期望的操作。
接着,利用图9的流程图,详细地说明再生影像数据的处理。
图9是示出再生本发明的实施例所涉及的影像时的处理(S105)的流程的流程图。
操作画面生成部102,在操作画面的操作画面ID被切换的定时,向操作支援影像再生部110通知当前的操作画面ID(以下称为“第一操作画面ID”)以及下一个操作画面 ID (以下称为“第二操作画面ID”)。也就是说,操作支援影像再生部110,从操作画面生成部102接收第一操作画面ID和第二操作画面ID(S201)。
接着,操作支援影像再生部110,从在存储部108中存储的操作支援影像文件 300中,搜索具有第二操作画面ID的操作画面被记录的影像数据的操作支援影像文件 300(S202)。具体而言,操作支援影像再生部110,通过将接受了通知的第二操作画面ID与操作支援影像管理信息400中包含的操作画面ID405进行匹配,从而搜索操作支援影像文件 300。
在此,在不存在包含与第二操作画面ID —致的操作画面ID405的操作支援影像文件300的情况下(S203的“否”),结束处理。
另一方面,在存在包含与第二操作画面ID —致的操作画面ID405的操作支援影像文件300的情况下(S203的“是”),操作支援影像再生部110,从存储部108读出该操作支援影像文件300 (S204)。
接着,操作支援影像再生部110,再生与被读出的操作支援影像文件300中包含的影像数据中的第二操作画面ID对应的影像数据(S205)。
具体而言,操作支援影像再生部110,参照在存储部108中存储的操作支援影像管理信息400,取得与第二操作画面ID —致的操作画面ID405的影像位置信息407。并且, 操作支援影像再生部110,基于所取得的影像位置信息407,自动地再生操作支援影像文件 300中包含的影像数据中的、与第二操作画面ID对应的影像数据。
这样,操作支援影像再生部110,读出与被生成的操作画面对应的影像数据,并再生所读出的影像数据。
另外,优选为,操作支援影像再生部110,反复再生影像数据,直到重新在步骤 SlOl中生成操作画面为止。也就是说,优选为,操作支援影像再生部110,在操作画面生成部102向操作支援影像再生部110通知下一个操作画面ID为止的期间,即用户的在操作中的操作画面迁移到其他的操作画面ID为止的期间,反复再生操作支援影像。
据此,操作支援对象用户,即使在只看到一次操作支援影像就不能实现所期望的操作的情况下,也能通过反复地观看操作支援影像而能够实现所期望的操作。也就是说,操作支援装置100能够提高操作支援对象用户的利便性。
另外,也可以是,操作支援影像再生部110,在反复再生操作支援影像的情况下,反复再生预先规定的次数之后结束再生。据此,操作支援影像再生部110,能够抑制对于操作支援对象用户没有帮助的操作支援影像被反复再生所需要的以上。
并且,在步骤S202中,虽然操作支援影像再生部110仅利用第二操作画面ID来搜索了操作支援影像文件300,但是也可以是,进一步利用第一操作画面ID来搜索操作支援影像文件300。
具体而言,也可以是,操作支援影像再生部110,搜索包含从第一操作画面ID的操作画面迁移到第二操作画面ID的操作画面时被记录的第二操作画面ID的操作画面的影像数据的操作支援影像文件300。也就是说,操作支援影像再生部110,将从第一操作画面迁移到第二操作画面时被记录的第二操作画面的影像数据,作为与被生成的操作画面对应的影像数据,来从存储部108中读出。
据此,操作支援装置100,在从第一操作画面迁移到第二操作画面的情况下,能够使进行同一迁移时被记录的操作支援影像被显示。因此,操作支援装置100,能够提高适合于支援用于实现操作支援对象用户所期望的功能的操作的操作支援影像被显示的可能性。 也就是说,操作支援装置100,能够有效地支援操作支援对象用户。
接着,详细地说明用于共享操作画面的处理。
图10是示出在本发明所涉及的操作支援系统中用于共享操作画面的处理的流程的流程图。在图10中,右侧示出操作支援装置100的处理的流程,左侧示出通信终端150 的处理的流程。并且,作为图10的流程图的前提,设定操作支援装置100以及通信终端150 是已被起动的状态。
首先,操作支援装置100,为了按照支援对象用户的操作开始共享操作画面,使显示器103显示操作画面(S301)。而且,操作支援装置100,起动用于向通信终端委托共享操作画面的委托菜单(S302)。另外,有关用于向通信终端委托共享操作画面的委托菜单的详细情况的说明进行省略。
并且,操作支援装置100,在用于向通信终端委托共享操作画面的委托菜单中,从操作支援对象用户接受用于选择委托共享操作画面的通信终端150的操作,按照所接受的操作选择通信终端150(S303)。并且,操作支援装置100向所选择的通信终端150发送用于共享操作画面的委托(以下称为“共享委托”)(S304)。
接着,通信终端150接收从操作支援装置100发送来的共享委托(S401)。然后,通信终端150,从操作支援用户接受针对共享委托的应答,并发送所接受的应答640 。具体而言,通信终端150,例如,在显示器153弹出显示有关共享委托的消息和许可确认。并且, 通信终端150,经由输入部151,从操作支援用户接受是否许可操作支援委托的应答。
操作支援装置100,经由收发部104,接收共享委托的应答630 。在此,接收的应答是拒绝的情况下(S306的“否”),返回到操作画面的显示。另一方面,在接收的应答是许可的情况下(S306的“是”),操作画面共享部105,将由操作画面生成部102生成的操作画面的图像数据自动地发送到通信终端150(S307)。
通信终端150,接收操作画面的图像数据,并显示在显示器153(S403)。据此,操作画面的共享开始。
通信终端150,经由输入部151,从操作支援用户接受对操作画面的操作,并将示出接受的操作的操作信息发送到操作支援装置100(S404)。
操作支援装置100从通信终端150接收操作信息(S308)。操作画面生成部102, 基于所接收的操作信息来生成或更新操作画面(S309)。另外,在此被生成或更新的操作画面,通过显示控制部111来被显示在显示器103。CN 102511029 A说明书13/16 页
而且,操作支援影像记录部106,通过记录被生成或更新的操作画面来生成影像数据,并将操作支援影像文件300保存到存储部108 (S310)。这些步骤S309 S310的处理相当于图5所示的SlOl S104的处理。
在此,未从操作支援用户接受示出结束操作画面的共享的切断请求的情况下 (S405的“否”),返回接收操作画面的图像数据的处理(S403),并继续共享操作画面。另一方面,在从操作支援用户接受了示出结束操作画面的共享的切断请求的情况下(S405的 “是”),通信终端150向操作支援装置100发送切断请求(S406)。
并且,操作支援装置100,在未从通信终端150接收切断请求的情况下(Sll的 “否”),返回发送操作画面的处理(S307),继续共享操作画面。另一方面,在从通信终端150 接收了切断请求的情况下(S311的“是”),操作支援装置100进行切断处理,结束操作画面的共享(S312)。
这样,操作画面在操作支援装置100与通信终端150之间被共享。
如上所述,根据本实施例所涉及的操作支援装置100,在操作画面在与通信装置之间不被共享时,能够按照当前的操作画面自动地显示过去在与通信装置之间操作画面被共享时被记录的操作支援影像。因此,操作支援装置100,能够有效地支援操作支援对象用户, 且能够提高操作支援对象用户的利便性。其结果,操作支援装置100,抑制与当前的操作画面无关的操作支援影像被显示,能够减轻装置负荷。而且,操作支援装置100,在与当前的操作画面对应的影像数据已被存储的情况下,抑制在与通信终端之间操作画面被共享,从而能够减轻通信负荷。
也就是说,只要从操作支援用户得到一次操作支援,则与操作支援对象用户在操作中的操作画面相同的操作画面被记录的过去的操作支援影像与操作画面同时被显示,因此即使是对于操作不熟练的操作支援对象用户,也能够边看操作支援影像边执行所期望的功能。
以上,基于实施例说明了本发明的一个方面所涉及的操作支援装置100,但是本发明并不限定于这些实施例。只要不超出本发明的宗旨,将本领域技术人员所能想到的各种变形实施于这些实施例的实施例,或者组合不同的实施例的构成要素来构筑的实施例也包括在本发明的范围之内。
例如,在上述实施例中,如图8所示,详细地说明了输入部101是触摸屏的情况,但是输入部101并非一定要是触摸屏。也可以是,例如,输入部101是具有多个操作键的遥控器。此时,也可以是,输入部101,例如将用于确定多个操作键中的被用户操作的操作键的信息作为操作信息来输出。据此,操作支援装置100能够使显示器103显示用于确定操作键的信息,因此在经由远程控制器来操作操作画面时,能够有效地支援操作支援对象用户。
并且,优选为,在输入部101是遥控器的情况下,显示控制部111,以操作信息被输出的时刻与操作画面被记录的时刻同步的方式,使显示器103显示示出由操作信息确定的操作键的操作图像。具体而言,优选为,显示控制部111,如图11所示,将示出由操作信息确定的操作键的操作图像704,以与操作支援影像同步的方式来在显示器103显示。据此,操作支援对象用户,能够通过按被显示的顺序操作操作图像所示的操作键,从而执行用于实现所期望的功能的操作。也就是说,操作支援装置100能够有效地支援操作支援对象用户。
并且,也可以是,操作支援影像再生部110,按照由输入部101接受的操作来变更16影像数据的再生状态。此时,输入部101,从操作支援对象用户接受用于变更被显示在显示器103的操作支援影像再生状态的操作。具体而言,输入部101,例如接受暂停、快放、倒带或者停止等指示再生状态的变更的操作。并且,操作支援影像再生部110,按照由输入部 101接受的操作,暂停、快放、倒带或者停止操作支援影像的再生,从而变更操作支援影像的再生状态。
据此,操作支援对象用户,能够变更操作支援影像的再生状态。其结果,操作支援装置100,能够提高操作支援对象用户的利便性,且能够有效地支援操作支援对象用户。
并且,在上述实施例中,操作信息被显示在显示器103,但是并非一定要视觉性地来显示。也就是说,也可以是,通过声音来向操作支援对象用户提示操作信息。此时,操作支援装置100成为例如如图12所示的构成。
图12是示出本发明的实施例的变形例1所涉及的操作支援装置100的功能构成的图。如图12所示,本变形例所涉及的操作支援装置100,在上述实施例所涉及的操作支援装置所具备的各构成要素的基础上还具备声音输出部112。
声音输出部112,在操作支援影像被显示在显示器103时,基于由操作支援影像再生部110读出的操作信息,输出操作声音。例如,声音输出部112,将用于确定遥控器的操作键的信息作为操作声音来输出。
据此,操作支援对象用户,即使视线离开被显示在显示器103的操作支援影像,也能够按照操作声音来执行用于实现所期望的功能的操作。因此,操作支援装置100,能够有效地支援操作支援对象用户,且能够提高操作支援对象用户的利便性。
并且,在上述实施例中,操作支援装置100,在操作画面在与通信终端150之间不被共享时,显示操作支援影像,但是在操作画面在与通信终端150之间不被共享时,并非一定要显示操作支援影像。例如,也可以是,操作支援装置100,仅在用于显示操作支援影像的设定(以下称为“操作支援设定”)被有效化的情况下,显示操作支援影像。此时,例如, 操作支援对象用户经由输入部101等使操作支援装置100的操作支援设定有效化。并且, 例如,操作支援设定可以由操作支援对象用户以手动来无效化,也可以由操作支援装置100 的电源断开来自动地无效化。
并且,在上述实施例中,在操作画面被共享时,通过通信终端150向操作支援装置 100发送操作信息,从而操作支援用户能够经由通信终端150来对操作画面进行操作,但是并非一定要能够这样地操作。也就是说,也可以是,通信终端150,在操作画面在与操作支援装置100之间被共享时,仅在显示器153显示操作画面。此时,操作支援用户,例如利用电话等声音通信来进行操作支援对象用户的操作支援就可以。即使在这样的情况下,也因为在操作画面被共享时操作画面被记录,因此操作支援装置100能够支援操作支援对象用户。
并且,在上述实施例中,虽然用于显示操作支援影像的辅助画面重叠于操作画面被显示的区域的一部分来形成,但是并非一定要这样来形成辅助画面。例如,也可以是在一个显示面上分别形成操作画面和辅助画面。
并且,在上述实施例中,操作支援影像记录部106,将多个操作画面ID的操作画面被记录的影像数据作为一个操作支援影像文件300来保存到存储部108,但是并非一定要这样来将影像数据保存到存储部108。例如,也可以是,操作支援影像记录部106,按照每个操作画面ID来将操作支援影像文件300保存到存储部108。
并且,在上述实施例中,操作支援装置100具备图1所示的各构成要素,但是并非一定要具备图1所示的所有的构成要素。例如,也可以是,如图13所示,操作支援装置具备图1所示的构成要素的一部分。
图13是示出本发明的实施例的变形例2所涉及的操作支援装置的功能构成的框图。在图13中,操作支援装置100具备操作画面生成部102、操作画面共享部105、操作支援影像记录部106、操作支援影像再生部110以及显示控制部111。此时,输入部101、显示器103以及存储部108经由各种接口与操作支援装置100连接。并且,操作画面共享部105 具有收发部104的功能。
操作支援装置100即使是图13所示的构成,也能够在操作画面在与通信终端之间不被共享时,按照当前的操作画面来自动地显示过去操作画面在与通信终端之间被共享时被记录的操作支援影像,能够有效地支援操作支援对象用户。
并且,也可以是,操作支援装置100由具备CPU (Central Processing Unit 中央处理单元),ROM (Read Only Memory 只读存储器),RAM (Random Access Memory 随机存储器)和硬盘等的计算机来实现。此时,计算机,例如通过由CPU执行保存在ROM或RAM中的计算机程序,从而实现操作支援装置100具有的功能。
并且,上述实施例中的操作支援装置100具备的构成要素的一部分或全部,由1个系统LSI (Large Scale Integration 大规模集成电路)来构成。例如,也可以是,如图13 所示,操作支援装置100由具有操作画面生成部102、操作画面共享部105、操作支援影像记录部106、操作支援影像再生部110以及显示控制部111的系统LSI120来构成。
系统LSI120是在一个芯片上集成多个构成部来制造的超多功能LSI,具体而言, 是包括微处理器、ROM、RAM等而构成的计算机系统。所述RAM中存储有计算机程序。通过所述微处理器按照所述计算机程序来动作,从而系统LSI120达成其功能。
另外,在此,虽然设定为是系统LSI,但是,根据集成程度的不同,也有称为IC、 LSI、超级(supeiOLSI、极超级(ultra)LSI的情况。并且,集成电路化的方法并不限定于LSI,也可以在专用电路或通用处理器上实现。也可以利用在制造LSI后能够编程的 FPGA(Field Programmable Gate Array :现场可编程门阵列)或者可重构LSI内部的电路单元的连接或设定的可重构处理器。
而且,半导体技术的发展或利用派生的其他技术而出现替换LSI的集成电路化技术,当然也可以利用该技术进行功能块的集成化。也有适用生物技术等的可能性。
并且,本发明不仅能够作为具备具有这样的特征的处理部的操作支援装置来实现,而且还能够作为将操作支援装置包括的具有特征的处理部作为步骤的操作支援方法来实现。并且,也能够作为使计算机执行操作支援方法中包括的具有特征的各步骤的计算机程序来实现。并且,不言而喻,也可以是,这些计算机程序能够通过⑶-ROM等计算机可读取的记录介质或互联网等通信网络使其流通。
本发明的一个方面所涉及的操作支援装置,能够有效地显示过去从操作支援用户接受操作支援时被记录的、记录了与操作支援对象用户正在操作的操作画面相同的操作画面的操作支援影像,因此作为操作复杂化的电视机、HDD记录器或家庭服务器有用。
符号说明
10操作支援系统
100操作支援装置
101,151 输入部
102操作画面生成部
103、153 显示器
104收发部
105操作画面共享部
106操作支援影像记录部
107操作支援影像管理信息记录部
108存储部
110操作支援影像再生部
111显示控制部
120 系统 LSI
150通信终端
211、212、213、214、221、222、223、231、232、233、234、241、242、501 操作画面
300操作支援影像文件
301头部区域
302数据区域
400操作支援影像管理信息
401操作支援影像ID
402操作支援者名
403操作支援标题
404操作画面切换位置信息
405操作画面ID
406、409时间戳信息
407影像位置信息
408操作支援信息
410操作信息
502、503 辅助画面
701、702、704 操作图像
703操作字符19
权利要求
1.一种操作支援装置,该操作支援装置具有画面共享部,该画面共享部,通过将作为图形用户界面发挥功能的操作画面的数据发送到经由网络连接的通信终端,从而能够在与所述通信终端之间共享该操作画面,所述操作支援装置具备画面生成部,按照经由输入部接受的用户的操作来生成操作画面;影像记录部,在被生成的所述操作画面在与所述通信终端之间被共享时,通过记录被生成的所述操作画面来生成影像数据,并将所生成的影像数据保存到存储部;显示控制部,使显示部显示被生成的所述操作画面;以及影像再生部,在被生成的所述操作画面在与所述通信终端之间不被共享时,从由所述影像记录部保存到所述存储部的影像数据中,搜索与被生成的所述操作画面对应的影像数据,并再生搜索到的影像数据,所述显示控制部,在被生成的所述操作画面在与所述通信终端之间不被共享时,使所述显示部同时显示所述操作画面和被再生的所述影像数据所示的操作支援影像。
2.如权利要求1所述的操作支援装置,所述操作支援装置还具备操作信息记录部,该操作信息记录部将示出对所述操作画面进行的操作的内容的操作信息与所述影像数据对应起来保存到所述存储部,所述影像再生部,进一步从所述存储部读出与搜索到的影像数据对应的操作信息,所述显示控制部,在使所述显示部显示所述操作支援影像时,进一步使所述显示部显示由所述影像再生部读出的操作信息。
3.如权利要求2所述的操作支援装置,所述输入部是触摸屏,该输入部将示出所述触摸屏的接触面中的接触位置的信息作为所述操作信息来输出。
4.如权利要求3所述的操作支援装置,所述显示控制部,通过以使所述操作信息被输出的时刻与所述操作画面被记录的时刻同步的方式,使预先规定的操作图像重叠在所述操作支援影像被显示的且与所述操作信息所示的接触位置相对应的区域,从而使所述显示部显示所述操作信息。
5.如权利要求2所述的操作支援装置,所述输入部是具有多个操作键的远程控制器,该输入部将用于确定所述多个操作键中的被用户操作的操作键的信息作为所述操作信息来输出。
6.如权利要求5所述的操作支援装置,所述显示控制部,通过以使所述操作信息被输出的时刻与所述操作画面被记录的时刻同步的方式,使示出由所述操作信息确定的操作键的操作图像显示,从而使所述显示部显示所述操作信息。
7.如权利要求1所述的操作支援装置,所述显示控制部,在由所述影像再生部读出了多个影像数据的情况下,使所述显示部同时显示所述操作画面和所述多个影像数据所示的多个操作支援影像。
8.如权利要求1所述的操作支援装置,所述显示控制部,在由所述影像再生部读出了多个影像数据的情况下,以使所述多个影像数据所示的多个操作支援影像依次被显示的方式,使所述显示部同时显示所述操作画面和所述多个操作支援影像中的任一个操作支援影像。
9.如权利要求1所述的操作支援装置,所述操作支援装置还具备输入部,该输入部从用户接受用于变更被显示在所述显示部的操作支援影像的再生状态的操作,所述影像再生部,按照由所述输入部所接受的操作来变更所述影像数据的再生状态。
10.如权利要求1所述的操作支援装置,所述显示控制部,通过使所述操作支援影像显示到所述操作画面被显示的区域内的一部分,从而使所述显示部同时显示所述操作画面和所述操作支援影像。
11.如权利要求1所述的操作支援装置, 所述影像再生部,反复再生所述影像数据。
12.如权利要求1所述的操作支援装置,所述影像再生部,在所述操作画面之前被生成的操作画面是第一操作画面且所述操作画面是第二操作画面的情况下,将从所述第一操作画面迁移到所述第二操作画面时被记录的所述第二操作画面的影像数据,作为与所述操作画面对应的影像数据而从所述存储部读出ο
13.如权利要求1所述的操作支援装置, 所述操作支援装置,作为集成电路来被构成。
14.一种操作支援方法,通过将作为图形用户界面发挥功能的操作画面的数据发送到经由网络来连接的通信终端,从而能够与所述通信终端之间共享该操作画面,所述操作支援方法包括以下步骤画面生成步骤,按照经由输入部接受的用户的操作来生成操作画面; 影像记录步骤,在被生成的所述操作画面在与所述通信终端之间被共享时,通过记录被生成的所述操作画面来生成影像数据,并将所生成的影像数据保存到存储部; 显示控制步骤,使显示部显示被生成的所述操作画面;以及影像再生步骤,在被生成的所述操作画面在与所述通信终端之间不被共享时,从在所述影像记录步骤中保存到所述存储部的影像数据中,搜索与被生成的所述操作画面对应的影像数据,并再生搜索到的影像数据,在所述显示控制步骤中,在被生成的所述操作画面在与所述通信终端之间不被共享时,使所述显示部同时显示所述操作画面和被再生的所述影像数据所示的操作支援影像。
15.一种程序,用于使计算机执行权利要求14所述的操作支援方法。
全文摘要
操作支援装置(100),具备操作画面生成部(102),按照用户的操作来生成操作画面;操作支援影像记录部(106),在操作画面在与通信终端(150)之间被共享时,通过记录操作画面来生成影像数据,并将所生成的影像数据保存到存储部(108);显示控制部(111),使显示器(103)显示操作画面;以及操作支援影像再生部(110),在操作画面在与通信终端(150)之间不被共享时,从存储部(108)读出与操作画面对应的影像数据,并再生读出的影像数据,显示控制部(111),在操作画面在与通信终端(150)之间不被共享时,使显示器(103)同时显示操作画面和由操作支援再生部(110)再生的影像数据所示的操作支援影像。
文档编号G06F3/048GK102511029SQ20118000384
公开日2012年6月20日 申请日期2011年6月14日 优先权日2010年6月18日
发明者田边直久 申请人:松下电器产业株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1