远程支援系统的制作方法

文档序号:14942971发布日期:2018-07-13 21:32阅读:164来源:国知局

本发明涉及远程支援系统,该远程支援系统具有作为多功能数字复合机的mfp(multifunctionperipherals)等图像处理装置、能够与该图像处理装置协作使用的智能手机、平板终端等信息终端装置、以及进行远程支援的信息处理装置。



背景技术:

以往,针对以远程方式支援图像处理装置的系统提出了各种方案。例如,已知如下的系统:使支援用的信息处理装置侧同步显示与在图像处理装置显示的画面相同的画面,并从信息处理装置侧将表示画面操作的坐标数据发送给图像处理装置,图像处理装置基于所接收的坐标数据而生成新画面数据而显示,从而由信息处理装置侧对难以操作图像处理装置的用户进行操作的支援。

此外,在专利文献1中,公开了包括支援图像形成装置的信息处理装置的图像形成系统。该图像形成系统是具有连接到网络的支援用户的信息处理装置、图像形成装置、以及信息终端装置的图像形成系统,信息处理装置具有:画面仿真部,生成用于画面共享的影像数据;画面共享部,将所生成的数据向其他设备共享;以及连接切换部,受理来自图像形成装置的连接目的地的切换请求,并将支援对象切换到信息终端装置,根据来自图像形成装置的请求,将支援对象切换到信息终端装置。

现有技术文献

专利文献

专利文献1:(日本)特开2015-170049号公报



技术实现要素:

然而,近年来提供将图像处理装置和信息终端装置双方协作使用的功能。例如,当用户利用keyboardlink(注册商标)功能和/或addresslink(注册商标)功能对作为图像处理装置的一例的所述的mfp输入数据的情况下,用户不仅利用图像处理装置,为了实现keyboardlink(注册商标)功能和/或addresslink(注册商标)的功能,还利用信息终端装置。在该情况下,有时用户会不知道对在信息终端装置显示的操作画面的操作的方法。尤其,在图像处理装置和信息终端装置双方一边切换画面一边进行操作的情况、或者对操作并不习惯的用户的情况下更是如此。

针对该问题,还考虑如下情况:对于图像处理装置的显示画面,在远程支援用的信息处理装置同步显示同一画面从而在信息处理装置侧进行操作,对于信息终端装置的显示画面通过电话等进行支援。但是,难以通过电话来进行在信息终端装置显示着何种画面等的详细的交谈。

如此,以往存在如下的课题:在将图像处理装置和信息终端装置双方协作使用的情况下,即使用户想要接受支援,由于无法将在信息终端装置显示的画面显示在远程支援侧的信息处理装置,因此无法接受可靠且高效的支援。

另外,在专利文献1记载的系统虽然能够使在信息处理装置生成的画面显示在图像处理装置等,但由于不能使在信息终端装置显示的画面显示在信息处理装置,因此针对将图像处理装置和信息终端装置双方协作使用的用户不能接受可靠且高效的支援的上述问题,不能发送解决方案。

本发明鉴于这样的技术背景而完成,其目的在于,提供一种在用户将图像处理装置和信息终端装置双方协作使用的情况下,能够接受可靠且高效的支援的远程支援系统。

上述目的通过以下的手段来解决。

(1)一种远程支援系统,具有能够相互进行通信的图像处理装置与信息终端装置以及远程支援用的信息处理装置,其特征在于,所述图像处理装置具有:协作部件,能够进行与所述信息终端装置的协作使用;以及第一显示部件,所述信息终端装置具有:协作部件,能够进行与所述图像处理装置的协作使用;以及第二显示部件,所述图像处理装置与信息终端装置中的至少一方具有:受理部件,受理同步显示的开始指示;确认部件,在受理了所述同步显示的开始指示时,确认是否通过所述协作部件正在与对方装置进行协作;画面信息取得部件,在由所述确认部件确认了正在进行协作的情况下,取得与在所述第一显示部件正在显示的第一画面有关的第一画面信息、以及与在所述第二显示部件正在显示的第二画面有关的第二画面信息;以及发送部件,将由所述画面信息取得部件取得的第一画面信息与第二画面信息发送给所述信息处理装置,所述信息处理装置具有:第三显示部件;以及显示控制部件,基于从所述图像处理装置或信息终端装置发送了的第一画面信息与第二画面信息,再现所述图像处理装置侧的第一画面与所述信息终端装置侧的第二画面,从而使其显示在所述第三显示部件。

(2)一种远程支援系统,具有能够相互进行通信的图像处理装置与信息终端装置以及远程支援用的信息处理装置,其特征在于,所述图像处理装置具有:协作部件,能够进行与所述信息终端装置的协作使用;以及第一显示部件,所述信息终端装置具有:协作部件,能够进行与所述图像处理装置的协作使用;以及第二显示部件,所述图像处理装置与信息终端装置中的至少一方具有:受理部件,受理同步显示的开始指示;确认部件,在受理了所述同步显示的开始指示时,确认是否通过所述协作部件正在与对方装置进行协作;取得部件,在由所述确认部件确认了正在进行协作的情况下,取得作为与在本装置的显示部件正在显示的画面有关的画面信息的第一或第二画面信息;发送部件,将由所述取得部件取得的第一或第二画面信息发送给所述信息处理装置;以及控制部件,向对方装置请求将作为在对方装置的显示部件正在显示的画面信息的第一或第二画面信息发送给所述信息处理装置,所述对方装置取得由所述控制部件请求了发送的第一或第二画面信息而发送给信息处理装置,所述信息处理装置具有:第三显示部件;以及显示控制部件,基于从所述图像处理装置和信息终端装置分别发送了的第一画面信息与第二画面信息,再现所述图像处理装置侧的第一画面与所述信息终端装置侧的第二画面,从而使其显示在所述第三显示部件。

(3)如所述(1)中记载的远程支援系统,具有所述画面信息取得部件的图像处理装置或信息终端装置进行向正在进行协作的对方装置的第一或第二画面信息的取得请求,并接收响应于该取得请求而从对方装置发送的第一或第二画面信息,从而取得第一或第二画面信息,有了所述取得请求的对方装置对进行了取得请求的图像处理装置或信息终端装置发送第一或第二画面信息。

(4)如所述(1)中记载的远程支援系统,所述图像处理装置具有web服务器功能,所述信息终端装置的协作部件通过所述web服务器而与图像处理装置进行协作,所述受理部件、确认部件、画面信息取得部件以及发送部件被包含于图像处理装置中,在由所述受理部件受理了所述同步显示的开始指示时,所述确认部件分析向web服务器的接入日志并在一定时间内与信息终端装置有通信的情况下,判定为正在与信息终端装置进行协作,图像处理装置进一步具有管理部件,所述管理部件与在正在进行协作的所述信息终端装置的第二显示部件经由web而被显示的画面关联而管理识别信息,所述画面信息取得部件基于所述识别信息而生成第二画面的捕捉图像而取得所述第二画面信息。

(5)如所述(4)中记载的远程支援系统,所述图像处理装置具有客户机功能,在受理了所述同步显示的开始指示时,如果所述客户机能够未被激活,则图像处理装置激活客户机功能。

(6)如所述(4)或(5)中记载的远程支援系统,所述图像处理装置具有:确定部件,在受理了所述同步显示的开始指示时,若多台信息终端装置正在进行协作,则确定任意一台信息终端装置;以及跳转部件,针对来自由所述确定部件确定的信息终端装置以外的信息终端装置的、向所述web服务器的接入,使其跳转到特定的画面。

(7)如所述(1)~(6)的任一个中记载的远程支援系统,所述图像处理装置具有连接拒绝部件,在受理了所述同步显示的开始指示时,所述连接拒绝部件拒绝与正在进行协作的信息终端装置以外的外部装置的新的连接。

(8)如所述(1)~(7)的任一个中记载的远程支援系统,所述受理部件受理同步显示的结束指示,所述图像处理装置进一步具有控制部件,在受理了所述同步显示的结束指示时,所述控制部件使本装置的设定返回到受理同步显示的开始指示前的状态。

(9)如所述(1)~(8)的任一个中记载的远程支援系统,所述受理部件受理同步显示的结束指示,所述图像处理装置在受理所述同步显示的开始指示后且受理同步显示的结束指示之前,接收了印刷对象的数据的情况下,不进行印刷而将接收数据保存于保存部件。

(10)如所述(9)中记载的远程支援系统,所述图像处理装置进一步具有控制部件,在受理了所述同步显示的结束指示时,所述控制部件将在所述保存部件保存有接收数据的情况显示于所述第一显示部件,或者使所述信息终端装置的第二显示部件将其显示。

(11)如所述(1)~(10)的任一个中记载的远程支援系统,所述第一以及第二画面信息是各画面的识别信息,所述信息处理装置进一步具有:保存部件,与各画面关联而保存所述识别信息;以及生成部件,基于所保存的识别信息,能够生成图像处理装置用以及信息终端装置用的画面。

(12)如所述(1)~(11)的任一个中记载的远程支援系统,所述图像处理装置或信息终端装置具有操作部件,在受理了所述同步显示的开始指示后,等待所述操作部件的确定按钮的操作而执行第一画面信息以及第二画面信息的取得。

(13)如所述(1)、(3)~(12)的任一个中记载的远程支援系统,从第一以及第二画面信息的取得至向信息处理装置的发送为止的处理每隔一定时间进行。

(14)如所述(1)~(3)、(7)~(13)的任一个中记载的远程支援系统,所述信息处理装置具有:发送部件,对在所述图像处理装置以及信息终端装置中分别能够再现的图像信息、语音信息、可反映的设定信息中的至少任意一个信息赋予用于表示是面向图像处理装置和信息终端装置中的哪一个的信息的识别符而发送给图像处理装置或信息终端装置,所述图像处理装置或信息终端装置具有:判定部件,基于识别符而判定接收到的所述信息是面向本装置还是面向正在进行协作的对方装置;以及控制部件,在由所述判定部件判定为是面向本装置的信息的情况下,对所述信息进行再现或反映处理,在判定为是面向对方装置的信息的情况下,将所述信息发送给对方装置。

(15)如所述(4)~(6)的任一个中记载的远程支援系统,所述信息处理装置具有:发送部件,对在所述图像处理装置以及信息终端装置中分别能够再现的图像信息、语音信息、可反映的设定信息中的至少任意一个信息赋予用于表示是面向图像处理装置和信息终端装置中的哪一个的信息的识别符而发送给图像处理装置或信息终端装置,所述图像处理装置具有:判定部件,基于所述识别符而判定接收到的所述信息是面向本装置还是面向信息终端装置;以及控制部件,在由所述判定部件判定为是面向本装置的信息的情况下,对所述信息进行再现或反映处理,在判定为是面向信息终端装置的信息的情况下,使所述信息经由web服务器而显示或反映于信息终端装置。

(16)如所述(14)或(15)中记载的远程支援系统,所述图像处理装置或信息终端装置具有:通知部件,向正在进行协作的对方装置通知正在再现或反映来自所述信息处理装置的图像信息、语音信息、设定信息中的至少任意一个的信息的情况,所述图像处理装置或信息终端装置在从所述通知部件有通知时,若处于正在再现或反映来自所述信息处理装置的图像信息、语音信息、设定信息中的至少任意一个信息的状态,则中止再现或反映,并切换显示画面以便能够进行与对方装置的协作操作。

(17)如所述(14)~(16)的任一个中记载的远程支援系统,所述图像处理装置在再现来自所述信息处理装置的图像信息或语音信息时检测到异常的情况下,将表示异常的画面显示于所述第一显示部件。

(18)如所述(14)~(17)的任一个中记载的远程支援系统,在向正在执行的功能的实施进行的操作被中止的情况下,所述图像处理装置或信息终端装置中止来自所述信息处理装置的图像信息或语音信息的再现处理。

(19)如所述(1)~(18)的任一个中记载的远程支援系统,所述信息终端装置能够以包含显示画面的捕捉图像和显示画面的识别信息的多个形态取得所述第二画面信息,且在基于所述协作部件进行的与图像处理装置的协作使用中使用对图像处理装置的字符输入功能的情况下,所述信息终端装置取得显示画面的捕捉图像作为第二画面信息。

(20)如所述(14)~(19)的任一个中记载的远程支援系统,所述图像处理装置与信息终端装置分别具有保存部件,保存面向本装置的图像信息、语音信息、设定信息中的至少任意一个信息,所述控制部件对保存在所述保存部件中的图像信息、语音信息、设定信息中的至少任意一个信息进行再现或反映。

根据所述(1)中记载的发明,若图像处理装置与信息终端装置的至少一方受理同步显示的开始指示,则确认是否由协作部件正在与对方装置进行协作,在确认了正在进行协作的情况下,取得与在图像处理装置的第一显示部件正在显示的第一画面有关的第一画面信息、以及与在信息终端装置的第二显示部件正在显示的第二画面有关的第二画面信息。然后,将所取得的第一画面信息与第二画面信息发送给信息处理装置。信息处理装置基于从图像处理装置或信息终端装置发送的第一画面信息与第二画面信息,对图像处理装置侧的第一画面与信息终端装置侧的第二画面进行再现而显示于第三显示部件。

也就是说,在将图像处理装置与信息终端装置双方进行协作而使用的用户例如不知道操作而接受远程支援的情况下,在信息处理装置的显示部件不仅显示图像处理装置的画面还显示与图像处理装置协作的信息终端装置的画面,因此远程支援的提供者能够一边观看在信息处理装置的显示部件被显示的、被协作使用的图像处理装置与信息终端装置两个画面一边进行支援。因此,不需要利用电话进行在信息终端装置正在显示何种画面等的详细的交流,能够接受可靠且高效的支援。

根据所述(2)中记载的发明,图像处理装置与信息终端装置的至少一方若受理同步显示的开始指示,则确认是否由协作部件正在与对方装置进行协作,在确认了正在进行协作的情况下,将本装置的画面信息发送给信息处理装置,并向对方装置请求将对方装置中的画面信息发送给信息处理装置。根据该请求,对方装置将自身的画面信息发送给信息处理装置。信息处理装置基于从图像处理装置以及信息终端装置分别发送的第一画面信息与第二画面信息,对图像处理装置侧的第一画面与信息终端装置侧的第二画面进行再现,从而显示于第三显示部件。

在该情况下,也在将图像处理装置与信息终端装置双方进行协作而使用的用户例如不知道操作而接受远程支援的情况下,在信息处理装置的显示部件不仅显示图像处理装置的画面还显示与图像处理装置协作的信息终端装置的画面,因此远程支援的提供者能够一边观看在信息处理装置的显示部件被显示的、被协作使用的图像处理装置与信息终端装置的两个画面一边进行支援。因此,不需要利用电话进行在信息终端装置正在显示何种画面等的详细的交流,能够接受可靠且高效的支援。

根据所述(3)记载的发明,图像处理装置或信息终端装置进行向正在进行协作的对方装置的画面信息的取得请求,并接收响应于该取得请求而从对方装置发送的画面信息,从而能够可靠地取得对方装置的画面信息。

根据所述(4)记载的发明,图像处理装置即使对信息终端装置不进行画面信息的取得请求,通过基于信息终端装置的画面的识别信息而生成第二画面的捕获图像,也能够取得信息终端装置的第二画面信息。

根据所述(5)记载的发明,图像处理装置具有客户机功能,在受理了同步显示的开始指示时,如果客户机功能未被激活则将其激活,因此能够经由web服务器而取得本装置的画面信息。

根据所述(6)记载的发明,图像处理装置若在受理了同步显示的开始指示时正在与多台信息终端装置进行协作,则对来自被确定的任意一台信息终端装置以外的信息终端装置的向web服务器的接入,使其跳转到特定的画面、例如用于表示由于正在进行服务因此不能使用的情况的消息的显示画面,因此能够确保对于一台信息终端装置的远程支援的实施,且被跳转的其他的信息终端装置的用户看到该画面而能够确认不能使用图像处理装置的情况。

根据所述(7)记载的发明,由于图像处理装置在受理了同步显示的开始指示时,拒绝与正在进行协作的信息终端装置以外的外部装置的新的连接,因此消除在正在进行协作的信息终端装置的用户接受远程支援时,图像处理装置与其他外部装置连接而成为远程支援的障碍的风险。

根据所述(8)记载的发明,由于图像处理装置在受理了同步显示的结束指示时,将本装置的设定自动地返回到受理同步显示的开始指示前的状态,因此用户能够以受理同步显示的开始指示前的设定状态使用图像处理装置。

根据所述(9)记载的发明,图像处理装置在受理同步显示的开始指示后且受理同步显示的结束指示之前,从正在进行协作的信息终端装置以外的外部装置接收了印刷对象的数据的情况下,不进行印刷而将接收数据保存于保存部件,因此在远程支援结束后,能够进行所保存的接收数据的印刷。

根据所述(10)记载的发明,在受理了同步显示的结束指示时,在保存部件中保存有接收数据的情况被显示于图像处理装置或信息终端装置的显示部件,因此用户能够执行在保存部件中被保存的接收数据的输出处理等。

根据所述(11)记载的发明,进行远程支援的信息处理装置能够基于被保存于保存部件的画面的识别信息而生成图像处理装置用以及信息终端装置用的画面数据。

根据所述(12)记载的发明,图像处理装置或信息终端装置在受理了同步显示的结束指示后,等待操作部件的特定按钮、例如重置按钮的操作而执行第一画面信息以及第二画面信息的取得,因此用户能够从操作了特定的按钮后被显示的画面接受远程支援。

根据所述(13)记载的发明,由于向对方装置的画面信息的取得请求每隔一定期间进行,因此即使对方装置的画面被更新也能够取得与更新后的画面有关的画面信息。

根据所述(14)记载的发明,图像处理装置或信息终端装置能够再现从信息处理装置发送的图像信息或语音信息或者能够反映设定信息。

根据所述(15)记载的发明,图像处理装置能够使从信息处理装置发送的面向信息终端装置的图像信息或语音信息经由web服务器而再现于信息终端装置,且使设定信息经由web服务器而被反映。

根据所述(16)记载的发明,图像处理装置或信息终端装置在从对方装置通知了将图像信息、语音信息、设定信息中的至少任意一个信息进行再现或进行反映的情况时,若处于自己将图像信息、语音信息、设定信息中的至少任意一个信息正在进行再现或反映的状态,则中止再现或反映并切换画面,因此能够进行与对方装置的协作操作。

根据所述(17)记载的发明,图像处理装置在正在将来自信息处理装置的图像信息或语音信息进行再现时检测了异常的情况下,将表示异常的画面显示于第一显示部件,因此用户能够识别有异常的情况。

根据所述(18)记载的发明,在面向正在执行的功能的实施进行的操作被中止的情况下,来自信息处理装置的图像信息或语音信息在图像处理装置或信息终端装置中的再现处理被中止。

根据所述(19)记载的发明,信息处理装置在能够以包括显示画面的捕捉图像和显示画面的识别信息的多个形态取得第二画面信息,且进行所述协作部件进行的与图像处理装置的协作使用中使用向图像处理装置的字符输入功能的情况下,显示画面的捕捉图像作为第二画面信息而被取得。

根据所述(20)记载的发明,图像处理装置以及信息终端装置能够使在保存部件中保存的图像信息、语音信息、设定信息中的至少任意一个信息在远程支援结束后被再现或被反映。

附图说明

图1是本发明的一实施方式的远程支援系统的结构图。

图2是表示图像处理装置的电结构的方框图。

图3是表示信息终端装置的电结构的方框图。

图4是表示信息处理装置的电结构的方框图。

图5是用于说明图1的远程支援系统的动作的图。

图6是用于说明在图像处理装置从信息处理装置受理了同步显示的开始指示时的、远程支援系统的动作的图。

图7是表示受理了同步显示的开始指示(远程连接指示)的图像处理装置的动作的流程图。

图8是用于说明在图像处理装置从信息处理装置受理了同步显示的开始指示时的、远程支援系统的其他动作的图。

图9是表示在图像处理装置具有web服务器的情况下,如果图像处理装置的客户机功能未激活则将其激活的处理的流程图。

图10是表示在有同步显示的开始指示的情况下,图像处理装置停止除了一台信息终端装置之外的其他的信息终端装置的使用的处理的流程图。

图11是表示在有同步显示的开始指示的情况下,图像处理装置禁止与信息终端装置的连接的处理的流程图。

图12是用于说明在远程支援模式结束了时,将由图像处理装置执行的设定变更返回到远程支援模式开始前的状态的处理的图。

图13是用于说明在图像处理装置从信息处理装置受理了同步显示的开始指示时的、远程支援系统的又一其他动作的图。

图14是用于说明在图像处理装置从信息处理装置受理了同步显示的开始指示时的、远程支援系统的又一其他动作的图。

图15是用于说明从信息处理装置将面向图像处理装置或面向信息终端装置的规定的信息发送给图像处理装置时的远程支援系统的动作的图。

图16是表示图15所示的远程支援系统中的图像处理装置的动作的流程图。

图17是用于说明从信息处理装置将面向图像处理装置或面向信息终端装置的规定的信息发送给具有web服务器的图像处理装置时的远程支援系统的动作的图。

图18是表示图像处理装置的又一其他动作例的流程图。

图19是用于说明本发明的又一其他实施方式的图。

图20是表示在图像处理装置与信息终端装置各自将画面信息发送给信息处理装置的实施方式中,图像处理装置受理了同步显示的开始指示的情况下进行的动作的流程图。

标号说明

1远程支援系统

10图像处理装置

101cpu

102rom

130操作面板

134显示部

135触摸面板

110固定存储装置

20信息终端装置

201cpu

202rom

220显示部

30信息处理装置

31cpu

35显示装置

40网络

具体实施方式

以下,基于附图,说明本发明的实施方式。

图1是本发明的一实施方式的远程支援系统1的结构图。

该远程支援系统1具有多台(在本实施方式中为3台)图像处理装置10a、10b、10c和多个(在本实施方式中为2个)信息终端装置20a、20b以及信息处理装置30等。这些图像处理装置10a、10b、10c和信息终端装置20a、20b以及信息处理装置30经由网络40而相互被连接。

在本实施方式中,作为图像处理装置10a、10b、10c而利用具有复印功能、打印功能、扫描功能、以及传真功能等的所述的mfp。

在以下的说明中,图像处理装置10a、10b、10c在无需特别将其区分时,简单记为图像处理装置10。此外,也将图像处理装置称为mfp。

进而,针对信息终端装置20a、20b也在不需要特别将它们进行区分时,简单记为信息终端装置20。此外,还将信息终端装置称为信息终端。

mfp10是将扫描获得的原稿图像、以及根据从包括信息终端20在内的用户终端发送的打印数据而生成的图像的复印图像形成在纸张上的装置。在此,打印数据是将由终端装置的操作系统或应用程序发行的绘图命令,通过打印机驱动器而变换为mfp10能够处理的页面描述语言的基于页面描述语言的绘图命令、或者通过pdf、tiff、jpeg、xps等文件格式而描述的文档数据。

此外,所扫描的原稿图像能够经由网络40而发送给用户终端,乃至能够发送给其他mfp。进而,还能够经由网络40而对连接到其他网络的其他mfp发送原稿图像。进而,还能够将所扫描的原稿图像或从用户终端接收到的文档数据储存在固定存储装置。

图2是表示mfp10的电结构的方框图。如图2所示,mfp10具有控制部100、固定存储装置110、图像读取装置120、操作面板部130、图像输出装置140、打印机控制器150、网络接口(网络i/f)160、近距离无线接口(近距离无线i/f)170以及无线接口(wirelessi/f)180,它们互相经由系统总线175而被连接。

控制部100具有cpu101、rom102、s-ram(静态随机存取存储器:staticrandomaccessmemory)103、nv-ram104以及时钟ic105等。

cpu101通过执行在rom102等保存的程序,从而总体控制mfp10的整体。在本实施方式中,在mfp10与信息终端20协作且能够从信息终端20操作mfp10的协作模式中,起到能够使与信息终端20a、20b的协作使用变得可能的协作部件的作用。此外,还起到在与信息终端20之间经由网络接口160而进行数据的发送接收的发送接收部件的作用。进而,还起到用于受理同步显示的开始指示的受理部件、用于确认是否正在与信息终端20a、20b进行协作的确认部件的作用。进而,还起到画面信息取得部件的作用,当通过确认部件确认了是正在进行协作的情况下,该画面信息取得部件取得与在操作面板部130的显示部134显示的第一画面有关的第一画面信息、以及与在信息终端20a、20b的显示部220(图3所示)显示的第二画面有关的第二画面信息。针对cpu101的这些功能及其他功能、以及动作,将在后面叙述。

rom102存储由cpu101执行的程序及其他的数据。

s-ram103成为在cpu101执行程序时的作业区域,其暂时保存程序或在执行程序时的数据等。

nv-ram104是通过电池而被备份的非易失性存储器,用于存储与图像形成有关的各种设定等。

时钟ic105起到内部定时器的作用,进行处理时间的测量等。

固定存储装置110由硬盘等构成,保存程序或各种数据等。

图像读取装置120具有扫描仪等,通过扫描而进行在稿台玻璃上放置的原稿的读取,并将所读取的原稿变换为图像数据。

操作面板部130是在用户向mfp10进行作业等的指示或各种设定时被利用的部件,具有数字键盘131、打印键132、注销键133、作为第一显示部件的显示部134以及触摸面板135等。

数字键盘131是在进行各种设定时被使用的键,打印键132是在进行打印时被使用的键,注销键133是在由结束了mfp1的利用的用户进行注销时被按下的键。

显示部134是例如由液晶画面构成且用于显示消息或各种操作画面等的部件。

触摸面板135被层叠在显示部134的画面上,且检测用户的触摸操作。

图像输出装置140是将所生成的复制图像形成在纸张上的装置。

打印机控制器150是根据由网络接口160接收到的打印数据而生成复制图像的部件。

网路接口(网络i/f)160起到在与信息终端20以及信息处理装置30等外部装置之间进行数据的发送接收的通信部件的作用。

近距离无线接口170主要用于与信息终端20的近距离无线通信,无线接口(wirelessi/f)180被用于与网络40的无线通信、或者与信息终端20的无线通信。

信息终端20是便携型的计算机装置,使用智能手机、平板终端、电子纸等。信息终端20储存电子化的文档而携带,无论在哪都能够进行阅览、编辑。此外,具有进行无线通信的部件,除了能够在与mfp10或用户终端之间进行文档的发送接收之外,还具有进行远程操作mfp10的部件。

图3是表示信息终端20的电结构的方框图。

信息终端20具有控制部200、固定存储装置210、作为第二显示部件的显示部220、触摸面板230、无线局域网接口(wirelesslani/f)240以及近距离无线接口(近距离无线i/f)250,它们相互经由系统总线260而被连接。

控制部200具有cpu201、rom202、ram203等。

cpu201通过执行在rom202等中保存的程序,从而总体控制信息终端20的整体。在本实施方式中,尤其在能够从信息终端20操作mfp10的协作模式中,除了起到使与mfp10的协作使用变得可能的协作部件的作用之外,还起到经由无线局域网接口240执行与mfp10之间的数据的发送接收控制和数据的处理等的发送接收部件等的作用。此外,还起到用于受理同步显示的开始指示的受理部件、以及用于确认是否正在与mfp10进行协作的确认部件的作用。进而,还起到画面信息取得部件的作用,当通过确认部件确认了正在进行协作的情况下,该画面信息取得部件取得与在操作面板部130的显示部134显示的第一画面有关的第一画面信息、以及与在本装置的显示部220显示的第二画面有关的第二画面信息。

rom202存储由cpu201执行的程序及其他的数据。

ram203是在由cpu201执行程序时的作业区域,用于临时保存程序、或在执行程序时的数据等。

固定存储装置210由硬盘等构成,用于保存程序和各种数据等。

显示部220例如由液晶画面构成,且显示包括mfp10的操作用的画面在内的各种画面等。

触摸面板230形成于显示部220的画面上,用于检测用户的触摸操作。

无线局域网接口240被用于与网络40之间的无线通信,近距离无线接口250主要用于与mfp10之间的近距离无线通信。

如前所述,信息终端20在协作模式下,能够由信息终端20通过无线通信而远程操作mfp10。

信息处理装置30是提供远程支援服务的服务器,由个人计算机构成。

图4是表示信息处理装置30的电结构的方框图。

如图4所示,信息处理装置30具有cpu31、rom32、ram33、存储部34、作为第三显示部件的显示装置35、输入装置36、网络接口部(网络i/f部)37等,它们经由系统总线38而相互被连接。

cpu31通过执行在rom32或存储部34等中保存的程序而总体控制信息处理装置30的整体。例如,在本实施方式中起到显示控制部件的作用,基于在远程支援模式下从mfp10或信息终端20发送的画面信息,进行如下的处理等:再现被显示在mfp10的显示部134的画面、或者被显示在信息终端20的显示部220的画面而显示在显示装置35,或者生成用于mfp10的画面数据或用于信息终端20的画面数据等并将其发送给mfp10或信息终端20。其细节将在后面叙述。

rom32是保存由cpu31执行的程序或其他的数据的存储介质。

ram33是成为在cpu31根据动作用的程序而动作时的作业区域的存储介质。

存储部34由硬盘等存储介质构成,存储各种管理数据、应用程序等。

显示装置35由crt或液晶显示装置等构成,显示各种消息移机对于用户的输入受理画面、选择画面等。

输入装置36用于由用户进行的输入操作,由键盘或鼠标等构成。

网络接口部37起到在与作为外部装置的mfp10或信息终端20之间,经由网络40而进行数据的发送接收的通信部件的作用。

图5是用于说明图1的远程支援系统的动作的图。

如前所示,mfp10和信息终端20以及信息处理装置30相互经由网路40而被连接。信息处理装置30具有web服务器,还被安装了用于与mfp10之间的远程连接的应用。此外,mfp10成为能够与信息处理装置30进行通信的状态,或者成为与信息处理装置30分开而通过电话、传真、webdav或电子邮件等而与远程支援系统侧进行通信的状态,且能够接受远程支援服务。

进而,mfp10接入到信息处理装置30的web服务器,能够每隔一定时间将与被显示在显示部124的第一画面d1有关的第一画面信息经由web服务器而发送给信息处理装置30,信息处理装置30能够经由web服务器而将操作画面d3的画面数据发送给mfp10。从信息处理装置30发送的操作画面d3的画面数据具体是mfp10的操作画面上的座标数据,通过由mfp10接收该座标数据而进行分析,从而在mfp10的显示部134显示操作画面d3而作为在座标数据被触摸时转移的画面。

此外,mfp10对信息终端20进行关于在信息终端20的显示部220显示的第二画面d2的第二画面信息的取得请求,根据该取得请求而从信息终端20发送第二画面信息,从而mfp10能够取得第二画面信息。此外,能够与mfp10自身的第一画面信息一并将第二画面信息经由web服务器而发送给信息处理装置30,信息处理装置30能够基于接收到的第一画面信息与第二画面信息,将mfp10的第一画面d1与信息终端20侧的第二画面d2同时显示于显示装置35。

此外,信息终端20中被安装有用于与mfp10协作而进行动作的应用。另一方面,在mfp10中也被安装有用于与信息终端20协作而进行动作的协作用应用。在基于该协作应用的与mfp10的协作中,信息终端20经由网络40,能够通过协作应用而进行“作为固定存储装置110的存储区域的box的数据取得”、“扫描取得”、“在信息终端中输入字符并发送给mfp”等中的一个处理。

作为使mfp10与信息终端20的各协作用应用启动从而协作使用两个装置时的一例,有以下的情况。

即,存在以下的情况:在对mfp10输入较长文章的字符时,为了避免来自不习惯使用的mfp10的操作画面130的输入,使用keyboardlink(注册商标)功能而从信息终端20向mfp10进行字符输入。具体来说,在信息终端20的主画面(topscreen)上选择了keyboardlink(注册商标)模式后,在字符输入区域通过ime(输入法编辑器(inputmethodeditor))而输入字符,输入mfp10的ip地址。接着,将mfp10的显示部134的画面转移到字符输入画面后,在信息终端20的画面上操作“send”键。

在为了避免在mfp10中输入电子邮件等的地址而使用addresslink(注册商标)功能的情况下也同样在信息终端装置20的主画面上选择了addresslink(注册商标)模式后选择地址,输入mfp10的ip地址。接着,在将mfp10的显示部134的画面转移到地址输入画面后,在信息终端20的画面上操作“发送(send)”键。

但是,利用keyboardlink(注册商标)功能或addresslink(注册商标)功能的情况下,不仅上述的操作过程繁杂,而且mfp10与信息终端20的操作的顺序也相关联,因此对于不习惯将mfp10与信息终端20协作使用的用户来说,即便参考帮助(help)内容和web上的关联说明也不容易理解可靠的操作。此外,即使通过电话来询问,有时连对状况进行说明都困难,因此不能有效地利用mfp10与信息终端装置20的协作功能。

此外,作为使mfp10与信息终端20的各协作用应用启动,从而将两个装置协作使用的情况下的其他的例子,有由信息终端20对mfp10指示直接打印(directprint)的情况。在这样的情况下,如果在信息终端20侧所指定的纸张尺寸和mfp10的纸张尺寸之间产生不一致,则必须在mfp10的操作面板130中指定托盘后进行印刷指示,但不知道这样的做法的用户无法获得输出物。

进而,作为使mfp10和信息终端20的各协作用应用启动而将两个装置协作使用的情况下的其他例子,有从信息终端20对mfp10指示取得扫描图像的情况。

在这样的情况下,在不能使用网络,只能通过直接连接mfp10的无线单元与信息终端20而进行取得指示的情况下,需要一边看在mfp10的操作面板130上显示的设定信息一边在信息终端10中进行连接作业,例如使mfp10显示表示无线设定信息的qr码,且在信息终端20中读取qr码,但由于这是通常不使用的功能因此用户不知道如何连接。

如此,在将mfp10与信息终端20协作使用的用户难以进行操作时,接受信息处理装置30侧的远程支援。

远程支援通过由mfp10受理对mfp10进行的同步显示的开始指示而开始。同步显示的开始指示是用于使被显示在mfp10的显示部134的画面与被显示在信息终端20的显示部220的画面在信息处理装置30的显示装置35以同步的状态显示的指示,在mfp10接收从信息处理装置30发送的同步显示的开始指示信号时,或者mfp10的显示部134的画面上的支援模式按钮被用户操作时,同步显示的开始指示被受理。

图6是用于说明在mfp10从信息处理装置30受理了同步显示的开始指示时的、远程支援系统1的动作的图。

mfp10若例如从信息处理装置30受理同步显示的开始指示(又称为远程连接指示)(图6的带圆圈的数据1),则对信息终端20发出有关被显示在显示部220的第二画面d2的第二画面信息的取得请求(图6的带圆圈的数字2)。若mfp10从信息终端20接收第二画面信息(图6的带圆圈的数字3),则将与被显示在mfp自身的显示部134的画面d1有关的第一画面信息以及从便携终端20取得的第二画面信息发送给信息处理装置30(图6的带圆圈的数字4)。

针对从mfp10向信息处理装置30的第一画面信息以及第二画面信息的发送,可以利用http会话而进行,也可以设为在mfp10侧启动webdav、ftp等的服务,且由信息处理装置30每隔一定时间接入到该服务的方式。

信息处理装置30基于接收到的第一画面信息以及第二画面信息,通过cpu31的控制而再现mfp10的第一画面d1与信息终端20的第二画面d2,并使其显示在显示装置35。

第一画面信息、第二画面信息可以是mfp10的画面d1、信息终端20的画面d2的图像信息(位图数据)。信息终端20的画面d2的图像数据可以通过由信息终端20捕捉自身的画面而取得。在信息终端20使用android作为平台的情况下,画面的捕捉通过使用api(媒体投影api(mediaprojectionapi))等而取得,在使用ios作为平台的情况下,画面的捕捉通过使用api(renderincontext:uigraphicsgetcurrentcontext)等而取得。mfp10的画面d1的图像信息可以是捕捉了画面的图像信息,也可以是包含与构成画面的背景图像、局部(parts)及其配置有关的信息的图像信息。

此外,在信息处理装置30对mfp10的各种画面和信息终端20的各种画面的图像赋予识别信息而保存管理的情况下,第一以及第二画面信息可以是画面d1以及画面d2的识别信息。信息处理装置20需要预先将画面的识别信息具体表示哪个画面的、识别信息与画面的图像的比对表作为信息而保有。此外,在作为第一以及第二画面信息而发送了识别信息的情况下,在信息处理装置30中进行画面显示时,确定与接收到的识别信息对应的图像而显示。

在此,由于第一画面d1以及第二画面d2是协作中的mfp10与信息终端20分别显示的画面,因此mfp10与信息终端20取得了画面的同步,此外与显示有第一画面d1以及第二画面d2的信息处理装置30也取得了画面的同步。因此,信息处理装置30的操作员能够确认mfp10以及信息终端20双方的画面d1、d2,即便在mfp10与信息终端20协作而进行的处理中,也能够由信息处理装置30掌握状况。

例如,如前所述那样的、使用keyboardlink(注册商标)功能而从信息终端20向mfp10输入字符的情况下,用户如果判断为不知道利用方法,则向远程支援系统的服务中心打电话,或者从mfp10的操作面板130或启动了协作应用的信息终端20的画面上按下“keyboardlink帮助”按钮。然后,信息处理装置30的用于远程连接的应用被启动,且从信息处理装置30对mfp10输出远程连接的指示(同步显示的开始指示),此后,按照图6的带圆圈的数字1→带圆圈的数字2→带圆圈的数字3→带圆圈的数字4的过程,在信息处理装置30的显示装置35显示mfp10的当前的显示画面d1与信息终端20的当前的显示画面d2。因此,在信息处理装置30侧,能够知道用户当前在何种设定状态下在哪里迷惑。在现有技术中,由于只能显示mfp10的画面d1,因此在信息处理装置30侧不知道进行至哪个过程,针对在mfp10和信息终端20中的哪一个中需要进行何种设定,不能从信息处理装置30侧发出可靠的指示。

图7是表示受理了同步显示的开始指示(远程连接指示)的mfp10的动作的流程图。图7以及此后所示的流程图所表示的动作通过由mfp10的cpu101按照在rom102等记录介质中存储的动作程序而进行动作被执行。

在步骤s01中,若接收来自信息处理装置30的远程连接指示,则在步骤s02中,判断能否受理远程连接指示。如果不能受理(在步骤s02中为否),则结束处理。若能够受理(步骤s202中为是),则在步骤s203中判断是否正在与信息终端20进行协作。

关于是否正在与信息终端20进行协作可如下判断:例如,在通过轮询而由mfp10与信息终端20的其中一方确认另一方的形式的情况下,在一定期间内从信息终端20有轮询时、或者期间内有轮询响应到来时,判断为正在与信息终端20进行协作。进而,也可以通过看到通过轮询而交换的数据的内容而判断。

若在步骤s03中正在进行协作(步骤s03中为是),则在步骤s04中,对信息终端20请求了第二画面信息后,在步骤s05中,调查是否从信息终端20接收了第二画面信息。

如果没有接收(步骤s05中为否),则停留在步骤s05并等待直至接收为止。若接收(步骤s05中为是),则进入步骤s06。在步骤s03中,没有正在与信息终端20进行协作的情况下(步骤s03中为否),也进入步骤s06。

在步骤s06中,在取得了与自身的画面d1有关的第一画面信息后,在步骤s07中,将所取得的第一以及第二画面信息发送至信息处理装置30。另外,当没有正在与信息终端20进行协作的情况下,仅发送第一画面信息。

接收了第一画面信息以及第二画面信息的信息处理装置30基于第一画面信息以及第二画面信息,将mfp10的第一画面d1与信息终端20的第二画面d2同时显示在显示装置35。当mfp10没有正在与信息终端20进行协作的情况下,仅显示画面d1。

在图6以及图7所示的实施方式中,优选每隔一定时间重复从第二画面信息的取得请求(图6的带圆圈的数字2、图7的步骤s04)至第一以及第二画面信息向信息处理装置30的发送(图6的带圆圈的数字4、图7的步骤s04)的处理。由此,即使第一画面或第二画面被更新而被变化,也能够在信息处理装置30中自动地再现更新后的画面。

图8是用于说明在mfp10从信息处理装置30受理了同步显示的开始指示时的、远程支援系统1的其他动作的图。

在该例中,mfp10内置web服务器并具有客户机功能,信息终端20经由web服务器而作为客户机与mfp10进行协作,并经由web服务器而显示第二画面d2。进而,mfp10对经由web服务器而正在进行协作的信息终端20上显示的各种第二画面d2的识别信息与第二画面d2相关联而管理。

在图8中,mfp10若从信息处理装置30受理同步显示的开始指示(远程连接指示)(图8的带圆圈的数字1),则通过自身的web服务器基于在信息终端20当前正在提供的画面d2的识别信息,将对应的画面d2通过自身的浏览器进行显示处理,并生成该画面的捕捉图像,从而取得第二画面信息(图8的带圆圈的数字2)。此外,生成经由浏览器而被显示在显示部134的自身的画面d1的捕捉图像,并取得第一画面信息(图8的带圆圈的数字2)。然后,将所取得的第一画面信息以及第二画面信息发送给信息处理装置30(图8的带圆圈的数字3)。

信息处理装置30基于接收到的第一画面信息以及第二画面信息,通过cpu31的控制而再现第一画面d1与所述信息终端装置侧的第二画面d2,并使其显示于显示装置35。

在图8的实施方式中,mfp10即使对信息终端20不进行画面信息的取得请求,通过基于信息终端20的画面的识别信息而生成画面的捕捉图像,也能够取得信息终端20的第二画面信息。

如图8那样,在mfp10具有web服务器的情况下,如果mfp10的客户机功能未被激活,则优选将其激活。图9的流程图表示该处理。

在步骤s11中。若受理来自信息处理装置30的远程连接指示,则在步骤s12中调查客户机功能是否被去激活(关闭),如果被去激活(步骤s12:是),则在步骤s13中,将客户机功能激活(打开)。如果在步骤s12中客户机能够未被去激活(步骤s12:否),则不进行任何处理。

如图8那样,在mfp10具有web服务器的情况下,在多台信息终端20正在与web服务器进行连接也就是说正在与mfp10进行协作的情况下,即使一台信息终端20进入远程支援模式,由于其他信息终端20的动作,存在远程支援模式的实施受妨碍的顾虑。

因此,在本实施方式中,在存在远程连接指示的情况下,停止除了一台信息终端20以外的其他的信息终端20的使用。图10的流程图表示该处理。

在步骤s21中,若受理来自信息处理装置30的远程连接指示,则在步骤s22中,调查有无正在与mfp10进行web连接的信息终端20,换言之调查有无正在与mfp10进行协作的信息终端20,如果没有(步骤s22:否),则结束处理。如果有(步骤s22:是),则在步骤s23中调查正在与mfp10进行web连接的信息终端20是否有2台以上。如果是2台以上(步骤s23:是),则在步骤s25中,确认通信日志,确定请求了远程服务的可能性最高的最后所连接的信息终端20,从而取得其ip信息后,进入步骤s26。在步骤s23中,如果web连接的信息终端20没有2台以上(步骤s23:否),则在步骤s24中,确认通信日志并取得了当前正在连接的信息终端20的ip信息后,进入步骤s26。

在步骤s26中,保存了当前的网络设定后,在步骤s27中,如果从取得了ip信息的信息终端20以外的信息终端20有接入,则变更为显示用于表示“正在远程连接”的情况的画面的设定。从而,针对这些信息终端20或者重新想要连接到mfp10的信息终端20,被跳转到表示“正在远程连接”的情况的画面,与mfp10的协作动作被停止。从而,被跳转到表示“正在远程连接”的情况的画面的信息终端20的用户能够确认不能使用mfp10的情况。

在步骤s27中变更为显示用于表示“正在远程连接”的情况的画面的设定后,执行图6以及图7所示的、第一以及第二画面信息的取得处理、向信息处理装置30的发送处理。

另外,也可以设为并非跳转到表示“正在远程连接”的情况的画面而是禁止连接的结构。图11的流程图表示该处理。

在步骤s31中,若受理来自信息处理装置30的远程连接指示,则在步骤s32中,调查是否有正在web连接到mfp10的信息终端20,换言之调查是否有正在与mfp10进行协作的信息终端20,如果没有(步骤s32:否),则结束处理。如果有(步骤s32:是),则在步骤s33中,调查正在与mfp10进行web连接的信息终端20是否有2台以上。如果有2台以上(步骤s33:是),则在步骤s35中,确认通信日志,并确定请求了远程服务的可能性最高的最后被连接的信息终端20,并取得其ip信息后,进入步骤s36。在步骤s33中,如果web连接的信息终端20不是2台以上(步骤s33:否),则在步骤s34中,确认通信日志并取得当前被连接的信息终端20的ip信息后,进入步骤s36。

在步骤s36中,保存当前的网络设定后,在步骤s37中,变更为用于拒绝来自取得了ip信息的信息终端20以外的信息终端20的连接的设定。从而,就这些信息终端20或想要重新连接到mfp10的信息终端20而言,与mfp10的连接被拒绝。

另外,在结束了远程支援模式时,期望将在图10的步骤s27以及图11的步骤s37中进行的设定变更返回到开始远程支援模式前的状态。

因此,如图12所示,mfp10在受理了来自信息处理装置30的远程连接指示时(图12的带圆圈的数字1),保存了当前的网络设定后(步骤s12的带圆圈的数字2),进行设定变更(图12的带圆圈的数字3)。此后,设为在受理了远程连接的结束指示(同步显示的结束指示)时(图12的带圆圈的数字4),将网络设定返回到在带圆圈的数字2中保存了的设定(图12的带圆圈的数字5)的结构为好。

图13是用于说明在mfp10从信息处理装置30受理了同步显示的开始指示后的、远程支援系统1的进一步的其他动作的图。

在该例中,mfp10在从信息处理装置30受理了同步显示的开始指示后,受理同步显示的结束指示之前,从外部接收了传真数据或打印数据等印刷对象的数据时保存于box中,在受理了同步显示的结束指示后将其意思通知给用户。另外,同步显示的结束指示也可以通过操作面板130的操作而进行。

在图13中,mfp10在从信息处理装置30受理了同步显示的开始指示(远程连接指示)后(图13的带圆圈的数字1),若在远程支援模式中从外部接收印刷对象数据(图13的带圆圈的数字2),则将接收到的印刷对象数据保存于box中(图13的带圆圈的数字3),并存储已保存的情况(图13的带圆圈的数字4)。

此后,若从信息处理装置30受理同步显示的结束指示(远程连接结束指示)(图13的带圆圈的数字5),则在显示部134显示已将印刷对象数据保存于box的情况(图13的带圆圈的数字6)。

从而,用户在远程支援结束后,能够执行在box中保存的印刷对象数据的输出处理等。

图14是用于说明在mpf10从信息处理装置30受理了同步显示的开始指示时的、远程支援系统1的又一其他动作的图。

mfp10若从信息处理装置30受理远程连接指示(图14的带圆圈的数字1),则将请按下重置按钮这样的消息显示于显示部134(图14的带圆圈的数字2)。

若用户按下重置按钮,则mfp10对信息终端20发出对于在显示部220显示的第二画面d2的第二画面信息的取得请求(图14的带圆圈的数字3)。在mfp10中,若从信息终端20接收第二画面信息(图14的带圆圈的数字4),则将与在mfp自身的显示部134正在显示的画面d1有关的第一画面信息以及从便携终端20取得的第二画面信息发送给信息处理装置30(图14的带圆圈的数字5)。

信息处理装置30基于接收到的第一画面信息以及第二画面信息,通过cpu31的控制而再现第一画面d1以及所述信息终端装置侧的第二画面d2,并使其显示于显示装置35。

这样,在本实施方式中,使用户操作重置按钮后,对信息终端20请求取得第二画面信息,因此用户能够从在操作了重置按钮后被显示的画面接受远程支援。因此,不会将在重置按钮被操作之前被显示的不需要的画面发送给远程支援服务侧,用户能够接受可靠的远程支援。

在该情况下,也可以每隔一定时间重复从第二画面信息的取得请求(图14的带圆圈的数字3)至第一以及第二画面信息的发送(图14的带圆圈的数字5)为止的处理。由此,即使第一画面以及第二画面被更新而变化,也能够在信息处理装置30中再现更新后的画面。

在此,说明图14所示的处理的具体例。

便携终端20与mfp10能够通过被称为pswc的协作应用而进行协作。pswc在web浏览器上进行动作。在信息终端20中,能够通过pswc的操作而确认mfp10的故障/警告状况。此外,具有通过在特定的页指定想要印刷的pdf文件,在mfp10印刷该pdf文件的功能(直接打印)。

某日用户通过直接印刷而进行了指示,但从mfp10全然不输出纸张。因此用户联系远程支援服务,联系不能执行基于直接打印的印刷。

信息处理装置30基于图14的处理流程,接收mfp10以及信息终端20的各画面信息,并在显示装置35再现mfp10以及信息终端20的各画面。

因此,首先若看到信息终端20的画面,则判明虽然在信息终端20上进行了pdf文件的指定但“发送”按钮未被按下的情况,因此用电话向用户委托在信息终端20中按下“发送”按钮。

在上述的电话后,每隔一定时间将信息终端20与mfp10的画面发送给信息处理装置30,若在信息处理装置30上确认画面转移,则可知在信息终端20中切换画面且出现“已经发送”的画面的情况。由此,在信息终端20上确认了作业完成的情况,但同时看到mfp10的画面时出现托盘选择画面。这是因为虽然发送了pdf文件,但mfp10的托盘内没有该pdf文件内所指定的纸张,但是即便等待几分钟,mfp10侧的画面也不转移(也就是说印刷没有完成),因此从远程支援服务侧再次给用户打电话,转达需要在mfp10侧指定输出托盘的情况。

由此,在mfp10与信息终端20协作而进行的处理中,也能够正确地判断在哪一个阶段处理中途停止,因此在远程支援服务侧能够对用户进行可靠的忠告。

接着,说明从接收第一画面信息以及第二画面信息而再现显示了mfp10的第一画面以及信息终端20的第二画面的信息处理装置30将面向mfp10或面向信息终端20的规定的信息发送给mfp10的情况下的处理。

信息处理装置30对在mfp10以及信息终端20中分别能够再现的图像信息(也包括动画信息)、语音信息、可反映的设定信息中的至少任意一个信息赋予表示是面向mfp10和信息终端20的哪一个的信息的识别符即标签文件而发送给mfp10。

例如,如图15所示,信息处理装置30如果知道了用户想要进行的操作,则生成改变了图像的指示画面d21(图15的带圆圈的数字1),并与“向信息终端20发送”的标签文件301一并将指示画面d21的图像信息发送给mfp10,并指示显示(图15的带圆圈的数字2)。画面d21是对规定的按钮赋予了红色圆圈401的画面。mfp10确认对图像信息附加了的标签信息301(图15的带圆圈的数字3),知道了是应发送给信息终端20的图像信息,因此向信息终端20发送图像信息(图15的带圆圈的数字4)。

接收了图像信息的信息终端20基于该图像信息而显示画面d21(图15的带圆圈的数字5)。

mfp10若在显示部134正在显示从信息处理装置30发送的图像信息,则解除该显示,返回到之前被显示的原来的画面(图15的带圆圈的数字6)。由此,用户能够一边观看信息终端20的画面,一边进行mfp10的操作。

另外,在图15所示的处理中,示出了从信息处理装置30发送了信息终端20用的图像信息的情况,但mfp10用的图像信息的情况下,在mfp10中被再现。此外,即使在从信息处理装置30发送了语音信息、可反映的设定信息而非图像信息的情况下,也与图像信息的情况同样地,参照标签文件而判定是mfp10用还是信息终端用。

此外,作为图像信息,也可以发送座标信息和“画上红色圆圈”这样的信息、以及“在信息终端20执行”或“在mfp10执行”这样的标签信息,而非生成画面d21的图像信息并发送给mfp10。此外,也可以对语音数据赋予“在信息终端20执行”或“在mfp10执行”这样的标签信息而发送。

从信息处理装置30对mfp10发送的图像、语音、设定文件等各信息可由压缩文件构成。如果对压缩文件解压缩,则展现“标签文件(文本文件)”和“语音/图像/设定文件”这样的2个文件。如果打开“标签文件(文本文件)”,则通过文本而记载以下的任意行。

a)exec=信息终端

b)exec=mfp10

如果上述a)被记载在文件中,则将压缩文件中的“语音/图像/设定文件”发送给信息终端20,准确地说是发送给在信息终端20上动作的协作应用。如果上述b)被记载在文件中,则在mfp10中执行“语音/图像/设定文件”。

执行方法由“语音/图像/设定文件”的文件扩展名而决定。例如,如果文件扩展名为“***.bmp”,则显示在mfp10的显示部134或信息终端20的显示部220。如果文件扩展名为“***.wav”,则在mfp10或信息终端20中再现语音。如果文件扩展名为“***.mfp10”,则内容是文本文件,文本文件中记载了应在哪个座标显示何种图像(标记)。

图16是表示图15所示的远程支援系统中的mfp10的动作的流程图。

mfp10若在步骤s41中从信息终端装置30收到数据(信息),则在步骤s42中对收到的数据进行解压缩。接着在步骤s43中,对标签文件的内容进行解压缩,确认是否为mfp10用的数据。如果是mfp10用的数据(步骤s43:是),则在步骤s44中,再现作为数据的语音或图像,或者执行设定文件。

在步骤s43中,如果不是mfp10用的数据(步骤s43:否),则在步骤s45中对信息终端20发送数据后,在步骤s46中,调查在显示部134中是否正在显示图像或设定文件。如果没有正在显示(步骤s46:否),则不进行任何动作。如果正在显示(步骤s46:是),则在步骤s47中中止显示并显示原来的画面。

在从信息处理装置30将能够再现的图像信息(还包括动画信息)、语音信息、能够反映的设定信息中的至少任意一个信息与表示是面向信息终端20的标签文件一并发送给mfp10的情况下,在mfp10具有web服务器且信息终端20经由web服务器取得画面时,进行图17所示的处理。

即,信息处理装置30如果知道了用户所期望的操作,则生成变更了图像的指示画面d21(图17的带圆圈的数字1),则与“向信息终端20发送”的标签文件301一并将指示画面d21的图像信息发送给mfp10,并指示显示(图17的带圆圈的数字2)。mfp10确认被附加于图像信息的标签信息301,且知道了是应向信息终端20发送的图像数据,因此改写输入以便通过自身的web服务器显示面向信息终端20的图像(图17的带圆圈的数字3)。

信息终端20经由web服务器而取得并显示画面d21(图17的带圆圈的数字4)。

mfp10如果在显示部134显示有从信息处理装置30发送的图像信息,则将其解除,并返回到在之前被显示的原来的画面(图17的带圆圈的数字5)。由此,用户能够一边观看信息终端20的画面一边进行mfp10的操作。

另外,mfp10以及信息终端20也可以分别在固定存储装置110、210中预先保存面向本装置的图像信息、语音信息、设定信息中的至少任意一个信息,能够在后期将所保存的信息再现或反映。通过这样的结构,即便在远程支援结束后,用户也能够再次确认从信息处理装置30发送的支援信息。

图18是表示mfp10的又一其他动作例的流程图。在本例中,示出了在正在与信息处理装置30远程连接(正在远程支援)时在mfp10中发生了故障等的情况下的处理。

在步骤s51中如果在mfp10发生警告事项或故障,则在步骤s52中调查是否正在与信息处理装置30进行远程连接。如果没有正在远程连接(步骤s52:否),则不进行任何处理并进行发生警告或故障时的通常的动作。

如果正在远程连接(步骤s52:是),则在步骤s53,判定是否正在显示来自信息处理装置的图像,如果正在显示(步骤s53:是),则在步骤s54中解除该图像显示,并显示警告或故障画面。如果没有正在显示来自信息处理装置的图像(步骤s53:否),则不进行任何处理,并进行在发生警告或故障时的通常的动作。

这样,由于若正在显示来自信息处理装置的图像,则解除该图像显示而显示警告或故障画面,因此用户能够容易识别发生了警告事项或故障的情况。

图19是用于说明本发明的又一其他实施方式的图。

信息处理装置30生成将图像变更后的指示画面d11(图19的带圆圈的数字1),则与“向mfp10发送”的标签文件302一并将指示画面d11的图像信息发送给mfp10,并指示显示(图19的带圆圈的数字2)。在画面d11中对规定的按钮附有红色圆圈402。mfp10确认被附加于图像信息的标签信息302(图19的带圆圈的数字3),知道是自己应显示的图像信息,因此在显示部134显示画面d11(图19的带圆圈的数字3)。

此后,如果通过对信息终端20的用户操作而与mfp10的协作使用结束(图19的带圆圈的数字4),则对mfp10通知协作结束(图19的带圆圈的数字5),mfp10结束从信息处理装置30收到的画面d11的显示处理(图19的带圆圈的数字6)。

这样,如果信息终端20与mfp10的协作使用结束,则从信息处理装置30发送的图像信息的显示处理结束,因此用户能够平稳地进行对于mfp10的接下来的操作。

以上,说明了本发明的一实施方式,但本发明并不限于上述实施方式。

例如,说明了第一以及第二画面信息是画面的捕捉图像或者在信息处理装置30支持的情况下是对画面相关联的识别信息的情况,但当是信息终端20对mfp10输入字符的模式的情况下,第二画面信息设为画面的捕捉图像为好。通过发送画面的捕捉图像,信息处理装置30基于该图像显示了信息终端20的画面时,还显示被输入的字符,远程支援服务的操作员能够可靠地确认该字符。只是,在信息处理装置30具有字符的识别功能,并作为第二画面信息而将画面的识别信息与字符一并发送时,当信息处理装置30识别字符而能够再现于画面上的情况下,第二画面信息可以是画面的捕捉图像也可以是画面的识别信息。

此外,在以上的实施方式中,设为由mfp受理来自信息处理装置30的或者来自mfp10的操作面板130的同步显示的开始指示,且由mfp10取得信息终端20的第二画面信息而与自身的第一画面信息一并发送给信息处理装置30,此外由mfp10接收从信息处理装置30发送了的图像信息、语音信息、设定信息,如果是面向信息终端20的信息则发送给信息终端20。

但是,也可以设为如下结构:由信息终端20受理来自信息处理装置30的或者来自信息终端20的触摸面板230的同步显示的开始指示,并由信息终端20取得mfp10的第一画面信息而与自身的第二画面信息一并发送给信息处理装置30,此外由信息终端20接收从信息处理装置30发送了的图像信息、语音信息、设定信息,如果是面向mfp10的信息则发送给mfp10。此时,由信息终端20进行与在各图中说明的mfp10动作相同的动作。

此外,不限于由mfp10和信息终端20中的其中一方取得第一画面信息和第二画面信息双方而发送给信息处理装置30的情况,也可以设为由相互正在进行协作的mfp10或信息终端20中的受理了同步显示的开始指示的一方取得自身的画面信息而发送给信息处理装置30,并对对方装置请求将对方装置的画面信息发送给信息处理装置30。此时,信息处理装置30从mfp10接收第一画面信息,并从信息终端20接收第二画面信息,从而显示各画面。

这样,在mfp10与信息终端20各自发送本装置的画面信息的实施方式中,图20的流程图表示在mfp10受理了同步显示的开始指示的情况下由cpu101进行的动作。另外,也可以由信息终端20进行该动作。

在步骤s61中,若接收来自信息处理装置30的远程连接指示,则在步骤s62中,判断是否能够受理远程连接指示。若不能受理(步骤s62:否),则结束处理。若能够受理(步骤s62:是),则在步骤s63中,判定是否正在与信息终端20协作。

若在步骤s63中正在协作(步骤s63:是),则在步骤s64中,对信息终端20请求将第二画面信息发送给信息处理装置30后,进入步骤s65。接受了该请求的信息终端20取得第二画面信息而发送给信息处理装置30。在步骤s63中没有正在与信息终端20进行协作的情况下(步骤s63:否),也进入步骤s65。

在步骤s65中,取得了与自身的画面d1有关的第一画面信息后,在步骤s66中,将所取得的第一画面信息发送给信息处理装置30。

从mfp10接收第一画面信息,并从信息终端20接收了第二画面信息的信息处理装置30基于第一画面信息以及第二画面信息,将mfp10的第一画面d1与信息终端20的第二画面d2同时显示于显示装置35。在mfp10与信息终端20没有正在进行协作的情况下,只有mfp10的第一画面d1被显示。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1