远程作业支持系统以及远程作业支持程序存储介质的制作方法
【技术领域】
[0001]本申请主张2013年3月29日申请的日本申请、特愿2013-071671号的优先权，并且将其整体通过参照弓I入本说明书中。
[0002]本发明涉及远程作业支持系统和存储有远程作业支持程序的永久性存储介质，例如，可应用于在指示者与被指示者之间共享作业信息的同时支持远程作业的远程作业支持系统以及存储有程序的永久性存储介质。
【背景技术】
[0003]例如，一般情况下，在制造厂商中，设计者等作业指示者(以下，称为指示者)针对生产现场等的作业者，直接指导作业内容。但是，有时制造厂商的生产据点与设计者的据点设置在分开的位置，存在指示者无法对作业者指导直接作业指示的情况。
[0004]针对于此，以往，作为指示者针对在远距离的现场进行作业的作业者进行作业的指示及指导支持的系统，存在远程作业支持系统。
[0005]日本特开2008-107871号公报中记载的技术是如下这样的技术:经由网络连接了指示者的终端与作业者的终端，将指示者拍摄到的影像放映到作业者的终端，两终端共享影像。由此，指示者和作业者能够一边观察相同的影像，一边由指示者通过电话利用语音对作业者进行作业指示。
[0006]此外，在上述文献所记载的技术中，对放映到指示者自身的终端的影像画面上赋予箭头，一边利用该箭头进行位置确认一边进行作业指示。
【发明内容】
[0007]发明要解决的课题
[0008]然而，在上述文献所记载的技术中，尽管在指示者和作业者的显示器上放映相同的影像，但是，关于详细的指示，利用语音进行指示，从而指示者无法直观地利用简单的操作来进行作业指示。
[0009]此外，尽管能够在放映到显示器的影像上简单地显示箭头等，但是，当作业者进行观察时，箭头在画面上连续移动地放映出来，作业者也无法判断作为作业重点的部位，无法准确地目视判断作业指示。
[0010]此外，在上述文献所记载的技术中，在指示者侧的影像上重叠显示箭头等。但是，例如，在像指示者侧利用指针指示作业者侧的影像等那样，影像的拍摄源与指针的指示源不同的情况下，由于两终端的画面尺寸不同，影像的大小不同，因此，需要对放映的影像的坐标轴与指针的坐标轴进行调整。在没有采取影像与指针的位置信息的坐标调整的情况下，会产生位置信息的偏差，因此，例如在进行螺丝紧固等细致的作业指示时，有时指示者无法准确地利用指针指示螺丝(指示对象)的位置。
[0011]因此，要求如下这样的远程作业支持系统以及远程作业支持程序存储介质:既能够进行语音通信，又能够在多个便携终端之间，共享准确地进行了坐标调整的影像以及指针信息，作业指示者能够进行直观的指示，作业者能够通过目视准确地识别作业指示。
[0012]用于解决课题的手段
[0013]本发明的第一方式是一种远程作业支持系统，所述远程作业支持系统具有多个便携终端，经由网络在多个便携终端之间发送或者接收图像，且在所述图像上显示指针而支持远程作业，多个便携终端各自具有:(I)呼叫连接部，其与其他便携终端之间进行呼叫连接；(2)触摸面板部，其具有显示画面，通过感知该显示画面的接触位置来确定操作位置，所述显示画面在呼叫连接后显示与其他便携终端之间共享的图像；(3)指针显示控制部，其使触摸面板部的显示画面显示指针，且在显示画面上进行指针的显示控制；以及(4)画面控制部，其根据显示画面所显示的图像的特征点的位置信息与指针的位置信息之间的相对位置关系，形成将所述图像的特征点作为原点的相对坐标系，进行坐标调整，该坐标调整是根据与共享图像的其他便携终端之间的显示画面尺寸的差异而进行的。
[0014]本发明的第二方式是一种永久性存储介质，所述永久性存储介质存储了使计算机执行远程作业支持处理的程序，所述处理包括:(I)经由网络与其他便携终端之间进行呼叫连接，(2)感知显示画面的接触位置来确定操作位置，由此作为触摸面板发挥功能，所述显示画面在呼叫连接后，显示与其他便携终端之间共享的图像，(3)使所述显示画面显示指针，在显示画面上进行指针的显示控制，(4)根据所述显示画面所显示的图像的特征点的位置信息与指针的位置信息之间的相对位置关系，形成将上述图像的特征点作为原点的相对坐标系，进行坐标调整，该坐标调整是根据与共享图像的另一便携终端之间的显示画面尺寸的差异而进行的。
[0015]发明效果
[0016]根据本方式，能够在多个便携终端之间共享影像和指针信息，作业指示者能够进行直观的指示，作业者能够通过目视准确地识别作业指示。
【附图说明】
[0017]图1是示出实施方式的远程作业支持系统的整体结构的整体结构图。
[0018]图2是示出实施方式的便携终端的内部结构的内部结构图。
[0019]图3是说明实施方式的便携终端的控制部的主要功能的功能框图。
[0020]图4是说明实施方式的指针的显示种类的设定及变更的说明图。
[0021]图5是示出实施方式的远程作业支持处理的开始菜单画面的一例的画面图。
[0022]图6是示出实施方式的作为呼叫源的便携终端的呼叫画面的一例的画面图。
[0023]图7是示出实施方式的便携终端之间的呼叫控制处理的时序图。
[0024]图8是说明实施方式的会话建立后的便携终端之间的语音通信及影像通信的情形的说明图。
[0025]图9是示出实施方式的便携终端中的画面及指针的坐标调整处理的流程图。
[0026]图10是说明在实施方式的便携终端的显示画面上显示的指针的初始位置的说明图。
[0027]图11是示出实施方式的指针信息的通信处理的时序图。
[0028]图12是说明实施方式的固定指针的说明图。
[0029]图13是说明实施方式的指针的移动的说明图。
【具体实施方式】
[0030](A)主要实施方式
[0031]以下，一边参照附图，一边对本方式的远程作业支持系统和存储有远程作业支持程序的永久性存储介质的主要实施方式进行详细说明。
[0032](A-1)实施方式的结构
[0033](A-1-1)整体结构
[0034]图1是示出实施方式的远程作业支持系统的整体结构的整体结构图。在图1中，本实施方式的远程作业支持系统10具有能够与网络3连接的、多个(在图1中，示出了 2台的情况)便携终端1-1和1-2、以及呼叫控制装置2。
[0035]呼叫控制装置2是进行便携终端1-1与便携终端1-2之间的会话控制的装置。呼叫控制装置2的通信协议没有特别限定，例如可以采用由SIP(Sess1n Initiat1nProtocol:会话发起协议)或ITU-T建议的H.323等规定的协议。在本实施方式中，举例示出了呼叫控制装置2是SIP服务器的情况。
[0036]便携终端1-1和1-2是由作业者、指示者所持有的便携终端，只要是具有触摸面板方式的操作显示部的便携终端即可，可以采用各种便携终端。便携终端1-1和1-2例如可以采用智能手机、平板电脑、便携电话、游戏终端、笔记本型个人计算机、数码照相机等。在本实施方式中，便携终端1-1是指示者的便携终端，便携终端1-2是作业者的便携终端。
[0037]另外，在本实施方式中，为了便于说明，举例示出具有2台便携终端1-1和1-2的功能的情况。但是，便携终端的个数也可以为3台以上。例如，在指示者同时向多个作业者提供作业指示的情况下，也可以为具有I台指示者的便携终端与2台以上的作业者的便携终端等。
[0038]便携终端1-1和1-2具有语音通信功能、通信功能、拍摄功能、影像显示功能、指向功能等，该指向功能对在影像画面上指示位置信息的作为图形或图像的鼠标指针(以下，简称为指针)进行显示、移动、变更等。
[0039]便携终端1-1和1-2通过呼叫控制装置2的控制，建立终端彼此之间的会话，在会话建立后，进行语音数据包(packet)、影像数据包、指针信息数据包等的收发。
[0040]这里，关于语音通信，便携终端1-1和1-2可以进行双向通信。
[0041]此外，关于影像通信，在便携终端1-1和1-2中，将任意一个便携终端所拍摄的影像显示在该一个便携终端上，并且将包含拍摄影像的影像数据包发送给另一个便携终端。即，影像通信是单向通信，将一个便携终端拍摄到的影像发送给另一个便携终端。
[0042]影像通信例如可以通过向便携终端1-1和1-2分配影像发送权限来实现。当向现场的作业者侧的便携终端1-2分配了影像发送权限的情况下，具有影像发送权限的便携终端1-2进行拍摄，将包含其拍