远程作业支持系统以及远程作业支持程序存储介质的制作方法_2

文档序号:9204555阅读:来源:国知局
摄影像的数据包发送给另一个便携终端1-1。由此,能够将拍摄到作业者现场处理的对象物的影像放映在所有的便携终端1-1和1-2。另外,上述影像发送权限可以变更,可以从作业者侧的便携终端1-2变更到指示者侧的便携终端1-1。
[0043]此外,关于影像上的指针信息的通信,基本上是从一个便携终端向另一个便携终端的单向通信。例如,在便携终端1-1和1-2共享具有影像发送权限的作业者侧的便携终端1-2的拍摄影像的同时,指示者侧的便携终端1-1向便携终端1-2发送包含影像上显示的指针信息的数据包。由此,可设为影像是作业者侧的影像且指针是指示者侧所指示的指针,因此指示者可以远程指示位于现场的作业者。
[0044]另外,指针信息的通信也可以根据需要而在便携终端1-1和1-2之间进行双向通信。在接受指示者的指示的期间,作业者利用指针进行确认或者利用指针指示来提问的情况下,指针信息的通信是有效的。
[0045](A-1-2)便携终端的内部结构
[0046]图2是表示实施方式的便携终端1-1和1-2的内部结构的内部结构图。由于便携终端1-1和1-2都具有同样的内部结构,因此,在图2中,将便携终端1-1和1-2表示为便携终端I进行说明。
[0047]在图2中,实施方式的便携终端I具有控制部101、存储部102、通信部103、拍摄控制部104、触摸面板控制部105、显示控制部106、扬声器/话筒控制部107、摄像头108、触摸面板109、显示部110以及扬声器/话筒111。
[0048]另外,在本实施方式中,举例示出了将扬声器/话筒111搭载于便携终端I的情况。但是,扬声器/话筒111也可以外置于便携终端I。
[0049]控制部101负责由便携终端I实现的功能。控制部101例如具有CPU、RAM、ROM、EEPR0M、输入输出接口部等,CPU通过读取ROM中保存的处理程序并执行处理程序,从而实现便携终端I的功能。另外,也可以是,可经由网络下载处理程序,且可由CPU读取安装后的该处理程序。因此,处理程序可以存储在后述的存储部102或各种永久性的计算机可读存储介质中,从这些存储介质中读取且执行处理程序。
[0050]存储部102例如存储处理程序、处理所需要的信息等。此外,存储部102存储后述的显示部110上显示的与作业支持相关的伴随指针显示(也包含指针的轨迹和各种指针的种类等)的影像画面。作业支持的影像画面可以为动态图像或者也可以为静止图像。存储部102存储有主要由指示者在影像画面上指示的指针显示的时间序列的影像。S卩,能够存储(录像)指示者使用便携终端I来进行作业指示的影像。另外,存储部102也可以在存储与作业支持相关的影像的同时,存储(录音)指示者与作业者之间交流的语音。
[0051]通信部103与网络3之间进行信息的收发。通信部103的通信协议没有特别限定,可以广泛地采用通信协议,例如可以采用IP (互联网协议)。
[0052]摄像头108是通过拍摄控制部104的控制进行拍摄处理的拍摄部。
[0053]拍摄控制部104接受控制部101的控制,对作为拍摄部的摄像头108的动作进行控制。拍摄控制部104进行静止图像或者动态图像的拍摄控制。
[0054]触摸面板109利用传感器感知显示画面上的操作点的位置信息,并将该感知信号提供给触摸面板控制部105。触摸面板109与后述的显示部110 —体地设置,感知显示部110所显示的显示画面上被触摸的位置信息。
[0055]触摸面板控制部105接受控制部101的控制,对触摸面板109的处理进行控制,根据来自触摸面板109的感知信号,检测操作点的位置信息。另外,触摸面板109和触摸面板控制部105可以广泛地采用各种方式,例如,可以采用表面型静电电容方式、投射型静电电容方式、电磁感应方式、红外线方式、表面声波方式等。
[0056]显示部110根据显示控制部106的控制,显示菜单画面以及与作业支持相关的影像、指针等。
[0057]显示控制部106接受控制部101的控制,对显示部110的显示功能进行控制。
[0058]扬声器/话筒111是接受扬声器/话筒控制部107的控制,输出利用语音通信接收到的语音的扬声器和捕捉语音的话筒。
[0059]扬声器/话筒控制部107接受控制部101的控制,对扬声器/话筒111的动作进行控制。
[0060](A-1-3)便携终端的控制部的功能说明
[0061]图3是说明本实施方式的便携终端I的控制部101的主要功能的功能框图。
[0062]在图3中,控制部101的主要功能具有呼叫控制部21、画面控制部22、指针显示控制部23、指针信息通知部24以及记录部25。
[0063]呼叫控制部21进行与其他便携终端I之间的呼叫控制。呼叫控制部21具有用于设定影像发送权限的影像发送权限设定部211。
[0064]影像发送权限设定部211通过在显示部110上显示的规定的设定画面,对任意的便携终端I设定影像发送权限。影像发送权限设定部211例如能够在以其他便携终端I为目标进行呼叫时使显示部110显示设定画面而设定影像发送权限。此外,也可以是,即使在通话中也能够通过规定操作使显示部110显示设定画面而设定或者变更影像发送权限。
[0065]画面控制部22对与其他便携终端I之间共享的影像进行画面控制。如图3所示,画面控制部22具有图像处理部221、图像信息发送部222、图像信息接收部223、坐标调整部224以及图像固定部225。
[0066]图像处理部221为了进行画面的坐标调整,根据摄像头108的拍摄影像进行图像处理,提取图像中的特征点。提取图像的特征点的方法可以广泛地采用各种方法,例如可以采用在图像的空间域或频域上进行的滤波技术。例如,可以采用如下方法:图像处理部221使用空间滤波器,根据图像中的、某关注点(例如,像素或规定的块单位)的浓度值(亮度值)与关注点的附近点(例如,像素或规定的块单位)的浓度值(亮度值)之间的差分,提取出包含浓度值、颜色和图样等特征的区域。
[0067]图像信息发送部222向其他便携终端I发送具有影像发送权限的自身的摄像头108拍摄到的图像。这里,图像信息发送部222为了进行画面的坐标调整,向其他便携终端I通知摄像头108的显示部110的画面尺寸、显示部110的像素数、图像的特征点的位置信息。
[0068]图像信息接收部223接收从具有影像发送权限的便携终端I发送来的图像,并将该接收到的图像提供给显示控制部106。此外,图像信息接收部223为了进行画面的坐标调整,从具有影像发送权限的便携终端I取得摄像头108的图像的画面尺寸、显示部110的像素数以及图像的特征点的位置信息。
[0069]坐标调整部224进行具有影像发送权限的便携终端I与自身之间的图像的坐标调整。坐标调整部224的坐标调整方法可以广泛地采用各种方法。
[0070]例如,坐标调整部224求出从具有影像发送权限的便携终端I取得的图像的特征点(原点)的坐标与指针的初始位置(画面中央部坐标)之间的相对值(相对坐标),根据该相对值求出将图像的特征点作为原点的相对坐标系。
[0071]此外,坐标调整部224根据具有影像发送权限的便携终端I的画面尺寸与自身的画面尺寸之间的差分,进行坐标系的坐标转换。即,根据画面尺寸的差分,进行画面上的X坐标轴(水平方向)与Y坐标轴(垂直方向)的伸缩。此外,坐标调整部224根据具有影像发送权限的便携终端I的显示部110的显示部110的像素数与自身的显示部110的像素数,进行像素数的间距校正处理。通过上述方式,求出将图像的特征点作为原点的相对坐标系O
[0072]图像固定部225用于固定来自具有影像发送权限的便携终端I的图像。在来自具有影像发送权限的便携终端I的影像为动态图像的情况下,有时在图像中产生模糊而导致指示者无法利用指针正确地进行指示。因此,图像固定部225使影像固定,由此指示者能够在固定后的图像上利用指针准确地进行指示。
[0073]指针显示控制部23对在显示部110的显示画面上显示的指针信息进行显示控制。如图3所示,指针显示控制部23具有初始位置设定部231、指针操作控制部232以及指针信息取得部233。
[0074]在指示者侧的便携终端I开始进行指针显示时,初始位置设定部231在显示部110的显示画面的画面中央部坐标处显示指针。通过初始位置设定部231在画面中央坐标值处显示指针,能够根据该画面中央部坐标与图像的特征点(原点)的坐标之间的相对值(相对坐标),求出将图像的特征点作为原点的相对坐标系。
[0075]指针操作控制部232对显示部110的显示画面所显示的指针进
当前第2页1 2 3 4 5 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1