状态判定系统的制作方法

本发明涉及获取监控屏(monitor screen)上的状态信息的状态信息判定系统。

背景技术：

在现有技术当中，作为这种状态信息系统，已知有下述专利文献1中所示的以下一种前台业务处理装置：在该装置中设置房间状况文件，该房间状况文件与住宿设施的各个房间的识别信息对应地保存与该房间的利用状况相关的信息，并基于该房间状况文件的保存信息确定每个房间的空房、已入住、已预订等利用状况，在监控画面上列举各个房间的识别信息的同时，将分别包围各个识别信息的框内的颜色设置成不同的方式显示到彩色的监控画面上。

在先技术文献

专利文献

专利文献1：日本特开平10-40292号公报

技术实现要素：

-发明要解决的课题-

在现有技术的状态信息系统中，状态信息已经被该系统所识别并被显示在监控画面上。因此，没有必要硬是将监控画面上特定的信息作为状态信息进行获取、或是判定该状态的情况。

然而，还存在只是显示在监控画面上但并不被该系统所识别的信息(例如，仅是拍摄了控制盘的模拟画面上的信息)或是虽被该系统所识别但却无法被传达到其他系统的信息(例如，因不具备界面(interface)而无法被被传送到其他系统的信息)。

因此，本发明的目的在于提供一种能够简单且可靠地从监控画面获取该画面上的状态信息的状态信息判定系统。

-解决课题的手段-

本发明的第一方面的状态判定系统是获取监控画面上的状态信息的状态判定系统，其特征在于具有：图像获取机构，采集所述监控画面连续地获取图像；图像判定机构，判定通过所述图像获取机构获取的所述图像是否是应该被获取状态信息的图像；色彩信息获取机构，当所述图像被所述图像判定机构判定为是应该被获取状态信息的图像时，该色彩信息获取机构获取该图像的特定点的色彩信息；以及状态变换机构，将由所述色彩信息获取机构获取的所述特定点的色彩信息变换成状态信息，当所述连续地获取到的图像之间所述特定点的色彩信息相同时，所述状态变换机构将由所述色彩信息获取机构获取的所述特定点的色彩信息变换成状态信息。

根据本发明的第一方面的状态判定系统，图像获取机构采集监控画面获取图像。由此，只要是监控画面中显示的内容，均可以作为图像被获取。因此，只是被显示在监控画面中但不被该系统所识别的信息或是虽然被该系统所识别但不能被传达给其他系统的信息(即使其图像的含义不明确)也能够作为图像被获取。

这里，获取的图像中包含各种内容。例如，在监控画面上除了显示应该进行状态判定的画面以外，还显示其他操作画面等。因此，通过由图像判定机构判定获取的图像是否是应该被获取状态信息的图像，能够确定应该进行状态判定的图像。

并且，当判定是应该进行状态判定的图像时，通过获取被获取的图像的特定点(与监控画面的特定点相同)的色彩信息，并将该色彩信息变换成状态信息，能够简单且可靠地从显示在监控画面上的图像中获取状态信息。

这样，根据本发明的第一方面的状态判定系统，能够简单且可靠地从监控画面中获取该画面上的状态信息。

本发明的第二方面的状态判定系统的特征在于，在本发明的第一方面的状态判定系统中，所述图像判定机构获取由所述图像获取机构获取的所述监控画面的图像的特定排除点的色彩信息，并基于该特定排除点的色彩信息判定该图像是否是应该被获取状态信息的图像，所述特定排除点能够事先被设定为坐标位置。

根据本发明的第二方面的状态判定系统，例如，在显示于监控画面上的其他操作画面等上，特有的特定排除点以能够事先被设定的方式构成，图像判定机构获取上述特定排除点的色彩信息。然后，通过基于特定排除点的色彩信息判定该监控画面的图像是否是应该被获取状态信息的图像，能够简单且可靠地确定应该进行状态判定的图像。

这样，根据本发明的第二方面的状态判定系统，能够简单且可靠地判定监控画面的图像是否是应该被获取状态信息的画面。进而，能够简单且可靠地从监控画面中获取该画面上的状态信息。

发明的第三方面的状态判定系统的特征在于，在本发明的第一或第二方面的状态判定系统中，能够事先将所述特定点设定成坐标位置，所述色彩信息获取机构获取该坐标位置的特定色彩信息和包围该坐标位置的周边坐标的周边色彩信息，所述状态变换机构基于所述特定色彩信息和所述周边色彩信息将所述色彩信息变换成状态信息。

根据本发明的第三方面的状态判定系统，不仅获取事先设定的特定点的坐标位置的特定色彩信息，还获取包围该坐标位置的周边坐标的周边色彩信息，并基于特定色彩信息和所述周边色彩信息将上述色彩信息变换成状态信息。由此，例如即使是模拟图像等产生的颜色溢出，也能够利用周边色彩信息进行插补，从而可靠地变换成状态信息。

这样，根据本发明的第三方面的状态判定系统，能够可靠地使监控画面变换成状态信息。同时能够简单且可靠地从监控画面中获取该画面上的状态信息。

发明的第四方面的状态判定系统的特征在于，在本发明的第一方面的状态判定系统中还具备图像处理机构，其对由所述图像获取机构获取的所述监控画面的图像施以将所述图像变换成具有一定色数的图像的滤波处理，然后获取能够事先被设定成坐标位置的特定排除点及特定点的各个色彩信息和包围该坐标位置的周边坐标的周边色彩信息，并基于该色彩信息和该周边色彩信息决定该特定排除点及该特定点的色彩，所述图像判定机构基于由所述图像处理机构决定的特定排除点的色彩，判定该图像是否是应该被获取状态信息的图像，所述状态变换机构基于由所述图像处理机构决定的特定点的色彩将所述色彩信息变换成状态信息。

根据本发明的第四方面的状态判定系统，通过图像处理机构对由图像获取机构获取的监控画面的图像进行以下处理，能够实现一次性处理从而提高处理效率，同时能够提高图像判定机构执行的图像判定处理以及状态变换机构执行的状态变换处理的精度。

这样，根据本发明的第四方面的状态判定系统，能够高效且高精度地从监控画面简单且可靠地获取该画面上的状态信息。

附图说明

图1是表示本实施方式的状态判定系统概要的构成图。

图2是表示图1的状态判定系统中的处理内容的流程图。

图3是表示图1的状态判定系统中的处理内容的说明图。

具体实施方式

如图1所示，本实施方式的状态判定系统1用于获取监控器X画面上的状态信息。状态判定系统1具备图像获取机构10、图像处理机构15、图像判定机构20、色彩信息获取机构30、状态变换机构40以及状态信息发送机构50。

构成判定对象的监控器X的画面例如是住宿设施的前台电脑Y的画面。画面上例如在对应每个房间而被划分的区域中以不同颜色显示“已入住”、“空房”、“清扫”、“预定”等(参照图3)。

图像获取机构10经由适配器装置W采集监控器X上的画面。适配器装置W将将监控器缆线(VGA线缆)的模拟图像信号(analog image signal)作为以一定的周期采样而得的图像数据输出到状态判定系统1。所述监控器线缆用于连接前台电脑Y和其监控器X。

适配器装置W例如具备VGA视屏采集卡(video capture board)的功能之外，还可以同时兼具VGA分配线的功能。另外，适配器装置W不仅限于从VGA线缆进行视频采集的装置，还可以是从视频(S-Video方式或composite方式)输入输出线进行采集的视屏采集卡、数字显示器用的DVI采集卡、业务用视屏或安全摄像头用的DVI采集卡、影像设备的常用HDMI(注册商标)采集卡等。

图像处理机构15对经由适配器装置W获取的采集图像(实际上是以规定周期输出的各采集图像)施以滤波处理。

滤波处理例如是RGBA变换，将采集图像变换成具有特定色数的图像。另外，滤波处理除了RGBA变换之外，也可以进行色数较少的PNG变换等。

图像判定机构20判定通过图像处理机构15被施以滤波处理后的采集图像是否是应该获取状态信息的画面。

具体地，图像判定机构20基于被施以滤波处理后的采集图像上的特定排除点的色彩信息，判定该采集图像是否是应该被获取状态信息的图像。

另外，特定排除点可以被设定成图像上的坐标位置(X，Y)，图像判定机构20获取该坐标位置的色彩信息(RGB数据)，当该色彩信息(RGB数据)是排除色(具有特定范围的RGB成分)时，则判定为不是应该被获取状态信息的图像。

当图像判定机构20判定采集图像是应该被获取状态信息的图像时，色彩信息获取机构30获取该采集图像的特定点的色彩信息。

另外，关于色彩信息获取机构30获取(采集图像上的)特定点的色彩信息的获取手法在后面进行详述。

状态变换机构40根据变换表等将由色彩信息获取机构30获取的特定点的色彩信息(RGB数据)变换成状态信息(“已入住”、“空房”、“清扫”、“预定”等)。

另外，关于状态变换机构40将色彩数据变换成状态信息，也可以是变换成状态代码信息。

状态信息发送机构50将由状态变换机构40变换的状态信息(“已入住”、“空房”、“清扫”、“预定”等)经由因特网等网络NW发送到外部服务器等。

在上述构成中，状态判定系统1例如是由CPU(Central Processing Unit)、ROM(Read Only memory)、RAM(Random Access Memory)等硬件构成。将执行上述处理机构10～50的处理的程序记录保存在记忆体(未图示)中，通过执行上述程序，状态判定系统1起到用于执行上述控制处理的运算装置(sequencer)的功能。

接着，参照图2，说明通过按照上述方式构成的状态判定系统1获取状态信息的获取处理方法。

首先，状态判定系统1获取采集图像(实际上是以一定周期采集的连续图像)(STEP10/图2)，该图像是通过图像获取机构10经由适配器装置W采集而得。

接着，状态判定系统1通过图像处理机构15对在STEP10中获取的采集图像实施滤波处理，将采集图像变换成具有特定色数的RGB数据(STEP15/图2)。

然后，状态判定系统1通过图像判定机构20判定在STEP15中施以滤波处理后的采集图像(RGBA数据变换完成后的图像)(正确来讲是连续的采集图像中一个帧图像)是否是应该被获取状态信息的画面(STEP20/图2)。

具体地，图像判定系统20获取图3A及图3B中所示的特定排除点(III)的色彩信息，判定获取的色彩信息(RGB数据)是否是排除色(具有特定范围的RGB成分)，如果不是排除色(具有特定范围的RGB成分)，则判定是应该被获取状态信息的画面(STEP20中是YES/图2)。

例如，在如图3A所示的情况下，由于特定排除点(III)的色彩信息中没有其他操作画面等中特有的排除色，判定上述画面是应该被获取状态信息的画面。

而另一方面，当特定排除点(III)的色彩信息(RGB数据)是排除色(具有特定范围的RGB成分)时，图像判定机构20判定上述图像不是应该被获取状态信息的图像(STEP20中是NO/图2)。

例如，在如图3B所示的情况下，特定排除点(III)的色彩信息中含有其他操作画面等中特有的排除色时，判定上述图像不是应该被获取状态信息的图像。

这样，通过基于特定排除点的色彩信息判定该监控画面的图像是否是应该被获取状态信息的图像，能够简单且可靠地确定应该进行状态判定的图像。

另外，可以事先将特定排除点设定成图像上的坐标位置(X，Y)。特定排除点可以是一个点，但是为了提高判定精度，优选设定多个特定排除点，并基于多个特定排除点的色彩信息判定是否是应该获取状态信息的图像。

由此，例如只要在多个特定点的色彩信息的一部分中含有排除色，就可以将上述图像判定成是不应该被获取状态信息的图像，即使是在其他的操作画面与图像的一部分重叠显示的情况下，也能够可靠地将其排除。

接着，由图像判定机构20判定采集图像是应该被获取状态信息的画面时(STEP20中是YES/图2)，由色彩信息获取机构30获取采集图像的特定点的色彩信息(STEP30/图2)。例如，在图3A所示的情况下，获取特定点(I)，(II)的色彩信息。

另一方面，图像判定机构20判定采集图像不是应该被获取状态信息的画面时(STEP20中是NO/图2)时，返回到STEP10。

这里，色彩信息获取机构30除了获取图像上的坐标位置(X，Y)的像素(pixel)的色彩信息(RGB数据)之外，还获取其周围的像素的色彩信息(RGB数据)。其中，所述图像上的坐标位置(X，Y)作为与201号房间和202号房间对应的特定点(I)和(II)而被事先设定。

例如，色彩信息获取机构30除了获取特定点的坐标位置(Xn，Yn)的色彩信息之外，还获取包围该特定点的8个点(Xn-1，Yn-1)、(Xn，Yn-1)、(Xn+1，Yn-1)、(Xn-1，Yn)、(Xn+1，Yn)、(Xn-1，Yn+1)、(Xn，Yn+1)及(Xn+1，Yn+1)的像素的色彩信息(RGB数据)。

接着，色彩信息获取机构30对获取的特定点及其周围的色彩信息(RGB数据)实施色彩信息处理(STEP35/图2)。

这里所谓的色彩信息处理是指根据获取的特定点及其周围的色彩信息(RGB数据)综合性地决定其特定点的色彩(RGB)的处理。

例如，在STEP30中，除了获取特定点的坐标位置(Xn，Yn)的色彩信息之外，还获取了包围坐标位置(Xn，Yn)的8个点(Xn-1，Yn-1)、(Xn，Yn-1)、(Xn+l，Yn-1)、(Xn-1，Yn)、(Xn+l，Yn)、(Xn-1，Yn+1)、(Xn，Yn+1)及(Xn+1，Yn+1)的像素的周边色彩信息(RGB数据)时，计算出对这9个点的色彩信息(RGB数据)进行了平均化的平均色(RGB)。

这样，不仅获取事先设定的特定点的坐标位置的特定色彩信息，还获取包围该特定点的周围坐标的色彩信息，并通过基于特定色彩信息和周边色彩信息将状态信息变换到下一状态信息，例如即使在模拟画面等上产生颜色溢出(color bleeding)，也能够利用周边色彩信息进行插补，从而可靠地将色彩信息变换成状态信息。

接着，状态变换机构40将在STEP35中被施以色彩信息处理后的特定点的色彩信息(RGB数据)变换成状态信息(“已入住”、“空房”、“清扫”、“预定”等)(STEP40/图2)。

具体地，根据变换表执行色彩信息(RGB数据)到状态信息的变换。

例如，变换表对应色彩信息(RGB数据)形成有以下对应关系：红色对应住宿，黄色对应休憩，蓝色对应空房，绿色对应清扫中，淡蓝色对应等待清扫，粉红色对应引导/结账。

并且，变换表如上所述可以是一个层次的变换表，也可以是对经一次变换后的状态再进行第二层次的变换。例如，两个层次的再变换表形成为下述对应关系：住宿和休憩的情况合并对应成已入住、清扫中和等待清扫的情况合并对应成清扫中。

由此，能够减少状态的种类，在向外部发送状态时，能够对其种类进行限定。

例如，在如图3A所示的情况下，根据上述表换表将与201房间对应的特定点(I)(图像上的绿色区域)变换成相对应的状态“清扫”或其代码信息。同样，根据上述表换表将与202房间对应的特定点(II)(图像上的红色区域)变换成相对应的状态“已入住”或其代码信息。

另外，虽然状态变换机构40将采集图像(正确来讲是连续采集图像中一个帧图像)变换成状态信息，但是由于状态信息是按帧周期生成，优选是仅在连续的采集图像(例如，10帧)的特定点(I)，(II)相同的情况下才执行状态变换处理。

此外，在本实施方式中，根据变换表将特定色彩(红色、黄色、蓝色…)变换成相对应的状态。但是也不仅限于这种形态，也可以采用色值的差进行比较的检测方法。

这时，设定用颜色的散度成分(255阶)进行确认的阈值A，将判定用表的RGB的各成分设定成RC·GC·BC，并将获取的RGB值的各成分设定成R·G·B。

另外，也可以在当(R+A)＜RC；(R-A)＞RC；(G+A)＜GC；(G-A)＞GC；(B+A)＜BC；(B-A)＞BC这六个条件都为真时，判定获取的RGB与判定用表的RGB一致，并进行变换。由此，由于只是执行逻辑性的运算，能够实现处理高速化。

最后，状态信息发送机构50将在STEP40中被变换后的状态信息(“已入住”、“空房”、“清扫”、“预定”等)或其代码信息与特定点(201号房间、202号房间)建立对应关系并经由因特网等网络NW发送到外部服务器等(STEP50/图2)，返回到STEP10。

以上是状态判定系统1执行的状态信息的获取处理方法的详细说明。根据上述状态判定系统1，能够从监控器X的画面上简单且可靠地获取状态信息。

另外，在本实施方式中，将住宿设施中前台电脑Y的画面的例子作为构成判定对象的监控器X的画面进行了说明。但是，本发明并不仅限于该形态。

例如，本发明还可以适用于各种控制系统中的监控画面、对停车场的停车位或会场内的坐席进行拍摄的摄像头的拍摄图像等。

此外，在本实施方式中，就STEP35中对特定点及其周围的色彩信息(RGB数据)实施色彩信息处理的情况进行了说明。但是，本发明并不仅限于此，还可以施以以下处理：由图像处理机构15施以(1)STEP15的滤波处理的同时，(2)对经滤波处理后的图像除了事先获取(i)特定点及其周围的色彩信息以外，还获取(ii)特定排除点及其周围的色彩信息，并分别施以色彩信息处理。

这时，通过一次性进行STEP35的色彩信息处理和图像处理机构15执行的滤波处理，能够提高处理效率，同时能够提高利用特定排除点在STEP20中判定是否是应该被获取状态信息的画面的判定精度。

-符号说明-

1 状态判定系统

10 图像获取部

20 图像判定部

30 色彩信息获取机构

40 状态变换机构

50 状态信息发送机构

X 监控画面

Y 前台电脑(front computer)

Z 监控器缆线

W 适配器装置(adapter device)

NW 网络