就寝异常通知系统、就寝异常通知方法以及程序与流程

文档序号:19940581发布日期:2020-02-14 23:06阅读:236来源:国知局
就寝异常通知系统、就寝异常通知方法以及程序与流程

本发明涉及一种就寝异常通知系统、就寝异常通知方法以及程序,获取人物就寝的图像并进行图像解析,检测是否就寝异常,在检测到就寝异常的情况下通知异常,其中,在作为通知目标的监护人未处于人物的周边的情况下,也能适当地通知就寝异常。



背景技术:

提出了一种系统,作为用于通知就寝异常的系统,在医院患者、老人以及幼儿等就寝中的人物存在俯卧等就寝异常时,用声音、光通知周围的监护人(专利文献1)。

现有技术文献

专利文献

专利文献1:日本特开平11-99140



技术实现要素:

发明所要解决的问题

但是,在专利文献1的方法中,存在以下问题:即使进行了声音、光的通知,在监护人未处于通知单元的周围的情况下也无法注意到通知。

在本发明中,鉴于上述的问题,本发明的目的是提供一种就寝异常通知系统、就寝异常通知方法以及程序,获取人物就寝的图像并进行图像解析,检测是否就寝异常,在检测到就寝异常的情况下通知异常,其中,在作为通知目标的监护人未处于人物的周边的情况下,也能适当地通知就寝异常。

用于解决问题的方案

在本发明中,提供以下这样的解决方法。

第一特征的发明提供一种就寝异常通知系统,其特征是具备:图像获取单元,获取人物就寝的就寝图像;图像解析单元,对所述获取到的就寝图像进行图像解析;就寝异常检测单元,基于所述图像解析的结果检测所述人物是否就寝异常;受理单元,受理所述人物的监护人的移动终端的登记;位置获取单元,获取所述登记的移动终端的位置;判定单元,对所述获取到的位置是否处于距所述人物的位置规定的范围内进行判定;以及通知单元,在检测到所述就寝异常的情况下,且,在判定为未处于所述规定的范围内的情况下,向所述监护人的移动终端通知就寝异常。

根据第一特征的发明,在就寝异常通知系统中,具备:图像获取单元,获取人物就寝的就寝图像;图像解析单元,对所述获取到的就寝图像进行图像解析;就寝异常检测单元,基于所述图像解析的结果检测所述人物是否就寝异常;受理单元,受理所述人物的监护人的移动终端的登记;位置获取单元,获取所述登记的移动终端的位置;判定单元,对所述获取到的位置是否处于距所述人物的位置规定的范围内进行判定;以及通知单元,在检测到所述就寝异常的情况下,且,在判定为未处于所述规定的范围内的情况下,向所述监护人的移动终端通知就寝异常。

第一特征的发明的类别是就寝异常通知系统,但即使作为就寝异常通知方法、程序也会起到同样的作用、效果。

第二特征的发明提供一种就寝异常通知系统,其特征是在作为第一特征的发明的就寝异常通知系统中,所述图像获取单元从照相机获取所述就寝图像,该照相机从所述人物就寝的场所的两侧沿水平方向设置。

根据第二特征的发明,在作为第一特征的发明的就寝异常通知系统中,所述图像获取单元从照相机获取所述就寝图像,该照相机从所述人物就寝的场所的两侧沿水平方向设置。

第三特征的发明提供一种就寝异常通知系统,其特征是在作为第一特征或第二特征的发明的就寝异常通知系统中,所述图像解析单元将过去获取到的就寝图像作为教师数据进行机器学习,定制(customize)为适合于所述人物,进行图像解析。

根据第三特征的发明,在作为第一特征或第二特征的发明的就寝异常通知系统中,所述图像解析单元将过去获取到的就寝图像作为教师数据进行机器学习,定制为适合于所述人物,进行图像解析。

第四特征的发明提供一种就寝异常通知系统,其特征是在作为第一特征至第三特征中的任一项的发明的就寝异常通知系统中,所述就寝异常检测单元将过去的图像解析的结果作为教师数据进行机器学习,定制为适合于所述人物,检测就寝异常。

根据第四特征的发明,在作为第一特征至第三特征中的任一项的发明的就寝异常通知系统中,所述就寝异常检测单元将过去的图像解析的结果作为教师数据进行机器学习,定制为适合于所述人物,检测就寝异常。

第五特征的发明提供一种就寝异常通知系统,其特征是在作为第一特征至第四特征中的任一项发明的就寝异常通知系统中,所述就寝异常检测单元基于所述图像解析的结果判定所述人物的鼻和口是否同时堵塞,由此检测就寝异常。

根据第五特征的发明,在作为第一特征至第四特征中的任一项发明的就寝异常通知系统中,所述就寝异常检测单元基于所述图像解析的结果判定所述人物的鼻和口是否同时堵塞,由此检测就寝异常。

第六特征的发明提供一种就寝异常通知系统,其特征是在作为第一特征至第五特征中的任一项发明的就寝异常通知系统中,所述就寝异常检测单元在所述图像解析的结果为所述人物在规定的时间内未进行任何动作而未观察到运动的情况下,检测就寝异常。

根据第六特征的发明,在作为第一特征至第五特征中的任一项的发明的就寝异常通知系统中,所述就寝异常检测单元在所述图像解析的结果为所述人物在规定的时间内未进行任何动作而未观察到运动的情况下,检测就寝异常。

第七特征的发明提供一种就寝异常通知系统,其特征是在作为第一特征至第六特征中的任一项发明的就寝异常通知系统中,所述就寝异常检测单元将所述人物在规定的时间内未进行任何动作而未观察到运动的情况是异常的作为教师数据进行机器学习,检测就寝异常。

根据第七特征的发明,在作为第一特征至第六特征中的任一项的发明的就寝异常通知系统中,所述就寝异常检测单元将所述人物在规定的时间内未进行任何动作而未观察到运动的情况是异常的作为教师数据进行机器学习,检测就寝异常。

第八特征的发明提供一种就寝异常通知系统,其特征是在作为第一特征至第七特征中的任一项的发明的就寝异常通知系统中,所述通知单元,在检测到所述就寝异常的情况下,且,在判定为处于所述规定的范围内的情况下,向处于所述人物的周围的监护人用警告音或警告光进行通知。

根据第八特征的发明,在作为第一特征至第七特征中的任一项的发明的就寝异常通知系统中,所述通知单元,在检测到所述就寝异常的情况下,且,在判定为处于所述规定的范围内的情况下,向处于所述人物的周围的监护人用警告音或警告光进行通知。

第九特征的发明提供一种就寝异常通知系统,其特征是在作为第一特征至第八特征中的任一项的发明的就寝异常通知系统中,所述通知单元,在检测到所述就寝异常的情况下,且,在未能获取所述移动终端的位置的情况下,向处于所述人物的周围的监护人用警告音或警告光进行通知,或者,进行事先登记于就寝异常感测系统的动作。

根据第九特征的发明,在作为第一特征至第八特征中的任一项的发明的就寝异常通知系统中,所述通知单元,在检测到所述就寝异常的情况下,且,在未能获取所述移动终端的位置的情况下,向处于所述人物的周围的监护人用警告音或警告光进行通知,或者,进行事先登记于就寝异常感测系统的动作。

第十特征的发明提供一种就寝异常通知方法,其特征是在就寝异常通知方法中具备以下步骤:获取人物就寝的就寝图像;对所述获取到的就寝图像进行图像解析;基于所述图像解析的结果检测所述人物是否就寝异常;受理所述人物的监护人的移动终端的登记;获取所述登记的移动终端的位置;对所述获取到的位置是否处于距所述人物的位置规定的范围内进行判定;以及在检测到所述就寝异常的情况下,且,在判定为未处于所述规定的范围内的情况下,向所述监护人的移动终端通知就寝异常。

第十一特征的发明提供一种程序,用于使就寝异常通知系统执行以下步骤:获取人物就寝的就寝图像;对所述获取到的就寝图像进行图像解析;基于所述图像解析的结果检测所述人物是否就寝异常;受理所述人物的监护人的移动终端的登记;获取所述登记的移动终端的位置;对所述获取到的位置是否处于距所述人物的位置规定的范围内进行判定;以及在检测到所述就寝异常的情况下,且,在判定为未处于所述规定的范围内的情况下,向所述监护人的移动终端通知就寝异常。

发明效果

根据本发明,可以提供一种就寝异常通知系统、就寝异常通知方法以及程序,获取人物就寝的图像并进行图像解析,检测是否就寝异常,在检测到就寝异常的情况下通知异常,其中,在作为通知目标的监护人未处于人物的周边的情况下,也能适当地通知就寝异常。

附图说明

图1是本发明的优选实施方式的概要图。

图2是表示照相机100、计算机200和移动终端300的功能块与各功能的关系的图。

图3是用计算机200对照相机100中的拍摄图像进行图像解析处理,向移动终端300通知就寝异常的情况的流程图。

图4是表示照相机100、计算机200、移动终端300以及警报装置500的功能块与各功能的关系的图。

图5是检测到就寝异常,移动终端300处于规定范围内的情况的计算机200和警报装置500的流程图。(处理a)

图6是检测到就寝异常,未能获取移动终端300的位置信息的情况的计算机200和警报装置500的流程图。(处理b)

图7是计算机200进行用于进行就寝异常的图像解析的机器学习的情况的流程图。

图8是表示当感测到就寝异常时,持有移动终端300的监护人700未处于规定的范围内的情况的一个例子的示意图。

图9是表示当感测到就寝异常时,持有移动终端300的监护人700处于规定的范围内的情况的一个例子的示意图。

图10是表示当感测到就寝异常时,未能获取移动终端300的位置信息的情况的一个例子的示意图。

具体实施方式

以下,参照附图对用于实施本发明的最佳方式进行说明。需要说明的是,这仅是一个例子,本发明的技术的范围不限于此。

(就寝异常通知系统的概要)

图1是本发明的优选实施方式的概要图。基于该图1,对本发明的概要进行说明。就寝异常通知系统包括照相机100、计算机200、移动终端300以及通信网400。

需要说明的是,在图1中,照相机100的数量不限于一个,也可以是多个。此外,计算机200不限于实际存在的装置,也可以是虚拟的装置。

如图2所示,照相机100包括拍摄部10、控制部110以及通信部120。此外,如该图2所示,计算机200包括控制部210、通信部220、存储部230以及输入输出部240。控制部210与存储部230协作实现图像解析模块211、就寝异常检测模块212以及判定模块213。此外,通信部220与控制部210和存储部230协作实现图像获取模块221、受理模块222、位置获取模块223以及通知模块224。移动终端300包括位置信息获取部30、控制部310以及通信部320。通信网400既可以是互联网等公共通信网也可以是专用通信网,能进行照相机100、计算机200、移动终端300间的通信。

照相机100是能与计算机200进行数据通信的拍摄装置,具备:拍摄元件、透镜等拍摄设备。在此,作为例子图示有web照相机(网络摄像头),但也可以是数码照相机、数码摄像机、搭载于无人机的照相机、可穿戴设备的照相机、监控摄像头、车载照相机以及360度照相机等具备必要的功能的拍摄装置。

计算机200是可以与照相机100进行数据通信的计算装置。在此,作为例子图示有台式机型的计算机,但除了便携电话、便携信息终端、平板终端、个人计算机之外,也可以是笔记本终端、板状(slate)终端、电子书籍终端以及便携式音乐播放器等电器、智能眼镜和头戴显示器等可穿戴终端等。

移动终端300是使用就寝异常通知系统的用户持有的终端装置。假定被拍摄就寝图像的人物600的监护人700为使用就寝异常通知系统的用户。在此,作为例子图示有智能手机,但除了便携电话、便携信息终端、平板终端以及个人计算机之外,也可以是笔记本终端、板状终端、电子书籍终端以及便携式音乐播放器等电器、智能眼镜和头戴显示器等可穿戴终端等。

在图1的就寝异常通知系统中,照相机100设置于想要感测就寝异常的人物600的水平方向,能拍摄就寝图像。在此,仅图示有一台照相机100,但理想的是以能从人物600的两侧进行拍摄的方式设置两台以上。假定人物600是婴儿、医院患者、老人等需要看护的人物。特别是,在假定人物600是婴儿的情况下,需要将与婴儿猝死综合征(sids:suddeninfantdethsyndrome)相关的俯卧感测为就寝异常,向监护人700通知。为此,从人物600的水平方向的两侧进行拍摄,由此能进一步提高用于感测俯卧的图像解析的精度。此外,将计算机200设为完成了用于进行就寝异常的图像解析的机器学习的设备。将移动终端300设为被拍摄就寝图像的人物600的监护人700持有的终端。

首先,从移动终端300对计算机200进行向就寝异常通知系统的登记申请(步骤s101)。此处的登记申请是用于将人物600的监护人700持有的移动终端300设定为就寝异常通知系统的通知目标的申请。用于登记的申请内容可以包括照相机100的信息、人物600的信息以及监护人700的信息。

接着,计算机200的受理模块222受理来自移动终端300的登记申请(步骤s102)。受理模块222将用照相机100拍摄的人物600的监护人700持有的移动终端300设定为就寝异常通知系统的通知目标。与此相应,为了进行就寝异常通知,将移动终端300的位置信息设定为计算机200能获取的信息。为了进行所述设定,根据需要,在计算机200和移动终端300之间进行数据的交换。

接着,计算机200对照相机100进行照相机控制,以便拍摄人物600的动态图像或静态图像等就寝图像(步骤s103)。在此,人物600的就寝图像的拍摄开始的指示既可以从计算机200直接进行,也可以在收到来自移动终端300的指示的情况下进行。

照相机100的拍摄部10接受来自计算机200的控制,拍摄人物600的动态图像或静态图像等就寝图像(步骤s104)。

照相机100的控制部110经由通信部120,将拍摄到的就寝图像向计算机200发送(步骤s105)。

计算机200的图像获取模块221从照相机100接收就寝图像(步骤s106)。

计算机200的图像解析模块211解析来自照相机100的就寝图像(步骤s107)。将该图像解析模块211设为完成了用于进行就寝异常的图像解析的机器学习的模块。关于用于进行就寝异常的图像解析的机器学习的方法,将在后文叙述。

计算机200的就寝异常检测模块212基于步骤s107的图像解析结果检测就寝异常(步骤s108)。此处的就寝异常能举例为例如人物600的鼻和口同时堵塞的情况,或者,在规定的时间内未进行任何动作而未观察到运动的情况等。除此以外,也能受理来自监护人700的登记来定制为婴儿的手指要进入眼睛的情况、要从床上掉落的情况等。

在检测到就寝异常的情况下,计算机200的位置获取模块223从移动终端300获取位置信息(步骤s109)。

在能在步骤109中获取到移动终端300的位置信息的情况下,计算机200的判定模块213对移动终端300是否处于规定的范围内进行判定(步骤s110)。将此处的规定的范围内设为处于照相机100和人物600的周围,或设为处于后述的警报装置500的周围。在由警报装置500通知就寝异常的情况下,理想的是将能正常地认知通知的范围设定为规定的范围。

在步骤s110中判定为移动终端300未处于规定的范围内的情况下,计算机200的通知模块224对移动终端300通知就寝异常(步骤s111)。

最后,移动终端300经由通信部320接收就寝异常的通知,根据设定对监护人700进行提示(步骤s112)。此处的就寝异常的提示方法能事先设定为声音、光、振动、动态图像或静态图像的显示等。

如上所述,根据本发明能提供一种就寝异常通知系统、就寝异常通知方法以及程序,获取人物就寝的图像并进行图像解析,检测是否就寝异常,在检测到就寝异常的情况下通知异常,其中,在作为通知目标的监护人未处于人物的周边的情况下,也能向监护人持有的移动终端通知就寝异常,由此适当地通知就寝异常。

(各功能的说明)

图2是表示照相机100、计算机200以及移动终端300的功能块与各功能的关系的图。照相机100包括拍摄部10、控制部110以及通信部120。计算机200包括控制部210、通信部220、存储部230以及输入输出部240。控制部210与存储部230协作实现图像解析模块211、就寝异常检测模块212以及判定模块213。此外,通信部220与控制部210和存储部230协作实现图像获取模块221、受理模块222、位置获取模块223以及通知模块224。移动终端300包括位置信息获取部30、控制部310以及通信部320。通信网400既可以是互联网等公共通信网也可以是专用通信网,能进行照相机100、计算机200以及移动终端300间的通信。

照相机100是能与计算机200进行数据通信的拍摄装置,具备:拍摄元件、透镜等拍摄设备。在此,作为例子图示有web照相机,但也可以是数码照相机、数码摄像机、搭载于无人机的照相机、可穿戴设备的照相机、监控摄像头、车载照相机以及360度照相机等具备必要的功能的拍摄装置。

在照相机100中,拍摄部10具备:透镜、拍摄元件、各种按钮以及闪光灯等拍摄设备等,拍摄出动态图像、静态图像等拍摄图像。此外,拍摄得到的图像为具有图像解析所需要的信息量的精密的图像。此外,也可以设为能控制拍摄时的分辨率、照相机角度以及照相机放大率等。

控制部110具备:cpu(centralprocessingunit:中央处理器)、ram(randomaccessmemory:随机存储器)以及rom(readonlymemory:只读存储器)等。

通信部120具备用于能与其他设备进行通信的设备,例如依据ieee802.11的wi-fi(wirelessfidelity:无线上网)对应设备或3g(第三代移动通信系统)、4g(第四代移动通信系统)等依据imt-2000标准的无线设备等。也可以是有线的lan(localareanetwork:局域网)连接。

计算机200是能与照相机100进行数据通信的计算装置。在此,作为例子图示有台式机型的计算机,但除了便携电话、便携信息终端、平板终端、个人计算机之外,也可以是笔记本终端、板状终端、电子书籍终端以及便携式音乐播放器等电器、智能眼镜和头戴显示器等可穿戴终端等。

控制部210具备cpu、ram、rom等。控制部210与存储部230协作实现图像解析模块211、就寝异常检测模块212以及判定模块213。

通信部220具备用于能与其他设备进行通信的设备,例如依据ieee802.11的wi-fi对应设备或3g、4g等依据imt-2000标准的无线设备等。也可以是有线的lan连接。通信部220与控制部210和存储部230协作实现图像获取模块221、受理模块222、位置获取模块223以及通知模块224。

存储部230具备由硬盘、半导体内存实现的数据的存储(storage)部,存储拍摄图像、教师数据以及图像解析结果等处理所需要的数据等。此外,存储部230也可以具备就寝图像的教师数据的数据库。

将输入输出部240设为具备在操作者经由计算机200操作就寝异常通知系统的情况下所需要的功能。作为用于实现输入的例子,能具备:实现触摸面板功能的液晶显示器、键盘、鼠标、数位板、装置上的硬件按钮以及用于进行声音识别的麦克风等。此外,作为用于实现输出的例子,可以考虑液晶显示器、pc的显示器以及向投影仪的投影等的显示和声音输出等的方式。本发明的功能不由输入输出方式特别限定。

移动终端300是使用就寝异常通知系统的用户持有的终端装置。在此,作为例子图示有智能手机,但除了便携电话、便携信息终端、平板终端以及个人计算机之外也可以是笔记本终端、板状终端、电子书籍终端以及便携式音乐播放器等电器、智能眼镜和头戴显示器等可穿戴终端等。

移动终端300具备位置信息获取部30,能通过gps(grobalpositioningsystem:全球定位系统)功能等获取移动终端300的纬度、经度、高度等信息。在此,位置信息的获取方法不限于gps,也可以使用wi-fi、bluetooth(蓝牙)、nfc(近场通信)、3g、4g以及lte(longtermevolution:长期演进技术)等无线通信方式来获取位置信息。此外,涉及对应于各通信方式的位置信息的获取,不限定于本专利,能利用现存的技术。

控制部310具备cpu、ram以及rom等。

通信部320具备能与其他设备进行通信的设备,例如,依据ieee802.11的wi-fi对应设备或3g、4g等依据imt-2000规格的无线设备等。

(就寝异常通知处理)

图3是用计算机200对照相机100中的拍摄图像进行图像解析处理,向移动终端300通知就寝异常的情况的流程图。结合本处理对上述的各模块执行的处理进行说明。

图8是表示当在就寝异常通知系统中感测到就寝异常时,持有移动终端300的监护人700未处于规定的范围内的情况的一个例子的示意图。照相机100设置于想要感测就寝异常的人物600的水平方向,能拍摄就寝图像。在此,仅图示有一台照相机100,但理想的是以能从人物600的两侧进行拍摄的方式设置两台以上。假定人物600是婴儿、医院患者、老人等需要看护的人物。特别是,在假定人物600是婴儿的情况下,需要将与婴儿猝死综合征相关的俯卧感测为就寝异常,向监护人700通知。为此,从人物600的水平方向两侧进行拍摄,由此能进一步提高用于俯卧感测的图像解析的精度。此外,将计算机200设为完成了用于进行就寝异常的图像解析的机器学习的设备。移动终端300是被拍摄就寝图像的人物600的监护人700持有的终端。关于图8所示的警报装置500,将在后文叙述。通信网400既可以是互联网等公共通信网也可以是专用通信网,能进行照相机100、计算机200、移动终端300、警报装置500间的通信。

回到图3的流程图,首先,从移动终端300对计算机200进行向就寝异常通知系统的登记申请(步骤s301)。此处的登记申请是用于将人物600的监护人700持有的移动终端300设定为就寝异常通知系统的通知目标的申请。用于登记的申请内容也可以包括照相机100的信息、人物600的信息以及监护人700的信息。

接着,计算机200的受理模块222受理来自移动终端300的登记申请(步骤s302)。受理模块222将用照相机100拍摄的人物600的监护人700持有的移动终端300设定为就寝异常通知系统的通知目标。与此相应,为了进行就寝异常通知,将移动终端300的位置信息设定为计算机200能获取的信息。为了进行所述设定,根据需要,在计算机200和移动终端300之间进行数据的交换。

接着,计算机200对照相机100进行照相机控制,以便拍摄人物600的动态图像或静态图像等就寝图像(步骤s303)。在此,人物600的就寝图像的拍摄开始的指示既可以从计算机200直接进行,也可以在收到来自移动终端300的指示的情况下进行。

照相机100的拍摄部10接受来自计算机200的控制,拍摄人物600的动态图像或静态图像等的就寝图像(步骤s304)。

照相机100的控制部110经由通信部120,将拍摄到的就寝图像向计算机200发送(步骤s305)。

计算机200的图像获取模块221从照相机100接收就寝图像(步骤s306)。

计算机200的图像解析模块211解析来自照相机100的就寝图像(步骤s307)。将该图像解析模块211设为完成了用于进行就寝异常的图像解析的机器学习的模块。关于用于进行就寝异常的图像解析的机器学习的方法,将在后文叙述。

计算机200的就寝异常检测模块212基于步骤s107的图像解析结果,检测就寝异常(步骤s308)。此处的就寝异常能举例为例如人物600的鼻和口同时堵塞的情况,或者,在规定的时间内未进行任何动作而未观察到运动的情况等。除此以外,也能受理来自监护人700的登记来定制为婴儿的手指要进入眼睛的情况、要从床上掉落的情况等。

在检测到就寝异常的情况下,计算机200的位置获取模块223从移动终端300获取位置信息(步骤s309)。在未检测到就寝异常的情况下,返回步骤s303,继续进行就寝图像的获取。

计算机200的位置获取模块223进行从移动终端300获取位置信息是否成功的确认(步骤s310)。在位置信息的获取成功的情况下,前进到步骤s311,在位置信息的获取失败的情况下,向处理b前进。关于处理b,将作为图6的说明在后文叙述。

在位置信息的获取成功的情况下,计算机200的判定模块213对移动终端300是否处于规定的范围内进行判定(步骤s311)。将此处的规定的范围内设为处于照相机100和人物600的周围,或设为处于后述的警报装置500的周围。在由警报装置500通知就寝异常的情况下,理想的是将能正常地认知通知的范围设定为规定的范围。在判定为处于规定的范围内的情况下向处理a前进,在判定为未处于规定的范围内的情况下,前进到步骤s312。关于处理a,将作为图5的说明在后文叙述。

在步骤s311中,在判定为移动终端300未处于规定的范围内的情况下,计算机200的通知模块224对移动终端300通知就寝异常(步骤s312)。

最后,移动终端300经由通信部320接收就寝异常的通知,根据设定对监护人700进行提示(步骤s313)。此处的就寝异常的提示方法能事先设定为声音、光、振动、动态图像或静态图像的显示等。

在图3的流程图中未进行图示,但人物600的就寝图像的拍摄结束的指示既可以从计算机200直接进行,也可以在收到来自移动终端300的指示的情况下进行。在计算机200接受到拍摄结束的指示的情况下,结束步骤s303至步骤s308的循环处理,结束就寝异常通知系统。

如上所述,根据本发明可以提供一种就寝异常通知系统、就寝异常通知方法以及程序,获取人物就寝的图像并进行图像解析,检测是否就寝异常,在检测到就寝异常的情况下通知异常,其中,在作为通知目标的监护人未处于人物的周边的情况下,也能向监护人持有的移动终端通知就寝异常,由此适当地通知就寝异常。

(向警报装置的就寝异常通知处理)

图4是表示照相机100、计算机200、移动终端300以及警报装置500的功能块与各功能的关系的图。除了图2的构成之外,具备警报装置500。警报装置500包括警告部50、控制部510以及通信部520。通信网400既可以是互联网等公共通信网也可以是专用通信网,能进行照相机100、计算机200、移动终端300、警报装置500间的通信。

在警报装置500中,警告部50具备用警告音、警告光向周边的监护人700通知就寝异常的构成。

控制部510具备cpu、ram以及rom等,受到来自计算机200的指示,使警告部50进行动作。

通信部520具备能与其他设备进行通信的设备,例如依据ieee802.11的wi-fi对应设备或3g、4g等依据imt-2000规格的无线设备等。也可以是有线的lan连接。经由通信部520受理计算机200对警告部50的动作指示。

图9是表示在感测到就寝异常时,持有移动终端300的监护人700处于规定的范围内的情况的一个例子的示意图。照相机100设置于在存在就寝异常的情况下想要进行感测的人物600的水平方向,能拍摄就寝图像。理想的是,如图所示,以能从人物600的两侧进行拍摄的方式设置两台以上照相机100。此外,将此处的计算机200设为完成了用于进行就寝异常的图像解析的机器学习的设备。将移动终端300设为被拍摄就寝图像的人物600的监护人700持有的终端。警报装置500用警告音、警告光向周边的监护人700通知就寝异常。通信网400既可以是互联网等公共通信网也可以是专用通信网,能进行照相机100、计算机200、移动终端300、警报装置500间的通信。

图5是检测到就寝异常,移动终端300处于规定范围内的情况的计算机200和警报装置500的流程图。相当于在图9所示的状况下前进到图3的流程图的处理a的情况。

在检测到就寝异常,判定为移动终端300处于规定的范围内的情况下,就是说,认为监护人700存在于能正常地认知警报装置500的就寝异常通知的范围中的情况下,计算机200的通知模块224对警报装置500通知警告命令(步骤s501)。

警报装置500经由通信部520接收警告命令,根据来自控制部510的指示使警告部50进行动作,用警告音或警告光进行通知(步骤s502)。也可以同时用警告音和警告光进行通知,此外,对应于警报装置500的功能,也可以进行振动动作、文字等的显示。

此外,图10是表示在感测到就寝异常时,未能获取移动终端300的位置信息的情况的一个例子的示意图。照相机100设置于在存在就寝异常的情况下想要进行感测的人物600的水平方向,能拍摄就寝图像。理想的是,如图所示,以能从人物600的两侧进行拍摄的方式设置两台以上照相机100。此外,将此处的计算机200设为完成了用于进行就寝异常的图像解析的机器学习的设备。将移动终端300设为被拍摄就寝图像的人物600的监护人700持有的终端。不过,这时,因电池用尽、通信状况的问题而无法获取移动终端300的位置信息。警报装置500用警告音、警告光向周边的监护人700通知就寝异常。通信网400既可以是互联网等公共通信网也可以是专用通信网,能进行照相机100、计算机200、移动终端300、警报装置500间的通信。

图6是检测到就寝异常,未能获取移动终端300的位置信息的情况的计算机200和警报装置500的流程图。相当于在图10所示的状况下前进到图3的流程图的处理b。

在检测到就寝异常,未能获取移动终端300的位置信息的情况下,就是说,在不清楚监护人700是否存在于能正常地认知警报装置500的就寝异常通知的范围中的情况下,计算机200的通知模块224进行以下确认:事先是否存在未能获取移动终端的位置信息的情况的登记动作(步骤s601)。

在登记有未能获取移动终端300的位置信息的情况的动作的情况下,前进到步骤s604,在未登记动作的情况下,通知模块224对警报装置500通知警告命令(步骤s602)。

在从计算机200通知了警告命令的情况下,警报装置500经由通信部520接收警告命令,根据来自控制部510的指示使警告部50进行动作,用警告音或警告光进行通知(步骤s603)。也可以同时用警告音和警告光进行通知,此外,根据警报装置500的功能,也可以进行振动动作、文字等的显示。

在登记有未能获取移动终端300的位置信息的情况的动作的情况下,通知模块224执行登记动作(步骤s604)。登记动作的例子可以考虑向警报装置500的警告命令通知、向其他移动终端的通知、向就寝异常通知系统的管理者的通知、向保安公司的通知、向医院、医疗施设的通知等,也可以登记它们中的多个。

如上所述,根据本发明可以提供一种就寝异常通知系统、就寝异常通知方法以及程序,获取人物就寝的图像并进行图像解析,检测是否就寝异常,在检测到就寝异常的情况下通知异常,其中,在作为通知目标的监护人未处于人物的周边的情况下,能向监护人持有的移动终端通知就寝异常,在作为通知目标的监护人处于人物的周边的情况下,能由警报装置进行警告,在不知道作为通知目标的监护人是否处于人物的周边的情况下,能进行警报装置的警告或通过进行事先登记的动作适当地通知就寝异常。

(就寝异常的图像解析的机器学习处理)

图7是计算机200进行用于进行就寝异常的图像解析的机器学习的情况的流程图。

计算机200的控制部210从存储部230获取多个过去获取到的就寝图像(步骤s701)。在此,获取的就寝图像能通过使用想要检测就寝异常的人物600的图像,进一步提高图像解析的精度。

在获取到的就寝图像包括充足的就寝异常图像的情况下,能将其用作就寝异常时的教师数据图像,但是通常认为过去获取到的就寝图像中不包含那么多的就寝异常图像。因此,控制部210基于获取到的就寝图像制作就寝异常图像(步骤s702)。此处制作的就寝异常图像的例子可以举出人物600的鼻和口同时堵塞的情况,或者,在规定的时间内未进行任何动作而未观察到运动的情况等。特别是,婴儿的呼吸暂停持续十几秒至20秒左右的呼吸暂停发作与婴儿猝死综合征的危险相关,因此制作按规定的时间感测就寝异常的与人物600的年龄等匹配的就寝异常图像例,由此能有效地感测就寝异常

最后,控制部210使用包括在获取到的过去的就寝图像中制作的就寝异常图像的教师数据进行机器学习(步骤s703)。

如上所述,根据本发明可以提供一种就寝异常通知系统、就寝异常通知方法以及程序,在进行用于进行就寝异常的图像解析的机器学习的情况下,基于获取到的过去的就寝图像制作就寝异常图像,使用包括充足的数量的就寝异常图像的教师数据进行机器学习,由此能有效地追加教师数据,进一步提高图像解析的就寝异常的检测精度。

上述的单元、功能由计算机(包括cpu、信息处理装置以及各种终端)读取规定的程序并执行来实现。程序可以用以下方式提供:例如从计算机经由网络提供(saas:软件即服务),用记录于软盘、cd(cd-rom等)、dvd(dvd-rom、dvd-ram等)、紧凑型存储器等计算机可读取的记录介质来提供。在该情况下,计算机从该记录介质读取程序,传输至内部存储装置或外部存储装置,存储并执行。此外,也可以用以下方式进行:将该程序预先记录于例如磁盘、光盘以及磁光盘等存储装置(记录介质),从该存储装置经由通信线路向计算机提供。

以上,对本发明的实施方式进行了说明,但本发明不限于上述这些实施方式。此外,本发明的实施方式所记载的效果不过是列举了对本发明产生的最优选的效果,本发明的效果不限定于本发明的实施方式所记载的效果。

附图标记说明:

100照相机,200计算机,300移动终端,400通信网,500警报装置,600人物,700监护人。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1