动作检测系统、动作检测装置、动作检测方法以及动作检测程序与流程

本公开涉及能够判别人物的动作的动作检测系统、动作检测装置、动作检测方法以及动作检测程序。

背景技术：

有用于从图像判别人物的动作的技术。该技术例如被应用在监护老年人、患者等需要看护的被看护人员的动作的动作检测系统中。该动作检测系统对被看护人员进行了伴随有跌倒等的危险的动作(例如起床、离床等)的情况进行检测，并将该情况报告给看护人员。由此，看护人员能够赶到被看护人员的身边，能够防患被看护人员的跌倒等于未然。

关于这样的动作检测系统，日本特开2009－5963号公报(专利文献1)公开了“防止在患者的旁边有人的情况下的该患者的离床前动作的检测”的离床前动作检测装置。日本特开2001－327549号公报(专利文献2)公开了“按动态来检测从被看护人员的就寝姿势到开始步行为止的一系列动作”的动态检测系统。

专利文献1：日本特开2009－5963号公报

专利文献2：日本特开2001－327549号公报

动作检测系统有时在短时间的期间检测出多个种类的动作。若每当检测出被看护人员的动作时就将该情况报告给看护人员，则看护人员的负担增加。因此，期望一种能够减轻由该情况所引起的看护人员的负担的动作检测系统。

专利文献1所公开的离床前动作检测装置在检测到患者的手等的接触的情况下，且在由距离传感器所输出的距离在预先决定的范围内时，不报告患者的离床前动作。即，该离床前动作检测装置仅判断是否报告患者已离床这一情况，并不检测多个种类的动作。

专利文献2所公开的动态检测系统按各动态阶段性地检测从被看护人员的就寝姿势到久坐姿势、端坐姿势、站立姿势、开始步行为止的一系列动态。该动态检测系统从检测出各动态之后经过恒定时间后再次检测出下一个动态的情况下，检测动态的连续。即，该动态检测系统仅判断动态是否持续，并没有假设在恒定时间内检测出多个种类的动态的情况。

技术实现要素：

本公开是为了解决上述那样的问题点而完成的，某个方面的目的在于提供能够减轻在短时间的期间检测出多个种类的报告对象的动作的情况下可能产生的看护人员的负担的动作检测系统。其他方面的目的在于提供能够减轻在短时间的期间检测出多个种类的报告对象的动作的情况下可能产生的看护人员的负担的动作检测装置。另一其他方面的目的在于提供能够减轻在短时间的期间检测出多个种类的报告对象的动作的情况下可能产生的看护人员的负担的动作检测方法。另一其他方面的目的在于提供能够减轻在短时间的期间检测出多个种类的报告对象的动作的情况下可能产生的看护人员的负担的动作检测程序。

按照某个方面，动作检测系统具备：获取部，用于获取表示人物的动作的动作数据；检测部，用于使用动作数据来检测人物的规定动作；选择部，用于在规定时间的期间多个种类的输出候补的动作被检测部检测出的情况下，从输出候补的动作中选择输出对象的动作，以使输出候补的动作的种类比多个种类少；以及输出部，用于输出被选择部选择出的输出对象的动作。

优选多个种类的输出候补的动作包括从人物躺卧在床上的状态到离开该床为止的期间可能产生的动作组。

优选多个种类的输出候补的动作是按照时间序列的顺序可能产生的一系列的动作组。

优选选择部选择输出候补的动作中的最后检测出的动作来作为输出对象的动作。

优选选择部选择输出候补的动作中的最初检测出的动作来作为输出对象的动作。

优选对检测部所检测的检测对象的动作的各个预先对应有优先度。选择部选择输出候补的动作中的优先度最高的动作来作为输出对象的动作。

优选一系列的动作组包括第一动作、第二动作和第三动作。第一动作以及第二动作是在第三动作之前可能产生的动作。选择部在检测出第三动作的情况下，根据在该第三动作之前所检测出的动作是第一动作还是第二动作来变更规定时间。

优选输出部通过相互不同的多个输出单元输出输出对象的动作。选择部以按多个输出单元的每一个而不同的规定时间选择输出候补的动作。

优选输出部包括第一输出单元和第二输出单元作为多个输出单元，第一输出单元用于向人物的看护人员报告输出对象的动作，第二输出单元用将输出对象的动作储存于存储器。选择部针对第一输出单元按每个第一规定时间选择输出候补的动作，针对第二输出单元按每个比第一规定时间短的第二规定时间选择输出候补的动作。

优选输出部包括第一输出单元和第二输出单元作为多个输出单元，第一输出单元用于向人物的看护人员报告输出对象的动作，第二输出单元用于向动作检测系统的管理者报告输出对象的动作。选择部针对第一输出单元按每个第一规定时间选择输出候补的动作，针对第二输出单元按每个比第一规定时间短的第二规定时间选择输出候补的动作。

按照其他方面，动作检测装置具备：获取部，用于获取表示人物的动作的动作数据；检测部，用于使用动作数据来检测人物的规定动作；选择部，用于在规定时间的期间多个种类的输出候补的动作被检测部检测出的情况下，从输出候补的动作中选择输出对象的动作，以使输出候补的动作的种类比多个种类少；以及输出部，用于输出被选择部选择出的输出对象的动作。

按照另一其他方面，动作检测方法具备：获取表示人物的动作的动作数据的步骤；使用动作数据来检测人物的规定动作的步骤；在规定时间的期间多个种类的输出候补的动作在检测的步骤中被检测出的情况下，从输出候补的动作中选择输出对象的动作，以使输出候补的动作的种类比多个种类少的步骤；以及输出在选择的步骤中选择出的输出对象的动作的步骤。

按照另一其他方面，动作检测程序使计算机执行如下的步骤：获取表示人物的动作的动作数据的步骤；使用动作数据来检测人物的规定动作的步骤；在规定时间的期间多个种类的输出候补的动作在检测的步骤中被检测出的情况下，从输出候补的动作中选择输出对象的动作，以使输出候补的动作的种类比多个种类少的步骤；以及输出在选择的步骤中选择出的输出对象的动作的步骤。

在某个方面中，能够减轻在短时间的期间检测出多个种类的报告对象的动作的情况下可能产生的看护人员的负担。

本发明的上述以及其它目的、特征、方面以及优点根据与附图关联起来进行理解的关于本发明的以下的详细说明将变得清楚。

附图说明

图1是表示按照第一实施方式的动作检测系统的结构的一个例子的图。

图2是表示按照第一实施方式的动作检测系统的硬件构成和功能构成的框图。

图3是表示第一实施方式中的动作集的内容的图。

图4是表示检测出的动作的输出方法的图。

图5是表示选择处理的具体例子1－1的流程图。

图6是表示选择处理的具体例子1－2的流程图。

图7是表示选择处理的具体例子1－3的流程图。

图8是表示优先度表的内容的图。

图9是表示选择处理的具体例子1－4的流程图。

图10是表示选择处理的具体例子1－5的流程图。

图11是表示按照第一实施方式的动作检测系统的主要的硬件构成的框图。

图12是表示按照第二实施方式的动作检测系统的硬件构成和功能构成的框图。

图13是表示选择处理的具体例子2的流程图。

图14是表示第二实施方式中的动作集的内容的图。

图15是表示按照第三实施方式的动作检测系统的硬件构成和功能构成的框图。

图16是表示选择处理的具体例子3的流程图。

具体实施方式

以下，参照附图，对按照本发明的各实施方式进行说明。在以下的说明中，对同一部件以及构成要素标注同一附图标记。它们的名称以及功能也相同。因此，不重复有关它们的详细说明。此外，以下所说明的各实施方式以及各变形例可以适当地选择性地组合。

＜第一实施方式＞

[动作检测系统300的装置结构]

参照图1，对动作检测系统300的装置结构进行说明。图1是表示动作检测系统300的结构的一个例子的图。

动作检测系统300例如用于监护监视对象的人物亦即被看护人员10。如图1所示，动作检测系统300包括相机50、动作检测装置100和便携式终端200。相机50以及动作检测装置100经由网络相互连接。动作检测装置100以及便携式终端200经由网络相互连接。

相机50例如被设置在看护设施、医疗设施、室内等中。在图1中示出相机50从天花板拍摄被看护人员10以及床20的样子。相机50可以安装在天花板上，也可以安装在侧壁上。

动作检测装置100基于从相机50得到的时间序列的图像(影像)来判别被看护人员10的动作。作为一个例子，动作检测装置100能够检测的被看护人员10的动作包括被看护人员10的起床、从床20的摔下等。

动作检测装置100将检测出的动作作为向看护人员11报告的动作的候补(以下也称为“报告候补”。)。动作检测装置100在短时间(例如数秒)的期间检测出多个种类的报告候补的动作的情况下，从报告候补的动作中选择报告对象的动作，以使报告的动作的种类变得更少。即，动作检测装置100选择报告候补的动作的一部分作为报告对象。动作检测装置100将表示选择出的报告对象的动作的种类的信息发送给看护人员11用的便携式终端200。

便携式终端200若从动作检测装置100接收表示报告对象的动作的种类的信息，则将检测出报告对象的动作这一情况报告给看护人员11。作为报告方法的一个例子，便携式终端200将表示动作的种类的信息作为消息来进行显示，或通过声音发出动作的种类。由此，看护人员11能够掌握被看护人员10的起床、跌倒等，并能够迅速赶到被看护人员10的身边。

如以上那样，动作检测装置100从报告候补的动作中选择报告对象的动作，并将报告对象的动作报告给看护人员11。由此，向看护人员11的报告次数减少，减轻看护人员11的负担。另外，由于将被看护人员10的必要的最低限度的动作报告给看护人员11，所以看护人员11能够容易地掌握被看护人员10的状态。

此外，在图1中示出动作检测系统300具备一个相机50的例子，但动作检测系统300也可以具备多个相机50。另外，在图1中示出动作检测系统300具备一个动作检测装置100的例子，但动作检测系统300也可以具备多个动作检测装置100。并且，在图1中，相机50和动作检测装置100构成为单独的装置，但相机50和动作检测装置100也可以一体构成。并且，在图1中示出动作检测系统300具备多个便携式终端200的例子，但动作检测系统300也可以由一个便携式终端200构成。

[动作检测系统300的处理]

参照图2，对按照第一实施方式的动作检测系统300的动作检测处理进行说明。图2是表示按照第一实施方式的动作检测系统300的硬件构成和功能构成的框图。如图2所示，动作检测系统300具备获取部52、动作检测装置100和输出部170。动作检测装置100包括cpu(centralprocessingunit：中央处理单元)102和存储装置120，来作为硬件构成。cpu102具有检测部150和选择部160，来作为功能构成。以下，依次对获取部52、检测部150、动作集122、选择部160、输出部170进行说明。

(获取部52)

获取部52获取表示被看护人员的动作的动作数据。获取部52例如是图1的相机50。作为相机50的获取部52获取拍摄监视对象的人物所得的图像作为动作数据。图像可以是静止图像，也可以是动态图像。获取部52将获取到的图像依次输出给检测部150。

此外，获取部52如果是能够获取被看护人员的动作量的装置，则并不限于相机50。例如获取部52也可以是配置在床下的压敏垫、tof(timeofflight：飞行时间)形式的距离图像传感器等。压敏垫输出压力值来作为动作数据。距离图像传感器输出距离图像来作为动作数据。另外，获取部52无需由一个传感器构成，也可以由多个传感器构成。

(检测部150)

检测部150对从获取部52得到的图像进行解析来检测看护人员的特定的动作。检测部150能够检测的动作包括从被看护人员躺在床上的状态到离开床为止的期间可能产生的动作组。通过像这样检测容易与被看护人员的跌倒相关联的起床时的动作组，看护人员能够更可靠地防止被看护人员的跌倒。

该动作组例如包括卧床、起床、端坐、离床以及摔下等。卧床是指被看护人员躺卧在床上的状态。起床是指被看护人员在床上起身的动作。端坐是指被看护人员坐在床上的状态或者被看护人员的身体处于床的边缘的状态。离床是指被看护人员从床离开的状态。摔下是指被看护人员从床上掉下来而躺在地板上的状态。

作为一个例子，检测部150使用动作数据来计算表示被看护人员的活动的程度的评价值，并且在图像内确定产生被看护人员的活动的动作区域。在该评价值小于预先决定的值且动作区域包含在图像内的床区域中的情况下，检测部150检测动作“卧床”。在该评价值大于规定阈值且动作区域包含在图像内的床区域中的情况下，检测部150检测动作“起床”。在动作区域与图像内的床边界重叠时，检测部150检测动作“端坐”。在该评价值大于规定阈值且动作区域不包含在图像内的床区域中的情况下，检测部150检测动作“离床”。在该评价值大于规定阈值且动作区域从床边界向床外移动的情况下，检测部150检测动作“摔下”。图像内的床区域可以手动地预先设定，也可以利用模板匹配等图像处理技术来自动地检测。

此外，在上述中，作为检测部150能够检测的动作，以卧床、起床、端坐、离床以及摔下为例进行了列举，但能够检测的动作并不限定于这些。例如能够检测的动作也可以包括跌倒等其它的动作。

(动作集122)

参照图3对动作集122进行说明。图3是表示第一实施方式中的动作集122的内容的图。

在动作集122中规定有按照时间序列的顺序所产生的一系列的动作组，作为可能被检测部150(参照图2)检测的报告候补的动作。即，在动作集122中规定动作的产生顺序。在图3的例子中，在动作集122中规定卧床、起床、端坐、摔下以及离床的产生顺序。

以下，用箭头“→”表示动作的产生顺序。例如在按照卧床、起床、端坐、离床的顺序产生动作的情况下，将这些动作组表示为“卧床→起床→端坐→离床”。

作为一个例子，在从被看护人员睡醒到离开床为止的期间，可能产生动作组“卧床→起床→端坐→离床”。在被看护人员从床上摔下来时，由于被看护人员一下使身体移动到床端后摔下来，所以可能产生动作组“卧床→端坐→跌倒”。另外，被看护人员有时即使要从床上摔下来但重整姿势。在该情况下，可能产生动作组“卧床→端坐→离床”。在动作集122中预先规定这样的可能产生的动作组。

此外，各动作的对应关系并不限于图3的例子。例如也可以在动作集122中还规定离床后可能产生的跌倒(即，离床→跌倒)。

(选择部160)

再次参照图2，选择部160从由检测部150检测出的报告候补的动作中选择报告对象的动作。优选选择部160从报告候补的动作中选择一个动作来作为报告对象的动作。此时，选择部160根据所检测出的动作与动作集122中所规定的动作的对应关系来改变报告对象的动作的选择方法。后述选择部160的选择处理的详细内容。

(输出部170)

参照图4，对输出部170(参照图2)进行说明。图4是表示所检测出的动作的输出方法的图。输出部170例如是看护人员用的便携式终端200。

如图4的具体例子(a)所示，便携式终端200对表示所检测出的动作的种类的消息230进行显示，并且发出警告音。

作为其它例子，便携式终端200在有多个报告对象的动作的情况下，以不同的显示方式显示这些动作。作为一个例子，显示方式根据显示尺寸而改变。例如如图4的具体例子(b)所示，假设作为报告对象的动作而检测到起床以及离床。在离床比起床重要的情况下，输出部170使表示离床的消息230的显示尺寸比表示起床的消息232的显示尺寸大。

作为另一例子，如图4的具体例子(c)所示，便携式终端200通过声音发出报告对象的动作。或便携式终端200也可以通过振动(vibration)将报告对象的动作向看护人员报告。

此外，图4的具体例子(a)～(c)所示的输出方法可以适当地组合，也可以单独使用。另外，输出部170并不限于便携式终端200。例如输出部170也可以包括用于存储报告对象的动作的服务器。服务器中所存储的输出结果例如用于掌握被看护人员跌倒、摔下时的状况。

[具体例子]

参照图5～图9，对选择部160(参照图2)的选择处理的详细进行说明。图5是表示选择处理的具体例子1－1的流程图。图6是表示选择处理的具体例子1－2的流程图。图7是表示选择处理的具体例子1－3的流程图。图8是表示优先度表126的内容的图。图9是表示选择处理的具体例子1－4的流程图。图10是表示选择处理的具体例子1－5的流程图。

图5～图7、图9、图10的处理通过作为选择部160发挥作用的cpu102(参照图2)执行程序来实现。或者处理的一部分或者全部也可以由电路元件其它的硬件来执行。

(具体例子1－1)

参照图5对选择部160的选择处理的具体例子1－1进行说明。在具体例子1－1中，选择部160选择在规定时间的期间所检测出的报告候补的动作中的最后检测出的动作来作为报告对象的动作。规定时间是指为了决定报告候补而待机的时间。即，选择部160从检测出第一个报告候补的动作开始计测规定时间，并将在该规定时间内所检测出的动作作为报告候补的动作。以下，也将该规定时间称为“待机时间”。动作检测装置100通过将在待机时间的期间所检测出的报告候补内的最后检测出的动作作为报告对象，能够仅报告一系列动作中的最新动作。其结果是，看护人员能够准确地掌握被看护人员的状态。

作为更具体的处理，在步骤s100中，选择部160判断是否检测出作为报告候补的动作a。选择部160在判断为检测出动作a的情况下(步骤s100：是)，将控制切换为步骤s110。在否的情况下(步骤s100：否)，选择部160再次执行步骤s100的处理。

在步骤s110中，选择部160参照动作集122(参照图3)来判断是否存在与动作a建立对应的动作。选择部160在判断为存在与动作a建立对应的动作的情况下(步骤s110：是)，将控制切换为步骤s120。在否的情况下(步骤s110：否)，选择部160将控制切换为步骤s132。

在步骤s120中，选择部160判断是否检测出与动作a建立对应的动作b。选择部160在判断为检测出动作b的情况下(步骤s120：是)，将控制切换为步骤s142。在否的情况下(步骤s120：否)，选择部160将控制切换为步骤s130。

在步骤s130中，选择部160判断在检测出动作a之后是否经过了规定时间。选择部160在判断为经过了规定时间的情况下(步骤s130：是)，将控制切换为步骤s132。在否的情况下(步骤s130：否)，选择部160使控制返回到步骤s120。

在步骤s132中，选择部160选择动作a来作为报告对象的动作。在步骤s142中，选择部160选择动作b来作为报告对象的动作。

列举更具体的例子，对图5所示的选择处理进行说明。例如设在动作集122中规定有动作组“端坐→离床”。在该情况下，动作“端坐”成为动作a，动作“离床”成为动作b。

在检测出动作“端坐”之后在规定时间内检测出动作“离床”的情况下，选择部160选择动作“离床”。在该情况下，输出部170(参照图2)将被看护人员的离床报告给看护人员。作为一个例子，输出部170作为便携式终端200(参照图1)，发出报警音、或启动振动功能、或在画面上显示消息“a先生/女士离床。”。

在检测出动作“端坐”之后在规定时间内未检测出动作“离床”的情况下，选择部160选择动作“端坐”。在该情况下，输出部170将被看护人员的端坐报告给看护人员。作为一个例子，输出部170作为便携式终端200，发出报警音、或启动振动功能、或在画面上显示消息“a先生/女士起身。”。

(具体例子1－2)

在上述的具体例子1－1中，所检测的报告候补的动作为两种的时间序列的动作组。与此相对，在具体例子1－2中，所检测的报告候补的动作为3种以上的时间序列的动作组。

以下，参照图6对按照具体例子1－2的选择处理进行说明。此外，图6所示的步骤s120、s140、s146、s148以外的处理如图5所说明的那样，不重复它们的说明。

在步骤s120中，选择部160判断是否检测出与动作a建立对应的动作b。选择部160在判断为检测出动作b的情况下(步骤s120：是)，将控制切换为步骤s140。在否的情况下(步骤s120：否)，选择部160将控制切换为步骤s130。

在步骤s140中，选择部160参照动作集122(参照图3)来判断是否存在与动作b建立对应的动作。选择部160在判断为存在与动作b建立对应的动作的情况下(步骤s140：是)，将控制切换为步骤s144。在否的情况下(步骤s140：否)，选择部160将控制切换为步骤s142。

在步骤s144中，选择部160用动作b置换动作a。在步骤s146中，选择部160用动作c置换动作b。在步骤s148中，选择部160重置时间计数。由此，步骤s130所示的规定时间被重置。

列举更具体的例子，对图6所示的选择处理进行说明。例如设在动作集122中规定有动作组“起床→端坐→离床”。在检测出动作“起床”的情况下，在初始状态下，动作“起床”成为动作a，动作“端坐”成为动作b，动作“离床”成为动作c。

在检测出动作“起床”之后在规定时间内检测出动作“端坐”的情况下，在步骤s144中，选择部160用动作“端坐”置换动作a。在步骤s146中，选择部160用动作“离床”置换动作b。之后，在检测出动作“端坐”之后在规定时间内检测出动作b的“离床”的情况下，选择部160选择动作“离床”来作为报告对象的动作(参照步骤s142)。在规定时间内未检测出动作b的“离床”的情况下，选择部160选择动作a的动作“端坐”来作为报告对象的动作(参照步骤s132)。

(具体例子1－3)

参照图7对选择部160的选择处理的具体例子1－3进行说明。在具体例子1－3中，选择部160选择在规定时间的期间所检测出的报告候补中的最初检测出的动作来作为报告对象的动作。通过报告最初所检测出的报告候补，从而缩短至报告给看护人员为止的时间。其结果是，看护人员能够立即赶到被看护人员的身边。另外，向看护人员的报告次数减少，减轻看护人员的负担。

此外，图7所示的步骤s100的处理如图5所说明的那样，所以不重复其说明。

在步骤s110中，选择部160参照动作集122来判断是否存在与动作a建立对应的动作。选择部160在判断为存在与动作a建立对应的动作的情况下(步骤s110：是)，将控制切换为步骤s113。在否的情况下(步骤s110：否)，选择部160将控制切换为步骤s132。

在步骤s113中，选择部160待机规定时间。由此，选择部160的选择处理被保留规定时间。选择部160即便在该规定时间的期间中检测出报告候补的动作，也忽略该动作。

在步骤s132中，选择部160选择动作a来作为报告对象的动作。

列举更具体的例子，对图7所示的选择处理进行说明。设在某个方面，检测出动作“端坐”。另外，设在动作集122中未对与动作“端坐”建立对应的动作进行规定。在该情况下，动作“端坐”成为动作a。选择部160选择动作“端坐”来作为报告对象的动作(参照步骤s132)。

设在另一方面，在动作集122中与动作“端坐”对应有动作“离床”。在该情况下，动作“端坐”成为动作a，动作“离床”成为动作b。选择部160在步骤s113中待机规定时间后(参照步骤s113)，在步骤s132中选择动作“端坐”来作为报告对象的动作(参照步骤s132)。

输出部170例如作为便携式终端200而输出所选择的动作a的“端坐”。作为输出方法的一个例子，便携式终端200发出报警音、或启动振动功能、或在画面上显示消息“a先生/女士起身。”。

(具体例子1－4)

参照图8以及图9对选择部160的选择处理的具体例子1－4进行说明。在具体例子1－4中，对检测对象的动作的各个预先对应有优先度。如图8所示，在优先度表126中规定有动作的种类与优先度的对应关系。

越是报告的必要性高的动作，对应越高的优先度。在图8的例子中，对动作“卧床”对应优先度“1”。对动作“起床”对应优先度“2”。对动作“端坐”对应优先度“3”。对动作“摔下”对应优先度“5”。对动作“离床”对应优先度“4”。

选择部160选择报告候补的动作中的优先度最高的动作来作为报告对象的动作。通过报告优先度高的动作，从而动作检测装置100能够优先地报告需要看护的被看护人员的动作。另外，向看护人员的报告次数减少，减轻看护人员的负担。

参照图9，更详细地对具体例子1－4中的选择处理进行说明。此外，图9所示的步骤s111以外的处理如图5所说明的那样，所以不重复这些处理的说明。

在步骤s111中，选择部160判断动作a的优先度是否高于动作b的优先度。选择部160在判断为动作a的优先度高于动作b的优先度的情况下(步骤s111：是)，将控制切换为步骤s132。在否的情况下(步骤s111：否)，选择部160将控制切换为步骤s120。

列举更具体的例子，对图9所示的选择处理进行说明。例如设在动作集122中规定有动作组“端坐→离床”。在该情况下，动作“端坐”成为动作a，动作“离床”成为动作b。在图8的例子中，动作“端坐”(动作a)的优先度为“3”，动作“离床”(动作b)的优先度为“4”。由于动作b的优先度高于动作a的优先度，所以选择部160将控制从步骤s111切换为步骤s120。

在规定时间内未检测出动作b的“离床”的情况下(参照步骤s120、s130)，选择部160选择动作a的“端坐”(参照步骤s132)。在规定时间内检测出动作b的“离床”的情况下(参照步骤s120、s130)，选择部160选择动作b的“离床”(参照步骤s142)。

(具体例子1－5)

参照图10对选择部160的选择处理的具体例子1－5进行说明。图10示出作为某个动作之后可能产生的动作而存在多个候补的情况下的选择处理。此外，图10所示的步骤s100、s110的处理如图5所说明的那样，所以不重复它们的说明。

设在动作集122(参照图3)中，与动作a对应有动作b以及动作c这两个。在该情况下，选择部160将控制从步骤s110切换为步骤s120。

在步骤s120中，选择部160判断是否检测出动作b。选择部160在判断为检测出动作b的情况下(步骤s120：是)，将控制切换为步骤s142。在否的情况下(步骤s120：否)，选择部160将控制切换为步骤s125。

在步骤s125中，选择部160判断是否检测出动作c。选择部160在判断为检测出动作c的情况下(步骤s125：是)，将控制切换为步骤s152。在否的情况下(步骤s125：否)，选择部160将控制切换为步骤s130。

在步骤s130中，选择部160判断在检测出动作a之后是否经过了规定时间。选择部160在判断为经过了规定时间的情况下(步骤s130：是)，将控制切换为步骤s132。在否的情况下(步骤s130：否)，选择部160使控制返回到步骤s120。

在步骤s132中，选择部160选择动作a来作为报告对象的动作。在步骤s142中，选择部160选择动作b来作为报告对象的动作。在步骤s152中，选择部160选择动作c来作为报告对象的动作。

列举更具体的例子，对图10所示的选择处理进行说明。例如设在动作集122中规定有动作组“端坐→离床”以及动作组“端坐→摔下”。在该情况下，动作“端坐”成为动作a，动作“离床”成为动作b，动作“摔下”成为动作c。

在检测出动作a的“端坐”之后在规定时间内未检测出动作b的“离床”以及动作c的“摔下”的情况下，选择部160选择动作a的“端坐”来作为报告对象的动作(参照步骤s132)。在该规定时间内检测出动作b的“离床”的情况下，选择部160选择动作“离床”来作为报告对象的动作(参照步骤s142)。在该规定时间内检测出动作c的“摔下”的情况下，选择部160选择动作“摔下”来作为报告对象的动作(参照步骤s152)。

在动作“离床”被选择部160选择的情况下，输出部170(参照图2)将被看护人员的离床报告给看护人员。作为一个例子，输出部170作为便携式终端200(参照图1)，发出报警音、或启动振动功能、或显示消息“a先生/女士离床。”。

在动作“摔下”被选择部160选择的情况下，输出部170将被看护人员的摔下报告给看护人员。作为一个例子，输出部170作为便携式终端200，发出报警音、或启动振动功能、或在画面上显示消息“a先生/女士从床上掉下来。请确认状况。”。

在动作“端坐”被选择部160选择的情况下，输出部170将被看护人员的端坐报告给看护人员。作为一个例子，输出部170作为便携式终端200，发出报警音、或启动振动功能、或在画面上显示消息“a先生/女士起身。”。

[动作检测系统300的硬件构成]

参照图11对动作检测系统300的硬件构成的一个例子进行说明。图11是表示动作检测系统300的主要的硬件构成的框图。如图11所示，动作检测系统300包括动作检测装置100和便携式终端200。动作检测装置100以及便携式终端200经由网络相互连接。以下，依次对动作检测装置100的硬件构成和便携式终端200的硬件构成进行说明。

(动作检测装置100的硬件构成)

如图11所示，动作检测装置100包括rom(readonlymemory：只读存储器)101、cpu102、ram(randomaccessmemory：随机存取存储器)103、网络i/f(接口)104、相机i/f105和存储装置120。

rom101储存操作系统、基于本实施方式的动作检测程序128等。cpu102通过执行操作系统、动作检测程序128等各种程序来控制动作检测装置100的动作。ram103作为工作存储器发挥作用，暂时储存动作检测程序128的执行所需的各种数据。

在网络i/f104上连接天线、nic(networkinterfacecard：网络接口卡)等通信设备。动作检测装置100经由该通信设备与其它通信终端之间收发数据。其它通信终端例如包括便携式终端200、服务器、其它终端等。动作检测装置100也可以构成为能够经由网络从服务器下载动作检测程序128。

相机i/f105是用于通过有线或者无线将相机50和动作检测装置100连接的接口。动作检测装置100经由相机i/f105从相机50获取图像。相机50例如包括网络相机或者能够拍摄被拍摄体的其它拍摄装置。相机50可以与动作检测装置100一体构成，也可以如图11所示那样与动作检测装置100分开构成。

存储装置120例如是硬盘、外置的存储装置等存储介质。作为一个例子，存储装置120储存动作集122、优先度表126、基于本实施方式的动作检测程序128等。

此外，动作检测程序128也可以不作为单体的程序来提供，而是编入至任意的程序的一部分来提供。在该情况下，与任意的程序相配合来实现本实施方式的处理。即便是不包括这样的一部分模块的程序，也不脱离本实施方式的动作检测装置100的主旨。并且，通过基于本实施方式的动作检测程序128所提供的功能的一部分或者全部也可以由专用硬件来实现。并且，也可以动作检测装置100和便携式终端200相配合来实现通过动作检测程序128所提供的功能的一部分或者全部。并且，也可以以至少一个服务器实现本实施方式的处理的、所谓的云服务那样的形态来构成动作检测装置100。

(便携式终端200的硬件构成)

继续参照图11对便携式终端200的硬件构成进行说明。便携式终端200例如是智能手机、平板终端、看护人员可携带的其它终端。如图11所示，便携式终端200包括rom201、cpu202、ram203、网络i/f204、显示器205和存储装置220。

rom201储存操作系统、由便携式终端200执行的控制程序等。cpu202通过执行操作系统、便携式终端200的控制程序等各种程序来控制便携式终端200的动作。ram203作为工作存储器发挥作用，暂时储存程序的执行所需的各种数据。

在网络i/f204上连接天线、nic(networkinterfacecard)等通信设备。便携式终端200经由该通信设备与其它通信终端之间收发数据。其它通信终端例如包括动作检测装置100、其它终端等。

显示器205例如是液晶显示器、有机el(electroluminescence：电致发光)显示器或者其它显示机器等。显示器205也可以构成为触摸面板。在检测出被看护人员的报告对象的动作的情况下，显示器205对检测出该动作这一情况进行显示。

存储装置220例如包括emmc(embeddedmultimediacard：嵌入式多媒体卡)等存储介质。emmc包括nand闪存和控制电路。存储装置220储存用于实现本实施方式的各种处理的程序等。

[小结]

综上所述，动作检测系统300在规定时间的期间检测出按照时间序列的顺序可能产生的一系列的动作组作为报告候补的动作的情况下，从报告候补的动作中选择报告对象的动作。由此，防止检测出的动作被逐次报告，减少向看护人员的报告次数。由于因报告次数减少而报告内容变得简洁，所以看护人员能够容易地掌握报告内容。并且，由于看护人员无需应对不必要的报告、紧急性低的报告，所以减轻看护人员的负担。

＜第二实施方式＞

[概要]

在第一实施方式中，为了检测报告候补而进行待机的时间(即，“待机时间”)为恒定。与此相对，第二实施方式的动作检测系统300根据所检测的报告候补的动作来改变该待机时间。

[动作检测系统300的处理]

参照图12对按照第二实施方式的动作检测系统300的动作检测处理进行说明。图12是表示按照第二实施方式的动作检测系统300的硬件构成和功能构成的框图。如图12所示，动作检测系统300具备获取部52、动作检测装置100和输出部170。动作检测装置100包括cpu102和存储装置120作为硬件构成。cpu102具有检测部150、保持部155和选择部160a作为功能构成。以下，依次对保持部155以及选择部160a进行说明。其它的构成如上述那样，所以对于这些构成不重复说明。

保持部155将由检测部150所检测出的报告候补的动作作为历史记录信息而保持恒定期间。该历史记录信息可以保持在cpu102的高速缓存中，也可以保持在存储装置120中。另外，保持部155可以仅将一个报告候补作为历史记录信息来保持，也可以将过去数次的报告候补作为历史记录信息来保持。

选择部160a在检测出报告候补的动作的情况下，根据该动作之前所检测出的动作(以下也称为“事前动作”。)来变更用于检测报告候补的待机时间。后述选择部160a的详细。

[具体例子2]

参照图13以及图14，更详细地说明图12所示的选择部160a的选择处理。图13是表示选择处理的具体例子2的流程图。图14是表示第二实施方式中的动作集122的内容的图。此外，图13所示的步骤s160、s162以外的处理如图10所说明的那样，所以不重复它们的说明。

在步骤s160中，选择部160a从保持部155(参照图12)获取紧接动作a之前所检测出的动作(即，事前动作)。

在步骤s162中，选择部160a根据获取到的事前动作来变更用于检测报告候补的待机时间。待机时间预先与检测对象的动作组的各个建立对应。

参照图14，更详细地对图13所示的选择处理进行说明。例如设在动作集122中规定有动作组“卧床→起床→端坐→离床”、动作组“卧床→端坐→离床”、和动作组“卧床→端坐→摔下”。

即，在动作“端坐”之前可能产生动作“卧床”或者动作“起床”。选择部160a在检测出动作“端坐”的情况下，根据在动作“端坐”之前所检测出的事前动作是动作“卧床”还是动作“起床”来变更待机时间。

例如设在动作“端坐”之前检测出动作“卧床”。选择部160a参照动作集122来获取包括动作“端坐”且事前动作为“卧床”的动作组。即，选择部160a获取动作组“卧床→端坐→离床”和动作组“卧床→端坐→摔下”。

在图14的例子中，对动作组“卧床→端坐→离床”的“端坐→离床”对应有待机时间“1秒”。另外，对动作组“卧床→端坐→摔下”的“端坐→摔下”对应有待机时间“1秒”。因此，选择部160a将待机时间变更为“1秒”。在对“端坐→摔下”以及“端坐→离床”对应有不同的待机时间的情况下，选择部160a以较短的待机时间更新当前的待机时间。

此外，动作检测系统300在检测到对应有待机时间“－1秒”的动作组的情况下，不报告该动作组中的之前所检测出的动作。

[小结]

综上所述，基于本实施方式的动作检测系统300根据事前所检测到的动作来变更用于检测报告候补的待机时间。由此，动作检测系统300能够立即报告摔下等紧急性高的动作。

＜第三实施方式＞

[概要]

在第一实施方式中，用于检测报告候补的待机时间不取决于报告对象的动作的输出单元而为恒定。与此相对，在第三实施方式中，该待机时间根据每个输出单元而不同。

[动作检测系统300的处理]

参照图15对按照第三实施方式的动作检测系统300的动作检测处理进行说明。图15是表示按照第三实施方式的动作检测系统300的硬件构成和功能构成的框图。如图15所示，动作检测系统300具备获取部52、动作检测装置100和输出部170。动作检测装置100包括cpu102和存储装置120作为硬件构成。cpu102具有检测部150、保持部155和选择部160b作为功能构成。以下对选择部160b以及输出部170进行说明。其它的构成如上述那样，所以对于这些构成不重复说明。

输出部170为了以不同的方法输出报告对象的动作而包括多个输出单元。例如输出部170包括输出单元170a和输出单元170b。选择部160b以按照每个输出单元而不同的待机时间选择报告候补的动作。即，选择部160b针对各个输出单元进行报告对象的动作的选择处理。

在某个方面，输出单元170a是用于向看护人员报告报告对象的动作的便携式终端200。输出单元170b是用于将报告对象的动作储存于内置的存储器的服务器(未图示)。选择部160b针对输出单元170a按每个第一规定时间选择报告候补的动作，针对输出单元170b按每个比第一规定时间短的第二规定时间选择报告候补的动作。

在另一方面，输出单元170a是用于向看护人员报告报告对象的动作的便携式终端200。该便携式终端200是为赶到被看护人员的身边的看护人员用而准备的终端。输出单元170b是用于向动作检测系统300的管理者报告报告对象的动作的便携式终端(未图示)。该便携式终端是为不必赶到被看护人员的身边的管理者用而准备的终端。或者，输出单元170b也可以是配置在管理各看护设施的中央监视中心等的固定终端。选择部160b针对输出单元170a按每个第一规定时间选择报告候补的动作，针对输出单元170b按每个比第一规定时间短的第二规定时间选择报告候补的动作。

[具体例子3]

参照图16，更详细地对图15所示的选择部160b的选择处理进行说明。图16是表示选择处理的具体例子3的流程图。

在步骤s100中，选择部160b判断是否检测出动作集122(参照图3)中所规定的动作a。选择部160b在判断为检测出动作a的情况下(步骤s100：是)，将控制切换为步骤s110。在否的情况下(步骤s100：否)，选择部160b再次执行步骤s100的处理。

在步骤s110中，选择部160b参照动作集122来判断是否存在与动作a建立对应的动作。选择部160b在判断为存在与动作a建立对应的动作的情况下(步骤s110：是)，将控制切换为步骤s120a、s120b。在否的情况下(步骤s110：否)，选择部160b将控制切换为步骤s195。

并列地执行步骤s120a、s120b以后的处理。在步骤s120a中，选择部160b判断是否检测出与动作a建立对应的动作b。选择部160b在判断为检测出动作b的情况下(步骤s120a：是)，将控制切换为步骤s191。在否的情况下(步骤s120a：否)，选择部160b将控制切换为步骤s130a。

在步骤s120b中，选择部160b判断是否检测出与动作a建立对应的动作b。选择部160b在判断为检测出动作b的情况下(步骤s120b：是)，将控制切换为步骤s194。在否的情况下(步骤s120b：否)，选择部160b将控制切换为步骤s130b。

在步骤s130a中，选择部160b判断在检测出动作a之后是否经过了规定时间tp(待机时间)。规定时间tp例如为10秒。选择部160b在判断为经过了规定时间tp的情况下(步骤s130a：是)，将控制切换为步骤s192。在否的情况下(步骤s130a：否)，选择部160b将控制返回到步骤s120a。

在步骤s130b中，选择部160b判断在检测出动作a之后是否经过了规定时间tq。规定时间tq与规定时间tp不同。规定时间tq例如为0.1秒。选择部160b在判断为经过了规定时间tq的情况下(步骤s130b：是)，将控制切换为步骤s193。在否的情况下(步骤s130b：否)，选择部160b将控制返回到步骤s120b。

在步骤s191中，选择部160b使输出单元170a输出动作b。在步骤s192中，选择部160b使输出单元170a输出动作a。在步骤s193中，选择部160b使输出单元170b输出动作a。在步骤s194中，选择部160b使输出单元170b输出动作b。在步骤s195中，选择部160b使输出单元170a、170b输出动作a。

列举更具体的例子对图16所示的选择处理进行说明。设在某个方面，在动作集122中规定有动作“端坐”，并且对该“端坐”未对应任何动作。在该情况下，选择部160b选择动作“端坐”，并且分别使输出单元170a以及输出单元170b输出动作“端坐”(参照步骤s195)。

设在另一方面，在动作集122中规定有动作组“端坐→离床”。在该情况下，动作“端坐”成为动作a，动作“离床”成为动作b。在规定时间tp内检测出动作b的“离床”的情况下，选择部160b选择动作b的“离床”，并且使输出单元170a输出动作“离床”(参照步骤s191)。在规定时间tp内未检测出动作b的“离床”的情况下，选择部160b选择动作a的“端坐”，并且使输出单元170a输出动作“端坐”(参照步骤s192)。

在规定时间tq内检测出动作b的“离床”的情况下，选择部160b选择动作b的“离床”，并且使输出单元170b输出动作“离床”(参照步骤s194)。在规定时间tq内未检测出动作b的“离床”的情况下，选择部160b选择动作a的“端坐”，并且使输出单元170b输出动作“端坐”(参照步骤s193)。

在输出单元170a输出动作“离床”的情况下，作为便携式终端200，发出报警音、或启动振动功能、或在画面上显示消息“a先生/女士离床。”。

在输出单元170a输出动作“端坐”的情况下，作为便携式终端200，发出报警音、或启动振动功能、或在画面上显示消息“a先生/女士起身。”。

在输出单元170b输出动作“离床”的情况下，作为服务器(未图示)，在画面上显示消息“a先生/女士离床。”。

在输出单元170b输出动作“端坐”的情况下，作为服务器，在画面上显示消息“a先生/女士起身。”。或者输出单元170b作为服务器，在将报告对象的动作的种类和检测出该动作的时间建立对应后，将该对应关系写入历史记录信息。

[小结]

综上所述，基于本实施方式的动作检测系统300以按每个输出单元而不同的待机时间来决定报告候补，并分别针对输出单元执行报告对象的动作的选择处理。由于能够与输出单元的利用目的相配合地设定待机时间，所以能够输出适合每个输出单元的动作选择结果。

＜第四实施方式＞

在第三实施方式中，检测报告候补的动作的待机时间按照每个输出单元而不同。与此相对，在第四实施方式中，待机时间按照每个监视的被看护人员而不同。该待机时间与被看护人员的健康状态、身体能力相配合地按照每个被看护人员而预先设定。由此，动作检测系统300能够不受被看护人员的健康状态、身体能力(例如动作速度等)影响而准确地检测被看护人员的动作。

应该认为本次公开的实施方式在全部方面仅为例示，不起限制作用。本发明的范围并不由上述的说明而由权利要求书示出，预期包括与权利要求书均等意思以及范围内的全部变更。

附图标记说明：10…被看护人员，11…看护人员，20…床，50…相机，52…获取部，100…动作检测装置，101、201…rom，102、202…cpu，103、203…ram，104、204…网络i/f，105…相机i/f，120、220…存储装置，122…动作集，126…优先度表，128…动作检测程序，150…检测部，155…保持部，160、160a、160b…选择部，170…输出部，170a、170b…输出单元，200…便携式终端，205…显示器，230、232…消息，300…动作检测系统。