信息处理装置、信息处理方法及程序的制作方法

文档序号:10598376阅读:157来源:国知局
信息处理装置、信息处理方法及程序的制作方法
【专利摘要】一种信息处理装置,当通过行为选择部(32)选择作为监护的对象的行为时,将对应于该选择的拍摄装置的配置位置的候选显示于画面(30)。其后,通过判断监护对象者与床的位置关系是否满足预定的条件,从而检测作为监护对象而被选择的行为。
【专利说明】
信息处理装置、信息处理方法及程序
技术领域
[0001] 本发明涉及信息处理装置、信息处理方法以及程序。
【背景技术】
[0002] 存在一种下述技术:通过从室内斜上方向室内下方拍摄到的图像的边界边来检测 从地面区域向床区域的人体移动,从而判断上床情况,并且,通过检测从床区域向地面区域 的人体移动,从而判断下床情况(专利文献1)。
[0003] 另外,存在一种下述技术:将用于判断躺在床上的患者进行起床举动的监护区域 设定为包含在床上就寝的患者的床的正上方区域,在表示从床的横向上被认为是患者的图 像区域占包含监护区域的拍摄图像的监护区域的大小的变动值小于表示被认为是患者的 图像区域占在患者躺在床上的状态下从摄像机得到的拍摄图像的监护区域的大小的初始 值的情况下,判断患者正在进行起床举动(专利文献2)。
[0004] 现有技术文献
[0005] 专利文献
[0006] 专利文献1:日本特开2002-230533号公报 [0007] 专利文献2:日本特开2011-005171号公报

【发明内容】

[0008] 发明要解决的技术问题
[0009] 近年来,住院病人、福利机构入住者、要看护者等监护对象者从床上跌倒、滚落的 事故、以及由痴呆症患者的来回走动所造成的事故处于逐年增加的趋势。作为防止这样的 事故的方法,例如,已开发出像专利文献1及2中所例示那样的、通过用设置于室内的拍摄装 置(摄像机)拍摄监护对象者并解析拍摄到的图像来检测起来、端坐、下床等监护对象者的 行为的监护系统。
[0010]在通过这样的监护系统来监护监护对象者在床上的行为的情况下,监护系统例如 根据监护对象者与床的相对位置关系来检测监护对象者的各行为。为此,如果由于进行监 护的环境(以下,也称为"监护环境")变化而导致拍摄装置相对于床的配置改变的话,则监 护系统有可能无法恰当地检测监护对象者的行为。
[0011] 为了避免这种事态,有必要恰当地进行监护系统的设置。然而,以前,这样的设置 一直由系统的管理者进行,缺乏有关监护系统的知识的使用者并不能够容易地进行监护系 统的设置。
[0012] 本发明在一方面上是考虑这样的问题而做出的,其目的在于,提供一种有可能容 易地进行监护系统的设置的技术。
[0013] 用于解决技术问题的方案
[0014] 本发明为解决上述技术问题而采用以下的构成。
[0015] 即,本发明的一方面所涉及的信息处理装置包括:行为选择部,从监护对象者的与 床关联的多个行为中接收针对该监护对象者的作为监护的对象的行为的选择;显示控制 部,对应于作为所述监护的对象而被选择的行为,使拍摄装置相对于所述床的配置位置的 候选显示于显示装置,该拍摄装置用于监护所述监护对象者在床上的行为;图像取得部,取 得通过所述拍摄装置拍摄的拍摄图像;以及行为检测部,通过判断所述拍摄图像内显现的 所述监护对象者与所述床的位置关系是否满足预定的条件,检测作为所述监护的对象而被 选择的行为。
[0016] 根据上述构成,通过拍摄装置来拍摄监护对象者在床上的行为。上述构成所涉及 的信息处理装置,利用通过拍摄装置取得的拍摄图像而检测监护对象者的行为。因此,当由 于监护环境变化而导致拍摄装置相对于床的配置改变时,上述构成所涉及的信息处理装置 就具有无法适当地检测监护对象者的行为的可能性。
[0017] 因此,上述构成所涉及的信息处理装置接收从监护对象者的与床关联的多个行为 中对于该监护对象者做出的、作为监护对象的行为的选择。而且,上述构成所涉及的信息处 理装置对应于作为监护的对象而被选择的行为,使用于对监护对象者在床上的行为进行监 护的拍摄装置相对于床的配置位置的候选显示于显示装置。
[0018] 由此,使用者只要按照显示装置上所显示的拍摄装置的配置位置的候选来配置拍 摄装置,则就能够将拍摄装置配置于可以适当地检测监护对象者的行为的位置。也就是说, 即使是缺乏有关监护系统的知识的使用者,只需按照显示于显示装置的拍摄装置的配置位 置的候选来配置拍摄装置,至少对于拍摄装置的配置,也能够恰当地设置监护系统。因此, 根据上述构成,容易地进行监护系统的设置变为可能。需要说明的是,监护对象者,就是通 过本发明而被监护在床上的行为的对象者,例如为住院病人、福利机构入住者、要看护者 等。
[0019] 另外,作为上述一方面所涉及的信息处理装置的另外的方式,所述显示控制部可 以除了所述拍摄装置相对于所述床的配置位置的候选之外,还使预先设定的、不推荐设置 所述拍摄装置的位置显示于显示装置。根据该构成,通过示出在拍摄装置的设置上不推荐 的位置,从而作为拍摄装置的配置位置的候选而被示出的拍摄装置的能配置的位置变得更 加明确。由此,能够降低使用者弄错拍摄装置的配置的可能性。
[0020] 另外,作为上述一方面所涉及的信息处理装置的另外的方式,所述显示控制部可 以在接收到完成所述拍摄装置的配置的情况之后,使通过所述拍摄装置取得的拍摄图像和 指示所述拍摄装置的朝向对准所述床的指示内容一起显示于所述显示装置。在该构成中, 使用者在不同的步骤中被指示摄像机的配置和摄像机的方向的调节。因此,使用者可以按 照顺序而恰当地进行摄像机的配置和摄像机的方向的调节。因此,根据该构成,即使是缺乏 有关监护系统的知识的使用者,也能够容易地进行监护系统的设置。
[0021] 另外,作为上述一方面所涉及的信息处理装置的另外的方式,所述图像取得部可 以取得包含深度信息的拍摄图像,该深度信息表示所述拍摄图像内的各像素的深度。而且, 作为所述拍摄图像内显现的所述监护对象者与所述床的位置关系是否满足预定的条件的 判断,所述行为检测部根据由所述深度信息所表示的所述拍摄图像内的各像素的深度,判 断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件,从而检 测作为所述监护的对象而被选择的行为。
[0022] 根据该构成,在通过拍摄装置而取得的拍摄图像中包括表示各像素的深度的深度 信息。各像素的深度表示该各像素中显现的对象的深度。因此,通过利用该深度信息而能够 推断监护对象者相对于床在真实空间中的位置关系,进而检测该监护对象者的行为。
[0023] 因此,上述构成所涉及的信息处理装置根据拍摄图像内的各像素的深度而判断监 护对象者与床区域在真实空间内的位置关系是否满足预定的条件。然后,上述构成所涉及 的信息处理装置根据该判断的结果而推断监护对象者与床在真实空间内的位置关系,检测 监护对象者的与床关联的行为。
[0024] 由此,能够考虑在真实空间内的状态而检测监护对象者的行为。但是,在利用深度 信息而推断监护对象者在真实空间内的状态的上述构成中,由于必须考虑所取得的深度信 息来配置拍摄装置,因此将拍摄装置配置于恰当的位置变得困难。因此,在利用深度信息来 推断监护对象者的行为的上述构成中,通过显示拍摄装置的配置位置的候选而促使使用者 将拍摄装置配置于恰当的位置、从而使监护系统的设置变容易的本技术变得重要。
[0025]另外,作为上述一方面所涉及的信息处理装置的另外的方式,上述信息处理装置 可以还包括设定部,所述设定部在接收到完成所述拍摄装置的配置的情况之后,接收所述 床的基准面的高度的指定,并将该指定的高度设定为所述床的基准面的高度。而且,可以在 所述设定部接收所述床的基准面的高度的指定时,所述显示控制部根据由所述深度信息表 示的所述拍摄图像内的各像素的深度,在所述拍摄图像上明示显现有位于作为所述床的基 准面的高度而指定的高度上的对象的区域,由此使所取得的所述拍摄图像显示于显示装 置;所述行为检测部可以判断在真实空间内的所述床的高度方向上的所述床的基准面与所 述监护对象者的位置关系是否满足预定的条件,从而检测作为所述监护的对象而被选择的 行为。
[0026] 在上述构成中,作为用于确定真实空间内的床的位置的关于床的位置的设定,进 行床的基准面的高度的设定。在进行该床基准面高度设定的期间,上述构成所涉及的信息 处理装置在显示于显示装置的拍摄图像上明示拍摄有位于由使用者已指定的高度上的对 象的区域。因此,该信息处理装置的使用者能够一边在显示于显示装置的拍摄图像上确认 指定为床的基准面的区域的高度,一边设定床的基准面的高度。
[0027] 因此,根据上述构成,即使是缺乏有关监护系统的知识的使用者,也能容易地进行 关于成为检测监护对象者的行为的基准的床的位置的设定,从而能够容易地进行监护系统 的设置。
[0028]另外,作为上述一方面所涉及的信息处理装置的另外的方式,上述信息处理装置 可以还包括前景提取部,该前景提取部根据被设定作为所述拍摄图像的背景的背景图像与 所述拍摄图像的差分而提取所述拍摄图像的前景区域。而且,所述行为检测部可以将根据 所述前景区域内的各像素的深度而确定的、所述前景区域显现的对象在真实空间内的位置 用作所述监护对象者的位置,判断在真实空间内的所述床的高度方向上的所述床的基准面 与所述监护对象者的位置关系是否满足预定的条件,从而检测作为所述监护的对象而被选 择的行为。
[0029]根据该构成,通过提取背景图像与拍摄图像的差分而确定拍摄图像的前景区域。 该前景区域是从背景图像上发生了变化的区域。因此,在前景区域中,作为与监护对象者关 联的像,包括由于监护对象者活动而发生了变化的区域、换而言之,存在监护对象者的身体 部位中在动的部位(以下,也称为"动作部位")的区域。因此,能通过参照由深度信息表示的 前景区域内的各像素的深度而确定监护对象者的动作部位在真实空间内的位置。
[0030] 因此,上述构成所涉及的信息处理装置将根据前景区域内的各像素的深度而确定 的拍到前景区域的对象在真实空间内的位置用作监护对象者的位置,并判断床的基准面与 监护对象者的位置关系是否满足规定的条件。即,用于检测监护对象者的行为的规定条件 是假设前景区域与监护对象者的行为关联而设定的。上述构成所涉及的信息处理装置根据 在真实空间内监护对象者的动作部位相对于床的基准面存在于哪个高度来检测监护对象 者的行为。
[0031] 在此,能够以背景图像与拍摄图像的差分来提取前景区域,因此即使不利用高级 的图像处理也能确定。因此,根据上述构成,能够采用简易的方法来检测监护对象者的行 为。
[0032] 另外,作为上述一方面所涉及的信息处理装置的另外的方式,所述行为选择部接 收从包括在所述床的端部附近或外侧进行的所述监护对象者的预定行为的、所述监护对象 者的与床关联的多个行为中接收针对所述监护对象者的作为监护的对象的行为的选择。另 外,所述设定部可以作为所述床的基准面的高度而接收床上表面的高度的指定,并将该指 定的高度设定为所述床上表面的高度;在作为所述监护的对象而被选择的行为中包含有所 述预定行为的情况下,所述设定部在设定所述床上表面的高度之后,还为了确定所述床上 表面的范围,在所述拍摄图像内接收设定于所述床上表面内的基准点的位置和所述床的方 向的指定,并根据所指定的所述基准点的位置及所述床的方向设定所述床上表面在真实空 间内的范围。而且,所述行为检测部可以判断所设定的所述床的上表面与所述监护对象者 在所述真实空间内的位置关系是否满足预定的条件来检测作为所述监护的对象而被选择 的所述预定行为。
[0033] 根据该构成,只需指定基准点的位置和床的方向即可指定床上表面的范围,因此 能够通过简易的设置来设定床上表面的范围。并且,根据该构成,由于设定床上表面的范 围,因此能够提高在床的端部附近或外侧进行的预定行为的检测精度。此外,在床的端部附 近或外侧进行的监护对象者的预定行为是例如端坐、越过护栏、下床等。在此,端坐是指监 护对象者正坐在床头的状态。在此,越过护栏是指监护对象者正在从床护栏上探出身的状 〇
[0034] 另外,作为上述一方面所涉及的信息处理装置的另外的方式,所述行为选择部接 收从包括在所述床的端部附近或外侧进行的所述监护对象者的预定行为的、所述监护对象 者的与床关联的多个行为中接收针对所述监护对象者的作为监护的对象的行为的选择。另 外,所述设定部作为所述床的基准面的高度而接收床上表面的高度的指定,并将该指定的 高度设定为所述床上表面的高度;并且在作为所述监护的对象而被选择的行为中包含有所 述预定行为的情况下,所述设定部在设定所述床上表面的高度之后,还在所述拍摄图像内 接收用于规定床上表面的范围的四个角中两个角的位置的指定,并根据所指定的该两个角 的位置设定所述床上表面在真实空间内的范围。而且,所述行为检测部可以判断所设定的 所述床的上表面与所述监护对象者在所述真实空间内的位置关系是否满足预定的条件,从 而来检测作为所述监护的对象而被选择的所述预定行为。根据该构成,只需指定床上表面 的两个角的位置即可指定床上表面的范围,因此能够通过简易的设置来设定床上表面的范 围。并且,根据该构成,由于设定床上表面的范围,因此能够提高在床的端部附近或外侧进 行的预定行为的检测精度。
[0035]另外,作为上述一方面所涉及的信息处理装置的另外的方式,针对设定的所述床 上表面的范围,所述设定部判断根据为了检测作为所述监护的对象而被选择的所述预定行 为而设定的所述预定的条件所确定的检测区域是否显现在所述拍摄图像内,在判断为作为 所述监护的对象而被选择的所述预定行为的检测区域未显现在所述拍摄图像内的情况下, 输出警告信息,该警告信息表示可能无法正常进行作为所述监护的对象而被选择的所述预 定行为的检测。根据该构成,能够对作为监护的对象而已选择的行为防止监护系统的设定 的错误。
[0036]另外,作为上述一方面所涉及的信息处理装置的另外的方式,上述信息处理装置 可以还包括前景提取部,该前景提取部根据被设定作为所述拍摄图像的背景的背景图像与 所述拍摄图像的差分而提取所述拍摄图像的前景区域。而且,所述行为检测部可以将根据 所述前景区域内的各像素的深度确定的、所述前景区域显现的对象在真实空间内的位置用 作所述监护对象者的位置,判断所述床上表面与所述监护对象者在所述真实空间内的位置 关系是否满足预定的条件,从而检测作为所述监护的对象而被选择的所述预定行为。根据 该构成,能够采用简易的方法来检测监护对象者的行为。
[0037]另外,作为上述一方面所涉及的信息处理装置的另外的方式,上述信息处理装置 可以还包括未完成通知部,在通过所述设定部进行的设定在预定时间内未完成的情况下, 该未完成通知部进行用于告知通过所述设定部进行的设定尚未完成的通知。根据该构成, 可以防止在关于床的位置的设定的途中对监护系统置之不理。
[0038]需要说明的是,作为上述各方式所涉及的信息处理装置的另外的方式,可以为实 现以上的各构成的信息处理系统,也可以为信息处理方法,也可以为程序,也可以为记录有 这样的程序的能被计算机及其它装置、机器等读取的存储介质。在此,计算机等可读取的记 录介质是通过电、磁、光学、机械或者化学作用而累积程序等信息的介质。另外,信息处理系 统可以通过一个或多个信息处理装置来实现。
[0039]例如,本发明的一方面所涉及的信息处理方法是一种由计算机执行如下步骤的信 息处理方法:从监护对象者的与床关联的多个行为中接收针对该监护对象者的作为监护的 对象的行为的选择;对应于作为所述监护的对象而被选择的行为,使拍摄装置相对于所述 床的配置位置的候选显示于显示装置,该拍摄装置用于监护所述监护对象者在床上的行 为;取得通过所述拍摄装置拍摄的拍摄图像;以及通过判断所述拍摄图像内显现的所述监 护对象者与所述床的位置关系是否满足预定的条件,检测作为所述监护的对象而被选择的 行为。
[0040] 另外,例如,本发明的一方面所涉及的程序是一种用于使计算机执行如下步骤的 程序:从监护对象者的与床关联的多个行为中接收针对该监护对象者的作为监护的对象的 行为的选择;对应于作为所述监护的对象而被选择的行为,使拍摄装置相对于所述床的配 置位置的候选显示于显示装置,该拍摄装置用于监护所述监护对象者在床上的行为;取得 通过所述拍摄装置拍摄的拍摄图像;以及通过判断所述拍摄图像内显现的所述监护对象者 与所述床的位置关系是否满足预定的条件,检测作为所述监护的对象而被选择的行为。
[0041] 发明的效果
[0042] 根据本发明,使容易地进行监护系统的设置变为可能。
【附图说明】
[0043]图1示出应用本发明的情形的一个例子。
[0044]图2示出根据各像素的深度而确定了该各像素的灰度值的拍摄图像的一个例子。
[0045] 图3例示实施方式所涉及的信息处理装置的硬件构成。
[0046] 图4例示实施方式所涉及的深度。
[0047] 图5例示实施方式所涉及的功能构成。
[0048]图6例示在本实施方式中当进行关于床的位置的设定时的信息处理装置的处理步 骤。
[0049] 图7例示接收作为检测对象的行为的选择的画面。
[0050] 图8例示在下床已被选择为作为检测对象的行为的情况下显示于显示装置的摄像 机的配置位置的候选。
[0051] 图9例示接收床上表面高度的指定的画面。
[0052]图10例不拍摄图像内的坐标关系。
[0053]图11例示拍摄图像的任意的点(像素)与摄像机在真实空间内的位置关系。
[0054]图12示意性例示在拍摄图像内以不同的显示形式显示的区域。
[0055] 图13例示接收床上表面的范围的指定的画面。
[0056] 图14例示拍摄图像上的指定点与床上表面的基准点的位置关系。
[0057]图15例示摄像机与基准点的位置关系。
[0058]图16例示摄像机与基准点的位置关系。
[0059] 图17例示摄像机坐标系与床坐标系之间的关系。
[0060] 图18例示在本实施方式中当检测监护对象者的行为时的信息处理装置的处理步 骤。
[0061] 图19例示实施方式所涉及的信息处理装置所取得的拍摄图像。
[0062]图20例示根据拍摄图像中所包括的深度信息而确定的拍摄范围的被拍摄体的三 维分布。
[0063] 图21例示从拍摄图像中提取的前景区域的三维分布。
[0064] 图22示意性例示在本实施方式中用于检测起来的检测区域。
[0065] 图23示意性例示在本实施方式中用于检测下床的检测区域。
[0066]图24示意性例示在本实施方式中用于检测端坐的检测区域。
[0067] 图25例示区域的扩展状态与弥散的关系。
[0068] 图26示出接收床上表面的范围的指定的画面的其它例子。
【具体实施方式】
[0069] 以下,基于【附图说明】本发明的一个方面所涉及的实施方式(以下也表述为"本实施 方式")。不过,以下说明的本实施方式的所有方面只不过是本发明的例示。当然在不脱离本 发明的范围的情况下能够进行各种改良和变形。即,在本发明的实施中,可以适当采用与实 施方式对应的具体的构成。
[0070] 需要说明的是,在本实施方式中,利用自然语言说明出现的数据,更具体来讲,由 计算机能够识别的伪语言、命令、参数、机器语言等指定。
[0071] §1应用情景例
[0072] 首先,使用图1来对应用本发明的情景进行说明。图1示意性示出应用本发明的情 景的一个例子。在本实施方式中,设想了在医疗机构或者护理机构中,以住院病人或福利机 构入住者作为监护对象者而被监护行为的情景。进行监护对象者的监护的人(以下,也称为 "使用者")利用包括信息处理装置1和摄像机2的监护系统而进行监护对象者在床上的行为 的监护。
[0073] 本实施方式所涉及的监护系统通过利用摄像机2拍摄监护对象者的行为而取得显 现有监护对象者和床的拍摄图像3。然后,该监护系统通过信息处理装置1解析通过摄像机2 取得的拍摄图像3而检测监护对象者的行为。
[0074]摄像机2相当于本发明的拍摄装置,为了对监护对象者在床上的行为进行监护而 设置。本实施方式所涉及的摄像机2包括测量被拍摄体的深度的深度传感器,能够取得对应 于拍摄图像内的各像素的深度。因此,正如在图1中例示的,通过该摄像机2取得的拍摄图像 3包括表示对每像素获得的深度的深度信息。
[0075] 包括该深度信息的拍摄图像3既可以是表示拍摄范围内的被拍摄体的深度的数 据,也可以为例如拍摄范围内的被拍摄体的深度分布成二维状的数据(例如深度图)。另外, 拍摄图像3可以在包括深度信息的同时,也可包括RGB图像。进一步的,拍摄图像3既可以为 动画图像,也可以为静止图像。
[0076] 图2示出这样的拍摄图像3的一个例子。在图2中例示的拍摄图像3是各像素的灰度 值根据该各像素的深度而确定的图像。越黑的像素表示靠摄像机2越近。另一方面,越白的 像素表示离摄像机2越远。根据该深度信息,能够确定拍摄范围内的被拍摄体在真实空间 (三维空间)内的位置。
[0077] 更详细而言,被拍摄体的深度相对于该被拍摄体的表面取得。于是,通过使用拍摄 图像3中包括的深度信息,从而能够确定摄像机2中显现的被拍摄体表面在真实空间内的位 置。在本实施方式中,通过摄像机2拍摄到的拍摄图像3被发送至信息处理装置1。然后,信息 处理装置1根据所取得的拍摄图像3推断监护对象者的行为。
[0078] 本实施方式所涉及的信息处理装置1为了根据所取得的拍摄图像3推断监护对象 者的行为,提取被设定作为该拍摄图像3的背景的背景图像与拍摄图像3的差分,从而确定 拍摄图像3内的前景区域。被确定的前景区域是从背景图像上发生了变化的区域,因此包括 监护对象者的动作部位存在的区域。因此,信息处理装置1利用前景区域作为与监护对象者 关联的图像来检测监护对象者的行为。
[0079]例如,当监护对象者在床上起来时,如在图1中例示的,显现有关于起来的部位(在 图1中上半身)的区域作为前景区域而被提取。通过参照如此提取的前景区域内的各像素的 深度,从而能确定在真实空间内的监护对象者的动作部位位置。
[0080] 监护对象者在床上的行为能根据如此确定的动作部位与床的位置关系而推断。例 如,如在图1中例示的,当监护对象者的动作部位在床的上表面的上方被检测到的情况下, 能够推断,监护对象者在床上正在进行起来的动作。另外,例如,当监护对象者的动作部位 在床的侧部附近被检测到的情况下,能够推断,监护对象者正在想要变为端坐的状态。
[0081] 因此,本实施方式所涉及的信息处理装置1根据前景区域显现的对象与床在真实 空间内的位置关系而检测监护对象者的行为。也就是说,信息处理装置1将根据前景区域内 的各像素的深度所确定的、前景区域显现的对象在真实空间内的位置作为监护对象者的位 置而利用。然后,信息处理装置1根据在真实空间内监护对象者的动作部位相对于床存在于 哪里而检测监护对象者的行为。因此,当由于监护环境变化而导致摄像机2相对于床的配置 改变时,本实施方式所涉及的信息处理装置1就具有无法恰当地检测监护对象者的行为的 可能性。
[0082]为了处理该问题,本实施方式所涉及的信息处理装置1接收从监护对象者的与床 关联的多个行为中进行的关于该监护对象者作为监护的对象的行为的选择。然后,信息处 理装置1对应于作为监护的对象已被选择的行为,在显示装置上显示相对于床的摄像机2的 配置位置的候选。
[0083]由此,使用者只要按照显示装置上所显示的摄像机2的配置位置的候选来配置摄 像机2,就能够将摄像机2配置于可以恰当地检测监护对象者的行为的位置。也就是说,即使 是缺乏有关监护系统的知识的使用者,只需按照显示装置上所显示的摄像机2的配置位置 的候选来配置摄像机2,也可恰当地设置监护系统。因此,根据本实施方式,容易地进行监护 系统的设置成为可能。
[0084] 此外,在图1中,摄像机2被配置于床的长度方向的前方。即,图1例示了从侧面观察 摄像机2的情景,图1的上下方向相当于床的高度方向。另外,图1的左右方向相当于床的长 度方向,垂直于图1的纸面的方向相当于床的宽度方向。但是,摄像机2的可配置的位置可以 不限定于这样的位置,可以根据实施的方式而适当选择。使用者通过按照显示装置上的显 示内容来配置摄像机,从而能够将摄像机2配置于这样适当地选择的摄像机2的可配置的位 置中的恰当的位置,从而对作为监护的对象的已选择的行为进行检测。
[0085] 需要注意的是,在本实施方式所涉及的信息处理装置1中,进行用于确定真实空间 内的床的位置的、床的基准面的设定,以便能够掌握动作部位与床的位置关系。在本实施方 式中,作为该床的基准面,采用了床的上表面。床上表面为床的垂直方向上侧的面,例如为 床垫的上表面。床的基准面既可以为这样的床上表面,也可以为其它面。床的基准面可以根 据实施的方式而适当决定。此外,床的基准面不局限于存在于床上的物理的面,也可以为假 想的面。
[0086] §2构成例
[0087]〈硬件构成例〉
[0088]接着,使用图3来说明信息处理装置1的硬件构成。图3例示本实施方式所涉及的信 息处理装置1的硬件构成。如在图3中所例示的,信息处理装置1是电连接有如下部分的计算 机:包括CPU、RAM(Random Access Memory:随机存取存储器)、R0M(Read Only Memory:只读 存储器)等的控制部11;存储在控制部11中执行的程序5等的存储部12;用于进行图像的显 示和输入的触摸面板显示器13;用于输出声音的扬声器14;用于与外部装置连接的外部接 口 15;用于经由网络而进行通信的通信接口 16;以及用于读取存储介质6中所存储的程序的 驱动器17。但是,在图3中,通信接口及外部接口分别被记作为"通信I/T'及"外部I/T'。 [0089]需要注意的是,关于信息处理装置1的具体的硬件构成,能够根据实施方式而适当 进行构成要素的省略、置换以及追加。例如,控制部11可以包括多个处理器。另外,例如,触 摸面板显示器13可以被替换为各自分别独立地被连接的输入装置及显示装置。
[0090] 信息处理装置1可以包括多个外部接口 15,进而与多个外部装置连接。在本实施方 式中,信息处理装置1经由外部接口 15而与摄像机2连接。正如上所述的,本实施方式所涉及 的摄像机2包括深度传感器。该深度传感器的种类及测量方式可以根据实施的方式而适当 选择。
[0091] 但是,对监护对象者进行监护的场所(例如医疗机构的病房)为监护对象者的床放 置的场所,换而言之,是监护对象者就寝的场所。因此,对监护对象者进行监护的场所多为 暗的场所。因此,为了不受拍摄场所的明亮度的影响而取得深度,优选的是,使用基于红外 线的照射测量深度的深度传感器。需要说明的是,作为包括红外线深度传感器的较廉价的 拍摄装置,能够列举微软公司的Kinect、ASUS公司的Xt ion、PrimeSense公司的CARMINE。
[0092] 另外,摄像机2可以为立体摄像机,以便能确定拍摄范围内的被拍摄体的深度。立 体摄像机由于从多个不同的方向上对拍摄范围内的被拍摄体拍摄,因此能够记录该被拍摄 体的深度。摄像机2只要能够确定拍摄范围内的被拍摄体的深度,既可以置换为深度传感器 单体,也可以不作特别限制。
[0093] 在此,使用图4来详细地说明通过本实施方式所涉及的深度传感器测量的深度。图 4示出能作为本实施方式所涉及的深度看待的距离的一个例子。该深度表现被拍摄体的深 度。如在图4中所例示的,被拍摄体的深度,例如,既可以用摄像机与对象物之间的直线距离 A来表现,也可以用从水平轴向摄像机的被拍摄体垂下的垂线的距离B来体现。即,本实施方 式所涉及的深度既可以为距离A,也可以为距离B。在本实施方式中,以距离B作为深度来处 理。但是,距离A与距离B能通过使用例如勾股定理等而相互转换。因此,使用了距离B的以后 的说明能直接应用于距离A。
[0094]另外,如在图3中所例示的,信息处理装置1经由外部接口 15而连接于护士呼叫器。 这样,信息处理装置1可以通过经由外部接口 15而与护士呼叫器等已设置于福利机构中的 设备连接,从而与该设备协作而进行通知,该通知用于告知具有危险迫近监护对象者的预 兆。
[0095]需要说明的是,程序5是使信息处理装置1执行后述的动作中所包括的处理的程 序,相当于本发明的"程序"。该程序5可以被记录在存储介质6中。存储介质6是以计算机及 其它装置、机器等能读取所记录的程序等信息的方式通过电、磁、光学、机械或化学作用来 累积该程序等信息的介质。存储介质6相当于本发明的"存储介质"。此外,图3例示了作为存 储介质6的一例的⑶(Compact Disk:高密度光盘)、DVD(Digital Versatile Disk:数字多 用光盘)等盘式存储介质。然而,存储介质6的种类并非限定于盘式,也可以为盘式以外。作 为盘式以外的存储介质,能够列举例如闪存等半导体存储器。
[0096]另外,作为信息处理装置1,例如除被设计成专门用于所提供的服务的装置之外, 还可以使用PC(Personal Computer:个人计算机)、平板终端等通用的装置。另外,信息处理 装置1可以通过一个或者多个计算机来安装。
[0097]〈功能构成例〉
[0098]接着,使用图5来说明信息处理装置1的功能构成。图5例示本实施方式所涉及的信 息处理装置1的功能构成。本实施方式涉及的信息处理装置1所包括的控制部11将存储于存 储部12中的程序5展开至RAM中。然后,控制部11通过CPU来解释和执行在RAM中展开的程序 5,从而控制各构成要素。由此,本实施方式所涉及的信息处理装置1作为包括图像取得部 21、前景提取部22、行为检测部23、设定部24、显示控制部25、行为选择部26、危险预兆通知 部27、以及未完成通知部28的计算机发挥作用。
[0099]图像取得部21取得通过为了监护监护对象者在床上的行为而设置的摄像机2拍摄 到的拍摄图像3,该拍摄图像3包括表示各像素的深度的深度信息。前景提取部22根据被设 定作为拍摄图像3的背景的背景图像与该拍摄图像3的差分来提取拍摄图像3的前景区域。 行为检测部23根据由深度信息示出的前景区域内的各像素的深度而判断前景区域显现的 对象与床在真实空间内的位置关系是否满足预定的条件。然后,行为检测部23根据该判断 的结果而检测监护对象者的与床关联的行为。
[0100]另外,设定部24接收来自使用者的输入而进行关于作为检测监护对象者的行为的 基准的床的基准面的设定。具体而言,设定部24接收床的基准面的高度的指定并将已指定 的高度设定为床的基准面的高度。显示控制部25控制通过触摸面板显示器13进行的图像显 示。触摸面板显示器13相当于本发明的显示装置。
[0101] 显示控制部25控制触摸面板显示器13的画面显示。显示控制部25对应于例如通过 后述的行为选择部26而已被选择为监护对象的行为,使摄像机2相对于床的配置位置的候 选显示于触摸面板显示器13。另外,显示控制部25例如当设定部24接收床的基准面的高度 的指定时,根据由深度信息示出的拍摄图像3内的各像素的深度,在拍摄图像3上明示显现 有位于使用者已指定的高度上的对象的区域,以此方式使已取得的拍摄图像3显示于触摸 面板显示器13。
[0102]行为选择部26接收从监护对象者的与床关联的多个行为中进行的、关于监护对象 者而作为监护的对象的、即上述行为检测部23作为检测对象的行为的选择。在本实施方式 中,作为与床关联的多个行为,能够例示在床上起来、在床上的端坐、从床的护栏探出身(越 过护栏)、以及从床上下床。
[0103] 此外,在监护对象者的与床关联的多个行为中,可以包括在床的端部附近或外侧 进行的监护对象者的预定行为。在本实施方式中,在床上的端坐、从床的护栏上探出身(越 过护栏)、以及从床上下床相当于本发明的"预定行为"。
[0104] 并且,在针对监护对象者而检测到的行为为显示出危险迫近监护对象者的预兆的 行为的情况下,危险预兆通知部27进行用于告知该预兆的通知。在设定部24进行的关于床 的基准面的设定未在规定时间内完成的情况下,未完成通知部28进行用于告知设定部24的 设定尚未完成的通知。需要注意的是,例如向监护监护对象者的监护者进行这些通知。监护 者例如为护士、福利机构职员等。在本实施方式中,这些通知既可以通过护士呼叫器来进 行,也可以通过扬声器14来进行。
[0105]需要注意的是,关于各功能,将在后述的动作例中详细地说明。这里,在本实施方 式中,说明了这些功能均通过通用的CPU来实现的例子。但是,这些功能的一部分或全部也 可以通过一个或多个专用的处理器来实现。并且,关于信息处理装置1的功能构成,也可以 根据实施方式而适当地进行功能的省略、置换以及追加。例如,也可以省略行为选择部26、 危险预兆通知部27、以及未完成通知部28。
[0106] §3动作例
[0107][监护系统的设置]
[0108]首先,使用图6来对关于监护系统的设置的处理进行说明。图6例示在进行关于床 的位置的设定时的信息处理装置1的处理步骤。该关于床的位置的设定的处理可以在任何 时间上执行,例如,在开始监护对象者的监护之前启动了程序5时执行。此外,在以下说明的 处理步骤只不过是一个例子,各处理可以尽可能地变更。另外,关于在以下说明的处理步 骤,能根据实施方式而适当进行步骤的省略、置换以及追加。
[0109] (步骤 S101 及步骤 Sl〇2)
[0110] 在步骤S101中,控制部11作为行为选择部26发挥作用,接收从监护对象者在床上 进行的多个行为中进行的作为检测对象的行为的选择。然后,在步骤S102中,控制部11作为 显示控制部25发挥作用,对应于已被选择为检测对象的一个或多个行为而将摄像机2相对 于床的配置位置的候选显示于触摸面板显示器13。使用图7及图8来说明这些处理。 图7例示当接收作为检测对象的行为的选择时在触摸面板显示器13上所显示的画 面30。控制部11为了在步骤S101中接收作为检测对象的行为的选择,将画面30显示于触摸 面板显示器13。画面30包括示出本处理所涉及的设定的处理阶段的区域31、接收作为检测 对象的行为的选择的区域32、以及示出摄像机2的配置位置的候选的区域33。
[0112] 在本实施方式涉及的画面30中,针对作为检测对象的行为的候选,例示了四种行 为。具体而言,针对作为检测对象的行为的候选,例示了在床上起来、从床上下床、在床上的 端坐、以及从床的护栏上探出身(越过护栏)。下面,将在床上起来也单纯称为"起来",将从 床上下床也单纯称为"下床",将在床上的端坐也单纯称为"端坐",将从床的护栏上探出身 也单纯称为"越过护栏"。在区域32上设有对应于各个行为的四个按钮321~324。使用者通 过操作按钮321~324而选择一个或多个作为检测对象的行为。
[0113] 当按钮321~324中的任意按钮被操作而选择了作为检测对象的行为时,控制部11 作为显示控制部25而发挥作用,更新区域33上显示的内容,以便示出对应于所选择的一个 或多个行为的摄像机2的配置位置的候选。摄像机2的配置位置的候选是根据信息处理装置 1是否能够通过配置于那个位置上的摄像机所拍摄的拍摄图像3来检测对象的行为而预先 确定的。示出这样的摄像机2的配置位置的候选的理由如下。
[0114] 本实施方式所涉及的信息处理装置1通过解析利用摄像机2取得的拍摄图像3而推 断监护对象者与床的位置关系,从而检测监护对象者的行为。因此,在与对象的行为的检测 关联的区域未显现在拍摄图像3中的情况下,信息处理装置1就不能检测该对象的行为。因 此,监护系统的使用者希望掌握按对于检测对象的每个行为而适于摄像机2的配置的位置。
[0115] 然而,监护系统的使用者未必能够将这样的位置全部掌握,因此具有摄像机2被误 配置于与对象的行为的检测关联的区域不被显现的位置的可能性。如果摄像机2被误配置 于与对象的行为的检测关联的区域不能被显现的位置,信息处理装置1就无法检测那个对 象的行为,导致监护系统的监护产生不周。
[0116] 因此,在本实施方式中,对应作为检测对象的每个行为预先确定适于摄像机2的配 置的位置,并预先使关于那样的摄像机位置的候选的信息保存于信息处理装置1中。然后, 信息处理装置1对应于已选择的一个或多个行为而显示能拍摄与对象的行为的检测关联的 区域的摄像机2的配置位置的候选,从而向使用者指示摄像机2的配置位置。
[0117] 由此,在本实施方式中,即使是缺乏有关监护系统的知识的使用者,只需按照触摸 面板显示器13上所显示的摄像机2的配置位置的候选来配置摄像机2,也可进行监护系统的 设置。另外,通过如此地指示摄像机2的配置位置,从而能够抑止由使用者产生的摄像机2的 配置的错误,能够降低在监护对象者的监护上产生不完备的可能性。即,根据本实施方式所 涉及的监护系统,即使是缺乏有关监护系统的知识的使用者,也能容易地将摄像机2配置于 恰当的位置。
[0118] 另外,在本实施方式中,通过后述的各种设定,摄像机2的配置的自由度变高,能够 使监护系统适应于进行监护的各环境。然而,摄像机2的配置的自由度高,相应地,使用者将 摄像机2配置于错误的位置上的可能性变高。对此,在本实施方式中,由于显示摄像机2的配 置位置的候选而向使用者提示摄像机2的配置,因此能够防止使用者将摄像机2配置于错误 的位置。即,在像本实施方式这样的摄像机2的配置的自由度高的监护系统中,由于显示摄 像机2的配置位置的候选,因而能够特别地期待防止使用者将摄像机2配置于错误的位置的 效果。
[0119] 需要注意的是,在本实施方式中,作为摄像机2的配置位置的候选,摄像机2容易拍 摄与对象的行为的检测关联的区域的位置、换言之在摄像机2的设置上推荐的位置用?符 号示出。与此相反,摄像机2难以拍摄与对象的行为的检测关联的区域的位置、换言之在摄 像机2的设置上不推荐的位置用X符号示出。使用图8来说明在摄像机2的设定上不推荐的 位置。
[0120]图8例示选择了"下床"作为检测对象行为的情况下的区域33的显示内容。从床上 下床是离开床的举动。也就是说,从床上下床是监护对象者在床的外侧、特别是在与床分离 的场所进行的动作。为此,如果将摄像机2配置于难以拍摄到床的外侧的位置,则会导致与 下床的检测关联的区域不被拍到拍摄图像3中的可能性变高。
[0121] 在此,如果将摄像机2配置于床附近,则在通过该摄像机2拍摄的拍摄图像3中,则 就导致显现有床的图像占大部分,几乎拍不到与床已分开的场所的可能性高。因此,在通过 图8例示的画面中,作为检测从床上下床时在摄像机2的配置上不推荐的位置,用X符号示 出了床的下边附近的位置。
[0122] 这样,在本实施方式中,在摄像机2的配置位置的候选之上,在触摸面板显示器13 上显示在摄像机2的配置上不推荐的位置。由此,使用者能够根据在摄像机2的配置上不推 荐的位置而准确地掌握各候选示出的摄像机2的配置位置。因此,根据本实施方式,能够降 低使用者弄错摄像机2的配置的可能性。
[0123] 此外,用于确定与已选择的检测对象的行为对应的摄像机2的配置位置的候选及 在摄像机2的配置上不推荐的位置的信息(以下,也称为"配置信息")可适当取得。控制部11 例如既可以从存储部12中取得该配置信息,也可以经由网络而从其它信息处理装置中取 得。在配置信息中,对应于已选择的检测对象的行为而预先设定有摄像机2的配置位置的候 选及在摄像机2的配置上不推荐的位置,控制部11能够通过参照配置信息而确定这些位置。
[0124] 另外,该配置信息的数据形式可以根据实施的方式而适当选择。例如,配置信息可 以为对每个检测对象的行为规定了摄像机2的配置位置的候选及在摄像机2的配置上不推 荐的位置的表格形式的数据。另外,例如,配置信息也可以如本实施方式那样是作为用于选 择检测对象的行为的各按钮321~324的动作而已设定的数据。即,作为保持配置信息的方 式,可以以在操作了各按钮321~324时在配置摄像机2的候选的位置上作出?符号或X符 号的显示的方式设定有各按钮321~324的动作。
[0125] 另外,表现摄像机2的配置位置的候选及在摄像机2的设置上不推荐的位置各个的 方法,可以不局限于在图7及图8中例示的基于?符号或X符号的方法,可以根据实施的方 式而适当选择。例如,控制部11也可以取代在图7及图8中例示的显示内容而将能配置摄像 机2的位置下床的具体距离显示于触摸面板显示器13。
[0126] 并且,作为摄像机2的配置位置的候选及在摄像机2的设置上不推荐的位置而提示 的位置的数量可以根据实施的方式而适当设定。例如,作为摄像机2的配置位置的候选,控 制部11既可以提示多个位置,也可以提示单一的位置。
[0127] 这样,在本实施方式中,在步骤S101中,当在检测对象上所希望的行为由使用者选 择时,在步骤S102中,对应于已选择的检测对象的行为,摄像机2的配置位置的候选被示出 于区域33上。使用者按照该区域33的内容而配置摄像机2。即,使用者从区域33上示出的配 置位置的候选中选择任一个位置而将摄像机2适当地配置于已选择的位置上。
[0128] 在画面30上,为了接收检测对象的行为的选择和摄像机2的配置已完成这一内容, 还设有"下一步"按钮34。作为接收检测对象的行为的选择和摄像机2的配置已完成这一内 容的方法的一个例子,通过将"下一步"按钮34设于画面34上,从而本实施方式所涉及的控 制部11接收检测对象的行为的选择和摄像机2的配置已完成这一内容。当在检测对象的行 为的选择和摄像机2的配置完成了之后使用者操作"下一步"按钮34时,信息处理装置1的控 制部11使处理前进至下一个步骤S103。
[0129] (步骤 S103)
[0130]返回至图6,在步骤S103中,控制部11作为设定部24发挥作用,接收床上表面的高 度的指定。控制部11将已指定的高度设定为床上表面的高度。另外,控制部11作为图像取得 部21发挥作用,从摄像机2中取得包括深度信息的拍摄图像3。而且,当接收到床上表面的高 度的指定时,控制部11作为显示控制部25发挥作用,在拍摄图像3上明示显现有位于已指定 的高度上的对象的区域,以此方式使已取得的拍摄图像3显示于触摸面板显示器13。
[0131]图9例示当接收床上表面的高度的指定时显示于触摸面板显示器13上的画面40。 控制部11为了在步骤S103中接收床上表面的高度的指定,将画面40显示于触摸面板显示器 13。画面40包括:描画从摄像机2中获得的拍摄图像3的区域41、用于指定床上表面的高度的 滚动条42、以及描画使摄像机2的方向对准床的指示内容的区域46。
[0132] 在步骤S102中,使用者按照画面上所显示的内容而配置了摄像机2。因此,在本步 骤S103中,控制部11作为显示控制部25发挥作用,将使摄像机2的方向对准床的指示内容描 画于区域46并将通过摄像机2获得的拍摄图像3描画于区域41。由此,在本实施方式中,使用 者被指示进行摄像机2的方向的调节。
[0133] 即,根据本实施方式,能够在指示了摄像机2的配置之后向使用者指示摄像机的方 向的调节。因此,使用者可以按照顺序而恰当地进行摄像机2的配置和摄像机2的方向的调 节。因此,根据本实施方式,即使是缺乏有关监护系统的知识的使用者,也能够容易地进行 监护系统的设置。此外,该指示内容的表现可以不限定于在图9中例示的显示,可以根据实 施的方式而适当设定。
[0134] 当使用者一边按照描画于区域46上的指示内容而确认描画于区域41上的拍摄图 像3并一边将摄像机2朝向床方以便使床包括在摄像机2的拍摄范围中时,床就会显现在描 画于区域41上的拍摄图像3中。如果床显现在拍摄图像3内,就能够在该拍摄图像3内比较指 定的高度与床上表面的高度。因此,使用者在调节了摄像机2的方向之后操作滚动条42的凸 块43而指定床上表面的高度。
[0135] 在此,控制部11在拍摄图像3上明示显现位于根据凸块43的位置而指定的高度上 的对象的区域。由此,本实施方式所涉及的信息处理装置1使使用者容易掌握基于凸块43的 位置而指定的真实空间上的高度。对该处理,使用图10~12来说明。
[0136] 首先,使用图10及图11,说明显现在拍摄图像3内的各像素中的对象的高度与该各 像素的深度的关系。图10例示拍摄图像3内的坐标关系。另外,图11例示拍摄图像3的任意的 像素(点s)与摄像机2在真实空间内的位置关系。此外,图10的左右方向与垂直于图11的纸 面的方向对应。即,在图11中显现出的拍摄图像3的长度对应于在图10中例示的纵向的长度 (H像素)。另外,在图10中例示的横向的长度(W像素)对应于在图11中未能显出的拍摄图像3 的纸面垂直方向的长度。
[0137] 在此,如在图10中所例示的,将拍摄图像3的任意的像素(点s)的坐标设为(Xs,ys), 将摄像机2的横向的视角设为V x,将纵向的视角设为Vy。将拍摄图像3的横向的像素数设为W, 将纵向的像素数设为H,将拍摄图像3的中心点(像素)的坐标设为(0,0)。
[0138] 另外,如在图11中所例示的,将摄像机2的俯仰角设为a。将连接摄像机2和点s的线 段与表示真实空间的垂直方向的线段之间的角度设为队,将连接摄像机2和点s的线段与表 示摄像机2的拍摄方向的线段之间的角度设为y s。并且,将连接摄像机2和点s的线段的在 从横向上观察的情况下的长度设为Ls,将摄像机2与点s的垂直方向的距离设为h s。此外,在 本实施方式中,该距离hs相当于显现在点s上的对象在真实空间上的高度。但是,表现拍于 点s上的对象在真实空间上的高度的方法可以不限定于这样的例子,可以根据实施的方式 而适当设定。
[0139] 控制部11能够从摄像机2中取得表示该摄像机2的视角(Vx、Vy)以及俯仰角a的信 息。但是,取得这些信息的方法可以不限定于这样的方法,控制部11既可以通过接收来自使 用者的输入而取得这些信息,也可以作为预先设定的设置值而取得。
[0140] 另外,控制部11能够由拍摄图像3取得点s的坐标(Xs,ys)以及拍摄图像3的像素数 (WXH)。并且,控制部11能够通过参照深度信息而取得点s的深度D s。控制部11能够通过利 用这些信息而算出点s的角度ys以及队。具体而言,拍摄图像3在纵向上的每一个像素的角 度能够近似为由以下的数学式1示出的值。由此,控制部11能够根据由以下的数学式2及数 学式3示出的关系式而算出点s的角度y s以及&。
[0145] [数学式3]
[0146] 0s = 9〇-a- y s
[0147] 而且,控制部11能够通过将已算出的ys及点s的深度Ds应用到以下的数学式4的关 系式中而求出Ls的值。另外,控制部11能够通过将已算出的Ls及&应用到以下的数学式5的 关系式中而算出真实空间上的点S的高度hs。
[0148][数学式4]
[0150] [数学式5]
[0151] hs = Ls X COS&
[0152] 因此,控制部11能够通过参照由深度信息示出的各像素的深度而确定显现在该各 像素中的对象在真实空间上的高度。也就是说,控制部11能够通过参照由深度信息示出的 各像素的深度而确定显现在位于根据凸块43的位置而指定的高度上的对象的区域。
[0153] 需要注意的是,控制部11通过参照由深度信息示出的各像素的深度,不仅能够确 定该各像素中显现的对象在真实空间上的高度h s,而且能够确定该各像素中显现的对象在 真实空间上的位置。例如,控制部11能够根据由以下的数学式6~数学式8示出的关系式而 算出图11例示的摄像机坐标系中的从摄像机2至点s为止的向量S (Sx,Sy,Sz,1)的各值。由 此,拍摄图像3内的坐标系中的点s的位置与摄像机坐标系中的点s的位置可相互转换。
[0158] [数学式8]
[0159] S2 = Ds
[0160]接着,使用图12来说明基于凸块43的位置而指定的高度与在拍摄图像3上明示的 区域的关系。图12示意性例示基于凸块43的位置而指定的高度的面(以下也称为"指定面") DF与摄像机2的拍摄范围的关系。此外,图12与图垌样地,例示了在从侧面观察了摄像机2 的情景,图12的上下方向相当于床的高度方向且相当于真实空间上的垂直方向。
[0161] 在图12中例示的指定面DF的高度h通过使用者操作滚动条42而被指定。具体而言, 凸块43在滚动条42上的位置与指定面DF的高度h对应,控制部11根据凸块43在滚动条42上 的位置而决定指定面DF的高度h。由此,例如,使用者通过使凸块43向上方移动,能够以在真 实空间上指定面DF向上方移动的方式而使高度h的值变小。另一方面,使用者通过使凸块43 向下方移动,能够以在真实空间上指定面DF向下方移动的方式而使高度h的值变大。
[0162] 在此,正如上所述的,控制部11能够根据深度信息而确定拍摄图像3内显现的各像 素上的对象的高度。因此,当接收到这样的通过滚动条42进行的高度指定时,控制部11在拍 摄图像3内确定显现有位于该指定的高度h上的对象的区域、换而言之,显现有位于指定面 DF上的对象的区域。然后,控制部11作为显示控制部25发挥作用,在描画于区域41的拍摄图 像3上明示相当于显现有位于指定面DF上的对象的区域的部分。例如,控制部11通过如图9 所例示的那样以与拍摄图像3内的其它区域不同的显示形式描画,从而明示相当于显现有 位于指定面DF上的对象的区域的部分。
[0163] 明示对象的区域的方法可以根据实施的方式而适当设定。例如,控制部11可以通 过以与其它区域不同的显示形式描画对象的区域而明示对象的区域。在此,被用于对象的 区域上的显示形式只要是能够识别该对象的区域的形态即可,通过色彩、色调等来确定。若 列举一个例子的话,控制部11将作为黑白灰度图像的拍摄图像3描画于区域41上。与此相 对,控制部11也可以通过用红色描画显现有位于指定面DF的高度上的对象的区域而在拍摄 图像3上明示该显现有位于指定面DF的高度上的对象的区域。此外,为了使指定面DF在拍摄 图像3内易于显现,指定面DF可以在垂直方向上具有规定的宽度(厚度)。
[0164] 这样,在本步骤S103中,本实施方式所涉及的信息处理装置1当接收到通过滚动条 42进行的高度h的指定时,在拍摄图像3上明示显现有位于高度h上的对象的区域。使用者以 如此地明示的、位于指定面DF的高度上的区域为参考而设定床上表面的高度。具体而言,使 用者通过以指定面DF成为床上表面的方式调节凸块43的位置而设定床上表面的高度。即, 使用者能够一边在拍摄图像3上视觉上掌握指定的高度h,一边进行床上表面的高度的设 定。由此,在本实施方式中,即使是缺乏有关监护系统的知识的使用者,也能够容易地进行 床上表面的高度的设定。
[0165] 另外,在本实施方式中,床的上表面被采用为床的基准面。在用摄像机2拍摄监护 对象者在床上的行为的情况下,床的上表面是易于拍进通过摄像机2取得的拍摄图像3中的 场所。因此,拍摄图像3的显现有床的区域中的、床上表面所占的比例易于变高,能够容易地 进行使指定面DF与那样的显现有床上表面的区域一致。因此,通过如本实施方式这样在床 的基准面上采用床上表面,从而能够容易地进行床的基准面的设定。
[0166] 此外,控制部11可以作为显示控制部25发挥作用,当接收到通过滚动条42进行的 高度h的指定时,在描画于区域41的拍摄图像3上明示显现有位于从指定面DF起向床的高度 方向上方预定的范围AF中的对象的区域。范围AF的区域例如在图9中例示的那样通过以与 包括指定面DF的区域的其它区域不同的显示形式描画,从而被明示成与其它区域能区分。
[0167] 在此,指定面DF的区域的显示形式相当于本发明的"第一显示形式",范围AF的区 域的显示形式相当于本发明的"第二显示形式"。另外,规定范围AF的床的高度方向的距离 相当于本发明的"第一规定距离"。例如,控制部11可以在作为黑白灰度图像的拍摄图像3上 用蓝色明示显现有位于范围AF的对象的区域。
[0168] 由此,除位于指定面DF的高度上的区域以外,使用者还能够在拍摄图像3上视觉上 掌握在指定面DF的上侧位于预定的范围AF的对象的区域。因此,易于掌握拍摄图像3中显现 的被拍摄体在真实空间上的状态。另外,使用者能够利用范围AF的区域作为使指定面DF与 床上表面一致时的指标,因此床上表面的高度的设定变容易。
[0169] 此外,规定范围AF的床的高度方向的距离也可以被设定为床的护栏的高度。该床 的护栏的高度既可以作为预先设定的设置值而取得,也可以作为来自使用者的输入值而取 得。在像这样设定了范围AF的情况下,在指定面DF已被恰当地设定为床上表面时,范围AF的 区域成为表示床的护栏的区域。也就是说,使用者通过使范围AF的区域与床的护栏的区域 一致而使指定面DF与床上表面一致变为可能。因此,在拍摄图像3上,在指定床上表面时作 为指标而利用显现有床的护栏的区域变为可能,因此床上表面的高度的设定变得容易。
[0170] 另外,正如后面所述的,信息处理装置1通过判断,相对于通过指定面DF设定的床 上表面,前景区域显现的对象在真实空间上是否存在在预定距离hf以上高的位置,从而检 测监护对象者在床上的起来。因此,控制部11可以作为显示控制部25发挥作用,当接收到通 过滚动条42进行的高度h的指定时,在描画于区域41的拍摄图像3上明示显现有位于从指定 面DF起向床的高度方向上方距离hf以上的高度上的对象的区域。
[0171] 如在图12中所例示的,从指定面DF起向床的高度方向上方距离hf以上的高度的区 域可以在床的高度方向上限定范围(范围AS)。该范围AS的区域,例如,通过与包括指定面DF 及范围AF的区域的其它区域不同的显示形式描画,从而以与其它区域能区分的方式被明 不。
[0172]在此,范围AS的区域的显示形式相当于本发明的"第三显示形式"。另外,关于起来 的检测的距离hf相当于本发明的"第二预定距离"。例如,控制部11可以在作为黑白灰度图 像的拍摄图像3上用黄色明示显现有位于范围AS的对象的区域。
[0173]由此,使用者能够在拍摄图像3上视觉上掌握关于起来的检测的区域。因此,以适 合起来的检测的方式进行床上表面的高度的设定变为可能。
[0174] 此外,在图12中,距离hf比定为范围AF的床的高度方向的距离变长。但是,距离hf 可以不限定于这样的长度,既可以与定为范围AF的床的高度方向的距离相同,也可以比该 距离短。在距离hf比定为范围AF的床的高度方向的距离短的情况下,产生范围AF的区域与 范围AS的区域重叠的区域。作为该重叠的区域的显示形式,既可以采用范围AF及范围AS的 任一个显示形式,也可以采用与范围AF及范围AS的哪一个显示形式都不同的显示形式。
[0175] 另外,控制部11可以作为显示控制部25发挥作用,当接收到通过滚动条42进行的 高度h的指定时,在描画于区域41的拍摄图像3上以不同的显示形式明示显现有在真实空间 内位于指定面DF的上方的对象的区域和显现有位于下方的对象的区域。通过像这样分别以 不同的显示形式描画指定面DF的上侧的区域和下侧的区域,从而能够使位于指定面DF的高 度上的区域变得易于在视觉上掌握。因此,能够使显现有位于指定面DF的高度上的对象的 区域变得易于在拍摄图像3上认识,床上表面的高度的设定变容易。
[0176] 返回至图9,在画面40上,还设有用于接收进行重新设定的"返回"按钮44,和用于 接收指定面DF的设定已完成的"下一步"按钮45。当使用者操作"返回"按钮44时,信息处理 装置1的控制部11使处理返回至步骤S101。另一方面,当使用者操作"下一步"按钮45时,控 制部11确定所指定的床上表面的高度。即,控制部11存储在该按钮45的操作时所指定的指 定面DF的高度,并将已存储的指定面DF的高度设定为床上表面的高度。然后,控制部11使处 理前进至下一个步骤S104。
[0177] (步骤 S104)
[0178] 返回至图6,在步骤S104中,控制部11判断在步骤S101中已选择的检测对象的一个 或多个行为上是否包括在床上的起来以外的行为。在步骤S101中已选择的一个或多个行为 包括起来以外的行为的情况下,控制部11使处理前进至下一个步骤S105,接收床上表面的 范围的设定。另一方面,在步骤S101中已选择的一个或多个行为未包括起来以外的行为的 情况下、换而言之,在步骤S101中已选择的行为只有起来的情况下,控制部11结束本动作例 所涉及的关于床的位置的设定,开始后述的行为检测所涉及的处理。
[0179] 正如上所述的,在本实施方式中,成为通过监护系统来检测的对象的行为有起来、 下床、端坐以及越过护栏。这些行为中的"起来"是具有在床上表面的大范围内进行的可能 性的行为。因此,即使未设定有床上表面的范围,控制部11也能根据监护对象者与床在床的 高度方向上的位置关系而比较高精度地检测监护对象者的"起来"。
[0180] 另一方面,"下床"、"端坐"以及"越过护栏"相当于本发明的"在床的端部附近或外 侧进行的预定行为",是在比较有限的范围内进行的行为。因此,为了控制部11高精度地检 测这些行为,最好设定有床上表面的范围,以便不仅能够确定监护对象者与床在床的高度 方向上的位置关系,而且能够确定监护对象者与床在水平方向上的位置关系。即,在步骤 S101中"下床"、"端坐"以及"越过护栏"的任一个已被选择为检测对象的行为的情况下,最 好设定有床上表面的范围。
[0181] 因此,在本实施方式中,控制部11判断在步骤S101中选择的一个或多个行为是否 包括这样的"预定行为"。然后,在步骤S101中选择的一个或多个行为包括有"预定行为"的 情况下,控制部11使处理前进至下一个步骤S105,接收床上表面的范围的设定。另一方面, 在步骤S101中选择的一个或多个行为未包括"预定行为"的情况下,控制部11省略床上表面 的范围的设定,结束本动作例所涉及的关于床的位置的设定。
[0182] 即,本实施方式所涉及的信息处理装置1并非在所有的情况下都接收床上表面的 范围的设定,只在床上表面的范围的设定被推荐的情况下接收床上表面的范围的设定。由 此,在一部分的情况下,能够省略床上表面的范围的设定,能够简化关于床的位置的设定。 并且,在床上表面的范围的设定被推荐的情况下,能够接收床上表面的范围的设定。因此, 即使为缺乏有关监护系统的知识的使用者,也能够根据选择为检测对象的行为而恰当地选 择关于床的位置的设定项目。
[0183] 具体而言,在本实施方式中,在只有"起来"已被选择为检测对象的行为的情况下, 省略床上表面的范围的设定。另一方面,在"下床"、"端坐"以及"越过护栏"中的至少任一个 行为已被选择为检测对象的行为的情况下,接收床上表面的范围的设定(步骤S105)。
[0184] 此外,上述的"预定行为"中所包括的行为可以根据实施的方式而适当选择。例如, 具有通过设定床上表面的范围而可提高"起来"的检测精度的可能性。因此,"起来"也可以 包括在本发明的"预定行为"中。另外,例如,"下床"、"端坐"以及"越过护栏"具有即使未设 定床上表面的范围也能够高精度地检测的可能性。因此,"下床"、"端坐"以及"越过护栏"的 任一个行为也可以从"预定行为"中除外。
[0185] (步骤 S105)
[0186] 在步骤S105中,控制部11作为设定部24发挥作用,接收床的基准点的位置及床的 方向的指定。然后,控制部11根据已指定的基准点的位置及床的方向而设定床上表面在真 实空间内的范围。
[0187] 图13例示当接收床上表面的范围的设定时显示于触摸面板显示器13上的画面50。 为了在步骤S105中接收床上表面的范围的指定,控制部11将画面50显示于触摸面板显示器 13。画面50包括:描画从摄像机2中获得的拍摄图像3的区域51、用于指定基准点的标识52、 以及用于指定床的方向的滚动条53。
[0188] 在本步骤S105中,使用者通过在被描画于区域51的拍摄图像3上操作标识52而指 定床上表面的基准点的位置。另外,使用者操作滑动条53的凸块54而指定床的方向。控制部 11根据如此指定的基准点的位置及床的方向而确定床上表面的范围。使用图14~图17来说 明这些处理。
[0189] 首先,使用图14来对通过标识52指定的基准点p的位置进行说明。图14例示拍摄图 像3上的指定点ps与床上表面的基准点p的位置关系。指定点p s*出标识52在拍摄图像3上的 位置。另外,在图14中例示的指定面DF示出位于在步骤S103中已设定的床上表面的高度h上 的面。在这种情况下,控制部11能够将通过标识52指定的基准点p作为连接摄像机2和指定 点p s的直线与指定面DF的交点而确定。
[0190] 在此,将指定点ps的拍摄图像3上的坐标设为(xP,yP)。另外,将连接摄像机2和指定 点p s的线段与表示真实空间的垂直方向的线段之间的角度设为eP,将连接摄像机2和指定点 ps的线段与表示摄像机2的拍摄方向的线段之间的角度设为yP。并且,将连接摄像机2和基 准点P的线段的从横向上观察的情况下的长度设为1^,将从摄像机2至基准点p为止的深度 设为D P。
[0191] 此时,与步骤S103同样地,控制部11能够取得表示摄像机2的视角(Vx、Vy)以及俯仰 角a的信息。另外,控制部11能够取得指定点p s的拍摄图像3上的坐标(xP,yP)以及拍摄图像3 的像素数(WXH)。并且,控制部11能够取得表示在步骤S103中已设定的高度h的信息。与步 骤S103同样地,控制部11能够通过将这些值应用至由以下的数学式9~数学式11示出的关 系式而算出从摄像机2至基准点p为止的深度D P。
[0192] [数学式9]
[0194] [数学式 10]
[0195] 0p = 9〇-a- y p
[0196] [数学式11]
[0198] 然后,控制部11通过将已算出的深度%应用至由以下的数学式12~数学式14示出 的关系式中能够求出基准点P在摄像机坐标系中的坐标P ( Px,Py,PZ,1 )。由此,控制部11能够 确定通过标识52指定的基准点p在真实空间上的位置。
[0199] [数学式 12]
[0203] [数学式 14]
[0204] Pz = Dp
[0205] 此外,图14例示拍于指定点ps的对象存在于比在步骤S103中已设定的床上表面高 的位置的情况下的、拍摄图像3上的指定点p s与床上表面的基准点p的位置关系。在拍于指 定点Ps的对象位于在步骤S103中已设定的床上表面的高度上的情况下,指定点p s与基准点p 在真实空间上变为相同的位置。
[0206] 接着,使用图15~及图16来对根据通过滚动条53指定的床的方向0和基准点p而确 定的床上表面的范围进行说明。图15例示在从侧面观察摄像机2的情况下的摄像机2与基准 点P的位置关系。另外,图16例示在从上方观察摄像机2的情况下的摄像机2与基准点p的位 置关系。
[0207] 床上表面的基准点p是成为确定床上表面的范围的基准的点,被设定为对应于床 上表面的预定的位置。使基准点P对应的该预定的位置可以没有特别的限制,可以根据实施 的方式而适当设定。在本实施方式中,基准点P被设定为对应于床上表面的中央。
[0208] 与此相对,如在图16中所例示的,本实施方式所涉及的床的方向0用床的长度方向 相对于摄像机2的拍摄方向的倾斜度来表示,根据凸块54在滚动条53上的位置而指定。在图 16中例示的向量Z示出了床的方向。当在画面50上使用者使滚动条53的凸块54向左方向移 动时,向量Z以基准点p为中心沿顺时针方向旋转、换而言之,向床的方向0的值变大的方向 变化。另一方面,当使用者使滚动条53的凸块54向右方向移动时,向量Z以基准点p为中心沿 逆时针方向旋转、换而言之,向床的方向9的值变小的方向变化。
[0209] 也就是说,基准点p示出床中央的位置,床的方向0示出以床中央为轴的水平方向 的旋转程度。因此,当指定床的基准点P的位置及方向9时,控制部11根据已指定的基准点P 的位置及床的方向9,如在图16中所例示的,能够确定假想的表示床上表面的范围的框ro在 真实空间上的位置以及方向。
[0210] 此外,床的框ro的大小对应于床的尺寸而设定。床的尺寸由例如床的高度(垂直方 向的长度)、横宽(短边方向的长度)、以及纵长(长度方向的长度)规定。床的横宽对应于床 头板及床尾板的长度。另外,床的纵长对应于侧框架的长度。床的尺寸大多情况根据监护环 境而预先已决定。控制部11可以将这样的床的尺寸作为预先设定的设定值而取得,可以作 为使用者的输入值而取得,也可以通过从预先设定的多个设定值中选择而取得。
[0211] 假想的床框FD示出基于所指定的基准点p的位置及床的方向0而设定的床上表面 的范围。因此,控制部11可以作为显示控制部25发挥作用,在拍摄图像3内描画基于已指定 的基准点p的位置及床的方向0而确定的框ro。由此,使用者能够一边用拍摄图像3内所描画 的假想的床框ro来确认,一边设定床上表面的范围。因此,能够降低使用者弄错床上表面的 范围的设定的可能性。此外,该假想的床框ro可以包括假想的床的护栏。由此,能够进一步 使使用者容易掌握假想的床框FD。
[0212] 因此,在本实施方式中,使用者通过使标识52对准拍摄图像3中显现的床上表面的 中央而能够将基准点P设定于恰当的位置。另外,使用者通过决定凸块54的位置以使假想的 床框FD与拍摄图像3中显现的床上表面的外周重合能够恰当地设定床的方向0。此外,将假 想的床框FD描画于拍摄图像3内的方法可以根据实施的方式而适当设定。例如,可以使用利 用在以下说明的投影变换的方法。
[0213]在此,为了使床框的位置及后述的检测区域的位置易于掌握,控制部11可以利 用将床作为基准的床坐标系。床坐标系为,例如,将床上表面的基准点作为原点、将床的宽 度方向作为X轴、将床的高度方向作为y轴、以及将床的长度方向作为Z轴的坐标系。在这样 的坐标系中,控制部11能根据床的尺寸而确定床框ro的位置。在以下,说明算出将摄像机坐 标系的坐标变换为该床坐标系的坐标的投影变换矩阵M的方法。
[0214]首先,用以下的数学式15表现使朝着水平方向的摄像机的拍摄方向俯仰 角度a的旋转矩阵R。控制部11通过将该旋转矩阵R应用到由以下的数学式16及数学式17示 出的关系式中而能够分别求出在图15中例示的、表示摄像机坐标系中的床的方向的向量Z 以及表示在摄像机坐标系中的床的高度方向上方的向量U。此外,在由数学式16及数学式17 示出的关系式中所包括的" "意思是矩阵的乘法。
[0215][数学式 15] f缓疼欲 焱 AiSf r ] 、丨沒kisiv 猶致设 # i :
[0216]教叫 / ^ 卜、衫m炫 衫 铁轉炫铃」 I费 # 翁 y
[0217][数学式 I6]
[0218] Z=(sin9 0 -cos9 〇)*R [0219][数学式 17]
[0220] U=(0 1 0 0)*R
[0221] 接着,通过将向量U及Z应用到由以下的数学式8示出的关系式中,能够求出在图16 中例示的、沿着床的宽度方向的床坐标系的单位向量X。另外,控制部11通过将向量Z及X应 用到由以下的数学式19示出的关系式中,能够求出沿着床的高度方向的床坐标系的单位向 量Y。然后,控制部11通过将基准点p在摄像机坐标系中的坐标P、向量X、Y及Z应用到由以下 的数学式20示出的关系式中,能够求出将摄像机坐标系的坐标变换为床坐标系的坐标的投 影变换矩阵M。此外,在由数学式18及数学式19示出的关系式中所包括的"X"意思是向量的 外积。
[0222] [数学式 18]
[0224] [数学式 19]
[0225] Y = ZXX
[0226] [数学式 20] 「I ^ 1' 〇| 0
[0227] .靜突.: '.: , ' 足 L I 〇 rP,x -/>.y i)
[0228] 图17例示本实施方式所涉及的摄像机坐标系与床坐标系之间的关系。如图17所例 示的,被算出的投影变换矩阵M能够将摄像机坐标系的坐标变换为床坐标系的坐标。因此, 如果利用投影变换矩阵M的逆矩阵,能够将床坐标系的坐标变换为摄像机坐标系的坐标。也 就是说,通过利用投影变换矩阵M,从而摄像机坐标系的坐标与床坐标系的坐标可相互变 换。在此,正如上所述,摄像机坐标系的坐标与拍摄图像3内的坐标能相互变换。因此,在此 时点,床坐标系的坐标与拍摄图像3内的坐标能够相互变换。
[0229] 在此,正如上所述,在床的尺寸已被确定的情况下,控制部11能够在床坐标系中确 定假想的床框ro的位置。也就是说,控制部11能够在床坐标系中确定假想的床框ro的坐标。 因此,控制部11利用投影变换矩阵m而将框ro在床坐标系中的坐标逆变换为框ro在摄像机 坐标系中的坐标
[0230] 另外,摄像机坐标系的坐标与拍摄图像内的坐标之间的关系通过由上述数学式6 ~8示出的关系式来表现。因此,控制部11能够根据由上述数学式6~8示出的关系式而由框 FD在摄像机坐标系中的坐标确定描画于拍摄图像3内的框ro的位置。也就是说,控制部11能 够根据投影变换矩阵M和表示床的尺寸的信息而在各坐标系中确定假想的床框ro的位置。 通过这种方式,控制部11可以如在图13所例示的那样将假想的床框FD描画于拍摄图像3内。
[0231] 返回至图13,在画面50上,还设有用于接收进行重新设定的"返回"按钮55,和用于 完成设定并开始监护的"开始"按钮56。当使用者操作"返回"按钮55时,控制部11使处理返 回至步骤S103。
[0232] 另一方面,当使用者操作"开始"按钮56时,控制部11确定基准点p的位置及床的方 向0。即,控制部11将根据在操作了该按钮56时所指定的基准点p的位置及床的方向0而确定 的床框FD的范围设定为床上表面的范围。然后,控制部11使处理前进至下一个步骤S106。
[0233] 这样,在本实施方式中,能够通过指定基准点p的位置和床的方向0而设定床上表 面的范围。例如,如在图13中所例示的,在拍摄图像3中未必包括整个床。为此,为了设定床 上表面的范围,例如在必须指定床的四角这样的系统中,有可能无法设定床上表面的范围。 然而,在本实施方式中,为了设定床上表面的范围而指定位置的点为1点(基准点P)即可。由 此,在本实施方式中,能够提高摄像机2的设置位置的自由度,并且能够使监护系统变得容 易适用于监护环境。
[0234] 另外,在本实施方式中,作为使基准点p对应的预定的位置,采用了床上表面的中 央。床上表面的中央是不论从哪一个方向上拍摄床都易于拍摄图像3中显现的地方。因此, 通过采用床上表面的中央作为使基准点P对应的规定的位置,从而能够进一步提高摄像机2 的设置位置的自由度。
[0235] 但是,当摄像机2的设置位置的自由度提高时,导致配置摄像机2的选择范围扩大, 具有对使用者来说摄像机2的配置反而变困难的可能性。对此,如上所述,本实施方式通过 将摄像机2的配置位置的候选显示于触摸面板显示器13且向使用者指示摄像机2的配置,从 而使摄像机2的配置变容易,解决了这样的问题。
[0236] 此外,存储床上表面的范围的方法可以根据实施的方式而适当设定。如上所述,通 过从摄像机坐标系变换为床坐标系的投影变换矩阵M和表示床的尺寸的信息,控制部11能 够确定床框的位置。因此,作为表示在步骤S105中已设定的床上表面的范围的信息,信息 处理装置1可以存储根据在操作了按钮56时所指定的基准点p的位置及床的方向0而算出的 投影变换矩阵M和表示床的尺寸的信息。
[0237] (步骤 S106 ~步骤 S108)
[0238] 在步骤S106中,控制部11作为设定部24发挥作用,判断在步骤S101中已选择的"预 定行为"的检测区域是否显现到拍摄图像3内。然后,在判断为在步骤S101中已选择的"预定 行为"的检测区域未显现到拍摄图像3内的情况下,控制部11使处理前进至下一个步骤 S107。另一方面,在判断为在步骤S101中已选择的"预定行为"的检测区域显现到拍摄图像3 内的情况下,控制部11结束本动作例所涉及的关于床的位置的设定,并开始后述的行为检 测所涉及的处理。
[0239]在步骤S107中,控制部11作为设定部24发挥作用,将示出具有不能正常进行在步 骤S101中已选择的"预定行为"的检测的可能性的警告信息输出至触摸面板显示器13等。在 警告信息中,可以包括表示具有不能正常进行检测的可能性的"预定行为"及未显现到拍摄 图像3内的检测区域的地方的信息。
[0240]然后,控制部11与该警告信息同时或在此之后接收在进行监护对象者的监护之前 是否进行重新设定的选择,并使处理前进至下一个步骤S108。在步骤S108中,控制部11根据 使用者的选择而判断是否进行重新设定。在使用者选择了进行重新设定的情况下,控制部 11使处理返回至步骤S105。另一方面,在使用者选择了不进行重新设定的情况下,结束本动 作例所涉及的关于床的位置的设定,并开始后述的行为检测所涉及的处理。
[0241 ]此外,正如后述的那样,"预定行为"的检测区域是根据用于检测"预定行为"的规 定的条件和在步骤S105中已设定的床上表面的范围而确定的区域。即,该"预定行为"的检 测区域是规定在监护对象者进行了"预定行为"的情况下所出现的前景区域的位置的区域。 因此,控制部11能够通过判断显现到前景区域的对象是否被包括在该检测区域中来检测监 护对象者的各行为。
[0242] 因此,在检测区域未显现到拍摄图像3内的情况下,本实施方式涉及的监护系统就 具有无法恰当地检测监护对象者的对象的行为的可能性。因此,本实施方式涉及的信息处 理装置1通过步骤S106而判断是否具有这种无法恰当地检测监护对象者的对象的行为的可 能性。然后,在具有那样的可能性的情况下,信息处理装置1通过步骤S107,能够通过输出警 告信息而通知使用者具有无法恰当地检测对象的行为的可能性。因此,在本实施方式中,能 够降低弄错监护系统的设定的可能性。
[0243] 此外,判断检测区域是否显现到拍摄图像3内的方法可以根据实施的方式而适当 设定。例如,控制部可以通过判断检测区域的预定的点是否显现到拍摄图像3内来确定检测 区域是否显现到拍摄图像3内。
[0244] (其它)
[0245] 此外,控制部11可以作为未完成通知部28发挥作用,当在开始步骤S101的处理之 后规定时间内本动作例所涉及的关于床的位置的设定未完成时,进行用于告知关于床的位 置的设定尚未完成的通知。由此,能够防止在关于床的位置的设定的途中对监护系统置之 不理。
[0246]在此,作为通知关于床的位置的设定未完成的标准的预定时间既可以作为设定值 而预先决定,也可以通过使用者的输入值来决定,还可以通过从多个设定值中选择来决定。 并且,进行用于告知这样的设定未完成的通知的方法可以根据实施的方式而适当设定。
[0247]例如,控制部11可以与连接于信息处理装置1的护士呼叫器等已设置于福利机构 中的设备协作而进行这种设定未完成的通知。例如,控制部11可以控制经由外部接口 15而 已连接的护士呼叫器,从而进行由该护士呼叫器产生的呼叫作为用于告知关于床的位置的 设定未完成的通知。由此,向监护监护对象者的行为的人恰当地通知监护系统的设定未完 成变为可能。
[0248] 另外,例如,控制部11可以通过从连接于信息处理装置1的扬声器14中输出声音来 进行设定未完成的通知。在该扬声器14已配置于床的周边的情况下,通过用扬声器14进行 这样的通知,从而使位于进行监护的场所周边的人知道监护系统的设定未完成变为可能。 在这种位于进行监护的场所周边的人中,可以包括监护对象者。由此,能够将监护系统的设 定未完成也通知给监护对象者自己。
[0249] 另外,例如,控制部11可以使用于通知设定未完成的画面显示于触摸面板显示器 13上。另外,例如,控制部11可以利用电子邮件而进行这样的通知。在这种情况下,例如,成 为通知目的地的用户终端的电子邮件地址预先已被注册于存储部12中,控制部11利用该预 先已注册的电子邮件地址而进行用于告知设定未完成的通知。
[0250][监护对象者的行为检测]
[0251] 接着,使用图18来说明通过信息处理装置1进行的监护对象者的行为检测的处理 步骤。图18例示通过信息处理装置1进行的监护对象者的行为检测的处理步骤。这种关于行 为检测的处理步骤只不过是一个例子,各处理可以尽可能地变更。并且,关于在以下说明的 处理步骤,能根据实施方式而适当进行步骤的省略、置换以及追加。
[0252] (步骤 S2〇l)
[0253] 在步骤S201中,控制部11作为图像取得部21发挥作用,取得通过摄像机2拍摄到的 拍摄图像3,该摄像机2是为了对监护对象者在床上的行为进行监护而设置的。在本实施方 式中,由于摄像机2具有深度传感器,因此在所取得的拍摄图像3中包括有表示各像素的深 度的深度信息。
[0254] 在此,使用图19及图20来对控制部11取得的拍摄图像3进行说明。图19例示通过控 制部11取得的拍摄图像3。与图2同样,在图19中例示的拍摄图像3的各像素的灰度值根据该 各像素的深度而确定。即,各像素的灰度值(像素值)对应于该各像素显现的对象的深度。
[0255] 如上所述,控制部11能够根据该深度信息而确定各像素显现的对象在真实空间的 位置。即,控制部11能够根据拍摄图像3内的各像素的位置(二维信息)和深度而确定该各像 素内显现的被拍摄体在三维空间(真实空间)中的位置。例如,在图19中例示的拍摄图像3显 现的被拍摄体在真实空间中的状态在下一个图20中例示。
[0256] 图20例示基于拍摄图像3中所包括的深度信息而确定的拍摄范围内的被拍摄体的 位置的三维分布。通过用拍摄图像3内的位置和深度将各像素绘制于三维空间内,从而能够 创建在图20中例示的三维分布。也就是说,控制部11能够如在图20中例示的三维分布那样 识别拍摄图像3内显现的被拍摄体在真实空间内的状态。
[0257] 此外,本实施方式涉及的信息处理装置1被用于在医疗机构或护理机构中监护住 院病人或福利机构入住者。因此,控制部11可以使其与摄像机2的视频信号同步而取得拍摄 图像3,以便能够实时地监护住院病人或福利机构入住者的行为。而且,控制部11可以对已 取得的拍摄图像3立即执行后述的步骤S202直至S205为止的处理。信息处理装置1通过不间 断连续地执行这样的动作,从而实现实时图像处理,使实时地监护住院病人或福利机构入 住者的行为变为可能。
[0258] (步骤 S202)
[0259] 返回至图18,在步骤S202中,控制部11作为前景提取部22发挥作用,根据作为在步 骤S201中已取得的拍摄图像3的背景而设定的背景图像与拍摄图像3的差分,提取该拍摄图 像3的前景区域。在此,背景图像是为了提取前景区域而利用的数据,被设定为包括成为背 景的对象的深度。创建背景图像的方法可以根据实施的方式而适当设定。例如,控制部11可 以通过算出在开始了监护对象者的监护时获得的数帧大小的拍摄图像的平均来创建背景 图像。此时,通过也包括深度信息而算出拍摄图像的平均,从而创建包括深度信息的背景图 像。
[0260]图21例示在图19及图20中已例示的被拍摄体中的从拍摄图像3中提取的前景区域 的三维分布。具体而言,图21例示了当监护对象者在床上起来了时提取的前景区域的三维 分布。利用上述那样的背景图像而提取的前景区域在背景图像中示出的真实空间内的状态 上开始发生了变化的位置出现。因此,当监护对象者在床上移动了的情况下,显现有监护对 象者的动作部位的区域作为该前景区域而被提取。例如,在图21中,由于监护对象者在床上 正在进行立起上半身的(起来)动作,因此,显现有监护对象者的上半身的区域作为前景区 域而被提取。控制部11使用这样的前景区域而判断监护对象者的动作。
[0261] 此外,在本步骤S202中,控制部11提取前景区域的方法可以不限定于以上那样的 方法,例如,也可以使用背景差分法来分离背景和前景。作为背景差分法,例如,能够列举 出:根据上述那样的背景图像与输入图像(拍摄图像3)的差分而分离背景和前景的方法、使 用不同的三张图像而分离背景和前景的方法、以及通过应用统计模型而分离背景和前景的 方法。提取前景区域的方法,可以没有特别限制,可以根据实施的方式而适当选择。
[0262] (步骤 S203)
[0263] 返回至图18,在步骤S203中,控制部11作为行为检测部23发挥作用,根据在步骤 S202中已提取的前景区域内的像素的深度判断前景区域显现的对象与床上表面的位置关 系是否满足预定的条件。然后,控制部11根据该判断结果而检测作为监护的对象而已选择 的行为中的、监护对象者正在进行的行为。
[0264] 在此,在只有"起来"被选择为检测对象的行为的情况下,在上述关于床的位置的 设定处理中,省略床上表面的范围的设定,只设定床上表面的高度。因此,控制部11通过判 断前景区域显现的对象相对于已设定的床上表面而在真实空间内是否存在于预定距离以 上高的位置,从而检测监护对象者的起来。
[0265] 另一方面,在"下床"、"端坐"以及"越过护栏"中的至少任一个已被选择为检测对 象的行为的情况下,作为检测监护对象者的行为的基准,设定床上表面在真实空间内的范 围。因此,控制部11通过判断已设定的床上表面与前景区域显现的对象在真实空间内的位 置关系是否满足预定的条件,从而检测已被选择为监护的对象的行为。
[0266] 即,不论在哪一种情况下,控制部11都根据前景区域显现的对象与床上表面在真 实空间内的位置关系而检测监护对象者的行为。因此,用于检测监护对象者的行为的预定 的条件可相当于用于判断前景区域显现的对象是否被包括在将床上表面作为基准而设定 的预定的区域中的条件。该预定区域相当于上述的检测区域。因此,在以下,为便于说明,基 于该检测区域与前景区域的关系说明检测监护对象者的行为的方法。
[0267] 但是,检测监护对象者的行为的方法可以不局限于基于该检测区域的方法,可以 根据实施的方式而适当设定。另外,判断前景区域显现的对象是否包括在检测区域中的方 法可以根据实施的方式而适当设定。例如,可以通过评价阈值以上的像素数的前景区域是 否出现于检测区域上来判断前景区域显现的对象是否包括在检测区域中。在本实施方式 中,作为检测对象的行为,例示有"起来"、"下床"、"端坐"以及"越过护栏"。控制部11按如下 方式检测这些行为。
[0268] (1)起来
[0269] 在本实施方式中,当在步骤S101中"起来"已被选择为检测对象的行为时,监护对 象者的"起来"成为本步骤S203的判断对象。在起来的检测上,使用在步骤S103中已设定的 床上表面的高度。当步骤S103中的床上表面的高度的设定完成时,控制部11根据已设定的 床上表面的高度而确定用于检测起来的检测区域。
[0270] 图22示意性例示用于检测起来的检测区域DA。例如,如在图22中例示的,检测区域 DA被设定为,从步骤S103中指定的指定面(床上表面)DF起在床的高度方向上方距离hf以上 高的位置。该距离hf相当于本发明的"第二预定距离"。检测区域DA的范围可以没有特别限 制,可以根据实施的方式而适当设定。控制部11可以在已判断为阈值以上的像素数量的前 景区域上显现的对象被包括在检测区域DA的情况下,检测监护对象者在床上起来。
[0271] (2)下床
[0272]当在步骤S101中"下床"已被选择为检测对象的行为时,监护对象者的"下床"成为 本步骤S203的判断对象。在下床的检测上,使用在步骤S105中已设定的床上表面的范围。当 步骤S105中的床上表面的范围的设定完成时,控制部11根据已设定的床上表面的范围而确 定用于检测下床的检测区域。
[0273] 图23示意性例示用于检测下床的检测区域DB。假定在监护对象者从床上已下床的 情况下,前景区域出现于与床的侧框架已分离的位置。因此,如在图23中所例示的,检测区 域DB可以根据在步骤S105中已确定的床上表面的范围而设定于与床的侧框架已分离的位 置。检测区域DB的范围与上述检测区域DA同样地,可以根据实施的方式而适当设定。控制部 11可以在已判断为阈值以上的像素数量的前景区域上显现的对象被包括在检测区域DB中 的情况下,检测监护对象者从床上下床。
[0274] (3)端坐
[0275] 当在步骤S101中"端坐"已被选择为检测对象的行为时,监护对象者的"端坐"成为 本步骤S203的判断对象。在端坐的检测上,与下床的检测同样地,使用在步骤S105中已设定 的床上表面的范围。当步骤S105中的床上表面的范围的设定完成时,控制部11能够根据已 设定的床上表面的范围确定用于检测端坐的检测区域。
[0276] 图24示意性例示用于检测端坐的检测区域DC。设想:当监护对象者在床上进行端 坐时,前景区域从床的上方至下方出现在床的侧框架周边。因此,如在图24中所例示的,检 测区域DC可以被设定于从床的上方至下方出现在床的侧框架周边。控制部11可以在已判断 为阈值以上的像素数量的前景区域上显现的对象被包括在检测区域DC中的情况下,检测监 护对象者在床上的端坐。
[0277] (4)越过护栏
[0278] 当在步骤S101中"越过护栏"已被选择为检测对象的行为时,监护对象者的"越过 护栏"成为本步骤S203的判断对象。在越过护栏的检测上,与下床及端坐的检测同样地,使 用在步骤S105中已设定的床上表面的范围。当步骤S105中的床上表面的范围的设定完成 时,控制部11能够根据已设定的床上表面的范围而确定用于检测越过护栏的检测区域。
[0279] 在此,设想:在监护对象者进行了越过护栏的情况下,前景区域出现于床的侧框架 周边并且床的上方。因此,用于检测越过护栏的检测区域可以设定于床的侧框架周边且床 的上方。控制部11可以在已判断为阈值以上的像素数量的前景区域上显现的对象被包括在 该检测区域中的情况下,检测监护对象者越过护栏。
[0280] (5)其它
[0281] 在本步骤S203中,控制部11通过上述方式进行在步骤S101中已选择的各行为的检 测。即,控制部11能够在已判断为满足对象的行为的上述判断条件的情况下检测该对象的 行为。另一方面,在已判断为不满足在步骤S101中已选择的各行为的上述判断条件的情况 下,控制部11不检测监护对象者的行为,使处理前进至下一个步骤S204。
[0282] 此外,如上所述,在步骤S105中,控制部11能够算出将摄像机坐标系的向量变换为 床坐标系的向量的投影变换矩阵M。并且,控制部11能够根据上述数学式6~数学式8确定拍 摄图像3内的任意的点s在摄像机坐标系中的坐标S(S x,Sy,Sz,l)。因此,当在(2)~(4)中检 测各行为时,控制部11可以利用该投影变换矩阵M算出前景区域内的各像素在床坐标系中 的坐标。然后,控制部11可以利用已算出的床坐标系的坐标而判断前景区域内显现的各像 素的对象是否被包括在各检测区域中。
[0283] 并且,检测监护对象者的行为的方法可以不限定于上述的方法,可以根据实施的 方式而适当设定。例如,控制部11可以通过取得作为前景区域已被提取的各像素的拍摄图 像3内的位置及深度的平均而算出前景区域的平均位置。然后,控制部11可以通过判断在真 实空间内该前景区域的平均位置是否被包括在作为检测各行为的条件而已设定的检测区 域中,从而检测监护对象者的行为。
[0284] 进一步地,控制部11可以根据前景区域的形状而确定前景区域显现的身体部位。 前景区域示出从背景图像上发生的变化。因此,前景区域显现的身体部位对应于监护对象 者的动作部位。基于此,控制部11可以根据已确定的身体部位(动作部位)与床上表面的位 置关系而检测监护对象者的行为。与此同样地,控制部11可以通过判断各行为的检测区域 中所包括的前景区域显现的身体部位是否为预定的身体部位而检测监护对象者的行为。
[0285] (步骤 S204)
[0286] 在步骤S204中,控制部11作为危险预兆通知部27发挥作用,判断在步骤S203中检 测到的行为是否为显示出危险迫近监护对象者的预兆的行为。当在步骤S203中已检测的行 为为显示出危险迫近监护对象者的预兆的行为时,控制部11使处理前进至步骤S205。另一 方面,当在步骤S203中未检测监护对象者的行为时,或在步骤S203检测到的行为并不是显 示出危险迫近监护对象者的预兆的行为时,控制部11结束本动作例涉及的处理。
[0287] 被设定为是显示出危险迫近监护对象者的预兆的行为的行为可以根据实施的方 式而适当选择。例如,也可以是端坐作为有可能发生滚落或跌倒的行为而被设定为显示出 危险迫近监护对象者的预兆的行为。在这种情况下,控制部11当在步骤S203中已检测为监 护对象者处于端坐的状态时,就判断为在步骤S203中检测到的行为是显示出危险迫近监护 对象者的预兆的行为。
[0288] 当判断在该步骤S203中检测到的行为是否为显示出危险迫近监护对象者的预兆 的行为时,控制部11可以考虑监护对象者的行为的转变。例如,可设想,与从下床变为端坐 的状态相比,从起来变为端坐的状态的情况,监护对象者滚落或跌倒的可能性高。因此,控 制部11在步骤S204中可以基于监护对象者的行为的转变而判断在步骤S203中检测到的行 为是否为显示出危险迫近监护对象者的预兆的行为。
[0289] 例如,控制部11正在定期地检测监护对象者的行为时,在步骤S203中,在检测了监 护对象者的起来之后,检测为监护对象者已变为端坐的状态。此时,控制部11在本步骤S204 中可以判断为在步骤S203中推断出的行为是显示出危险迫近监护对象者的预兆的行为。
[0290] (步骤 S205)
[0291] 在步骤S205中,控制部11作为危险预兆通知部27发挥作用,进行用于告知具有危 险迫近监护对象者的预兆的通知。与上述设定未完成的通知同样地,控制部11进行该通知 的方法可以根据实施的方式而适当设定。
[0292] 例如,与上述设定未完成的通知同样地,控制部11既可以利用护士呼叫器而进行 用于告知具有危险迫近监护对象者的预兆的通知,也可以利用扬声器14而进行该通知。并 且,控制部11既可以将用于告知具有危险迫近监护对象者的预兆的通知显示于触摸面板显 示器13上,也可以利用电子邮件来进行该通知。
[0293] 当该通知完成时,控制部11结束本动作例所涉及的处理。但是,信息处理装置1在 定期地检测监护对象者的行为的情况下,可以定期地重复上述的动作例中所示出的处理。 定期地重复处理的间隔可以适当设定。并且,信息处理装置1可以根据使用者的要求而执行 上述的动作例中所示出的处理。
[0294] 如以上那样,本实施方式所涉及的信息处理装置1通过利用前景区域和被拍摄体 的深度而评价监护对象者的动作部位与床在真实空间内的位置关系,从而检测监护对象者 的行为。因此,根据本实施方式,可以进行符合真实空间中的监护对象者的状态的行为推 断。
[0295] §4变形例
[0296] 以上,虽然详细说明了本发明的实施方式,但前述的说明在所有方面都只不过是 本发明的例示。可在不脱离本发明范围的前提下进行各种改良和变形,这一点自不必说。
[0297] (1)面积的利用
[0298] 例如,被拍摄体离摄像机2越远,拍摄图像3内的被拍摄体的像越小,被拍摄体越接 近摄像机2,拍摄图像3内的被拍摄体的像越大。拍摄图像3内显现的被拍摄体的深度相对于 被拍摄体的表面而取得,但是,对应于该拍摄图像3的各像素的被拍摄体的表面部分的面积 在各像素间未必一致。
[0299] 因此,为了排除由于被拍摄体的远近所带来的影响,控制部11可以在上述步骤 S203中算出前置区域显现的被拍摄体中的、检测区域上所包括的部分在真实空间中的面 积。然后,控制部11可以根据已算出的面积而检测监护对象者的行为。
[0300] 此外,拍摄图像3内的各像素在真实空间中的面积能够根据该各像素的深度而通 过以下方式求出。控制部11能够根据以下的数学式21及数学式22的关系式而分别算出图10 及图11中例示的任意的点s( 1像素)在真实空间内的横向的长度w及纵向的长度h。
[0301] [数学式 21]
[0305] 因此,控制部11能够通过如此算出的w的平方、h的平方、或w与h之积来求出深度Ds 上的1像素在真实空间内的面积。因此,在上述步骤S203中,控制部11算出显现对象的各像 素在真实空间中的面积的总和,其中该对象包括于前置区域内的像素中的检测区域中。然 后,控制部11可以通过判断已算出的面积的总和是否包括在预定的范围内而检测监护对象 者在床上的行为。由此,能够排除被拍摄体的远近的影响,进而提高监护对象者的行为的检 测精度。
[0306] 此外,由于深度信息的噪声、监护对象者以外的物体的移动等而导致这样的面积 具有很大地变化的情况。为了处理该问题,控制部11可以利用数帧大小的面积的平均。另 外,当处理对象的帧中的所符合的区域的面积与比该处理对象的帧过去的数帧中的该所符 合的区域的面积的平均之差超过预定范围的情况下,控制部11可以将该所符合的区域从处 理对象中除外。
[0307] (2)利用了面积及弥散(分散)的行为推断
[0308] 在利用上述那样的面积而检测监护对象者的行为的情况下,成为用于检测行为的 条件的面积的范围,是根据被设想为包括在检测区域中的监护对象者的预定部位而设定。 该预定部位例如为监护对象者的头部、肩部等。即,根据监护对象者的预定部位的面积而设 定成为用于检测行为的条件的面积的范围。
[0309] 但是,若只用前置区域显现的对象在真实空间内的面积,控制部11并不能够确定 该前置区域显现的对象的形状。因此,控制部11具有取错检测区域上所包括的监护对象者 的身体部位而导致误检测监护对象者的行为的可能性。因此,控制部11可以利用表示真实 空间中的扩展情况的弥散来防止这样的误检测。
[0310] 使用图25来说明该弥散。图25例示区域的扩展情况与弥散的关系。在图25中例示 的区域TA及区域TB假设分别为相同的面积。如果想只用上述那样的面积来推断监护对象者 的行为,则就导致控制部11识别为区域TA与区域TB相同,因此具有导致误检测监护对象者 的行为的可能性。
[0311] 然而,如在图25中例示的,区域TA与区域TB在真实空间中的扩展差别很大(在图25 中水平方向的扩展情况)。因此,控制部11可以在上述步骤S203中算出前置区域上所包括的 像素中的、显现的检测区域上所包括的对象的各像素的弥散。然后,控制部11可以根据已算 出的弥散是否包括在预定的范围内的判断而检测监护对象者的行为。
[0312] 此外,与上述面积的例子同样地,成为行为检测的条件的弥散的范围根据被设想 为包括在检测区域中的监护对象者的规定部位而设定。例如,在设想为被包括在检测区域 上的预定部位是头部的情况下,成为行为检测的条件的弥散的值设定在比较小的值的范围 内。另一方面,在设想为被包括在检测区域上的预定部位是肩部的情况下,成为行为检测的 条件的弥散的值设定在比较大的值的范围内。
[0313] (3)前景区域的不利用
[0314] 在上述实施方式中,控制部11(信息处理装置1)利用在步骤S202中提取的前景区 域而检测监护对象者的行为。然而,检测监护对象者的行为的方法可以不限定于这种利用 了前景区域的方法,可以根据实施的方式而适当选择。
[0315] 在检测监护对象者的行为时不利用前景区域的情况下,控制部11可以省略上述步 骤S202的处理。然后,控制部11可以作为行为检测部23发挥作用,根据拍摄图像3内的各像 素的深度判断床基准面与监护对象者在真实空间内的位置关系是否满足预定的条件,从而 检测监护对象者的与床关联的行为。作为这种例子,例如,作为步骤S203的处理,控制部11 可以通过模式检测、图形元素检测等来解析拍摄图像3而确定与监护对象者关联的像。该与 监护对象者关联的像既可以为监护对象者的全身的像,也可以为头部、肩部等一个或多个 身体部位的像。然后,控制部11可以根据已确定的与监护对象者关联的像与床在真实空间 内的位置关系而检测监护对象者的与床关联的行为。
[0316] 此外,如上所述,用于提取前景区域的处理只不过是计算拍摄图像3与背景图像的 差分的处理。因此,在如上述实施方式那样利用前景区域而检测监护对象者的行为的情况 下,控制部11(信息处理装置1)不利用高级的图像处理即可检测监护对象者的行为。由此, 能够使对监护对象者的行为的检测所涉及的处理高速化。
[0317] ⑷深度信息的不利用
[0318] 在上述实施方式中,控制部11(信息处理装置1)通过根据深度信息推断在真实空 间的监护对象者的状态,从而检测监护对象者的行为。然而,检测监护对象者的行为的方法 可以不限定于这种利用了深度信息的方法,可以根据实施的方式而适当选择。
[0319]在不利用深度信息的情况下,摄像机2可以不包括深度传感器。在这种情况下,控 制部11可以作为行为检测部23发挥作用,通过判断在拍摄图像3内显现的监护对象者与床 的位置关系是否满足预定的条件来检测监护对象者的行为。例如,控制部11可以通过模式 检测、图形元素检测等来解析拍摄图像3而确定与监护对象者关联的像。然后,控制部11可 以根据已确定的与监护对象者关联的像与床在拍摄图像3内的位置关系而检测监护对象者 的与床关联的行为。另外,例如,控制部11可以将前景区域显现的对象假定为监护对象者, 通过判断前景区域所出现的位置是否满足预定的条件来检测监护对象者的行为。
[0320] 此外,如上所述,当利用深度信息时,能够确定拍摄图像3内显现的被拍摄体在真 实空间内的位置。因此,在如上述实施方式那样利用深度信息而检测监护对象者的行为的 情况下,信息处理装置1能够考虑真实空间内的状态而检测监护对象者的行为。
[0321] (5)床上表面的范围的设定方法
[0322] 在上述实施方式的步骤S105中,信息处理装置1(控制部11)通过接收床的基准点 的位置及床的方向的指定而确定了床上表面在真实空间内的范围。然而,确定床上表面在 真实空间内的范围的方法可以不限定于这样的例子,可以根据实施的方式而适当选择。例 如,信息处理装置1可以通过接收预定床上表面的范围的四个角中的两个角的指定而确定 床上表面在真实空间内的范围。以下,使用图26来说明该方法。
[0323] 图26例示当接收床上表面的范围的设定时显示于触摸面板显示器13上的画面60。 控制部11替换成上述步骤S105的处理并执行该处理。即,为了在步骤S105中接收床上表面 的范围的指定,控制部11将画面60显示于触摸面板显示器13。画面60包括:描画从摄像机2 中获得的拍摄图像3的区域61、用于指定规定床上表面的四个角中的两个角的两个标识62。 [0324]如上所述,床的尺寸大多情况根据监护环境预先已决定,控制部11通过预先决定 的设定值或使用者的输入值能够确定床的尺寸。然后,如果能够确定规定床上表面的范围 的四个角中的两个角在真实空间内的位置,则通过将表示床的尺寸的信息(以下,也称为床 的尺寸信息)应用到这些两个角的位置,从而能够确定床上表面在真实空间内的范围。
[0325] 因此,控制部11,例如,采用与在上述实施方式中通过标识52算出指定的基准点p 在摄像机坐标系中的坐标P的方法同样的方法,算出通过两个标识6 2分别指定的两个角在 摄像机坐标系中的坐标。由此,控制部11能够确定该两个角在真实空间上的位置。在由图26 例示的画面60中,使用者指定床头板侧的两个角。因此,控制部11通过将该已确定真实空间 内的位置的两个角作为床头板侧的两个角来对待而推断床上表面的范围,从而确定床上表 面在真实空间内的范围。
[0326] 例如,控制部11将连接已确定在真实空间内的位置的两个角之间的向量的方向确 定为床头板的方向。在这种情况下,控制部11可以将任一个角作为向量的始点来对待。然 后,控制部11将在与该向量同一高度上朝着垂直方向的向量的方向确定作为侧框架的方 向。在作为侧框架的方向而具有多个候选的情况下,控制部11既可以按照预先决定的设定 而确定侧框架的方向,也可以基于由使用者进行的选择而确定侧框架的方向。
[0327] 另外,控制部11使根据床的尺寸信息确定的床的横宽的长度与确定了在真实空间 内的位置的两个角之间的距离建立对应。由此,表现真实空间的坐标系(例如摄像机坐标 系)中的比例尺与真实空间建立对应。然后,控制部11根据由床的尺寸信息确定的床的纵长 的长度,分别由床头板侧的两个角确定存在于侧框架的方向上的床尾板侧的两个角在真实 空间内的位置。由此,控制部11能够确定床上表面在真实空间内的范围。控制部11将通过这 种方式确定的范围设定为床上表面的范围。详细而言,控制部11将根据在操作了"开始"按 钮时所指定的标识62的位置而确定的范围设定为床上表面的范围。
[0328] 此外,在图26中,作为接收指定的两个角,例示了床头板侧的两个角。然而,接收指 定的两个角可以不限定于这样的例子,可以从规定床上表面的范围的四个角中适当选择。
[0329] 另外,接收规定床上表面的范围的四个角中的哪一个角的位置的指定,既可以如 上所述预先已确定,也可以通过使用者的选择而决定。成为被使用者指定位置的对象的角 的选择既可以在指定位置之前进行,也可以在指定位置之后进行。
[0330] 并且,与上述实施方式同样地,控制部11可以将由所指定的两个标识的位置确定 的床框TO描画于拍摄图像3内。通过如此地将床框FD描画于拍摄图像3内,从而能使使用者 确认所指定的床的范围,同时使使用者辨认指定哪一个角的位置较好。
[0331] (6)其它
[0332]此外,上述实施方式涉及的信息处理装置1根据考虑了摄像机2的俯仰角a的关系 式而算出关于床的位置的设定的各种值。但是,信息处理装置1所考虑的摄像机2的属性值 可以不限定于该俯仰角a,可以根据实施的方式而适当选择。例如,除摄像机2的俯仰角a以 外,上述信息处理装置1还可以根据考虑了摄像机2的侧倾角等的关系式,算出关于床的位 置的设定的各种值。
[0333]另外,成为监护对象者的行为的基准的床的基准面,可以不采用上述步骤S103~ 步骤S108而预先设定。床的基准面可以根据实施的方式而适当设定。进一步地,上述实施方 式涉及的信息处理装置1,可以不依据床的基准面而判断前景区域显现的对象与床的位置 关系。判断前景区域显现的对象与床的位置关系的方法可以根据实施的方式而适当设定。
[0334] 另外,在上述实施方式中,使摄像机2的方向对准床的指示内容被显示于设定床上 表面的高度的画面40内。然而,显示使摄像机2的方向对准床的指示内容的方法可以不局限 于这种形态。控制部11可以在与设定床上表面的高度的画面40不同的另外的画面上,将使 摄像机2的方向对准床的指示内容,和通过摄像机2已取得的拍摄图像3显示于触摸面板显 示器13。另外,控制部11也可以在该画面上接收摄像机2的方向的调整已完成这一内容。而 且,控制部11可以在接收到摄像机2的方向的调整已完成这一内容之后,使设定床上表面的 高度的画面40显示于触摸面板显示器13。
[0335] 附图标记说明
[0336] 1…信息处理装置、2…摄像机、3…拍摄图像、5…程序、6…存储介质、21…图像取 得部、22…前景提取部、23…行为检测部、24…设定部、25…显示控制部、26…行为选择部、 27…危险预兆通知部、28…未完成通知部。
【主权项】
1. 一种信息处理装置,包括: 行为选择部,从监护对象者的与床关联的多个行为中接收针对该监护对象者的作为监 护的对象的行为的选择; 显示控制部,对应于作为所述监护的对象而被选择的行为,使拍摄装置相对于所述床 的配置位置的候选显示于显示装置,该拍摄装置用于监护所述监护对象者在床上的行为; 图像取得部,取得通过所述拍摄装置拍摄的拍摄图像;以及 行为检测部,通过判断所述拍摄图像内显现的所述监护对象者与所述床的位置关系是 否满足预定的条件,检测作为所述监护的对象而被选择的行为。2. 根据权利要求1所述的信息处理装置,其中, 所述显示控制部除了所述拍摄装置相对于所述床的配置位置的候选之外,还使预先设 定的、不推荐设置所述拍摄装置的位置显示于显示装置。3. 根据权利要求1或2所述的信息处理装置,其中, 所述显示控制部在接收到完成所述拍摄装置的配置的情况之后,使通过所述拍摄装置 取得的拍摄图像和指示所述拍摄装置的朝向对准所述床的指示内容一起显示于所述显示 装置。4. 根据权利要求1至3所述的信息处理装置,其中, 所述图像取得部取得包含深度信息的拍摄图像,该深度信息表示所述拍摄图像内的各 像素的深度, 作为所述拍摄图像内显现的所述监护对象者与所述床的位置关系是否满足预定的条 件的判断,所述行为检测部根据由所述深度信息所表示的所述拍摄图像内的各像素的深 度,判断所述监护对象者与所述床的区域在真实空间内的位置关系是否满足预定的条件, 从而检测作为所述监护的对象而被选择的行为。5. 根据权利要求4所述的信息处理装置,其中, 所述信息处理装置还包括设定部,所述设定部在接收到完成所述拍摄装置的配置的情 况之后,接收所述床的基准面的高度的指定,并将该指定的高度设定为所述床的基准面的 高度, 在所述设定部接收所述床的基准面的高度的指定时,所述显示控制部根据由所述深度 信息表示的所述拍摄图像内的各像素的深度,在所述拍摄图像上明示显现有位于作为所述 床的基准面的高度而指定的高度上的对象的区域,由此使所取得的所述拍摄图像显示于显 示装置, 所述行为检测部判断在真实空间内的所述床的高度方向上的所述床的基准面与所述 监护对象者的位置关系是否满足预定的条件,从而检测作为所述监护的对象而被选择的行 为。6. 根据权利要求5所述的信息处理装置,其中, 所述信息处理装置还包括前景提取部,该前景提取部根据被设定作为所述拍摄图像的 背景的背景图像与所述拍摄图像的差分而提取所述拍摄图像的前景区域, 所述行为检测部将根据所述前景区域内的各像素的深度而确定的、所述前景区域显现 的对象在真实空间内的位置用作所述监护对象者的位置,判断在真实空间内的所述床的高 度方向上的所述床的基准面与所述监护对象者的位置关系是否满足预定的条件,从而检测 作为所述监护的对象而被选择的行为。7. 根据权利要求5所述的信息处理装置,其中, 所述行为选择部从包括在所述床的端部附近或外侧进行的所述监护对象者的预定行 为的、所述监护对象者的与床关联的多个行为中接收针对所述监护对象者的作为监护的对 象的行为的选择, 所述设定部作为所述床的基准面的高度而接收床上表面的高度的指定,并将该指定的 高度设定为所述床上表面的高度,并且, 在作为所述监护的对象而被选择的行为中包含有所述预定行为的情况下,所述设定部 在设定所述床上表面的高度之后,还为了确定所述床上表面的范围,在所述拍摄图像内接 收设定于所述床上表面内的基准点的位置和所述床的方向的指定,并根据所指定的所述基 准点的位置及所述床的方向设定所述床上表面在真实空间内的范围, 所述行为检测部通过判断所设定的所述床的上表面与所述监护对象者在所述真实空 间内的位置关系是否满足预定的条件来检测作为所述监护的对象而被选择的所述预定行 为。8. 根据权利要求5所述的信息处理装置,其中, 所述行为选择部从包括在所述床的端部附近或外侧进行的所述监护对象者的预定行 为的、所述监护对象者的与床关联的多个行为中接收针对所述监护对象者的作为监护的对 象的行为的选择, 所述设定部作为所述床的基准面的高度而接收床上表面的高度的指定,并将该指定的 高度设定为所述床上表面的高度,并且, 在作为所述监护的对象而被选择的行为中包含有所述预定行为的情况下,所述设定部 在设定所述床上表面的高度之后,还在所述拍摄图像内接收用于规定床上表面的范围的四 个角中两个角的位置的指定,并根据所指定的该两个角的位置设定所述床上表面在真实空 间内的范围, 所述行为检测部通过判断所设定的所述床的上表面与所述监护对象者在所述真实空 间内的位置关系是否满足预定的条件来检测作为所述监护的对象而被选择的所述预定行 为。9. 根据权利要求7或8所述的信息处理装置,其中, 针对设定的所述床上表面的范围,所述设定部判断根据为了检测作为所述监护的对象 而被选择的所述预定行为而设定的所述预定的条件所确定的检测区域是否显现在所述拍 摄图像内,在判断为作为所述监护的对象而被选择的所述预定行为的检测区域未显现在所 述拍摄图像内的情况下,输出警告信息,该警告信息表示可能无法正常进行作为所述监护 的对象而被选择的所述预定行为的检测。10. 根据权利要求7至9中任一项所述的信息处理装置,其中, 所述信息处理装置还包括前景提取部,该前景提取部根据被设定作为所述拍摄图像的 背景的背景图像与所述拍摄图像的差分而提取所述拍摄图像的前景区域, 所述行为检测部将根据所述前景区域内的各像素的深度确定的、所述前景区域显现的 对象在真实空间内的位置用作所述监护对象者的位置,判断所述床上表面与所述监护对象 者在所述真实空间内的位置关系是否满足预定的条件,从而检测作为所述监护的对象而被 选择的所述预定行为。11. 根据权利要求5至10中任一项所述的信息处理装置,其中, 所述信息处理装置还包括未完成通知部,所述未完成通知部在通过所述设定部进行的 设定在预定时间内未完成的情况下,进行用于告知通过所述设定部进行的设定尚未完成的 通知。12. -种信息处理方法,由计算机执行如下步骤: 从监护对象者的与床关联的多个行为中接收针对该监护对象者的作为监护的对象的 行为的选择; 对应于作为所述监护的对象而被选择的行为,使拍摄装置相对于所述床的配置位置的 候选显示于显示装置,该拍摄装置用于监护所述监护对象者在床上的行为; 取得通过所述拍摄装置拍摄的拍摄图像;以及 通过判断所述拍摄图像内显现的所述监护对象者与所述床的位置关系是否满足预定 的条件,检测作为所述监护的对象而被选择的行为。13. -种程序,用于使计算机执行如下步骤: 从监护对象者的与床关联的多个行为中接收针对该监护对象者的作为监护的对象的 行为的选择; 对应于作为所述监护的对象而被选择的行为,使拍摄装置相对于所述床的配置位置的 候选显示于显示装置,该拍摄装置用于监护所述监护对象者在床上的行为; 取得通过所述拍摄装置拍摄的拍摄图像;以及 通过判断所述拍摄图像内显现的所述监护对象者与所述床的位置关系是否满足预定 的条件,检测作为所述监护的对象而被选择的行为。
【文档编号】A61B5/11GK105960663SQ201580006834
【公开日】2016年9月21日
【申请日】2015年1月22日
【发明人】松本修, 松本修一, 村井猛, 佐伯昭典, 中川由美子, 上辻雅义
【申请人】诺日士精密株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1