在ems环境中用于三维交互监视的系统和方法_3

文档序号:9278209阅读:来源:国知局
线。可移动存储介质205例如可以是任何种类 的外部硬盘驱动器、软盘驱动器、闪存驱动器、IOMEGA*(艾美加)Zip驱动器、光盘只读 存储器(CD-ROM)、可重写式光盘(CD-RW)或数字视频盘只读存储器(DVD-ROM)。上述组件 意味着举例说明某些类型的可能性。前面提到的示例决不应限制本发明的范围,因为它们 仅仅是示例性的实施方式。
[0063] 图3示出根据本发明实施方式的具有监视三维交互的系统300的紧急响应环境。 系统300包括传感器或传感器阵列1。传感器1可以是照相机、摄像机或能够收集视觉信息 的其它成像设备。根据本发明的一些实施方式,传感器1是传感器阵列,其包括图像捕捉设 备例如彩色图像捕捉设备以及深度确定设备例如红外发射器和红外深度传感器。传感器1 还可以包括音频捕捉设备。例如,传感器1可以是传感器阵列,诸如从微软公司(Microsoft Corporation)可获得的Kinec押传感器阵列。传感器1还可以是或可替代性地是从Leap Motion公司(LeapMotion,Inc.)可获得的LEAP?设备。根据本发明的实施方式,传感器1 可以是或包括允许收集视觉、深度、音频和颜色信息等的多种多样的硬件。
[0064] 传感器1可放置在紧急响应环境以内,例如在救护车101的后部152,使得患者 116和/或工作人员2、3的活动至少部分地在其视野以内。例如,传感器1可安装在救护车 101的后部隔室152的壁或天花板上。传感器1还可包括在其视野以内的患者支撑器4,诸 如床、行军床或担架,患者116躺在其上和/或在其上进行治疗。救护车101的后部152还 可包括供应柜5,例如药物柜或麻醉品柜,其可存放有药物例如麻醉品6。
[0065] 图4示出根据本发明实施方式的包括与传感器阵列1可通信地耦接的车辆控制系 统104的系统。根据本发明的实施方式,传感器阵列1可包括成像设备9、深度传感器系统 10和/或音频输入11。VCS104还可与患者监视设备106、制图系统108,导航系统110和 车辆操作系统8可通信地耦接。车辆操作系统8可包括安装在车辆内的与车辆安全和/或 操作相关的传感器和控制器,包括制造商安装和零配件市场的设备,例如车辆速度传感器、 安全带检测器,加速度计和其它与车辆和安全相关的设备,包括但不限于在2012年6月7 日提交的美国临时专利申请61/656, 527号中所描述的那些,为了所有的目的该申请以其 全文通过引用并入本文。
[0066] 车辆控制系统104可配置成创建、维护和/或更新接诊记录7,其在紧急响应环境 中可本地存储(例如在数据库118中)和/或远程存储在企业数据库130上。接诊纪录7 可包括由车辆控制系统104和VCS 104可通信地耦接到其的每个设备所获得的信息。例如, 在接诊记录7中的记录可特定于特定患者116的接诊和/或车辆101的特定调度。
[0067]VCS104可配置成在紧急响应环境中跟踪交互,例如在紧急响应环境中由看护者 2、3和患者4和/或对象进行且在其间的交互。VCS104可配置成接收在传感器阵列1的 视野范围内的彩色图像和深度信息。VCS104也可配置成在本地和/或远程地维护紧急接 诊记录7。VCS104基于由传感器阵列1所接收到的彩色图像和深度信息,监视在紧急响应 环境中对象的位置和/或对象的运动。例如,传感器阵列1可以是Kinect¥_传感器阵列,并 且VCS104可包括软件,其接收来自传感器阵列1的数据,以检测或近似得出人体的运动和 定位及其在三维空间中各自的链接(骨骼关节和骨骼)。
[0068] 因此,VCS104可以将在传感器1的视野范围内的不同人之间进行区分,并可以监 视或观察在视野范围内的两个或多个这种人的运动。根据本发明的一些实施方式,VCS104 配置成识别哪个人是患者和哪个人是看护人。例如,通过观察特定的人相对静止地躺在患 者支撑器4上,VCS104可识别该人为患者,而因为另一个人站立或在救护车101的后部走 来走去所以另一个人是EMS技术人员2。VCS104可配置成通过近似得出紧急响应环境中 一个或多个人的基本骨骼结构元件,跟踪或监视他们的三维运动,并且因此可确定何时两 个人进行接触或紧密接近。例如,根据本发明的实施方式,VCS104可确定EMS技术人员2 的手或手臂何时到达患者116的身体区域的上方并与其接触。
[0069] 由VCS104从传感器阵列1所接收到的任何或所有信息,以及源于这类传感器信 息的任何附加数据或信息,可被存储到接诊记录7。也可将这类信息以与在接诊记录7中的 来自其它设备的其它数据相关的方式存储到接诊记录7,例如在接诊记录7中的记录可包 括时间索引和/或患者标识。
[0070] 根据本发明的实施方式,VCS104配置成将状况的发生记录到紧急接诊记录7中。 这类状况可基于对象的位置和/或对象的运动。例如,对象可以是人,并且VCS104可监视 人在三维空间中的运动(或其骨骼近似体),并使得当人或人的部分相交于某个位置(例如 在救护车101以内),或保持在特定的位置中持续一定的时间,或与另一对象相交或接近时 在接诊记录7中输入条目。VCS104可配置成当一个对象(例如人)进入另一对象(例如 另一个人)的特定距离内时,例如第一对象在其触及第二对象的零或最小距离,输入条目 到接诊记录7。因此,VCS104可配置成当看护人2或3靠近患者116和/或触及患者116 时,或当对象靠近或触及患者116时标记接诊记录7。
[0071] VCS104可配置成基于以三维视觉和位置数据在对状况的观察基础上以各种方式 更新接诊记录7。例如,VCS104可配置成将状况所发生时的时间、和/或状况的识别或所 发生状况的类型,和/或与状况的发生一致的其它数据输入到接诊记录7内,例如覆盖状况 发生时的时间或时间范围的视频数据或彩色图像。在某些情况下,VCS104例如从可通信 地耦接到患者的除颤器或其它患者监视设备106接收关于患者116的流送临床数据,并且 基于传感器1的可视数据将在紧急接诊记录7中至少一部分的流送临床数据与状况的发生 相关联。根据本发明的实施方式,关联一些或全部的流送临床数包括标记对应于状况发生 时间的一些或全部的临床数据流。
[0072] 图7示出根据本发明实施方式的流程图700,其示出基于三维位置和形状视觉数 据的状况的发生的记录。一个或多个不同的对象例如通过VCS104和传感器1识别(方框 702)。对一个或多个对象的位置和/或运动进行跟踪或另外监视或建模(方框704),并基 于这样跟踪VCS104来识别状况的发生(方框706)。将状况的发生或关于状况的信息记录 在患者接诊记录7中(方框708)。
[0073] 图8示出根据本发明实施方式的流程图800,更详细地描述了类似的方法。识别在 例如救护车后部的紧急响应环境中的单个的人或不同的人(方框802)。至少一个人被识别 为患者(方框804)。对一个或多个人的位置和/或运动进行观察或跟踪或另外建模(方 框806),并且VCS104基于此识别状况的发生,例如患者治疗的发生(方框808)。可将关 于患者接触的信息记录在接诊记录7中(方框810),例如通过记录状况(例如治疗)发生 时的时间或时间范围(方框812),和/或通过记录发生的接触(例如治疗)的类型(方框 814) 〇
[0074] 例如,如果供应到VCS104的传感器1数据由VCS104解释成看护人2的手到达患 者116头部或嘴区域,那么VCS104可更新该接诊记录7,以反映口服药物已经或者可能被 施用给患者116,以及其发生的具体时间。可替代性地或附加地,VCS104可配置成在稍后 的时间(例如在紧急接诊之后或在标准班次结束时)提示EMS技术人员2或其它看护人, 以确认或验证输入到患者接诊纪录7中的所感知的交互或状况。例如,VCS104可观察到 EMS技术人员2的手到达患者116面部的发生并将这种发生标记为可能的口服药物施用,但 是当提示EMS技术人员2稍后进行确认时,可给予EMS技术人员2这样的能力以便能够编 辑该观察以反映出该交互实际上是转动患者头部,或为什么看护人2接触患者116的一些 其它原因。
[0075] 图9描绘根据本发明实施方式的示出在用于库存控制的紧急响应环境中用于监 视三维交互的方法的流程图900。VCS104可使用传感器1和关于环境的已知信息识别在 紧急响应环境以内的特定位置,例如电源柜5(方框902)。VCS104还可配置成关于在紧急 响应环境中某些项目的位置进行定制。例如,在初始化和/或配置规程期间,VCS104可提 示用户将用户手指或手围绕供应柜5的外周长移动和/或移动到其门,以便VCS104可录 入供应柜5的三维位置。这类柜5例如可以是麻醉品柜5,出于安全和安保的原因对其访问 通常受到控制。
[0076]VCS104可识别在紧急响应环境中例如救护车后部的单个的人(方框904),并跟 踪这种人的位置和/或运动(方框906)。根据本发明的实施方式,这可用从传感器阵列1 所收到的视觉和深度信息进行。基于从传感器阵列1所接收到的这种视觉和深度信息,VCS 104还可检测或跟踪在紧急响应环境中对象的三维运动,例如非人类对象。VCS104可确定 在人体和对象之间接触的发生(方框908),例如人体或其一部分靠近麻醉品柜5和/或与 麻醉品柜5相交的发生。VCS104还可基于接触的发生(例如柜5被访问)将条目记录在 紧急接诊记录7中(方框910),连同
当前第3页1 2 3 4 5 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1