所确定的第一峰和所确定的第二峰之间的峰间距可以被确定。所确定的峰间距可以在预定的范围之内。基于所确定的峰间距，可以确定人类对象的心率。
[0133]本公开内容的另一个示例性方面可以包括非临时性计算机可读介质和/或存储介质，和/或非临时性机器可读介质和/或存储介质，其上具有存储的机器代码和/或计算机程序，机器代码和/或计算机程序具有可被用于视频数据处理的机器和/或计算机执行的至少一个代码段。在电子设备中的该至少一个代码段可以使得机器和/或计算机执行包括接收人类对象的视频数据的步骤。接收到的视频数据的帧序列中的一帧或多帧可以包括一个或多个物体。该方法还可以包括确定与帧序列中的一个或多个物体相关联的多个轮廓点，使得与多个轮廓点中的每个轮廓点相关联的曲率超过第一阈值。该方法还可以包括基于多个轮廓点中的第一组轮廓点的循环运动从帧序列中的一个或多个物体中确定第一组物体。可以在所确定的第一组轮廓点的循环运动的频谱中确定一个或多个峰值。所确定的一个或多个峰值中的一个峰值的幅度可以高于预先指定的阈值。基于所确定的一个或多个峰值中的一个，可以确定人类对象的呼吸率。
[0134]本公开内容可以用硬件、或硬件和软件的组合实现。本公开内容可以以集中的方式、在至少一个计算机系统中、或以分布式的方式实现，其中不同的元件可能散布在若干个互连的计算机系统中。适于执行本文所描述方法的计算机系统或其它装置都可以是适合的。硬件和软件的组合可以是具有计算机程序的通用计算机系统，其中当所述计算机程序被加载并且执行时，会控制计算机系统，使其执行本文所描述的方法。本公开内容可以用包括还执行其它功能的集成电路的一部分的硬件来实现。
[0135]本公开内容还可以嵌入在计算机程序产品中，其中计算机程序产品包括能够实现本文所描述方法的所有特征，并且当其被加载到计算机系统中时能够执行这些方法。在此背景下，计算机程序指任何语言、代码或符号形式的一组指令的任何表示，所述指令要使具有信息处理能力的系统直接地或者在以下:a)转换成另一种语言、代码或符号；b)在不同材料形式中复制的任何一个或两者之后执行特定的功能。
[0136]虽然已参照某些实施例对本公开内容进行了描述，但是本领域技术人员将会理解，在不背离本公开内容的范围的情况下，可以进行各种改变并且等价物可被替换。此外，在不背离其范围的情况下，可进行许多修改以使特定的情形或材料适于本公开内容的教导。因此，本公开内容不是要限定于所公开的特定实施例，而是本公开内容将包括属于所附权利要求的范围之内的所有实施例。
【主权项】
1.一种方法，包括: 在电子设备中: 接收人类对象的视频数据，其中所述接收到的视频数据的帧序列中的每一帧与多个谱分量相关联； 从对应于所述多个谱分量的多个峰中确定第一峰和第二峰，其中所述确定的所述第一峰和所述确定的所述第二峰的幅度超过第一阈值； 确定所述确定的所述第一峰和所述确定的所述第二峰之间的峰间距，其中所述确定的所述峰间距在预定的范围之内；以及 基于所述确定的峰间距确定所述人类对象的心率。2.如权利要求1所述的方法，其中所述帧序列中的每一帧与多个通道相关联，其中所述多个通道中的每个通道与所述多个谱分量相关联。3.如权利要求1所述的方法，其中所述确定的所述第一峰的所述幅度超过第二阈值。4.如权利要求3所述的方法，包括基于所述确定的所述第一峰确定所述人类对象的心率。5.如权利要求1所述的方法，还包括当与所述确定的所述第二峰相关联的参数不在所述预定的范围之内时，丢弃所述确定的所述第二峰。6.如权利要求1所述的方法，还包括基于之前确定的所述人类对象的心率选择所述确定的所述第一峰和所述确定的所述第二峰中的一个峰，其中与所述第一峰和所述第二峰相关联的参数在所述预定的范围之内。7.如权利要求1所述的方法，其中所述峰间距基于与所述第二峰和所述第一峰相关联的参数之间的差来确定。8.如权利要求1所述的方法，其中在所述帧序列的每一帧中的所述视频数据包括多个通道，其中所述多个通道包括红色(R)通道、绿色(G)通道和蓝色(B)通道。9.如权利要求1所述的方法，还包括基于在所述帧序列的每一帧中的所述视频数据的信号分离确定多个谱分量。10.如权利要求1所述的方法，还包括在所述帧序列的一帧中检测到所述人类对象。11.如权利要求10所述的方法，还包括分割所述帧序列中包括所述检测到的人类对象的所述一帧。12.如权利要求11所述的方法，还包括确定所述检测到的人类对象的对象区域，其中所述确定的所述对象区域包括所述人类对象的皮肤区域。13.如权利要求12所述的方法，其中所述对象区域利用识别标签与所述人类对象相关耳关。14.如权利要求13所述的方法，还包括基于一个或多个生理参数跟踪所述确定的所述对象区域，其中所述多个谱分量对应于所述跟踪的所述对象区域。15.如权利要求14所述的方法，其中所述一个或多个生理参数包括以下的一个或多个:皮肤纹理、皮肤模式和/或与所述检测到的人类对象相关联的一个或多个特征。16.—种方法，包括: 在电子设备中: 接收人类对象的视频数据，其中所述接收到的视频数据的帧序列中的一帧或多帧包括一个或多个物体； 确定与所述帧序列中的所述一个或多个物体相关联的多个轮廓点，其中所述多个轮廓点中的每个轮廓点的曲率超过曲率阈值； 基于所述多个轮廓点中的第一组轮廓点的循环运动确定所述帧序列中的所述一个或多个物体中的第一组物体； 在所述第一组轮廓点的所述循环运动的频谱中确定一个或多个峰值，其中所述确定的所述一个或多个峰值中的一个峰值的幅度高于预先指定的阈值；以及 基于所述确定的所述一个或多个峰值中的所述一个峰值确定所述人类对象的呼吸率。17.如权利要求16所述的方法，其中所述第一组轮廓点的所述循环运动与相对于参考轮廓点具有非零量值的位移的周期性重现相关联，其中所述位移在预定义的一组相反的方向中发生。18.如权利要求16所述的方法，还包括基于所述多个轮廓点中的第二组轮廓点的非循环运动确定所述帧序列中的所述一个或多个物体中的第二组物体。19.如权利要求18所述的方法，其中所述第二组轮廓点的所述非循环运动与相对于参考轮廓点具有非零量值的位移的周期性重现相关联，其中所述位移在随机的方向中发生。20.如权利要求18所述的方法，其中所述第二组轮廓点的所述非循环运动与相对于参考轮廓点具有零量值的位移相关联。21.如权利要求18所述的方法，还包括确定分别与所述第一组物体和所述第二组物体相关联的所述第一组轮廓点和所述第二组轮廓点。22.如权利要求16所述的方法，其中所述频谱是基于所述第一组轮廓点的所述循环运动的谱运动分析确定的。23.—种电子设备，包括: 一个或多个处理器，操作为: 接收人类对象的视频数据，其中所述接收到的视频数据的帧序列中的每一帧与多个谱分量相关联； 从对应于所述多个谱分量的多个峰中确定第一峰和第二峰，其中所述确定的所述第一峰和所述确定的所述第二峰的幅度超过第一阈值； 确定所述确定的所述第一峰和所述确定的所述第二峰之间的峰间距，其中所述确定的所述峰间距在预定的范围之内；以及 基于所述确定的峰间距确定所述人类对象的心率。24.如权利要求23所述的电子设备，其中所述确定的所述第一峰的所述幅度超过第二阈值。25.如权利要求24所述的电子设备，其中所述一个或多个处理器操作为基于所述确定的所述第一峰确定所述人类对象的心率。26.如权利要求23所述的电子设备，其中所述一个或多个处理器操作为，当与所述确定的所述第二峰相关联的参数不在所述预定的范围之内时，丢弃所述确定的所述第二峰。27.如权利要求23所述的电子设备，其中所述一个或多个处理器操作为基于之前确定的所述人类对象的心率选择所述确定的所述第一峰和所述确定的所述第二峰中的一个峰，其中与所述第一峰和所述第二峰中的每一个相关联的参数在所述预定的范围之内。28.如权利要求23所述的电子设备，其中所述一个或多个处理器操作为在所述帧序列的一帧中检测到所述人类对象。29.如权利要求28所述的电子设备，其中所述一个或多个处理器操作为分割所述帧序列中包括所述检测到的人类对象的所述一帧。30.如权利要求29所述的电子设备，其中所述一个或多个处理器操作为确定所述检测到的人类对象的对象区域，其中所述确定的所述对象区域包括所述人类对象的皮肤区域。31.如权利要求30所述的电子设备，其中所述对象区域利用识别标签与所述人类对象相关联。32.如权利要求31所述的电子设备，其中所述一个或多个处理器操作为基于一个或多个生理参数跟踪所述确定的所述对象区域，其中所述多个谱分量对应于所述跟踪的所述对象区域。33.一种电子设备，包括: 一个或多个处理器，操作为: 接收人类对象的视频数据，其中所述接收到的视频数据的帧序列中的一帧或多帧包括一个或多个物体； 确定与所述帧序列中的所述一个或多个物体相关联的多个轮廓点，其中所述多个轮廓点中的每个轮廓点的曲率超过曲率阈值； 基于所述多个轮廓点中的第一组轮廓点的循环运动确定所述帧序列中的所述一个或多个物体中的第一组物体； 在所述确定的第一组轮廓点的所述循环运动的频谱中确定一个或多个峰值，其中所述确定的所述一个或多个峰值中的一个峰值的幅度高于预先指定的阈值；以及 基于所述确定的所述一个或多个峰值中的所述一个峰值确定所述人类对象的呼吸率。34.如权利要求33所述的电子设备，其中所述第一组轮廓点的所述循环运动与相对于参考轮廓点具有非零量值的位移的周期性重现相关联，其中所述位移在预定义的一组相反的方向中发生。35.如权利要求33所述的电子设备，其中所述一个或多个处理器操作为基于所述多个轮廓点中的第二组轮廓点的非循环运动确定所述帧序列中的所述一个或多个物体中的第二组物体。36.如权利要求35所述的电子设备，其中所述第二组轮廓点的所述非循环运动与相对于参考轮廓点具有非零量值的位移的周期性重现相关联，其中所述位移在随机的方向中发生。37.如权利要求35所述的电子设备，其中所述第二组轮廓点的所述非循环运动与相对于参考轮廓点具有零量值的位移相关联。38.如权利要求33所述的电子设备，其中所述一个或多个处理器操作为确定分别与所述第一组物体和所述第二组物体相关联的所述第一组轮廓点和所述第二组轮廓点。39.如权利要求33所述的电子设备，其中所述频谱是基于所述第一组轮廓点的所述循环运动的谱运动分析确定的。40.—种电子设备，包括: 收发器，操作为接收人类对象的视频数据，其中所述接收到的视频数据的帧序列中的每一帧与多个谱分量相关联；以及一个或多个处理器，操作为: 从对应于所述多个谱分量的多个峰中确定第一峰和第二峰，其中所述确定的所述第一峰和所述确定的所述第二峰的幅度超过第一阈值； 确定所述确定的所述第一峰和所述确定的所述第二峰之间的峰间距，其中所述确定的所述峰间距在预定的范围之内；以及 基于所述确定的峰间距确定所述人类对象的心率。41.一种电子设备，包括: 收发器，操作为接收人类对象的视频数据，其中所述接收到的视频数据的帧序列中的一帧或多帧包括一个或多个物体；一个或多个处理器，操作为: 确定与所述帧序列中的所述一个或多个物体相关联的多个轮廓点，其中所述多个轮廓点中的每个轮廓点的曲率超过曲率阈值； 基于所述多个轮廓点中的第一组轮廓点的循环运动确定所述帧序列中的所述一个或多个物体中的第一组物体； 在所述确定的第一组轮廓点的所述循环运动的频谱中确定一个或多个峰值，其中所述确定的所述一个或多个峰值中的一个峰值的幅度高于预先指定的阈值；以及 基于所述确定的所述一个或多个峰值中的所述一个峰值确定所述人类对象的呼吸率。
【专利摘要】本文公开了用于视频数据处理的方法和系统的各个方面。方法包括接收人类对象的视频数据。接收到的视频数据的帧序列中的每一帧与多个频谱分量相关联。确定对应于多个频谱分量的多个峰中的第一峰和第二峰。所确定的第一峰和第二峰的幅度超过第一阈值。所确定的第一峰和所确定的第二峰之间的峰间距被确定。所确定的峰间距在预定的范围之内。基于确定的峰间距，人类对象的心率被确定。
【IPC分类】H04N5/14
【公开号】CN105391916
【申请号】CN201510481959
【发明人】余良吟, 刘明昌
【申请人】索尼公司
【公开日】2016年3月9日
【申请日】2015年8月4日
【公告号】EP2988274A2, EP2988274A3, US20160055635