一种视频流识别方法及装置与流程

本文件涉及互联网，尤其涉及一种视频流识别方法及装置。

背景技术：

1、目前，随着互联网时代的到来，同时随着移动互联网技术的快速发展，互联网在人们日常的学习、工作和生活中得到广泛的应用。人们日常的各种事务都可以使用用户终端(如智能手机)通过互联网来处理和呈现。其中，用户可以根据各自的实际需求在智能手机中安装相应的应用程序，例如，支付类应用、理财类应用、即时通讯应用、购物应用等等。

2、当前，如果用户需要在某一应用程序下完成某项业务的情况下，需要用户在通过该应用程序下的上传控件触发智能手机中的摄像头对目标对象(如用户人脸、银行卡、身份证、票据等)进行拍摄，并上传目标对象的视频流信息，以便基于该视频流信息为用户开通相应的互联网业务。然而，可能存在恶意用户通过视频流注入攻击的手段，即直接对智能手机的硬件/驱动/api层进行hook，实现将实时采集的原始视频流替换为预存的视频流信息，以便将预存的视频流信息作为输入信息源，达到恶意触发目标业务执行的目的。

3、例如，以基于人脸识别进行支付类应用的账号登录为例，恶意用户通过预先获取目标用户的人脸采集视频信息，然后，在人脸图像采集时，通过视频帧替换的方式将目标用户的人脸采集视频信息上传至身份验证服务器，此时身份验证服务器将基于该人脸采集视频信息对登录用户进行身份验证，进而确定本次用户身份验证通过，以使恶意用户完成身份验证并进入用户操作界面，这样将为恶意用户执行非法行为提供入口，无法实现通过身份验证的方式来保证账户安全性的目的。

4、因此，需要提供一种能够快速、准确、可靠地视频流识别的技术方案。

技术实现思路

1、本说明书一个或多个实施例的目的是提供一种视频流识别方法。该视频流识别方法包括：

2、确定目标视频流对应的光流变化信息，其中，所述目标视频流的理论采集时间段为预设时间段且理论采集设备为目标用户终端。以及，确定所述目标用户终端的位姿变化信息，其中，所述位姿变化信息是基于所述目标用户终端在所述预设时间段内的传感器检测信息确定的。根据所述光流变化信息和所述位姿变化信息之间的比对信息，确定针对所述目标视频流的可信性识别结果。

3、本说明书一个或多个实施例的目的是提供一种视频流识别装置。该视频流识别装置包括：

4、确定目标视频流对应的光流变化信息，其中，所述目标视频流的理论采集时间段为预设时间段且理论采集设备为目标用户终端。以及，确定所述目标用户终端的位姿变化信息，其中，所述位姿变化信息是基于所述目标用户终端在所述预设时间段内的传感器检测信息确定的。根据所述光流变化信息和所述位姿变化信息之间的比对信息，确定针对所述目标视频流的可信性识别结果。

5、本说明书一个或多个实施例的目的是提供一种视频流识别设备，包括：处理器；以及被安排成存储计算机可执行指令的存储器。

6、所述计算机可执行指令在被执行时使所述处理器确定目标视频流对应的光流变化信息，其中，所述目标视频流的理论采集时间段为预设时间段且理论采集设备为目标用户终端。以及，确定所述目标用户终端的位姿变化信息，其中，所述位姿变化信息是基于所述目标用户终端在所述预设时间段内的传感器检测信息确定的。根据所述光流变化信息和所述位姿变化信息之间的比对信息，确定针对所述目标视频流的可信性识别结果。

7、本说明书一个或多个实施例的目的是提供一种存储介质，用于存储计算机可执行指令。所述可执行指令在被处理器执行时确定目标视频流对应的光流变化信息，其中，所述目标视频流的理论采集时间段为预设时间段且理论采集设备为目标用户终端。以及，确定所述目标用户终端的位姿变化信息，其中，所述位姿变化信息是基于所述目标用户终端在所述预设时间段内的传感器检测信息确定的。根据所述光流变化信息和所述位姿变化信息之间的比对信息，确定针对所述目标视频流的可信性识别结果。

技术特征：

1.一种视频流识别方法，包括：

2.根据权利要求1所述的方法，其中，所述确定目标视频流对应的光流变化信息，包括：

3.根据权利要求2所述的方法，其中，所述根据所述多个指定时间节点下的所述对象图像帧，确定所述目标视频流对应的光流变化信息，包括：

4.根据权利要求3所述的方法，其中，所述根据各所述图像帧组合分别对应的所述光流空间运动矩阵，确定所述目标视频流对应的光流变化信息，包括：

5.根据权利要求1所述的方法，其中，所述确定目标用户终端的位姿变化信息，包括：

6.根据权利要求5所述的方法，其中，所述根据所述多个指定时间节点下的所述传感器检测信息，确定所述目标用户终端的位姿变化信息，包括：

7.根据权利要求6所述的方法，其中，所述根据各所述传感器空间运动矩阵，确定所述目标用户终端的位姿变化信息，包括：

8.根据权利要求1所述的方法，其中，所述根据所述光流变化信息和所述位姿变化信息之间的比对信息，确定所述目标视频流是否为所述目标用户终端在所述预设时间段内实时采集的视频流，包括：

9.根据权利要求8所述的方法，其中，所述光流变化信息包括：所述预设时间段内的多个光流空间运动矩阵，所述位姿变化信息包括：所述预设时间段内的多个传感器空间运动矩阵；

10.根据权利要求9所述的方法，其中，所述将所述多个光流空间运动矩阵与所述多个传感器空间运动矩阵进行比对，得到相应的光流位姿比对结果，包括：

11.根据权利要求10所述的方法，其中，所述将预处理后的所述多个光流空间运动矩阵和预处理后的所述多个传感器空间运动矩阵进行比对，得到相应的光流位姿比对结果，包括：

12.一种视频流识别装置，包括：

13.根据权利要求12所述的装置，其中，所述光流变化信息确定模块，其：

14.根据权利要求13所述的装置，其中，所述光流变化信息确定模块，其：

15.根据权利要求14所述的装置，其中，所述光流变化信息确定模块，其：

16.根据权利要求12所述的装置，其中，所述位姿变化信息确定模块，其：

17.根据权利要求16所述的装置，其中，所述位姿变化信息确定模块，其：

18.根据权利要求17所述的装置，其中，所述位姿变化信息确定模块，其：

19.根据权利要求12所述的装置，其中，所述视频流可信性识别模块，其：

20.根据权利要求19所述的装置，其中，所述光流变化信息包括：所述预设时间段内的多个光流空间运动矩阵，所述位姿变化信息包括：所述预设时间段内的多个传感器空间运动矩阵；

21.根据权利要求20所述的装置，其中，所述视频流可信性识别模块，其：

22.根据权利要求21所述的装置，其中，所述视频流可信性识别模块，其：

23.一种视频流识别设备，包括：

24.一种存储介质，用于存储计算机可执行指令，所述可执行指令在被处理器执行时实现以下方法：

技术总结
本说明书一个或多个实施例提供了一种视频流识别方法及装置，该方法包括：确定目标视频流对应的光流变化信息，其中，该目标视频流的理论采集时间段为预设时间段且理论采集设备为目标用户终端。以及，确定目标用户终端的位姿变化信息，其中，该位姿变化信息是基于目标用户终端在预设时间段内的传感器检测信息确定的。根据确定出的光流变化信息和位姿变化信息之间的比对信息，确定针对目标视频流的可信性识别结果。

技术研发人员：郭明宇,徐崴
受保护的技术使用者：支付宝实验室（新加坡）有限公司
技术研发日：
技术公布日：2024/1/15