参会人员专注度的检测方法和系统、视频会议服务器与流程

文档序号:30576685发布日期:2022-06-29 09:37阅读:来源:国知局

技术特征:
1.一种参会人员专注度的检测方法,应用于服务器,其特征在于,包括:接收来自至少一个第一终端的第一参会视频并从所述第一参会视频提取至少一张参会图像,所述参会图像中包括至少一个参会人员;使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息;根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息;将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频并传输至第二终端以显示所述第二参会视频。2.根据权利要求1所述的检测方法,其特征在于,所述使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息进一步包括:所述人脸识别信息包括对应的参会人员的身份信息和在所述参会图像中的人脸位置坐标;所述将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频并传输至第二终端以显示所述第二参会视频进一步包括:根据所述人脸位置坐标将所述对应的参会人员的身份信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频。3.根据权利要求2所述的检测方法,其特征在于,所述根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息进一步包括:根据所述人脸识别信息使用表情识别模型识别所述参会图像以识别各参会人员的表情状态,并根据所述表情状态对应的预设置的专注度权重值输出各参会人员的表情专注度分值;和/或根据所述人脸识别信息使用行为识别模型识别所述参会图像以识别各参会人员的行为状态,并根据所述行为状态对应的预设置的专注度权重值输出各参会人员的行为专注度分值;根据各参会人员的所述表情专注度分值和/或行为专注度分值输出各参会人员的专注度信息。4.根据权利要求3所述的检测方法,其特征在于,接收来自第一终端的第一参会视频并根据所述第一参会视频提取至少一张参会图像之前,所述检测方法还包括:采集各参会者的生物特征和参会信息;所述使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息进一步包括,使用各参会者的生物特征和参会信息核对所述身份信息;所述根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息进一步包括:使用各参会者的生物特征核对所述表情状态。5.根据权利要求1-4中任一项所述的检测方法,其特征在于,所述根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息进一步包括:
按照会议时间存储各参会人员的专注度信息;根据存储的各参会人员的专注度信息绘制每个参会人员的专注度曲线并生成该参会人员的专注度分析报告。6.根据权利要求1所述的检测方法,其特征在于,所述接收来自第一终端的第一参会视频并根据所述第一参会视频提取多张参会图像进一步包括:按照预设时间间隔提取至少一张参会图像。7.一种参会人员专注度的检测方法,应用于第一终端,其特征在于,包括:采集第一参会视频并传输至服务器,使得服务器使用人脸识别模型和专注度识别模型从所述第一参会视频获取各参会人员的人脸识别信息和专注度信息,并将所述人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频并传输至第二终端以显示该第二参会视频。8.一种参会人员专注度的检测方法,应用于第二终端,其特征在于,包括:接收并播放第二参会视频,所述第二参会视频包括各参会人员的人脸识别信息和专注度信息,所述人脸识别信息和专注度信息为服务器使用人脸识别模型和专注度识别模型从第一终端采集的第一参会视频中获取的。9.一种视频会议服务器,其特征在于,包括:视频接收单元,配置为:接收来自第一终端的第一参会视频;视频提取单元,配置为:根据所述第一参会视频提取多张参会图像,所述参会图像包括至少一个参会人;人脸识别单元,配置为:使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息;专注度识别单元,配置为:根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息;视频叠加单元,配置为:将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频;视频发送单元,配置为:将所述第二参会视频传输至第二终端以显示该第二参会视频。10.一种参会人员专注度检测系统,其特征在于,包括:第一终端,配置为采集第一参会视频并传输至服务器;服务器,配置为根据所述第一参会视频提取多张参会图像,所述参会图像包括至少一个参会人;使用人脸识别模型识别所述参会图像中的参会人员并输出各参会人员的人脸识别信息;根据所述人脸识别信息使用专注度识别模型识别所述参会图像并输出各参会人员的专注度信息;将每个参会人员的人脸识别信息和专注度信息实时叠加到所述第一参会视频中以生成第二参会视频并传输至第二终端;第二终端,配置为播放第二参会视频。11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-6中任一项所述的方法;或者该程序被处理器执行时实现如权利要求7所述的方法;
或者该程序被处理器执行时实现如权利要求8所述的方法。12.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-6中任一项所述的方法;或者所述处理器执行所述程序时实现如权利要求7所述的方法;或者所述处理器执行所述程序时实现如权利要求8所述的方法。

技术总结
本发明公开了一种参会人员专注度的检测方法和系统、视频会议服务器、存储介质。其中参会人员专注度的检测方法包括:接收来自第一终端的第一参会视频并根据第一参会视频提取多张参会图像,参会图像包括至少一个参会人;使用人脸识别模型识别参会图像中的参会人员并输出各参会人员的人脸识别信息;根据人脸识别信息使用专注度识别模型识别参会图像并输出各参会人员的专注度信息;将每个参会人员的人脸识别信息和专注度信息实时叠加到第一参会视频中以生成第二参会视频并传输至第二终端以显示该第二参会视频。以显示该第二参会视频。以显示该第二参会视频。


技术研发人员:张长峰 张敬宇 郭小琴
受保护的技术使用者:京东方科技集团股份有限公司
技术研发日:2020.12.24
技术公布日:2022/6/28
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1