一种基于观众观影表情识别的电影类型检测方法_2

文档序号:8339967阅读:来源:国知局
第三种划分方式,按照拍摄的形式进行划分,可划分为动画片、传记片、记录片、音乐片和短片。
[0021]第四种划分方式,按照适合观看的观众年龄进行划分,可划分为儿童片、家庭片和成人片。
[0022]其中,对观众影响较大的划分方式为第二种划分方式,观众需要根据自己身体状况确定能够观看的影片类型,如果没有相关类型提示而且观众选择了不合适的影片,后果将不堪设想。例如,如果具有心脏病或心血管疾病的观众误选了情节过于夸张的恐怖片,很有可能导致观众触发疾病,造成严重的人身伤害。
[0023]现有技术中对待上映影片的类型划分通常聘请几个专业电影人士进行观看,之后填写表格,相关工作人员进行统计。现有技术的这种方式过于依赖人工,效率低且不够科学。
[0024]本发明搭建了一种基于观众观影表情识别的电影类型检测系统,在待上映影片播放过程中自动根据现场观众的面部表情分析每一个观众多个时段的表情,累计所有观众的所有表情进行统计,获取被观看的待上映影片的类型。整个检测系统无需人工参与即可自动分析出影片类型,并且检测方式合理性和准确性更高。
[0025]图1为根据本发明实施方案示出的基于观众观影表情识别的电影类型检测系统的结构方框图,所述检测系统位于电影播放场地,包括:数字信号处理器2和多个表情识别子系统1,所述多个表情识别子系统I的数量为η个,η为大于等于I的自然数,所述数字信号处理器2与所述多个表情识别子系统I分别连接。
[0026]其中,每一个表情识别子系统I位于一个观众座椅的后背上,用于识别所述观众座椅后面的观影观众的面部表情,所述数字信号处理器2接收多个面部表情,并基于所述多个面部表情确定当前播放的电影类型。
[0027]接着,继续对本发明的基于观众观影表情识别的电影类型检测系统的具体结构进行进一步的说明。
[0028]所述检测系统还包括:电影播放设备,用于播放待上映的电影,并在电影开始播放和电影结束播放时分别发出开播信号和停播信号。
[0029]所述检测系统还包括:RS232串行通信设备,与所述电影播放设备连接,用于接收所述开播信号或所述停播信号。
[0030]所述检测系统还包括:USB连接接口,用于插入外部U盘,自动读取外部U盘内预定存储区域所存储的各项数据,所述各项数据包括预设眼部基准图案、预设眉毛基准图案和预设嘴部基准图案,所述预设眼部基准图案为对基准眼部预先拍摄的图像,所述预设眉毛基准图案为对基准眉毛预先拍摄的图像,所述预设嘴部基准图案为对基准嘴部预先拍摄的图像。
[0031]所述检测系统还包括:静态存储设备,与所述USB连接接口连接,用于接收并存储所述各项数据。
[0032]所述检测系统还包括:液晶显示屏,与所述数字信号处理器2连接,以接收并显示所述数字信号处理器2输出的所述当前播放的电影类型。
[0033]如图2所示,每一个表情识别子系统I包括定时器11、CMOS视觉摄像头13、辅助照明设备12、图像分割设备14和单片机15。
[0034]所述定时器11,为CMOS视觉摄像头13的拍摄提供定时信号;所述CMOS视觉摄像头13与所述定时器11连接,基于所述定时信号每隔预设定时时间间隔拍摄一次对应观影观众的面部表情,以输出观众表情图像,所述观众表情图像的分辨率为1920X1080。
[0035]所述辅助照明设备12包括照明光源和亮度传感器,所述照明光源与所述亮度传感器连接,基于所述亮度传感器输出的环境亮度确定提供给所述CMOS视觉摄像头13的辅助照明光的亮度。
[0036]所述图像分割设备14与所述CMOS视觉摄像头13和所述静态存储设备分别连接,基于所述预设眼部基准图案、所述预设眉毛基准图案和所述预设嘴部基准图案从所述观众表情图像中分别匹配出观众眼部区域、观众眉毛区域和观众嘴部区域,并将所述观众眼部区域、所述观众眉毛区域和所述观众嘴部区域分别从所述观众表情图像中分割出来,以分别获得所述观众眼部子图像、所述观众眉毛子图像和所述观众嘴部子图像。
[0037]所述单片机15与所述图像分割设备14和所述静态存储设备分别连接,基于所述观众眼部子图像确定观众眼部张开的幅度,基于所述观众眉毛子图像确定观众眉毛运动的形状,基于所述观众嘴部子图像确定观众嘴部张开的幅度,并基于BP神经网络输出观众表
1同O
[0038]所述BP神经网络采用所述观众眼部张开的幅度、所述观众眉毛运动的形状和所述观众嘴部张开的幅度作为输入,将害怕、愤怒、悲哀、高兴、厌恶、惊奇和平静这7种观众表情之一作为输出,采用预设的训练样本和预设的测试样本,采用BP算法作为学习算法,其中所述预设的训练样本、所述预设的测试样本和所述BP算法都存储在所述静态存储设备中。
[0039]所述数字信号处理器2与所述RS232串行通信设备、所述静态存储设备和所述多个表情识别子系统I分别连接,在接收到所述开播信号时,启动所述多个表情识别子系统I以接收每一个表情识别子系统定时输出的观众表情,在接收到所述停播信号时,关闭所述多个表情识别子系统I以停止接收每一个表情识别子系统I输出的观众表情,并在接收到所述停播信号时基于接收到的所有观众表情统计所述当前播放的电影类型。
[0040]其中,每一个表情识别子系统I还可以包括红外线检测仪,用于检测对应的观众座椅后面的观影观众是否存在,并在检测到对应的观众座椅后面的观影观众不存在的情况下,向所述数字信号处理器2发送关闭信号,所述数字信号处理器2在接收到所述关闭信号时,关闭发出关闭信号的红外线检测仪所在的表情识别子系统I ;照明光源基于所述亮度传感器输出的环境亮度确定提供给所述CMOS视觉摄像头13的辅助照明光的亮度包括:调整所述辅助照明光的亮度使得所述辅助照明光的亮度与所述环境亮度成反比。
[0041]其中,所述检测系统还可以包括:供电设备,为所述检测系统内除了所述供电设备之外的各个组成设备提供电源供应;所述供电设备可位于所述电影播放场地的控制机房内;所述定时器11可选择每隔10秒提供一次定时信号;所述电影播放设备、所述RS232串行通信设备、所述USB连接接口、所述静态存储设备和所述数字信号处理器2都可以位于所述电影播放场地的控制机房内,以及可选地,将所述RS232串行通信设备、所述USB连接接口、所述静态存储设备和所述数字信号处理器2集成在一块集成电路板上。
[0042]另外,CMOS(Complementary Metal-Oxide-Semiconductor),中文学名为互补金属氧化物半导体,他本是计算机系统内一种重要的芯片,保存了系统引导最基本的资料。CMOS的制造技术和一般计算机芯片没什么差别,主要是利用硅和锗这两种元素所做成的半导体,使其在CMOS上共存着带N (带-电)和P (带+电)级的半导体,这两个互补效应所产生的电流即可被处理芯片纪录和解读成影像。后来发现CMOS经过加工也可以作为数码摄影中的图像传感器。
[0043]CMOS传感器也可细分为被动式像素传感器(Passive Pixel Sensor CMOS)与主动式像素传感器(Active Pixel Sensor CMOS)。最新CMOS传感器获得广泛应用的一个前提是其所拥有的较高灵敏度、较短曝光时间和日渐缩小的像素尺寸。像素灵敏度的一个衡量尺度是填充因子(感光面积与整个像素面积之比)与量子效率(由轰击屏幕的光子所生成的电子的数量)的乘积。CCD传感器因其技术的固有特性而拥有一个很大的填充因子。而在CMOS图像传感器中,为了实现堪与CCD转换器相媲美的噪声指标和灵敏度水平,人们给CMOS图像传感器装配上了有源像素传感器(APS),并且导致填充因子降低,原因是像素表面相当大的一部分面积被放大器晶体管所占用,留给光电二极管的可用空间较小。所以,当今CMOS传感器的一个重要的开发目标就是扩大填充因子。
[0044]赛普拉斯(FillFactory)通过其获得专利授权的一项技术,可以大幅度地提高填充因子,这种技术可以把一颗标准CMOS娃芯片最大的一部分面积变为一块感光区域。随着像素尺寸的变小,提高填充因子所来越困难,目前最流行的技术是从传统的前感光式(FSI,Front Side Illuminat1n)变为背部感光式(BSI,Back Side Illuminat1n),放大器等晶体管以及互
当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1