一种多媒体设备的制作方法

文档序号:11459430阅读:159来源:国知局

本发明涉及多媒体领域,尤其涉及一种多媒体设备。



背景技术:

对多媒体设备进行控制以实现多媒体音乐自动播放,一般需要外接其它带有控制功能的装置,通过装置上的按键等控制多媒体设备以进行多媒体音乐的播放。然而在一场户外场所,这种播放方式受到很大限制。在现有技术,只有外接有其他装置才能对多媒体设备进行控制以实现多媒体音乐的自动播放,并且控制多媒体音乐播放的方式也仅局限于传统的按键控制,人机交互和用户使用体验较差。



技术实现要素:

为了解决上述问题,本发明提供了一种多媒体设备,所述多媒体设备包括:用于播放多媒体文件的音频播放单元;用于对信号处理和对多媒体文件进行存储的主控单元;用于感应操作对象并接收所述操作对象的触控操作的信号采集单元;所述主控单元分别与所述信号采集单元和所述音频播放单元电性连接,所述主控单元在接收到所述信号采集单元采集的触控操作为预设触控操作时,控制所述音频播放单元以与所述预设触控操作相对应的播放方式播放所述多媒体文件。

本发明提供的多媒体设备,所述多媒体设备的主控单元在接收到所述信号采集单元采集的触控操作为预设触控时,根据所述触控操作,控制所述音频播放单元以与所述预设触控操作相对应的播放方式播放所述多媒体文件,无需再外接其它装置控制就能播放多媒体文件,极大地提高了多媒体设备的效率。

在一些公共场合,比如球赛、演唱会、歌剧比赛等,人群密度往往比较密集,人们在投入观看比赛的同时,有少部分人会做出不雅动作、甚至过激动作。例如,在足球比赛中,经常会有足球流氓进行闹事。对于做出各种不雅动作的人士,根据行为的严重程度进行各种惩罚。行为轻微者可以进行警报,行为严重的可以进行电子登记,例如在提高其以后观看比赛的价格以进行经济惩罚。

因此,本发明提供基于指纹识别和动作识别的支付装置,所述装置包括服务器端、客户端和智能化不雅动作实时识别系统,所述客户端采集指纹信息;服务器端对客户端采集的指纹信息进行识别和储存;所述智能化不雅动作实时识别系统包括全景拍摄设备、观众状态检测设备、观众席定位设备和回看显示设备,全景拍摄设备、观众状态检测设备、观众席定位设备协同操作,用于检测观众席中不雅动作的具体位置,回看显示设备与观众席定位设备连接,用于显示观众席定位设备输出的观众席中不雅动作的具体位置,并将不雅动作信息传送到所述服务器端,以匹配所述服务器中的指纹信息,并提高该指纹对应用户的购票支付价格。

优选地,全景拍摄设备位于回看显示设备下方,用于对场地的观众席进行全景拍摄以获得全景观众席图像。

优选地,观众状态检测设备与全景拍摄设备连接,用于检测全景观众席图像中是否存在不雅动作,如果存在不雅动作,则输出不雅动作类型并确定不雅动作在全景观众席图像中的相对位置。

优选地,观众席定位设备与观众状态检测设备连接,用于基于预设座位编号图案和不雅动作在全景观众席图像中的相对位置确定距离不雅动作最近的座位编号以作为目标座位编号输出,其中,预设座位编号图案的获得过程如下:对无观众状态下场地的观众席进行预先拍摄以获得无观众图像,再对无观众图像中观众席上的每一个座位完成编号以获得预设座位编号图案。

优选地,所述系统还包括:

摄像机群,由多个高清摄像机组成,多个高清摄像机分别设置在场地的不同位置,每一个高清摄像机包括ccd传感设备、伽马校正处理设备、高斯平滑设备、中值滤波设备、图像增强处理、畸变类型检测设备、畸变处理设备、参考点选择设备、畸变坐标映射设备、畸变灰度映射设备、目标识别设备和目标坐标提取设备;

摄像机定标设备,与每一个高清摄像机连接,用于获取每一个高清摄像机的内参数和每一个高清摄像机的外参数,每一个高清摄像机的内参数包括高清摄像机的焦距、ccd传感设备尺寸、摄像镜头失真度,每一个高清摄像机的外参数包括高清摄像机相对于场地的相对位置以及高清摄像机的拍摄方向;

坐标映射设备,与摄像机定标设备连接,用于接收每一个高清摄像机的内参数和每一个高清摄像机的外参数,并基于每一个高清摄像机的内参数和每一个高清摄像机的外参数确定每一个高清摄像机的图像空间中像素点坐标与三维世界坐标之间的映射关系;

三维坐标拟合设备,用于分别与多个高清摄像机的目标坐标提取设备连接,用于接收多个平面坐标参数,还与摄像机定标设备连接,用于接收多个高清摄像机的图像空间中像素点坐标分别与三维世界坐标之间的映射关系,三维坐标拟合设备基于上述多个平面坐标参数以及上述多个高清摄像机对应的映射关系拟合出排球目标在三维世界坐标系中的三维坐标并作为三维目标坐标输出;

环境重建设备,与每一个高清摄像机连接,用于接收分别来自多个高清摄像机的多个几何校准图像,基于多个几何校准图像对场地进行环境重建,以获得并输出场地的虚拟场景;

场景融合设备,分别与环境重建设备和三维坐标拟合设备连接,用于基于三维目标坐标将排球目标的运动位置融合到虚拟场景中以获得并输出融合图像帧;

回看显示设备,与场景融合设备连接以接收并回放融合图像帧,回看显示设备包括液晶显示器、显示驱动器和显示缓存;

全景拍摄设备,位于回看显示设备下方,用于对场地的观众席进行全景拍摄以获得全景观众席图像;

观众状态检测设备,与全景拍摄设备连接,用于检测全景观众席图像中是否存在不雅动作,如果存在不雅动作,则输出不雅动作类型并确定不雅动作在全景观众席图像中的相对位置;

观众席定位设备,与观众状态检测设备连接,用于基于预设座位编号图案和不雅动作在全景观众席图像中的相对位置确定距离不雅动作最近的座位编号以作为目标座位编号输出,其中,预设座位编号图案的获得过程如下:对无观众状态下场地的观众席进行预先拍摄以获得无观众图像,再对无观众图像中观众席上的每一个座位完成编号以获得预设座位编号图案;

挑战检测设备,位于回看显示设备的正下方,用于检测场地上的运动员的姿态以确定运动员是否发出挑战动作,在确定运动员发出挑战动作时,输出启动挑战信号,在确定运动员未发出挑战动作时,输出未启动挑战信号;

手动操作设备,位于裁判员位置下方,与挑战检测设备连接,包括允许挑战按键和拒绝挑战按键,用于在接收启动挑战信号时,激活允许挑战按键和拒绝挑战按键,并在裁判员按压允许挑战按键时发出允许挑战信号,在裁判员按压拒绝挑战按键时发出拒绝挑战信号;手动操作设备还用于在接收到未启动挑战信号,禁用允许挑战按键和拒绝挑战按键;

时间段设置设备,包括触摸屏,位于裁判员位置下方,与手动操作设备连接,用于在接收到允许挑战信号时,为裁判员提供选择回放时间段的输入界面,并输出裁判员选择的回放时间段;时间段设置设备还用于在接收到拒绝挑战信号时,关闭为裁判员提供选择回放时间段的输入界面。

优选地,显示缓存与液晶显示器连接,显示驱动器分别与显示缓存和时间段设置设备连接,显示驱动器用于在接收到裁判员选择的回放时间段时,按照裁判员选择的回放时间段将先前从场景融合设备处接收到的融合图像帧推送到显示缓存内以便于液晶显示器持续回放。

优选地,显示驱动器还分别与观众状态检测设备和观众席定位设备连接,用于在接收到不雅动作类型时,将不雅动作类型和目标座位编号推送到显示缓存中以便于液晶显示器进行相应显示。

优选地,其中,在每一个高清摄像机中:

伽马校正处理设备与ccd传感设备连接,用于接收ccd传感设备采集的高清图像,并对高清图像进行伽马校正处理以输出校正图像;ccd传感设备用于对场地进行高清数据采集以输出高清图像;高斯平滑设备与伽马校正处理设备连接,用于接收校正图像,并对校正图像进行高斯平滑处理以获得平滑图像;中值滤波设备与高斯平滑设备连接,用于对平滑图像进行5像素×5像素模块大小的中值滤波处理以获得滤波图像;图像增强处理与中值滤波设备连接,用于对滤波图像进行图像增强处理以获得增强图像;

畸变类型检测设备与图像增强处理连接,用于接收增强图像,确定增强图像的外形尺寸,基于增强图像的外形尺寸与基准参考图像的外形尺寸确定增强图像的畸变类型,畸变类型包括埃尔米特变换畸变、扭曲畸变、径向失真畸变、仿射变换畸变、类仿射变换畸变和投影变换畸变,基准参考图像为对高清摄像机负责区域进行预先高清数据采集所输出的无畸变的高清图像;

畸变处理设备与畸变类型检测设备连接,当接收到的畸变类型为埃尔米特变换畸变、扭曲畸变、径向失真畸变、仿射变换畸变或类仿射变换畸变时,基于不同的畸变类型对增强图像进行不同的预定几何变换处理,以输出几何校准图像;参考点选择设备与畸变类型检测设备连接,用于在接收到的畸变类型为投影变换畸变时,选择场地中的6个位置作为校准参考点,6个位置分别为场地中边线上的6个基准点;

畸变坐标映射设备分别与参考点选择设备和畸变类型检测设备连接,用于确定增强图像中6个位置的坐标,确定基准参考图像中6个位置的坐标,基于增强图像中6个位置的坐标以及基准参考图像中6个位置的坐标确定几何坐标变换矩阵,并基于几何坐标变换矩阵对增强图像的所有像素点进行几何坐标变换以获得对应的多个新像素点,增强图像的所有像素点的水平坐标和垂直坐标都为整数,而新像素点的水平坐标或垂直坐标不一定为整数;畸变灰度映射设备与畸变坐标映射设备连接,用于接收多个新像素点,当新像素点的水平坐标和垂直坐标都为整数时,新像素点的灰度值为增强图像中相同坐标位置的像素点的灰度值,当新像素点的水平坐标或垂直坐标为非整数时,基于增强图像中相同坐标位置周围的多个像素点的灰度值计算新像素点的灰度值,基于多个新像素点的灰度值输出几何校准图像;

目标识别设备分别与畸变处理设备和畸变灰度映射设备连接,用于接收几何校准图像,并基于预设基准排球图案在几何校准图像中识别出排球目标;目标坐标提取设备与目标识别设备连接,用于基于识别出的排球目标在整个几何校准图像中的相对位置,确定排球目标的平面坐标参数。

本发明具有以下优点和效果:基于指纹识别和动作识别的支付装置,通过服务器端完成指纹信息的对比计算以确认用户身份,服务器采用阵列超级计算机进行计算,计算能力强大,能够进行复杂图形计算分析,大大提高了识别的准确率,同时通过支付系统和指纹识别相结合,提高了管理的自动化程度。

具体实施方式

下面将对本发明的实施方案进行详细说明。

为了克服现有技术的不足,本发明提供了一种多媒体设备,所述多媒体设备包括:用于播放多媒体文件的音频播放单元;用于对信号处理和对多媒体文件进行存储的主控单元;用于感应操作对象并接收所述操作对象的触控操作的信号采集单元;所述主控单元分别与所述信号采集单元和所述音频播放单元电性连接,所述主控单元在接收到所述信号采集单元采集的触控操作为预设触控操作时,控制所述音频播放单元以与所述预设触控操作相对应的播放方式播放所述多媒体文件。

另外,本发明搭建了本发明提供基于指纹识别和动作识别的支付装置,所述装置包括服务器端、客户端和智能化不雅动作实时识别系统,所述客户端采集指纹信息;服务器端对客户端采集的指纹信息进行识别和储存;所述智能化不雅动作实时识别系统包括全景拍摄设备、观众状态检测设备、观众席定位设备和回看显示设备,全景拍摄设备、观众状态检测设备、观众席定位设备协同操作,用于检测观众席中不雅动作的具体位置,回看显示设备与观众席定位设备连接,用于显示观众席定位设备输出的观众席中不雅动作的具体位置,并将不雅动作信息传送到所述服务器端,以匹配所述服务器中的指纹信息,并提高该指纹对应用户的购票支付价格。

全景拍摄设备位于回看显示设备下方,用于对场地的观众席进行全景拍摄以获得全景观众席图像。

观众状态检测设备与全景拍摄设备连接,用于检测全景观众席图像中是否存在不雅动作,如果存在不雅动作,则输出不雅动作类型并确定不雅动作在全景观众席图像中的相对位置。

观众席定位设备与观众状态检测设备连接,用于基于预设座位编号图案和不雅动作在全景观众席图像中的相对位置确定距离不雅动作最近的座位编号以作为目标座位编号输出,其中,预设座位编号图案的获得过程如下:对无观众状态下场地的观众席进行预先拍摄以获得无观众图像,再对无观众图像中观众席上的每一个座位完成编号以获得预设座位编号图案。

所述系统还包括:

摄像机群,由多个高清摄像机组成,多个高清摄像机分别设置在场地的不同位置,每一个高清摄像机包括ccd传感设备、伽马校正处理设备、高斯平滑设备、中值滤波设备、图像增强处理、畸变类型检测设备、畸变处理设备、参考点选择设备、畸变坐标映射设备、畸变灰度映射设备、目标识别设备和目标坐标提取设备;

摄像机定标设备,与每一个高清摄像机连接,用于获取每一个高清摄像机的内参数和每一个高清摄像机的外参数,每一个高清摄像机的内参数包括高清摄像机的焦距、ccd传感设备尺寸、摄像镜头失真度,每一个高清摄像机的外参数包括高清摄像机相对于场地的相对位置以及高清摄像机的拍摄方向;

坐标映射设备,与摄像机定标设备连接,用于接收每一个高清摄像机的内参数和每一个高清摄像机的外参数,并基于每一个高清摄像机的内参数和每一个高清摄像机的外参数确定每一个高清摄像机的图像空间中像素点坐标与三维世界坐标之间的映射关系;

三维坐标拟合设备,用于分别与多个高清摄像机的目标坐标提取设备连接,用于接收多个平面坐标参数,还与摄像机定标设备连接,用于接收多个高清摄像机的图像空间中像素点坐标分别与三维世界坐标之间的映射关系,三维坐标拟合设备基于上述多个平面坐标参数以及上述多个高清摄像机对应的映射关系拟合出排球目标在三维世界坐标系中的三维坐标并作为三维目标坐标输出;

环境重建设备,与每一个高清摄像机连接,用于接收分别来自多个高清摄像机的多个几何校准图像,基于多个几何校准图像对场地进行环境重建,以获得并输出场地的虚拟场景;

场景融合设备,分别与环境重建设备和三维坐标拟合设备连接,用于基于三维目标坐标将排球目标的运动位置融合到虚拟场景中以获得并输出融合图像帧;

回看显示设备,与场景融合设备连接以接收并回放融合图像帧,回看显示设备包括液晶显示器、显示驱动器和显示缓存;

全景拍摄设备,位于回看显示设备下方,用于对场地的观众席进行全景拍摄以获得全景观众席图像;

观众状态检测设备,与全景拍摄设备连接,用于检测全景观众席图像中是否存在不雅动作,如果存在不雅动作,则输出不雅动作类型并确定不雅动作在全景观众席图像中的相对位置;

观众席定位设备,与观众状态检测设备连接,用于基于预设座位编号图案和不雅动作在全景观众席图像中的相对位置确定距离不雅动作最近的座位编号以作为目标座位编号输出,其中,预设座位编号图案的获得过程如下:对无观众状态下场地的观众席进行预先拍摄以获得无观众图像,再对无观众图像中观众席上的每一个座位完成编号以获得预设座位编号图案;

挑战检测设备,位于回看显示设备的正下方,用于检测场地上的运动员的姿态以确定运动员是否发出挑战动作,在确定运动员发出挑战动作时,输出启动挑战信号,在确定运动员未发出挑战动作时,输出未启动挑战信号;

手动操作设备,位于裁判员位置下方,与挑战检测设备连接,包括允许挑战按键和拒绝挑战按键,用于在接收启动挑战信号时,激活允许挑战按键和拒绝挑战按键,并在裁判员按压允许挑战按键时发出允许挑战信号,在裁判员按压拒绝挑战按键时发出拒绝挑战信号;手动操作设备还用于在接收到未启动挑战信号,禁用允许挑战按键和拒绝挑战按键;

时间段设置设备,包括触摸屏,位于裁判员位置下方,与手动操作设备连接,用于在接收到允许挑战信号时,为裁判员提供选择回放时间段的输入界面,并输出裁判员选择的回放时间段;时间段设置设备还用于在接收到拒绝挑战信号时,关闭为裁判员提供选择回放时间段的输入界面。

显示缓存与液晶显示器连接,显示驱动器分别与显示缓存和时间段设置设备连接,显示驱动器用于在接收到裁判员选择的回放时间段时,按照裁判员选择的回放时间段将先前从场景融合设备处接收到的融合图像帧推送到显示缓存内以便于液晶显示器持续回放。

显示驱动器还分别与观众状态检测设备和观众席定位设备连接,用于在接收到不雅动作类型时,将不雅动作类型和目标座位编号推送到显示缓存中以便于液晶显示器进行相应显示。

在每一个高清摄像机中:

伽马校正处理设备与ccd传感设备连接,用于接收ccd传感设备采集的高清图像,并对高清图像进行伽马校正处理以输出校正图像;ccd传感设备用于对场地进行高清数据采集以输出高清图像;高斯平滑设备与伽马校正处理设备连接,用于接收校正图像,并对校正图像进行高斯平滑处理以获得平滑图像;中值滤波设备与高斯平滑设备连接,用于对平滑图像进行5像素×5像素模块大小的中值滤波处理以获得滤波图像;图像增强处理与中值滤波设备连接,用于对滤波图像进行图像增强处理以获得增强图像;

畸变类型检测设备与图像增强处理连接,用于接收增强图像,确定增强图像的外形尺寸,基于增强图像的外形尺寸与基准参考图像的外形尺寸确定增强图像的畸变类型,畸变类型包括埃尔米特变换畸变、扭曲畸变、径向失真畸变、仿射变换畸变、类仿射变换畸变和投影变换畸变,基准参考图像为对高清摄像机负责区域进行预先高清数据采集所输出的无畸变的高清图像;

畸变处理设备与畸变类型检测设备连接,当接收到的畸变类型为埃尔米特变换畸变、扭曲畸变、径向失真畸变、仿射变换畸变或类仿射变换畸变时,基于不同的畸变类型对增强图像进行不同的预定几何变换处理,以输出几何校准图像;参考点选择设备与畸变类型检测设备连接,用于在接收到的畸变类型为投影变换畸变时,选择场地中的6个位置作为校准参考点,6个位置分别为场地中边线上的6个基准点;

畸变坐标映射设备分别与参考点选择设备和畸变类型检测设备连接,用于确定增强图像中6个位置的坐标,确定基准参考图像中6个位置的坐标,基于增强图像中6个位置的坐标以及基准参考图像中6个位置的坐标确定几何坐标变换矩阵,并基于几何坐标变换矩阵对增强图像的所有像素点进行几何坐标变换以获得对应的多个新像素点,增强图像的所有像素点的水平坐标和垂直坐标都为整数,而新像素点的水平坐标或垂直坐标不一定为整数;畸变灰度映射设备与畸变坐标映射设备连接,用于接收多个新像素点,当新像素点的水平坐标和垂直坐标都为整数时,新像素点的灰度值为增强图像中相同坐标位置的像素点的灰度值,当新像素点的水平坐标或垂直坐标为非整数时,基于增强图像中相同坐标位置周围的多个像素点的灰度值计算新像素点的灰度值,基于多个新像素点的灰度值输出几何校准图像;

目标识别设备分别与畸变处理设备和畸变灰度映射设备连接,用于接收几何校准图像,并基于预设基准排球图案在几何校准图像中识别出排球目标;目标坐标提取设备与目标识别设备连接,用于基于识别出的排球目标在整个几何校准图像中的相对位置,确定排球目标的平面坐标参数。

可以理解的是,虽然本发明已以较佳实施例披露如上,然而上述实施例并非用以限定本发明。对于任何熟悉本领域的技术人员而言,在不脱离本发明技术方案范围情况下,都可利用上述揭示的技术内容对本发明技术方案做出许多可能的变动和修饰,或修改为等同变化的等效实施例。因此,凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰,均仍属于本发明技术方案保护的范围内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1