一种关于多媒体数字展览的集成控制系统的制作方法

文档序号:20834779发布日期:2020-05-22 16:44阅读:447来源:国知局
一种关于多媒体数字展览的集成控制系统的制作方法

本发明属于多媒体数字展览技术领域,涉及到一种关于多媒体数字展览的集成控制系统。



背景技术:

数字展厅又叫做数字化展厅、多媒体数字化展厅等,是指以多媒体和数字化技术作为展示技术,使用最新的影视动画技术,结合独到的图形数字和多媒体技术,以各类新颖的技术吸引参观者,实现人机交互方式的展厅形式。

数字展厅集各种多媒体展览展示系统为一体的综合展示平台,包括数字沙盘、环幕/弧幕/球幕影厅、迎宾地幕系统、互动吧台、互动镜面及触摸屏等等。

现有多媒体数字展厅在进行展览过程中,无法集中对多媒体展厅进行控制,同时,处于展厅内的人员无法对展厅展览内容进行控制,造成控制单一以及用户满意度差的问题。



技术实现要素:

本发明的目的在于提供的一种关于多媒体数字展览的集成控制系统,通过图像采集模块并结合特征点提取模块和云平台,以及通过语音采集模块和云平台,可根据人员行为动作和语音进行展览内容的控制,提高了控制的多样性以及人员的满意度,实现人机交互,解决了现有数字展览过程中存在的控制单一化以及人员满意度低的问题。

本发明的目的可以通过以下技术方案实现:

一种关于多媒体数字展览的集成控制系统,包括三维展示模块、图像采集模块、干扰滤除模块、特征点提取模块、语音采集模块、云平台、分类划分模块、存储数据库、反馈接收模块和操作管理终端;

所述三维展示模块,采用若干投射设备,分别对展厅不同表面进行投影,展示三维的立体空间,进入展厅内的人员根据投影的虚拟场景与展厅进行互动;

所述图像采集模块,与干扰滤除模块连接,为高清摄像头,用于实时采集展厅内的图像信息,并将采集的展厅内的图像信息发送至干扰滤除模块;

所述干扰滤除模块,分别与图像采集模块和特征点提取模块连接,用于接收图像采集模块发送的图像信息,对采集的图像进行干扰光线以及颜色的去除,并将去除干扰后的图像信息发送至特征点提取模块;

所述特征点提取模块,与云平台连接,用于接收干扰滤除模块发送的除去干扰后的图像信息,对去除干扰后的图像进行特征点定位,并将定位的特征点位置进行连线,构成特征点几何形状,将特征点几何形状发送至云平台;

所述语音采集模块,与云平台连接,用于实时采集展厅内的声音信息,并将采集的展厅内的声音信息发送至云平台;

云平台,分别与特征点提取模块、语音采集模块、存储数据库和反馈接收模块连接,用于接收特征点提取模块发送的特征点几何形状,并将特征点几何形状与存储数据库中存储的标准特征点几何形状进行一一对比,筛选出对应的标准特征点几何形状,并提取该标准特征点几何形状对应的行为控制指令,将行为控制指令发送至反馈接收模块;

同时,接收语音采集模块发送的展厅内的声音信息,并将采集的声音信息进行过滤,提高声音的清晰程度,将过滤后的声音与存储数据库中存储的语音采集时刻展厅播放的声音信息进行对比,去除展厅的声音,以获取展厅内人员的语音信息,云平台对人员的语音信息进行语义转换,并将语音转换后的文字内容与存储数据库中存储的各行为控制指令对应的文字关键字进行对比,若转换后的文字内容有存储数据库中的文字关键字,则提取该文字关键字对应的语音控制指令,并将语音控制指令发送至反馈接收模块;

反馈接收模块,分别与三维展示模块、云平台连接,用于接收云平台发送的行为控制指令和语音控制指令,并将接收的行为控制指令和语音控制指令发送至三维展示模块,对三维展示模块进行暂停、后退、快进、切换和筛选的控制;

存储数据库,用于存储三维展厅模块播出的内容,并存储有若干标准特征点几何形状、若干文字关键字,以及存储标准特征点几何形状对应的行为控制指令和文字关键字对应的语音控制指令。

进一步地,所述特征点包括膝盖、腰部、脚部、手腕、臂腕、肩部。

进一步地,所述特征点几何形状为三角形,不同角度的三角形对应的不同的行为控制指令。

进一步地,还包括操作管理终端,与分类划分模块连接,用于上传展厅展出内容,并将上传的展厅展出内容发送至分类划分模块,并可对上传的展厅内容进行删除、修改和增加操作。

进一步地,还包括分类划分模块,所述分类划分模块分别与操作管理终端和存储数据库连接,用于接收操作管理终端上传的展厅展出内容,对上传的展厅展出内容进行类别划分,并将划分后的展厅内容存储至存储数据库内对应的分类中。

本发明的有益效果:

本发明提供的一种关于多媒体数字展览的集成控制系统,通过图像采集模块、干扰滤除模块并结合特征点提取模块和云平台,可对展厅内人员的行为动作对应的特征点几何形状进行识别,以判断人员行为动作对应的控制指令,以实现行为的控制操作,且通过语音采集模块和云平台,对展厅内语音信息进行采集,过滤、筛选,以提取人员的语音信息,提高了采集人员语音的准确性和完整性,并对语音内容进行转换、对比,获取人员语音对应的语音控制指令,以对展厅播放内容进行控制,采用行为和语音共同控制的方式,提高了控制的多样性,提高人员的满意度,实现人机互动,提高了人机交互的流畅性。

附图说明

为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明中一种关于多媒体数字展览的集成控制系统的示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。

请参阅图1所示,一种关于多媒体数字展览的集成控制系统,包括三维展示模块、图像采集模块、干扰滤除模块、特征点提取模块、语音采集模块、云平台、分类划分模块、存储数据库、反馈接收模块和操作管理终端;

三维展示模块,采用若干投射设备,分别对展厅不同表面进行投影,展示三维的立体空间,进入展厅内的人员根据投影的虚拟场景与展厅进行互动;

图像采集模块,与干扰滤除模块连接,为高清摄像头,用于实时采集展厅内的图像信息,并将采集的展厅内的图像信息发送至干扰滤除模块;

干扰滤除模块,分别与图像采集模块和特征点提取模块连接,用于接收图像采集模块发送的图像信息,对采集的图像进行干扰光线以及颜色的去除,提高图像中人员的清晰度,降低干扰因素,并将去除干扰后的图像信息发送至特征点提取模块;

特征点提取模块,与云平台连接,用于接收干扰滤除模块发送的除去干扰后的图像信息,对去除干扰后的图像进行特征点定位,并将定位的特征点位置进行连线,构成特征点几何形状,将特征点几何形状发送至云平台,其中,特征点包括膝盖、腰部、脚部、手腕、臂腕、肩部等;

语音采集模块,与云平台连接,用于实时采集展厅内的声音信息,并将采集的展厅内的声音信息发送至云平台;

云平台,分别与特征点提取模块、语音采集模块、存储数据库和反馈接收模块连接,用于接收特征点提取模块发送的特征点几何形状,并将特征点几何形状与存储数据库中存储的标准特征点几何形状进行一一对比,筛选出对应的标准特征点几何形状,并提取该标准特征点几何形状对应的行为控制指令,将行为控制指令发送至反馈接收模块;

同时,接收语音采集模块发送的展厅内的声音信息,并将采集的声音信息进行过滤,提高声音的清晰程度,将过滤后的声音与存储数据库中存储的语音采集时刻展厅播放的声音信息进行对比,去除展厅的声音,以获取展厅内人员的语音信息,云平台对人员的语音信息进行语义转换,并将语音转换后的文字内容与存储数据库中存储的各行为控制指令对应的文字关键字进行对比,若转换后的文字内容有存储数据库中的文字关键字,则提取该文字关键字对应的语音控制指令,并将语音控制指令发送至反馈接收模块;

反馈接收模块,分别与三维展示模块、云平台连接,用于接收云平台发送的行为控制指令和语音控制指令,并将接收的行为控制指令和语音控制指令发送至三维展示模块,以实现对三维展示模块的暂停、后退、快进、切换和筛选的控制。

分类划分模块,分别与存储数据库和操作管理终端连接,用于接收操作管理终端上传的展厅展出内容,对上传的展厅展出内容进行类别划分,并将划分后的展厅内容存储至存储数据库内对应的分类中。

存储数据库,分别与云平台和分类划分模块连接,用于存储分类划分模块上传的分类后的展厅内容,并存储有若干标准特征点几何形状、若干文字关键字,以及存储标准特征点几何形状对应的行为控制指令和文字关键字对应的语音控制指令。

操作管理终端,用于上传展厅展出内容,并可对上传的展厅内容进行删除、修改和增加操作。

本发明提供的一种关于多媒体数字展览的集成控制系统,通过图像采集模块、干扰滤除模块并结合特征点提取模块和云平台,可对展厅内人员的行为动作对应的特征点几何形状进行识别,以判断人员行为动作对应的控制指令,以实现行为的控制操作,且通过语音采集模块和云平台,对展厅内语音信息进行采集,过滤、筛选,以提取人员的语音信息,提高了采集人员语音的准确性和完整性,并对语音内容进行转换、对比,获取人员语音对应的语音控制指令,以对展厅播放内容进行控制,采用行为和语音共同控制的方式,提高了控制的多样性,提高人员的满意度,实现人机互动,提高了人机交互的流畅性。

以上内容仅仅是对本发明的构思所作的举例和说明,所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,只要不偏离发明的构思或者超越本权利要求书所定义的范围,均应属于本发明的保护范围。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1