与显示影像主题相关的增强现实互动系统以及其运营方法与流程

文档序号:15270895发布日期:2018-08-28 22:24阅读:132来源:国知局

本发明涉及增强现实互动系统以及系统的运行方法,尤其是涉及与显示的影像主题(imagecontents)相关的增强现实互动系统以及所述系统的运营方法。



背景技术:

虚拟现实(virtualreality),顾名思义,是能够实际体验虚拟世界的技术。虚拟现实的适用示例一般有佩戴虚拟现实机器来进行体验的游戏等。由于佩戴虚拟现实设备,感受到就像乘着滑翔伞在天空中飞翔的感觉或者乘着潜水艇参观海底世界的感觉。

增强现实(augmentedreality)是在现实图像或背景结合三维虚拟图像的技术。增强现实的适用示例如下:在用智能手机拍摄街道时标记有要寻找的商店的位置或者说明等,以及最近在汽车的挡风玻璃显示车辆的导航信息。

如下举例说明游戏中的状况:在虚拟现实中的游戏是代替“我”的人物在虚拟空间进行游戏,但是增强现实中的游戏是在现实中的“我”在现实空间与虚拟实体一同进行游戏,也就是说虚拟现实是眼睛所看到的都是虚拟的实体,而增强现实是眼睛所看到的都是现实与虚拟混合的。

kinect是动作识别摄像机,无需另外的控制器来感应人的身体与语音,并反映于tv画面内的新概念动作识别游戏。微软公司在2010年11月发布的xbox360是在主体附着动作识别套件来识别玩家的身体动作来进行游戏。因为是游戏,所以利用双手与双脚能够自由玩游戏。能够实际体验乘船在丛林中探险,也能够与家人、朋友一同体验保龄球、跑步等各种体育项目。

色度键(chroma-key)是利用色差将活动的拍摄对象合成于另一画面的电视画面合成法。其原理如下:利用能够从彩色电视的摄像机获取的rgb信号,将该色(chroma)差作为键(key)待使用的拍摄对象与背景分离后合成于其他画面。在要抠出的拍摄对象是人物的情况下,使该人物站立在与肉色补色的蓝色背景前后用摄像机拍摄,在输出的该影像中去除蓝色部分则背景变暗,进而能够只抠出人物。此时,若在该人物的服装或者物品适用蓝色系的颜色,则可抠出出没有该部分的拍摄对象。若穿蓝色系的服装,则只能抠出脸部与手脚。另一方面,用另一摄像机拍摄要插入的画面,用电子回路合成该影像信号与之前抠出的拍摄对象信号。

至今还未提出过将上述技术结合成一个提供从未有过的特别的服务的装置。

(现有技术文献)

(专利文献)

(专利文献)韩国在注册专利第10-1685505号



技术实现要素:

(要解决的问题)

本发明要解决的技术课题在于,提供如下的与显示的影像主题相关的增强现实互动系统:在用户选择的影像主题交叠特定的用户的影像后在画面播放,通过掩埋在所述屏幕的激光光源对该用户提供播放的影像主题的内容与对应于用户行为图像的特别服务,而所述用户行为图像是针对所述影像主题的内容,进而是用户能够感受到只有体验用户能够感受到的乐趣,并且以能够给体验用户提供照片或者影像作为体验结果。

本发明要解决的另一技术课题在于提供与显示的影像主题相关的增强现实互动系统的运营方法。

(解决问题的手段)

为了达成上述的技术课题,根据本发明的与显示的影像主题相关的增强现实互动系统包括:激光光源、用户感应舞台、用户拍摄工具、用户行为识别工具、影像处理装置以及控制部。

所述激光光源掩埋在屏幕的至少一处,照射具有一个以上的颜色的光束或者具有一个以上的纹路的光束,所述光束可调节照射方向。所述用户感应舞台设置在能够看到所述屏幕的位置,并且参与增强现实互动的用户位于所述用户感应舞台。所述用户拍摄工具拍摄位于所述用户感应舞台的用户。所述用户行为识别工具识别位于所述用户感应舞台的用户所表达的行为以及语音中的至少一种的意思。所述影像处理装置在所述屏幕播放提前保存的影像主题中用户选择的影像主题或者用户提供的影像主题,或者从所述用户拍摄工具接收的拍摄用户的影像交叠于所述影像主题并在屏幕播放。所述控制部比较以及分析从所述用户行为识别工具接收的用户所表达的行为或者语音的意思与所述影像处理装置在所述屏幕播放的影像主题的内容,通过所述激光光源将对应于比较以及分析结果的光束照射于所述屏幕的前面或者所述用户感应舞台;

从所述影像处理装置提供的影像主题包括请求位于所述用户感应舞台的用户所表达某一行为或者某一语音的内容的影像,用户响应于所述影像主题的请求表达行为或者语音,并且由所述用户行为识别工具识别用户的行为以及用户的语音;

为了达成上述另一技术课题,根据本发明的与显示的影像主题相关的增强现实互动系统的运行方法,作为权利要求3记载的与显示的影像主题相关的增强现实互动系统的运营方法,执行事前准备步骤、用户选择步骤、影像播放步骤、用户参与步骤以及互动服务提供步骤。

在事前准备步骤中,与显示的影像主题相关的增强现实互动系统(以下,称为系统)的运营者自己制作或者委托外部生成的影像主题以及收集已有的影像主题直接或者进行加工后保存在所述影像处理装置。在所述用户选择步骤中,所述系统的控制部通过所述影像处理装置预示提前设置在所述屏幕的影像主题并使用户选择该影像主题,或者在用户利用所述系统之前提前将影像主题提供于所述系统。在所述影像播放步骤中,在所述屏幕播放所述影像处理装置按照所述控制部的命令在所述用户选择步骤中选择的影像主题。在所述用户参与步骤中,位于所述用户感应舞台的用户按照在所述屏幕播放的影像的指示或者从所述音响设备播放的语音指示采取预定动作(包括语音),或者采取在事前用户与所述系统约定的多个行为(包括语音)。在所述互动服务提供步骤中提供如下的服务:所述用户行为识别工具以及所述控制部对用户提供互动服务,该互动服务对应于位于所述用户感应舞台的用户采取的行为的意思,将用户采取的行为反映于所述屏幕,利用掩埋在所述屏幕的所述激光光源或者所述特效装置通过增强现实技术提供服务。

(发明的效果)

根据本发明的与显示的影像主题相关的增强现实互动系统的优点如下:在用户选择的影像主题交叠特定的用户影像后在屏幕播放,通过掩埋在所述屏幕的激光光源对该用户提供播放的影像主题的内容与对应于用户行为图像的特别服务,而所述用户行为图像是针对所述影像主题的内容,进而是用户能够感受到只有体验用户能够感受到的乐趣,并且以能够给体验用户提供照片或者影像作为体验结果。

附图说明

图1是根据本发明的与显示的影像主题相关的增强现实互动系统的框图。

图2是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验与佛教相关的影像主题的示例。

图3是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验与天主教相关的影像主题的示例。

图4是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验与动物交流感情的影像主题的示例。

图5是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验旅游景点的示例。

图6是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验建筑物的示例。

图7是示出根据本发明的与显示的影像主题相关的增强现实互动系统的运营方法。

(附图标记说明)

100:与显示的影像主题相关的增强现实互动系统

110:屏幕120:激光光源

130:用户感应舞台140:用户拍摄工具

150:用户行为识别工具160:影像处理装置

170:音响设施180:特性装置

190:体验影像记录装置200:控制部

700:与显示的影像主题相关的增强现实互动系统的运营方法

710:事前准备步骤720:用户选择步骤

730:影像播放步骤740:用户参与步骤

750:互动服务提供步骤

760:体验影像提供步骤

具体实施方法

为了充分理解本发明与本发明动作上的优点以及通过本发明的实施例达成的目的,应参照说明本发明示例性实施例的附图以及在附图记载的内容。

以下,参照附图说明本发明的优选实施例详细说明本发明。在各个图面表示的参照符号表示相同部件。

图1是根据本发明的与显示的影像主题相关的增强现实互动系统的框图。

参照图1,根据本发明的与显示的影像主题相关的增强现实互动系统100,包括屏幕110、激光光源120、用户感应舞台130、用户拍摄工具140、用户行为识别工具150、影像处理装置160、音响设备170、特效装置180、体验影像记录装置190以及控制部200。

屏幕110播放影像,而本发明中的屏幕优选为使用led显示器。

激光光源120掩埋在屏幕110,进而无法从外观上显现激光光源120,从激光光源120照射的光束优选为不仅具有各种颜色、各种纹路,还能够调节光束照射方向。在此,可选择各种纹路,具体有在佛教具有相当意义的莲花、烟花以及雪的结晶等。

用户感应舞台130是用户通过增强现实技术体验播放的主题时用户所处的位置,该用户选择在屏幕110播放的主题。用户感应舞台130可由具有预定高度或宽度的实际舞台实现。用户感应舞台130也可以是利用从激光光源120照射的光束指示的固定空间。

用户拍摄工具140是拍摄位于用户感应舞台130的用户的工具,也可三维拍摄,拍摄的影像交叠于播放的影像主题后在屏幕110播放,不仅如此也使用于由体验影像记录装置190对体验用户提供体验照片或者影像。

用户行为识别工具150将位于用户感应舞台130的用户的行为或者语音传达于后述的控制部200。也可实施在不启用用户的行为或者语音的状态下传达于控制部200的实施例,但是更加优选为根据特定基准对用户的行为或者语音进行取样后传达于控制部200。例如,在用户上下晃动头部的情况下,对用户头部的位置变化取样,并将取样的影像传达于控制部200,在用户表达的语音中对对应于提前设定的基准的语音“是”进行取样传达于控制部200。

影像处理装置160在屏幕110播放在提前保存的影像主题中用户选择的影像或者体验用户在体验之前提供的影像,或者在正在播放的影像交叠由用户拍摄工具140拍摄的用户的影像(静止的照片或者视频)进行播放。

音响设备170向屏幕110周围播放与通过影像处理装置160在屏幕110播放的影像相关的音响。一般,输出的音响是由影像处理装置160提供。

特效装置180按照在屏幕110播放的影像可使用水蒸气、水珠、喷泉或者泡沫塑料(代替石头或者雪)等。

体验影像记录装置190将屏幕110正在播放的影像以照片或者视频文件提供给用户,或者将照片或者视频保存在存储介质之后将该存储介质提供给体验用户。也可执行如下的实施例:用户提供邮箱地址,将照片或者视频文件发送到体验用户的邮件。邮箱可以在台式电脑或者笔记本电脑确认,除此以外也可用智能手机确认。

控制部200控制上述所有构成要素110-190的整体动作。尤其是,比较以及分析从用户行为识别工具150接收的用户表达的行为或者语音的意思与影像处理装置160在屏幕110播放的影像主题的内容,通过激光光源120使对应于比较以及分析结果的光束照射于屏幕110的前面或者用户感应舞台130。

在控制部200保存多个行为基准以及多个语音基准的示例。例如,设定有用行为判断用户状态的多个行为基准,诸如将头部上下晃动的肯定的表达、将头部左右摇晃的否定表达、手指表达的数字、站立姿势、行走姿势、跑步姿势以及跳跃姿势等。并且,控制部200设定有判断语音所表达的意思的多个语音基准,诸如肯定的意思的“是”、否定意思的“不是”,表达数字的“一以及二”、“停止”等语音。

因此,控制部200将从用户行为识别工具150接收的用户行为或者语音的意思与多个行为基准或者多个语音基准进行比较,从而可决定用户做出哪种表达。

影像处理装置160保存的影像主题是由根据本发明的与显示的影像主题相关的增强现实互动系统100的运营者提前准备的。例如,影像主题为宗教、动物、建筑物以及旅游景点相关影像,应加工各个影像,进而能够利用增强现实技术能够互动地体验所述影像。

在宗教相关影像的情况下,应对在影像主题进行加工,使影像主题包括使掩埋在屏幕110的激光光源120位于在屏幕110播放的佛陀的额头以及耶稣或者圣母玛利亚的头部上侧的影像。并且,请求用户做出双手合十或者祈祷时的手模样或者举高双手,并且应该加工影像主题,使该影像主题还包括请求南无阿弥陀佛或者阿门的影像或语音,并准备好该影像主题。

在与建筑物相关影像的情况下,在影像主题包括根据用户在用户感应舞台130上的移动可改变影像视角的影像,在影像主题请求的行为是用手指某一处或者张开双手,并且应该包括在影像主题请求呐喊“呀吼”的影像或者语音。

图2是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验与佛教相关的影像主题的示例。

参照图2,可以知道在屏幕110正在播放佛陀的影像,并且掩埋在屏幕110且位于在佛陀的额头的激光光源120向位于用户感应舞台130并且双手合十的用户的头部上侧照射激光。即,在佛陀的影像前对佛陀行固定礼(双手合十)的情况下,作为回应的表达从佛陀的额头向该用户照射光束。图2示出的屏幕110除了佛陀的影像之外也一同显示站在佛陀前的体验用户的影像。体验用户周围的众多观众能够同时看到屏幕110与现实的用户的同时能够识别状况,并且用户感应舞台130上的用户能够体验到作为主人公正在得到佛陀的恩惠的体验。

在图2举例的系统110能够非常有效地使用于医院或者还未腾出能够设置佛像的空间的寺庙。

图3是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验与天主教相关的影像主题的示例。

参照图3,屏幕110正在播放圣母玛利亚的影像,并且在明亮显示的圣母玛利亚周边交叠播放用户的影像。位于用户感应舞台130的用户影像也可用静止的照片播放,但是也能实施用视频播放的实施例。根据实施例,也可从圣母玛利亚的头部周边向位于用户感应舞台130的用户照射激光。

在体验用户周围的众多观众在看到屏幕110与现实用户的同时能够识别状况,并且在用户感应舞台130上的用户能够体验到作为主人公得到圣母玛利亚的恩惠的体验。

在图3举例说明的系统100可有效灵活使用于医院等。

图4是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验与动物交流感情的影像主题的示例。

参照图4,屏幕110正在播放在竹林中的多只熊猫以及在位于用户感应舞台130的多名儿童就像位于熊猫周围的影像。位于用户感应舞台130的儿童中有用手触摸熊猫头的情况(当然,该情况应该提前设定)下,需要提供该熊猫低头或者返方向移动的影像。图4的情况与图2不同并不是提前设定用户感应舞台130,而是示出了用激光光源120定义用户感应舞台130的实施例。

图5是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验旅游景点的示例。

参照图5,屏幕110正在播放作为旅游境地的独岛的影像,体验用户就像站在船头部分的栏杆处的影像交叠于独岛的影像来进行播放。这是模仿泰塔尼克电影里的一个场景,事先通过电影准备著名的各种场面,可选择并提供用户所希望的形态的服务。在用户感应舞台130上的用户自己也可以张开双手,但是也能够实施从音响设备(未示出)或者屏幕110用文字请求用户做出行为图像并使用户做出相应行为的实施例。

如果,提供的影像主题为著名的阿尔卑斯山顶的情况下,应该在事前准备如下的影像:在用影像观看时位于山顶的用户大声呐喊“呀吼”时,在屏幕110提供发生雪崩的影像,以使用户能够体验根据体验用户的行为图像的增强现实。当然,为了演出这一场景,也可通过屏幕110或者音响设备170要求用户喊出“呀吼”。

图6是示出通过根据本发明的与显示的影像主题相关的增强现实互动系统体验建筑物的示例。

参照图6,屏幕110正在播放现在正在复原的皇龙寺址九层塔以作为旅游景点,并且在用户感应舞台130上正在跳跃的用户影像交叠于皇龙寺址九层塔的影像来进行播放。在用户张开双手跳跃的情况下,需要准备随着跳跃看到皇龙寺址九层塔视角不同的影像。即,在用跳跃之前的视角看皇龙寺址九层塔的影像与用跳跃之后的视角看皇龙寺址九层塔的影像分明存在差异,对此根据用户是否跳跃可提供合适的影像。当然,为了演出这一场景,可请求用户在皇龙寺址九层塔的影像前跳跃。如图6所示,本发明具有不仅是实际物体也可适用于正在修复或者想象的物体的优点。

图7是示出根据本发明的与显示的影像主题相关的增强现实互动系统的运营方法。

参照图7,根据本发明的与显示的影像主题相关的增强现实互动系统运营方法(以下,称为增强现实互动系统的运营方法)执行事前准备步骤710、用户选择步骤720、影像播放步骤730、用户参与步骤740、互动服务提供步骤750以及体验影像提供步骤760。

在事前准备步骤710中,与显示的影像主题相关的增强现实互动系统100(以下,称为系统)的运营者自己制作、委托外部生成的影像主题或者收集已有的影像主题直接或者进行加工后保存在影像处理装置160。

在用户选择步骤710中,系统100的控制部200通过影像处理装置160预示提前设置在屏幕110的影像主题并使用户选择该影像主题,或者在用户利用系统100之前可提前将影像主题提供于系统100。

用户要播放的影像主题的选择方法有多种,例如,在本发明中,通过用户行为识别工具150使位于用户感应舞台130的用户指示号码或者也可用语音选择,也可通过另外的输入工具使用户或者运营者输入。使用户能够提供系统100未准备的影像主题,进而作为服务能够提供用户所希望的特定影像主题,若得到影像主题提供者的同意能够给其他用户提供该服务,则能够减少事前准备步骤710的执行过程。因为这一特征,在本发明中按照字面意思反映了互动。

在影像播放步骤730中,在屏幕110播放影像处理装置160按照控制部200的命令将在用户选择步骤720选择的影像主题。

在用户参与步骤740中,位于用户感应舞台130的用户按照在屏幕110播放的影像的指示或者音响设备170播放的语音指示,采取预定动作(包括语音)或者采取在事前用户与系统100约定的多个行为(包括语音)。

在互动服务提供步骤750提供如下服务:用户行为识别工具150以及控制部200对用户提供互动服务,该互动服务对应于位于用户感应舞台130的用户采取的行为意思,将用户采取的行为反映于屏幕110,利用掩埋在屏幕110的激光光源120或者特效装置180,通过增强现实技术提供服务。

体验影像提供步骤760中,体验影像记录装置190提供包括有屏幕110播放的体验用户的影像、静止照片、视频文件或者将静止的照片或者视频文件保存在存储介质来提供该存储介质。

以上与附图一同叙述本发明的技术思想,但是这不过是示例性说明本发明的优选实施例,并不是限定本发明。并且,只要是在本发明所属技术领域具有通常知识的技术人员,在不超出本发明的技术思想的范围内能够进行各种变形以及模仿,并且这时显而易见的。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1