控制显示多媒体信息的方法、设备和系统的制作方法

文档序号:2538857阅读:168来源:国知局
控制显示多媒体信息的方法、设备和系统的制作方法
【专利摘要】本发明实施例提供控制显示多媒体信息的方法、设备和系统,该方法包括:获取场景中第一区域的图像;根据第一区域的图像,确定第一位置信息,第一位置信息用于指示场景中可见光指示器发出的可见光线在第一区域中的落点的位置;根据第一位置信息,确定在第一区域中落点对应的目标物体,并确定目标物体对应的多媒体信息;控制显示设备显示多媒体信息。本发明实施例中,通过根据场景中第一区域的图像,确定可见光指示器发出的可见光线在第一区域的落点的位置,根据落点的位置确定落点对应的目标物体,并控制显示设备显示目标物体对应的多媒体信息,能够保障与用户交互的准确性,从而能够提升用户体验。
【专利说明】控制显示多媒体信息的方法、设备和系统

【技术领域】
[0001]本发明涉及信息【技术领域】,并且具体地,涉及控制显示多媒体信息的方法、设备和系统。

【背景技术】
[0002]随着技术的发展,采用透明屏、全息模或全息显示等各种“悬浮”显示技术的产品逐渐应用到商业与生活中。在一些需要“虚实结合”的交互场景中,如会议、展览或展示等场景中,采用“悬浮”显示技术,显示位置与方式千变万化,将会给用户体验带来质的飞跃。
[0003]另一方面,从用户的角度出发,无论显示技术发展到何种程度,缺乏交互或者交互手段单一的使用体验都是令人遗憾的。而随着新的显示技术的出现,传统的交互技术也迎来了新的发展契机。
[0004]在现有的“虚实结合”交互场景中,交互方式以手势交互为主。然而,手势交互计算复杂度高,交互实时性与准确性难以保障,从而导致用户体验差。


【发明内容】

[0005]本发明实施例提供控制显示多媒体信息的方法、设备和系统,能够提升用户体验。
[0006]第一方面,提供了一种控制显示多媒体信息的方法,包括:获取场景中第一区域的图像;根据所述第一区域的图像,确定第一位置信息,所述第一位置信息用于指示所述场景中可见光指示器发出的可见光线在所述第一区域中的落点的位置;根据所述第一位置信息,确定在所述第一区域中所述落点对应的目标物体,并确定所述目标物体对应的多媒体信息;控制显示设备显示所述多媒体信息。
[0007]结合第一方面,在第一种可能的实现方式中,在所述控制显示设备显示所述多媒体信息之前,还包括:获取所述场景的图像;根据所述场景的图像和所述第一区域的图像,确定第二位置信息,所述第二位置信息用于指示所述可见光指示器的光源点的位置;根据所述第一位置信息和第二位置信息确定在所述显示设备上用于显示所述多媒体信息的显示区域;
[0008]所述控制显示设备显示所述多媒体信息,包括:控制所述显示设备在所述显示区域上显示所述多媒体信息。
[0009]结合第一方面的第一种可能的实现方式,在第二种可能的实现方式中,通过所述显示区域的中心点的纵轴在水平面上的投影线与所述可见光线在水平面上的投影线平行。
[0010]结合第一方面的第二种可能的实现方式,在第三种可能的实现方式中,还包括:根据所述场景的图像和所述第一区域的图像,确定第三位置信息,所述第三位置信息用于指示所述可见光线与所述显示设备的交点;
[0011]所述根据所述第一位置信息和第二位置信息确定用于显示所述多媒体信息的显示区域,包括:根据所述第一位置信息、所述第二位置信息和所述第三位置信息,确定所述显示区域;其中,所述显示区域与所述可见光线垂直或者所述显示区域位于水平面内;所述显示区域与所述目标物体的投影区域互不遮挡,所述交点在水平面上的投影点与所述显示区域在水平面上的投影区域之间的垂直距离小于预设的阈值,所述交点位于所述目标物体的投影区域内。
[0012]结合第一方面的第二种可能的实现方式,在第四种可能的实现方式中,所述显示区域位于所述落点的正上方;
[0013]所述根据所述第一位置信息和第二位置信息确定在所述显示设备上用于显示所述多媒体信息的显示区域,包括:根据所述第一位置信息和第二位置信息确定所述显示区域;其中,所述显示区域与所述可见光线垂直;所述显示区域与所述目标物体的顶部之间的竖直距离在预设的距离范围内。
[0014]结合第一方面的第二种可能的实现方式,在第五种可能的实现方式中,所述显示区域位于所述落点的正上方,且所述显示区域位于竖直平面内;
[0015]所述根据所述第一位置信息和第二位置信息确定在所述显示设备上用于显示所述多媒体信息的显示区域,包括:根据所述第二位置信息,确定所述可见光源与所述目标物体的底部之间的竖直距离;根据所述可见光源与所述目标物体的底部之间的竖直距离以及所述目标物体的高度,确定所述显示区域与所述目标物体的底部之间的竖直距离。
[0016]结合第一方面或第一方面的第一种可能的实现方式至第五种可能的实现方式中任一方式,在第六种可能的实现方式中,所述根据所述第一位置信息,确定在所述第一区域中所述落点对应的目标物体,并确定所述目标物体对应的多媒体信息,包括:在空间物体信息数据库中对所述第一位置信息进行匹配,以确定所述落点对应的目标物体,并从所述空间物体信息数据库中获取所述目标物体的属性信息,其中所述空间物体信息数据库用于存储所述第一区域中的物体的位置信息以及属性信息;根据所述目标物体的属性信息,在多媒体信息数据库中获取所述目标物体对应的多媒体信息,所述多媒体信息数据库用于存储所述第一区域中的物体的属性信息分别对应的多媒体信息。
[0017]第二方面,提供了一种控制显示多媒体信息的设备,包括:获取单元,用于获取场景中第一区域的图像;第一确定单元,用于根据所述获取单元获取的第一区域的图像,确定第一位置信息,所述第一位置信息用于指示所述场景中可见光指示器发出的可见光线在所述第一区域中的落点的位置;第二确定单元,用于根据所述第一确定单元确定的第一位置信息,确定在所述第一区域中所述落点对应的目标物体,并确定所述目标物体对应的多媒体信息;控制单元,用于控制显示设备显示所述第二确定单元确定的多媒体信息。
[0018]结合第二方面,在第一种可能的实现方式中,还包括第三确定单元;
[0019]所述获取单元,还用于在所述控制显示设备显示所述多媒体信息之前,获取所述场景的图像;所述第一确定单元,还用于根据所述场景的图像和所述第一区域的图像,确定第二位置信息,所述第二位置信息用于指示所述可见光指示器的光源点的位置;所述第三确定单元,用于根据所述第一位置信息和第二位置信息确定在所述显示设备上用于显示所述多媒体信息的显示区域;所述控制单元,具体用于控制所述显示设备在所述显示区域上显示所述多媒体信息。
[0020]结合第二方面的第一种可能的实现方式,在第二种可能的实现方式中,通过所述显示区域的中心点的纵轴在水平面上的投影线与所述可见光线在水平面上的投影线平行。
[0021]结合第二方面的第二种可能的实现方式,在第三种可能的实现方式中,所述第一确定单元,还用于根据所述场景的图像和所述第一区域的图像,确定第三位置信息,所述第三位置信息用于指示所述可见光线与所述显示设备的交点;所述第三确定单元,具体用于:根据所述第一位置信息、所述第二位置信息和所述第三位置信息,确定所述显示区域;其中,所述显示区域与所述可见光线垂直或者所述显示区域位于水平面内;所述显示区域与所述目标物体的投影区域互不遮挡,所述交点在水平面上的投影点与所述显示区域在水平面上的投影区域之间的垂直距离小于预设的阈值,所述交点位于所述目标物体的投影区域内。
[0022]结合第二方面的第二种可能的实现方式,在第四种可能的实现方式中,所述显示区域位于所述落点的正上方;
[0023]所述第三确定单元,具体用于:根据所述第一位置信息和第二位置信息确定所述显示区域;其中,所述显示区域与所述可见光线垂直;所述显示区域与所述目标物体的顶部之间的竖直距离在预设的距离范围内。
[0024]结合第二方面的第二种可能的实现方式,在第五种可能的实现方式中,所述显示区域位于所述落点的正上方,且所述显示区域位于竖直平面内;
[0025]所述第三确定单元,具体用于:根据所述第二位置信息,确定所述可见光源与所述目标物体的底部之间的竖直距离;根据所述可见光源与所述目标物体的底部之间的竖直距离以及所述目标物体的高度,确定所述显示区域与所述目标物体的底部之间的竖直距离。
[0026]结合第二方面或第二方面的第一种可能的实现方式至第五种可能的实现方式中任一方式,在第六种可能的实现方式中,所述第二确定单元,具体用于:在空间物体信息数据库中对所述第一位置信息进行匹配,以确定所述落点对应的目标物体,并从所述空间物体信息数据库中获取所述目标物体的属性信息,其中所述空间物体信息数据库用于存储所述第一区域中的物体的位置信息以及属性信息;根据所述目标物体的属性信息,在多媒体信息数据库中获取所述目标物体对应的多媒体信息,所述多媒体信息数据库用于存储所述第一区域中的物体的属性信息分别对应的多媒体信息。
[0027]第三方面,提供了一种显示系统,包括:如上所述的控制显示多媒体信息的设备,图像采集设备,显示设备以及可见光指示器;其中,所述图像采集设备,用于:采集场景中第一区域的图像,并向所述控制显示多媒体信息的设备发送所述第一区域的图像;所述控制显示多媒体信息的设备,用于:从所述图像采集设备获取场景中第一区域的图像;根据所述第一区域的图像,确定第一位置信息,所述第一位置信息用于指示所述场景中所述可见光指示器发出的可见光线在所述第一区域中的落点的位置;根据所述第一位置信息,确定在所述第一区域中所述落点对应的目标物体,并确定所述目标物体对应的多媒体信息;控制显示设备显示所述多媒体信息;所述显示设备,用于在所述控制显示多媒体信息的设备的控制下显示所述多媒体信息。
[0028]本发明实施例中,通过根据场景中第一区域的图像,确定可见光指示器发出的可见光线在第一区域的落点的位置,根据落点的位置确定落点对应的目标物体,并控制显示设备显示目标物体对应的多媒体信息,能够保障与用户交互的准确性,从而能够提升用户体验。

【专利附图】

【附图说明】
[0029]为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,显而易见地,下面所描述的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0030]图1是根据本发明实施例的控制显示多媒体信息的方法的示意性流程图。
[0031]图2是可应用本发明实施例的一个场景的示意图。
[0032]图3是根据本发明一个实施例的控制显示多媒体信息的方法的过程的示意图。
[0033]图4是图2的场景的简化示意图。
[0034]图5是图2所示场景中透明屏的立体视图。
[0035]图6是针对图5的俯视图。
[0036]图7是图2所示场景的平视图。
[0037]图8是针对图7的俯视图。
[0038]图9是根据本发明实施例的另一场景的示意图。
[0039]图10是根据本发明另一实施例的控制显示多媒体信息的方法的过程的示意图。
[0040]图11是图9的场景的简化示意图。
[0041]图12是图9所示场景中展示桌区域的立体视图。
[0042]图13是图9所不场景的平视图。
[0043]图14是针对图13的俯视图。
[0044]图15是图9所不场景的平视图。
[0045]图16是针对图15的俯视图。
[0046]图17是根据本发明一个实施例的控制显示多媒体信息的设备的示意框图。
[0047]图18是根据本发明另一实施例的控制显示多媒体信息的设备的示意框图。
[0048]图19是根据本发明实施例的显示系统的示意框图。

【具体实施方式】
[0049]下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都应属于本发明保护的范围。
[0050]本发明实施例可以应用于虚实结合的显示场景中,比如,会议、展览或展示等虚实结合的显示场景中。在这些场景中,有实际物体,并可以基于用户对实际物体的选择呈现实际物体相关的信息,从而达到虚实结合的显示效果。在虚实结合的显示场景中,常采用“悬浮”显示技术,例如采用透明屏、全息模或全息显示等各种“悬浮”显示技术,来实现虚实结合的显示效果。
[0051]图1是根据本发明实施例的控制显示多媒体信息的方法的示意性流程图。图1的方法由控制显示多媒体信息的设备执行,例如,具有运算能力的计算机或其它电子设备。
[0052]110,获取场景中第一区域的图像。
[0053]例如,第一区域可以是场景中的某一个区域。比如,在展示的场景中,展示桌上的区域可以称为第一区域。
[0054]120,根据第一区域的图像,确定第一位置信息,第一位置信息用于指示场景中可见光指示器发出的可见光线在第一区域中的落点的位置。
[0055]130,根据第一位置信息,确定在第一区域中落点对应的目标物体,并确定目标物体对应的多媒体信息。
[0056]本发明实施例中,目标物体为真实存在的物体。例如,目标物体的信息可以包括目标物体的属性信息等。比如,目标物体的信息可以包括目标物体的位置、标识或尺寸等信肩、O
[0057]多媒体信息可以包括与目标物体相关的图案、图片、文字或视频等信息。
[0058]140,控制显示设备显示多媒体信息。
[0059]本发明实施例中,显示设备可以是“悬浮”显示产品,例如透明屏、全息模、全息投影或其它透明显示介质等。
[0060]本发明实施例中,可见光指示器可以发出可见光线,在空间中指向某一物体。例如,可见光指示器可以包括激光笔、手机手电筒、iPhone Smart Dot激光或发光二极管(Light Emitting D1de)光束指不器等。
[0061]上述场景中第一区域的图像可以是图像采集设备采集的,例如数字摄像机等。当场景中的用户利用可见光指示器指向第一区域的目标物体时,图像采集设备可以采集第一区域的图像。控制显示多媒体信息的设备可以从图像采集设备获取第一区域的图像,根据图像确定可见光线在第一区域的落点,从而可以确定可见光线所指向的目标物体。然后可以根据目标物体的信息确定目标物体对应的多媒体信息,并控制显示设备显示多媒体信肩、O
[0062]目前,在这种虚实结合的显示场景中,都是基于用户的手势来定位用户所指向的目标物体,然后在显示设备上显示目标物体对应的多媒体信息。由于手势交互的计算复杂度很高,交互准确性难以保障,比如,在某些距离较远、物体较多且排列较为复杂的情况下,很难准确定位用户感兴趣的物体,会导致用户体验非常差。而本发明实施例中,由于可见光指示器发出的可见光线具有明确的指向性,因此通过根据场景中第一区域的图像,确定可见光线在第一区域的落点,根据落点的位置能够准确的定位落点对应的目标物体,然后控制显示设备显示目标物体对应的多媒体信息,能够保障与用户的交互准确性,从而能够提升用户体验。
[0063]本发明实施例中,通过根据场景中第一区域的图像,确定可见光指示器发出的可见光线在第一区域的落点的位置,根据落点的位置确定落点对应的目标物体,并控制显示设备显示目标物体对应的多媒体信息,能够保障与用户交互的准确性,从而能够提升用户体验。
[0064]可选地,作为另一实施例,在步骤130中,可以在空间物体信息数据库中对第一位置信息进行匹配,以确定落点对应的目标物体,并从空间物体信息数据库中获取目标物体的属性信息,其中空间物体信息数据库用于存储第一区域中的物体的位置信息以及属性信息。可以根据目标物体的属性信息,在多媒体信息数据库中获取目标物体对应的多媒体信息,多媒体信息数据库用于存储第一区域中的物体的属性信息分别对应的多媒体信息。
[0065]例如,空间物体信息数据库中可以用于存储第一区域中各个物体的位置以及其它属性信息。例如,属性信息可以包括物体的标识或物体的尺寸等信息。那么,可以根据落点的位置,在空间物体信息数据库中确定与落点的位置相匹配的目标物体,从而获取目标物体的属性信息。
[0066]例如,多媒体信息数据库可以用于存储第一区域的各个物体的属性信息对应的多媒体信息。例如,在多媒体信息数据库中,可以存储物体的标识与多媒体信息之间的对应关系。可以根据目标物体的标识,从多媒体信息数据库中获取目标物体对应的多媒体信息。
[0067]可选地,作为一个实施例,在步骤140之前,可以获取场景的图像,根据场景的图像和第一区域的图像,确定第二位置信息,第二位置信息用于指示场景中可见光源的位置。可以根据第一位置信息和第二位置信息确定在显示设备上用于显示多媒体信息的显示区域。在步骤140中,可以控制显示设备在上述显示区域上显示多媒体信息。
[0068]例如,可以根据场景的图像和第一区域的图像二者的像素分布、亮度和颜色等信息,对落点和可见光源的特征进行识别,从而确定第一位置信息和第二位置信息。该过程可以参照现有的过程,不再赘述。
[0069]例如,第一位置信息和第二位置信息均可以以坐标来表示。如,可以基于显示设备设定空间直角坐标系,那么可以以落点在空间直角坐标系中的坐标来表示第一位置信息,可以以可见光源在空间直角坐标系中的坐标来表示第二位置信息。
[0070]根据第一位置信息和第二位置信息,以及目标物体自身的一些信息,可以确定多媒体信息的显示区域,显示区域应当满足人眼的视角范围的要求,并且面向用户,使得用户在观看显示区域上显示的多媒体信息时能够处于舒服的观看状态,从而能够提升用户体验。
[0071]例如,上述显示区域可以指真实的立体显示屏幕上的区域,也可以指无形显示介质中的区域。
[0072]可选地,作为另一实施例,通过显示区域的中心点的纵轴在水平面上的投影线与可见光线在水平面上的投影线平行。通常来说,用户对可见光指示器进行操作,可以认为用户的视线的方向与可见光指示器的可见光线的方向是相同的。因此,显示区域在水平面上的投影相对于水平面的纵轴的偏转角度与可见光线在水平面上的投影相对于水平面的纵轴的偏转角度是相同的,也就是说,通过显示区域的中心点的纵轴在水平面上的投影线与可见光线在水平面上的投影线平行,这样使得用户能够正视显示区域所显示的多媒体信肩、O
[0073]可选地,作为另一实施例,可以根据场景的图像和第一区域的图像,确定第三位置信息,第三位置信息用于指示可见光线与显示设备的交点。在步骤140之前,可以根据第一位置信息、第二位置信息和第三位置信息,确定显示区域;其中,显示区域可以与可见光线垂直或者显示区域可以在水平面内;显示区域与目标物体的投影区域互不遮挡,可见光线与显示设备的交点位于投影区域内,交点在水平面上的投影点与显示区域在水平面的上的投影区域之间的垂直距离小于预设的阈值。
[0074]例如,可以根据场景的图像和第一区域的图像二者的像素分布、亮度和颜色等信息,提取可见光线与显示设备的交点的特征,从而确定第一位置信息和第二位置信息。
[0075]根据第一位置信息和第二位置信息,可以确定显示区域在三维空间中的角度。显示区域可以与可见光线垂直,由于可见光线的方向与用户的视线的方向是相同的,这样的话显示区域也是垂直于用户的视线的,因此显示区域是面向用户的。或者,显示区域可以位于水平面内,这样用户也可以直观地看到显示区域。
[0076]此外,对于显示设备为有形显示介质的情况下,还可以沿着可见光线在可见光线与显示设备的交点处对目标物体进行投影,得到目标物体的投影区域。此处可以利用目标物体的尺寸信息对目标物体进行投影,目标物体的尺寸信息可以是预先存储在设备内部的存储器中,例如可以从上述空间信息物体数据库中获取的。
[0077]显示区域可以与目标物体的投影区域互不遮挡,并且交点在水平面上的投影点可以与显示区域在水平面上的投影区域之间的垂直距离可以小于预设的阈值,这样从用户的观看角度来说,显示区域在目标物体的附近,又不会遮挡目标物体,能够提升用户观看的舒适度,从而能够提升用户体验。
[0078]可选地,作为另一实施例,显示区域可以位于落点的正上方。在步骤140之前,可以根据第一位置信息和第二位置信息确定显示区域;其中,显示区域与可见光线垂直;显示区域与目标物体的顶部之间的竖直距离大于预设的第二阈值。
[0079]例如,对于显示设备为无形显示介质的情况,可见光线与显示设备之间没有交点。那么可以利用光源点与落点,来确定显示区域。显示区域可以位于落点的正上方,与可见光线垂直,这样从用户的角度来看,显示区域是在目标物体的附近,并且是面向用户的,能够提升用户体验。但是,显示区域不应遮挡目标物体,因此,显示区域与目标物体顶部之间的竖直距离可以在一定的距离范围内,该距离范围可以是预先设定的。
[0080]可选地,作为另一实施例,显示区域可以位于落点的正上方,并且位于竖直平面内。在步骤140之前,可以根据第二位置信息,确定可见光源与目标物体的底部之间的竖直距离。可以根据可见光源与目标物体的底部之间的竖直距离以及目标物体的高度,确定显示区域与目标物体的底部之间的竖直距离。
[0081]本实施例中,显示区域可以位于竖直平面内,即显示区域是垂直于水平面的。显示区域可以位于落点正上方,在用户看来,显示区域是处于目标物体附近的。显示区域与目标物体之间的竖直距离可以是根据光源点相对于目标物体底部的高度和目标物体自身的高度来适应性调整。目标物体自身的高度可以是预先存储在设备内部的存储器中,例如,可以从空间物体信息数据库中获取。
[0082]下面将结合具体例子详细描述本发明实施例。应注意,这些例子只是更好地帮助本领域技术人员更好地理解本发明实施例,而非限制本发明实施例的范围。
[0083]图2是可应用本发明实施例的一个场景的示意图。
[0084]在图2中,以采用透明屏实现“悬浮”显示效果为例进行说明。如图2所示,展示桌上陈列有展示的物体,展示桌上方设置有透明屏210。在透明屏210的4个角处,可以设置4个摄像机250a至250d,摄像机250a至250d可以对展示桌上的整个区域进行图像采集。在透明屏210的上方,也就是该场景的上方,可以设置2个摄像机240a和240b,摄像机240a和240b可以对整个场景进行图像采集。
[0085]激光笔230可以发出可见光线,在空间中指向某一物体。如图2所示,当用户利用激光笔230指向位于展示桌上的目标物体220时,与目标物体220相对应的多媒体信息可以显示在透明屏210的一个显示区域上。多媒体信息可以包括目标物体220相关的图案、图片、文字或视频等信息。
[0086]下面将结合图2的场景详细描述控制显示多媒体信息的过程。在下面的过程中,为了便于描述,将展示桌上的区域称为第一区域。图3是根据本发明一个实施例的控制显示多媒体信息的方法的过程的示意图。图3的方法由控制显示多媒体信息的设备执行。
[0087]301,从摄像机获取场景的图像和第一区域的图像。
[0088]如图2所示,当用户利用激光笔230指向目标物体220时,摄像机240和240b可以采集整个场景的图像,摄像机250a至250d可以采集第一区域的图像。然后摄像机240a和240b以及摄像机250a至250d可以将采集的图像发送给控制显示多媒体信息的设备。
[0089]302,根据场景的图像和第一区域的图像,确定第一位置信息、第二位置信息和第三位置信息。
[0090]第一位置信息用于指示激光笔230发出的可见光线在第一区域内的落点D的位置,第二位置信息可以用于指示激光笔230的光源点S的位置,第三位置信息可以用于指示激光笔230发出的可见光线与透明平面210的交点I的位置。第一位置信息、第二位置信息和第三位置信息均可以以三维空间的坐标表示。
[0091]图4是图2的场景的简化示意图。在图4中,为了使得视图更为清晰,适当省略了图2中的一些元素。如图4所示,可以从场景的图像和第一区域的图像中检测落点D、光源点S以及交点I。图5是图2所示场景中透明屏的立体视图。如图5所示,为了使得立体视图更为清晰,适当省略了图2中的一些元素。在图5中,假设基于透明平面210设定空间直角坐标系,那么可以根据立体定位算法计算在该坐标系中落点D、光源点S以及交点I各自的坐标。
[0092]对于交点I,如果在场景的图像中无法检测到,则可以根据光源点S的坐标和落点D的坐标,通过空间立体几何学方法计算得到的。
[0093]此处,假设光源点S、交点I和落点D的坐标分别如下:光源点S(Xs,Ys, Zs),交点
I(Xi,Yi,Zi),落点 D (Xd,Yd,Zd)。
[0094]303,根据落点D,确定落点D对应的目标物体220,获取目标物体220的属性信息。
[0095]空间物体信息数据库中可以用于存储展示桌上各个物体在空间直角坐标系中的坐标范围以及其它属性信息。例如,属性信息可以包括物体的标识或物体的尺寸等信息。那么,可以根据落点D的坐标,在空间物体信息数据库中确定与落点D的坐标相匹配的目标物体220,以及目标物体220的相关信息。
[0096]304,根据目标物体220的属性信息,确定目标物体220对应的多媒体信息。
[0097]多媒体信息数据库可以用于存储展示桌上的各个物体的属性信息对应的多媒体信息。例如,在多媒体信息数据库中,可以建立物体的标识与多媒体信息之间的对应关系。可以根据目标物体220的标识,从多媒体信息数据库中获取目标物体220对应的多媒体信肩、O
[0098]305,根据光源点S、交点1、落点D和目标物体220,确定透明平面210内用于显示目标物体220对应的多媒体信息的显示区域。
[0099]由于透明屏是立体的,因此确定显示区域也可以理解为确定显示位置和显示角度。
[0100]如图5所示,可以根据立体几何学方法,确定激光笔230发出的可见光线L在XZ平面上的投影L',确定L'与L的夹角α,并确定L'与X轴的夹角β。
[0101]另外,可以将目标物体220按照1:1的比例投影在交点I处,得到目标物体220的投影区域。图6是针对图5的俯视图。如图6所示,交点I位于目标物体220的投影区域内。
[0102]根据α和β,可以确定显示区域在空间直角坐标系中的角度。图7是图2所示场景的平视图。图8是针对图7的俯视图。如图7所示,为了适应人眼的视角,显示区域可以与可见光线L垂直。因此,可以根据α,确定显示区域与XZ平面的夹角Y,S卩Y=f(a)。或者,在显示设备的显示性能有限的情况下,Y可以为O。为了适应人眼观看的舒适度,使得用户正视显示区域,如图8所示,显示区域与XY平面的夹角可以等于可见光线L与XY平面的夹角,即β。
[0103]此外,如图8所示,显示区域可以位于交点I附近,且与目标物体220的投影区域互不遮挡。具体来说,可以使得交点I在XZ平面上的投影点与显示区域在XZ平面上的投影区域之间垂直距离小于预设的阈值,来使得在用户看来,显示区域是在目标物体的附近。此外,显示区域的具体位置也可以根据实际情况进行调整。
[0104]306,控制在上述显示区域中显示目标物体220对应的多媒体信息。
[0105]应理解,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。例如,步骤304和305可以并行地执行。
[0106]本发明实施例中,通过根据场景中第一区域的图像,确定可见光指示器发出的可见光线在第一区域的落点的位置,根据落点的位置确定落点对应的目标物体,并控制显示设备显示目标物体对应的多媒体信息,能够保障与用户交互的准确性,从而能够提升用户体验。
[0107]图9是根据本发明实施例的另一场景的示意图。
[0108]在一类“悬浮”显示技术中,可以利用激光、特殊显示或投影设备在空气或各种特殊气体中成像。在图9中,以利用空气成像显示技术的显示设备实现“悬浮”显示效果为例进行说明。
[0109]如图9所示,展示桌上陈列有展示的物体,展示桌的上方设置有显示设备910。在展示桌上方的4个角处,可以设置4个摄像机950a至950d。摄像机950a至950d可以对展示桌上的整个区域进行图像采集。在该场景的上方,可以设置2个摄像机940a和940b,摄像机940a和940b可以对整个场景进行图像采集。
[0110]激光笔930可以发出可见光线,在空间中指向某一物体。如图9所示,当用户利用激光笔930指向位于展示桌上的目标物体920时,与目标物体920相对应的多媒体信息可以显示在显示设备910的一个显示区域上。多媒体信息可以包括目标物体920相关的图案、图片、文字或视频等信息。
[0111]下面将结合图9的场景详细描述控制显示多媒体信息的过程。在下面的过程中,为了便于描述,将展示桌上的区域称为第一区域。图10是根据本发明另一实施例的控制显示多媒体信息的方法的过程的示意图。图10的方法由控制显示多媒体信息的设备执行。
[0112]1001,从摄像机获取场景的图像和第一区域的图像。
[0113]如图9所示,当用户利用激光笔930指向目标物体920时,摄像机940和940b可以采集整个场景的图像,摄像机950a至950d可以采集第一区域的图像。然后摄像机940a和940b以及摄像机950a至950d可以将采集的图像发送给控制显示多媒体信息的设备。
[0114]1002,根据场景的图像和第一区域的图像,确定第一位置信息和第二位置信息。
[0115]第一位置信息用于指示激光笔930发出的可见光线在第一区域内的落点D的位置,第二位置信息可以用于指示激光笔930的光源点S的位置。
[0116]图11是图9的场景的简化示意图。在图11中,为了使得视图更为清晰,适当省略了图9中的一些元素。如图11所示,可以从场景的图像和第一区域的图像中检测落点D和光源点S。图12是图9所示场景中展示桌区域的立体视图。如图12所示,为了使得立体视图更为清晰,适当省略了图9中的一些元素。在图12中,假设基于展示桌上面的区域设定空间直角坐标系,那么可以根据立体定位算法计算在该坐标系中落点D和光源点S各自的坐标。
[0117]此处,假设光源点S和落点D的坐标分别如下:光源点S (XS,YS,ZS),落点D(Xd, Yd, Zd)。
[0118]1003,根据落点D,确定落点D对应的目标物体920,并获取目标物体920的属性信肩、O
[0119]空间物体信息数据库中可以用于存储展示桌上各个物体在空间直角坐标系中的坐标范围以及属性信息。例如,属性信息可以包括物体的标识或物体的尺寸等信息。那么,可以根据落点D的坐标,在空间物体信息数据库中确定与落点D的坐标相匹配的目标物体920,并获取目标物体920的属性信息。
[0120]1004,根据目标物体920的属性信息,确定目标物体920对应的多媒体信息。
[0121]多媒体信息数据库可以用于存储展示桌上的各个物体的属性信息对应的多媒体信息。例如,在多媒体信息数据库中,可以建立物体的标识与多媒体信息之间的对应关系。可以根据目标物体920的标识,从多媒体信息数据库中获取目标物体920对应的多媒体信肩、O
[0122]1005,根据光源点S、落点D和目标物体920,确定显示设备910上用于显示目标物体920对应的多媒体信息的显示区域。
[0123]由于采用“悬浮”显示技术,因此确定显示区域也可以理解为确定显示位置和显示角度。
[0124]如图12所示,可以根据立体几何学方法,确定激光笔930发出的可见光线L在XZ平面上的投影L',确定L'与L的夹角α,并确定L'与X轴的夹角β。
[0125]可以通过下面两种方式确定显示区域的角度和位置:
[0126]方式一:
[0127]根据α和β,可以确定显示区域在空间直角坐标系中的角度。
[0128]图13是图9所示场景的平视图。在图13中,适当省略了图9中的一些元素。图14是针对图13的俯视图。如图13所示,为了适应人眼的视角,使得显示区域面向用户,显示区域可以与可见光线L垂直。因此,可以根据α,确定显示区域与XZ平面的夹角Y,SP
Y =f ( a )0
[0129]此外,如上所述,显示区域位于落点D的正上方,因此在俯视图中,落点D的投影应当是位于显示区域的投影区域内或者二者有一定重叠,但是在图14中,为了更为清晰地表示显示区域相对于XY平面的偏转角度,因此示出的显示区域的投影区域是位于落点投影的右侧。应理解,图14仅仅是为了帮助本领域技术人员更好地理解本发明实施例,而非显示本发明实施例的范围。为了适应人眼观看的舒适度,使得用户正视显示区域,如图14所示,显示区域与XY平面的夹角可以等于可见光线L与XY平面的夹角,即β。
[0130]显示区域可以位于落点D的正上方,且显示区域与目标物体920顶部之间的竖直距离可以大于预设的阈值。如图13所示,假设目标物体920的高度为C,显示区域与目标物体底部之间的竖直距离为dh,那么dh与c之间的差值可以大于预设的阈值。
[0131]方式二:图15是图9所示场景的平视图。在图15中,适当省略了图9中的一些元素。图16是针对图15的俯视图。
[0132]如图15所示,显示区域仍可以位于落点D的正上方,并且可以位于竖直平面内。不同于上述方式一的是,显示区域与目标物体920底部之间的竖直距离可以是自适应调整的。具体地,可以根据第二位置信息确定光源点S与目标物体920底部之间的竖直距离h,根据光源点S与目标物体920底部之间的竖直距离h以及目标物体的高度C,确定显示区域与目标物体920底部之间的竖直距离dh,如图15所示。即dh是h和c的函数,可以表示为
dh=f (h, c) ο
[0133]另外,如上所述,显示区域位于落点D的正上方,因此在俯视图中,落点D的投影应当是位于显示区域的投影区域内或者二者有一定重叠,但是在图16中,为了更为清晰地表示显示区域相对于XY平面的偏转角度,因此示出的显示区域的投影区域是位于落点投影的右侧。应理解,图16仅仅是为了帮助本领域技术人员更好地理解本发明实施例,而非显示本发明实施例的范围。如图16所示,为了适应人眼观看的舒适度,显示区域与XY平面的夹角可以等于可见光线L与XY平面的夹角,S卩β。
[0134]1006,控制在上述显示区域中显示目标物体920对应的多媒体信息。
[0135]应理解,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。例如,步骤1004和1005可以并行地执行。
[0136]本发明实施例中,通过根据场景中第一区域的图像,确定可见光指示器发出的可见光线在第一区域的落点的位置,根据落点的位置确定落点对应的目标物体,并控制显示设备显示目标物体对应的多媒体信息,能够保障与用户交互的准确性,从而能够提升用户体验。
[0137]图17是根据本发明一个实施例的控制显示多媒体信息的设备的示意框图。图17的设备1700包括获取单元1710、第一确定单元1720、第二确定单元1730和控制单元1740。
[0138]获取单元1710获取场景中第一区域的图像。第一确定单元1720根据第一区域的图像,确定第一位置信息,第一位置信息用于指示场景中可见光指示器发出的可见光线在第一区域中的落点的位置。第二确定单元1730根据第一位置信息,确定在第一区域中落点对应的目标物体,并确定目标物体对应的多媒体信息。控制单元1740控制显示设备显示多媒体信息。
[0139]本发明实施例中,通过根据场景中第一区域的图像,确定可见光指示器发出的可见光线在第一区域的落点的位置,根据落点的位置确定落点对应的目标物体,并控制显示设备显示目标物体对应的多媒体信息,能够保障与用户交互的准确性,从而能够提升用户体验。
[0140]可选地,作为一个实施例,设备1700还可以包括第三确定单元1750。
[0141]获取单元1710还可以在控制显示设备显示多媒体信息之前,获取场景的图像。第一确定单元1720还可以根据场景的图像和第一区域的图像,确定第二位置信息,第二位置信息用于指示可见光指示器的光源点的位置。
[0142]第三确定单元1750可以根据第一位置信息和第二位置信息确定在显示设备上用于显示多媒体信息的显示区域。
[0143]控制单元1740可以控制显示设备在显示区域上显示多媒体信息。
[0144]可选地,作为另一实施例,通过显示区域的中心点的纵轴在水平面上的投影线与可见光线在水平面上的投影线平行。
[0145]可选地,作为另一实施例,第一确定单元1720还可以根据场景的图像和第一区域的图像,确定第三位置信息,第三位置信息用于指示可见光线与显示设备的交点。
[0146]第三确定单元1750可以根据第一位置信息、第二位置信息和第三位置信息,确定显示区域。其中,显示区域与可见光线垂直或者显示区域位于水平面内;显示区域与目标物体的投影区域互不遮挡,交点在水平面上的投影点与显示区域在水平面上的投影区域之间的垂直距离小于预设的阈值,交点位于目标物体的投影区域内。
[0147]可选地,作为另一实施例,显示区域可以位于落点的正上方。
[0148]第三确定单元1750可以根据第一位置信息和第二位置信息确定显示区域;其中,显示区域与可见光线垂直;显示区域与目标物体的顶部之间的竖直距离在预设的距离范围内。
[0149]可选地,作为另一实施例,显示区域可以位于落点的正上方,且显示区域可以位于竖直平面内。
[0150]第三确定单元1750可以根据第二位置信息,确定可见光源与目标物体的底部之间的竖直距离;根据可见光源与目标物体的底部之间的竖直距离以及目标物体的高度,确定显示区域与目标物体的底部之间的竖直距离。
[0151]可选地,作为另一实施例,第二确定单元1730可以在空间物体信息数据库中对第一位置信息进行匹配,以确定落点对应的目标物体,并从空间物体信息数据库中获取目标物体的属性信息,其中空间物体信息数据库用于存储第一区域中的物体的位置信息以及属性信息。第二确定单元1730还可以根据目标物体的属性信息,在多媒体信息数据库中获取目标物体对应的多媒体信息,多媒体信息数据库用于存储第一区域中的物体的属性信息分别对应的多媒体信息。
[0152]设备1700的其它功能和操作可以参照上面图1至图16的方法实施例的过程,为了避免重复,此处不再赘述。
[0153]图18是根据本发明另一实施例的控制显示多媒体信息的设备的示意框图。图18的设备1800包括存储器1810和处理器1820。
[0154]存储器1810可以包括随机存储器、闪存、只读存储器、可编程只读存储器、非易失性存储器或寄存器等。处理器1820可以是中央处理器(Central Processing Unit, CPU)。
[0155]存储器1810用于存储可执行指令。处理器1820可以执行存储器1810中存储的可执行指令,用于:获取场景中第一区域的图像;根据第一区域的图像,确定第一位置信息,第一位置信息用于指示场景中可见光指示器发出的可见光线在第一区域中的落点的位置;根据第一位置信息,确定在第一区域中落点对应的目标物体,并确定目标物体对应的多媒体信息;控制显示设备显示多媒体信息。
[0156]本发明实施例中,通过根据场景中第一区域的图像,确定可见光指示器发出的可见光线在第一区域的落点的位置,根据落点的位置确定落点对应的目标物体,并控制显示设备显示目标物体对应的多媒体信息,能够保障与用户交互的准确性,从而能够提升用户体验。
[0157]可选地,作为一个实施例,处理器1820还可以在控制显示设备显示多媒体信息之前,获取场景的图像。处理器1820还可以根据场景的图像和第一区域的图像,确定第二位置信息,第二位置信息用于指示可见光指示器的光源点的位置。
[0158]处理器1820可以根据第一位置信息和第二位置信息确定在显示设备上用于显示多媒体信息的显示区域。
[0159]处理器1820可以控制显示设备在显示区域上显示多媒体信息。
[0160]可选地,作为另一实施例,通过显示区域的中心点的纵轴在水平面上的投影线与可见光线在水平面上的投影线平行。
[0161]可选地,作为另一实施例,处理器1820还可以根据场景的图像和第一区域的图像,确定第三位置信息,第三位置信息用于指示可见光线与显示设备的交点。
[0162]处理器1820可以根据第一位置信息、第二位置信息和第三位置信息,确定显示区域。其中,显示区域与可见光线垂直或者显示区域位于水平面内;显示区域与目标物体的投影区域互不遮挡,交点在水平面上的投影点与显示区域在水平面上的投影区域之间的垂直距离小于预设的阈值,交点位于目标物体的投影区域内。
[0163]可选地,作为另一实施例,显示区域可以位于落点的正上方。
[0164]处理器1820可以根据第一位置信息和第二位置信息确定显示区域;其中,显示区域与可见光线垂直;显示区域与目标物体的顶部之间的竖直距离在预设的距离范围内。
[0165]可选地,作为另一实施例,显示区域可以位于落点的正上方,且显示区域可以位于竖直平面内。
[0166]处理器1820可以根据第二位置信息,确定可见光源与目标物体的底部之间的竖直距离;根据可见光源与目标物体的底部之间的竖直距离以及目标物体的高度,确定显示区域与目标物体的底部之间的竖直距离。
[0167]可选地,作为另一实施例,处理器1820可以在空间物体信息数据库中对第一位置信息进行匹配,以确定落点对应的目标物体,并从空间物体信息数据库中获取目标物体的属性信息,其中空间物体信息数据库用于存储第一区域中的物体的位置信息以及属性信息。处理器1820还可以根据目标物体的属性信息,在多媒体信息数据库中获取目标物体对应的多媒体信息,多媒体信息数据库用于存储第一区域中的物体的属性信息分别对应的多媒体信息。
[0168]设备1800的其它功能和操作可以参照上面图1至图16的方法实施例的过程,为了避免重复,此处不再赘述。
[0169]图19是根据本发明实施例的显示系统的示意框图。图19的系统1900包括控制显示多媒体信息的设备1910、图像采集设备1920、显示设备1930和可见光指示器1940。
[0170]图像采集设备1920采集场景中第一区域的图像,并向控制显示多媒体信息的设备发送第一区域的图像。控制显示多媒体信息的设备1910从图像采集设备1920获取场景中第一区域的图像,根据第一区域的图像,确定第一位置信息,第一位置信息用于指示场景中可见光指示器1940发出的可见光线在第一区域中的落点的位置,根据第一位置信息,确定在第一区域中落点对应的目标物体,并确定目标物体对应的多媒体信息,然后控制显示设备显示多媒体信息。显示设备1930在控制显示多媒体信息的设备的控制下显示多媒体信息。
[0171]本发明实施例中,通过控制显示多媒体信息的设备根据场景中第一区域的图像,确定可见光指示器发出的可见光线在第一区域的落点的位置,根据落点的位置确定落点对应的目标物体,并控制显示设备显示目标物体对应的多媒体信息,能够保障与用户交互的准确性,从而能够提升用户体验。
[0172]可选地,作为一个实施例,图像采集设备1920可以采集场景的图像,并向设备1910发送场景的图像。
[0173]设备1910还可以在控制显示设备1930显示多媒体信息之前,从图像采集设备1920获取场景的图像。设备1910还可以根据场景的图像和第一区域的图像,确定第二位置信息,第二位置信息用于指示可见光指示器1940的光源点的位置。
[0174]设备1910可以根据第一位置信息和第二位置信息确定在显示设备1930上用于显示多媒体信息的显示区域。
[0175]设备1910可以控制显示设备1930在显示区域上显示多媒体信息。显示设备1930可以在设备1910的控制下在显示区域上显示多媒体信息。
[0176]可选地,作为另一实施例,通过显示区域的中心点的纵轴在水平面上的投影线与可见光线在水平面上的投影线平行。
[0177]可选地,作为另一实施例,设备1910还可以根据场景的图像和第一区域的图像,确定第三位置信息,第三位置信息用于指示可见光线与显示设备1930的交点。
[0178]设备1910可以根据第一位置信息、第二位置信息和第三位置信息,确定显示区域。其中,显示区域与可见光线垂直或者显示区域位于水平面内;显示区域与目标物体的投影区域互不遮挡,交点在水平面上的投影点与显示区域在水平面上的投影区域之间的垂直距离小于预设的阈值,交点位于目标物体的投影区域内。
[0179]可选地,作为另一实施例,显示区域可以位于落点的正上方。
[0180]设备1910可以根据第一位置信息和第二位置信息确定显示区域;其中,显示区域与可见光线垂直;显示区域与目标物体的顶部之间的竖直距离在预设的距离范围内。
[0181]可选地,作为另一实施例,显示区域可以位于落点的正上方,且显示区域可以位于竖直平面内。
[0182]设备1910可以根据第二位置信息,确定可见光源与目标物体的底部之间的竖直距离;根据可见光源与目标物体的底部之间的竖直距离以及目标物体的高度,确定显示区域与目标物体的底部之间的竖直距离。
[0183]可选地,作为另一实施例,设备1910可以在空间物体信息数据库中对第一位置信息进行匹配,以确定落点对应的目标物体,并从空间物体信息数据库中获取目标物体的属性信息,其中空间物体信息数据库用于存储第一区域中的物体的位置信息以及属性信息。设备1910还可以根据目标物体的属性信息,在多媒体信息数据库中获取目标物体对应的多媒体信息,多媒体信息数据库用于存储第一区域中的物体的属性信息分别对应的多媒体信息。
[0184]设备1910的其它功能和操作可以参照上面图1至图16的方法实施例的过程,为了避免重复,此处不再赘述。
[0185]本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
[0186]所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
[0187]在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
[0188]所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
[0189]另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
[0190]所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM, Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
[0191]以上所述,仅为本发明的【具体实施方式】,但本发明的保护范围并不局限于此,任何熟悉本【技术领域】的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
【权利要求】
1.一种控制显示多媒体信息的方法,其特征在于,包括: 获取场景中第一区域的图像; 根据所述第一区域的图像,确定第一位置信息,所述第一位置信息用于指示所述场景中可见光指示器发出的可见光线在所述第一区域中的落点的位置; 根据所述第一位置信息,确定在所述第一区域中所述落点对应的目标物体,并确定所述目标物体对应的多媒体信息; 控制显示设备显示所述多媒体信息。
2.根据权利要求1所述的方法,其特征在于,在所述控制显示设备显示所述多媒体信息之前,还包括: 获取所述场景的图像; 根据所述场景的图像和所述第一区域的图像,确定第二位置信息,所述第二位置信息用于指示所述可见光指示器的光源点的位置; 根据所述第一位置信息和第二位置信息确定在所述显示设备上用于显示所述多媒体信息的显示区域; 所述控制显示设备显示所述多媒体信息,包括: 控制所述显示设备在所述显示区域上显示所述多媒体信息。
3.根据权利要求2所述的方法,其特征在于,通过所述显示区域的中心点的纵轴在水平面上的投影线与所述可见光线在水平面上的投影线平行。
4.根据权利要求3所述的方法,其特征在于,还包括: 根据所述场景的图像和所述第一区域的图像,确定第三位置信息,所述第三位置信息用于指示所述可见光线与所述显示设备的交点; 所述根据所述第一位置信息和第二位置信息确定用于显示所述多媒体信息的显示区域,包括: 根据所述第一位置信息、所述第二位置信息和所述第三位置信息,确定所述显示区域; 其中,所述显示区域与所述可见光线垂直或者所述显示区域位于水平面内;所述显示区域与所述目标物体的投影区域互不遮挡,所述交点在水平面上的投影点与所述显示区域在水平面上的投影区域之间的垂直距离小于预设的阈值,所述交点位于所述目标物体的投影区域内。
5.根据权利要求3所述的方法,其特征在于,所述显示区域位于所述落点的正上方; 所述根据所述第一位置信息和第二位置信息确定在所述显示设备上用于显示所述多媒体信息的显示区域,包括: 根据所述第一位置信息和第二位置信息确定所述显示区域;其中,所述显示区域与所述可见光线垂直;所述显示区域与所述目标物体的顶部之间的竖直距离在预设的距离范围内。
6.根据权利要求3所述的方法,其特征在于,所述显示区域位于所述落点的正上方,且所述显示区域位于竖直平面内; 所述根据所述第一位置信息和第二位置信息确定在所述显示设备上用于显示所述多媒体信息的显示区域,包括: 根据所述第二位置信息,确定所述可见光源与所述目标物体的底部之间的竖直距离;根据所述可见光源与所述目标物体的底部之间的竖直距离以及所述目标物体的高度,确定所述显示区域与所述目标物体的底部之间的竖直距离。
7.根据权利要求1至6中任一项所述的方法,其特征在于,所述根据所述第一位置信息,确定在所述第一区域中所述落点对应的目标物体,并确定所述目标物体对应的多媒体信息,包括: 在空间物体信息数据库中对所述第一位置信息进行匹配,以确定所述落点对应的目标物体,并从所述空间物体信息数据库中获取所述目标物体的属性信息,其中所述空间物体信息数据库用于存储所述第一区域中的物体的位置信息以及属性信息; 根据所述目标物体的属性信息,在多媒体信息数据库中获取所述目标物体对应的多媒体信息,所述多媒体信息数据库用于存储所述第一区域中的物体的属性信息分别对应的多媒体信息。
8.—种控制显示多媒体信息的设备,其特征在于,包括: 获取单元,用于获取场景中第一区域的图像; 第一确定单元,用于根据所述获取单元获取的第一区域的图像,确定第一位置信息,所述第一位置信息用于指示所述场景中可见光指示器发出的可见光线在所述第一区域中的落点的位置; 第二确定单元,用于根据所述第一确定单元确定的第一位置信息,确定在所述第一区域中所述落点对应的目标物体,并确定所述目标物体对应的多媒体信息; 控制单元,用于控制显示设备显示所述第二确定单元确定的多媒体信息。
9.根据权利要求8所述的设备,其特征在于,还包括第三确定单元; 所述获取单元,还用于在所述控制显示设备显示所述多媒体信息之前,获取所述场景的图像; 所述第一确定单元,还用于根据所述场景的图像和所述第一区域的图像,确定第二位置信息,所述第二位置信息用于指示所述可见光指示器的光源点的位置; 所述第三确定单元,用于根据所述第一位置信息和第二位置信息确定在所述显示设备上用于显示所述多媒体信息的显示区域; 所述控制单元,具体用于控制所述显示设备在所述显示区域上显示所述多媒体信息。
10.根据权利要求9所述的设备,其特征在于,通过所述显示区域的中心点的纵轴在水平面上的投影线与所述可见光线在水平面上的投影线平行。
11.根据权利要求10所述的设备,其特征在于, 所述第一确定单元,还用于根据所述场景的图像和所述第一区域的图像,确定第三位置信息,所述第三位置信息用于指示所述可见光线与所述显示设备的交点; 所述第三确定单元,具体用于:根据所述第一位置信息、所述第二位置信息和所述第三位置信息,确定所述显示区域;其中,所述显示区域与所述可见光线垂直或者所述显示区域位于水平面内;所述显示区域与所述目标物体的投影区域互不遮挡,所述交点在水平面上的投影点与所述显示区域在水平面上的投影区域之间的垂直距离小于预设的阈值,所述交点位于所述目标物体的投影区域内。
12.根据权利要求10所述的设备,其特征在于,所述显示区域位于所述落点的正上方; 所述第三确定单元,具体用于:根据所述第一位置信息和第二位置信息确定所述显示区域;其中,所述显示区域与所述可见光线垂直;所述显示区域与所述目标物体的顶部之间的竖直距离在预设的距离范围内。
13.根据权利要求10所述的设备,其特征在于,所述显示区域位于所述落点的正上方,且所述显示区域位于竖直平面内; 所述第三确定单元,具体用于:根据所述第二位置信息,确定所述可见光源与所述目标物体的底部之间的竖直距离;根据所述可见光源与所述目标物体的底部之间的竖直距离以及所述目标物体的高度,确定所述显示区域与所述目标物体的底部之间的竖直距离。
14.根据权利要求8至13中任一项所述的设备,其特征在于,所述第二确定单元,具体用于: 在空间物体信息数据库中对所述第一位置信息进行匹配,以确定所述落点对应的目标物体,并从所述空间物体信息数据库中获取所述目标物体的属性信息,其中所述空间物体信息数据库用于存储所述第一区域中的物体的位置信息以及属性信息; 根据所述目标物体的属性信息,在多媒体信息数据库中获取所述目标物体对应的多媒体信息,所述多媒体信息数据库用于存储所述第一区域中的物体的属性信息分别对应的多媒体信息。
15.一种显示系统,其特征在于,包括: 如权利要求8至14中任一项所述的控制显示多媒体信息的设备,图像采集设备,显示设备以及可见光指示器;其中, 所述图像采集设备,用于:采集场景中第一区域的图像,并向所述控制显示多媒体信息的设备发送所述第一区域的图像; 所述控制显示多媒体信息的设备,用于:从所述图像采集设备获取场景中第一区域的图像;根据所述第一区域的图像,确定第一位置信息,所述第一位置信息用于指示所述场景中所述可见光指示器发出的可见光线在所述第一区域中的落点的位置;根据所述第一位置信息,确定在所述第一区域中所述落点对应的目标物体,并确定所述目标物体对应的多媒体信息;控制显示设备显示所述多媒体信息; 所述显示设备,用于在所述控制显示多媒体信息的设备的控制下显示所述多媒体信肩、O
【文档编号】G09F19/12GK104424869SQ201310388528
【公开日】2015年3月18日 申请日期:2013年8月30日 优先权日:2013年8月30日
【发明者】宋星光, 廉士国, 胡昌启 申请人:华为技术有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1