一种显示控制菜单的方法和装置与流程

文档序号:11948781阅读:307来源:国知局
一种显示控制菜单的方法和装置与流程

本发明涉及增强现实技术领域,特别涉及一种显示控制菜单的方法和装置。



背景技术:

随着计算机技术的发展,增强现实技术(Augmented Reality,简称AR)越来越吸引人们的关注。增强现实技术是通过计算机系统提供的信息增加用户对现实世界感知的技术,是将计算机生成的虚拟画面(虚拟物体、场景或系统提示信息等)叠加到真实场景中,从而实现对现实的“增强”。

在现有技术中,终端中安装有AR应用程序,用户可以打开AR应用程序的图像拍摄功能,并使用摄像头对准某智能设备,此时取景图像中包含该智能设备,终端可以识别取景图像中的智能设备,然后确定预先存储的智能设备对应的预设尺寸的控制菜单,将控制菜单显示在取景图像的上层,用户可以通过触碰控制菜单中的虚拟按键操控智能设备。例如,终端的取景图像中包含的智能设备是智能灯,终端可以对智能灯进行识别,然后可以获取智能灯对应的预设尺寸的控制菜单,将智能灯对应的控制菜单显示在取景图像的上层,用户可以点击控制菜单中的开启按键,触发智能灯开启。

在实现本发明的过程中,发明人发现现有技术至少存在以下问题:

如果终端的取景图像中包含有多个智能设备,终端则会识别多个智能设备,进而会在终端界面中显示各个智能设备对应的控制菜单,然而终端界面的显示尺寸、各个智能设备对应的控制菜单的尺寸都是固定的,这样,如果各个智能设备之间的距离比较近,多个智能设备对应的控制菜单在终端的屏幕中显示时会出现重叠,从而影响控制菜单的显示。



技术实现要素:

为了解决现有技术的问题,本发明实施例提供了一种显示控制菜单的方法和装置。所述技术方案如下:

第一方面,提供了一种显示控制菜单的方法,所述方法包括:

当终端当前的取景图像中包含目标设备时,确定所述目标设备在所述取景图像中所占的第一图像比例;

根据预先存储的所述目标设备的图像比例与控制菜单的对应关系,确定所述第一图像比例对应的第一控制菜单,其中,在所述对应关系中,图像比例越小,对应的控制菜单的内容复杂度越低;

根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,显示所述第一控制菜单。

可选的,所述目标设备的图像比例与控制菜单的对应关系为所述目标设备的图像比例范围与控制菜单的对应关系;

所述根据预先存储的所述目标设备的图像比例与控制菜单的对应关系,确定所述第一图像比例对应的第一控制菜单,包括:

根据预先存储的所述目标设备的图像比例范围与控制菜单的对应关系,确定所述第一图像比例所属的图像比例范围对应的第一控制菜单。

可选的,所述根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,显示所述第一控制菜单,包括:

根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,通过半透明显示方式,显示所述第一控制菜单。

这样,可以使用户可以识别目标设备。

可选的,所述确定所述目标设备在所述取景图像中所占的第一图像比例,包括:

确定所述目标设备在所述取景图像中所占的区域对应的像素点的数目,以及所述取景图像中的像素点的总数目;

将所述目标设备在所述取景图像中所占的区域对应的像素点的数目与所述取景图像中的像素点的总数目的比例,确定为所述目标设备在所述取景图像中所占的第一图像比例。

这样,可以快速的确定目标设备在取景图像中所占的比例。

可选的,所述第一控制菜单中包括至少一个控制按键;

所述方法还包括:

当检测到所述第一控制菜单中第一控制按键的触发指令时,向所述目标设备发送所述第一控制按键对应的控制请求。

这样,可以准确的控制目标设备。

第二方面,提供了一种显示控制菜单的装置,所述装置包括:

第一确定模块,用于当终端当前的取景图像中包含目标设备时,确定所述目标设备在所述取景图像中所占的第一图像比例;

第二确定模块,用于根据预先存储的所述目标设备的图像比例与控制菜单的对应关系,确定所述第一图像比例对应的第一控制菜单,其中,在所述对应关系中,图像比例越小,对应的控制菜单的内容复杂度越低;

显示模块,用于根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,显示所述第一控制菜单。

可选的,所述目标设备的图像比例与控制菜单的对应关系为所述目标设备的图像比例范围与控制菜单的对应关系;

所述第二确定模块,用于:

根据预先存储的所述目标设备的图像比例范围与控制菜单的对应关系,确定所述第一图像比例所属的图像比例范围对应的第一控制菜单。

可选的,所述显示模块,用于:

根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,通过半透明显示方式,显示所述第一控制菜单。

可选的,所述第二确定模块,用于:

确定所述目标设备在所述取景图像中所占的区域对应的像素点的数目,以及所述取景图像中的像素点的总数目;

将所述目标设备在所述取景图像中所占的区域对应的像素点的数目与所述取景图像中的像素点的总数目的比例,确定为所述目标设备在所述取景图像中所占的第一图像比例。

可选的,所述第一控制菜单中包括至少一个控制按键;

所述装置还包括:

发送模块,用于当检测到所述第一控制菜单中第一控制按键的触发指令时,向所述目标设备发送所述第一控制按键对应的控制请求。

本发明实施例提供的技术方案带来的有益效果是:

本发明实施例中,当终端当前的取景图像中包含目标设备时,终端可以确定目标设备在取景图像中所占的第一图像比例,然后根据预先存储的目标设备的图像比例与控制菜单的对应关系,可以确定第一图像比例对应的第一控制菜单,其中,在对应关系中,图像比例越小,对应的控制菜单的内容复杂度越低,根据目标设备在取景图像中的尺寸,在取景图像中目标设备的位置处,显示第一控制菜单。这样,控制菜单的显示尺寸,是根据智能设备在取景图像中的尺寸确定的,即使取景图像中包含多个相距比较近的智能设备,各个智能设备对应的控制菜单也不会重叠,而且控制菜单的内容复杂程度,也是根据智能设备在取景图像中所占的图像比例确定的,从而可以清楚的显示控制菜单。

附图说明

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种显示控制菜单的方法流程图;

图2是本发明实施例提供的一种显示控制菜单的界面示意图;

图3是本发明实施例提供的一种显示控制菜单的界面示意图;

图4是本发明实施例提供的一种显示控制菜单的界面示意图;

图5是本发明实施例提供的一种显示控制菜单的界面示意图;

图6是本发明实施例提供的一种显示控制菜单的界面示意图;

图7是本发明实施例提供的一种显示控制菜单的装置的结构示意图;

图8是本发明实施例提供的一种显示控制菜单的装置的结构示意图;

图9是本发明实施例提供的一种终端的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。

本发明实施例提供了一种显示控制菜单的方法,该方法的执行主体可以是终端。示例的,终端可以是智能手机、平板电脑等,终端中可以安装有AR应用程序。其中,示例的,终端中可以设置有处理器、存储器、收发器等。处理器可以用于显示控制菜单的过程进行处理,存储器可以用于存储在显示控制菜单的过程中需要存储的数据,收发器可以用于接发消息。终端中还可以包括屏幕,屏幕可以用于显示取景图像、以及智能设备对应的控制菜单等,可以是触控式的屏幕。本实施例中,以终端为手机为例,进行方案的详细说明,其它情况与之类似,本实施例不再累述。

如图1所示,该方法的处理流程可以包括如下的步骤:

步骤101,当终端当前的取景图像中包含目标设备时,确定目标设备在取景图像中所占的第一图像比例。

其中,目标设备是任意一个智能设备,如智能电视、智能空调、智能灯、智能洗衣机等。

在实施中,用户可以在终端中安装AR应用程序,然后触发开启AR应用程序,AR应用程序可以调用开启终端的摄像头,用户可以将终端的摄像头对准智能设备(后续称为目标设备),此时终端的显示界面中显示有取景图像,终端可以根据预先设置的神经网络训练算法、Sift(Scale Invariant Feature Transform,尺度不变特征转换算法)、Surf(Speeded Up Robust Feature,加速稳健特征转换算法),检测图像中是否包含有目标设备。如果终端确定当前的取景图像中包含目标设备,则可以将目标设备在取景图像中的尺寸,除以取景图像的尺寸(可以为终端的屏幕的尺寸),得到的数值,确定为目标设备在取景图像中所占的第一图像比例。例如,终端的显示界面中显示有取景图像,取景图像中包含一个智能灯,则终端可以确定当前的取景图像中包含有目标设备,进而可以确定智能设备在取景图像中所占的第一图像比例。

可选的,终端可以根据目标设备在取景图像中对应的像素点数目,确定目标设备在取景图像中所占的图像比例,相应的步骤101的处理可以如下:

确定目标设备在取景图像中所占的区域对应的像素点的数目,以及取景图像中的像素点的总数目;将目标设备在取景图像中所占的区域对应的像素点的数目与取景图像中的像素点的总数目的比例,确定为目标设备在取景图像中所占的第一图像比例。

在实施中,终端确定当前的取景图像中包含目标设备后,可以确定目标设备在取景图像中所占的区域(如矩形区域、三角形区域、圆形区域等),该区域可以是取景图像中能够包含目标设备的最小矩形区域(或最小三角形区域、最小圆形区域等),然后可以确定该区域中包含的所有像素点的数目,也就是目标设备在取景图像中所占的区域对应的像素点的数目。例如,确定目标设备在取景图像中所占的区域为矩形区域,该矩形区域是以目标设备在取景图像中的高度与宽度为矩形的长与宽组成的矩形区域,该矩形区域中的像素点的数目,即为目标设备在取景图像中所占的区域对应的像素点的数目。并且可以确定取景图像中的像素点的总数目,取景图像中的像素点的总数目可以是终端的屏幕的分辨率(如终端的屏幕的分辨率是1920*1080,则可以确定取景图像中的像素点的总数目是1920*1080)。终端可以将目标设备在取景图像中所占的区域对应的像素点数目除以取景图像中的像素点的总数目,得到的值,确定为目标设备在取景图像中所占的第一图像比例。

步骤102,根据预先存储的目标设备的图像比例与控制菜单的对应关系,确定第一图像比例对应的第一控制菜单,其中,在对应关系中,图像比例越小,对应的控制菜单的内容复杂度越低。

其中,控制菜单包括至少一个控制按键,每个智能设备都对应有控制菜单,用户可以点击控制菜单中的控制按键,控制对应的智能设备。在图像比例与控制菜单的对应关系中,图像比例越小,控制菜单的内容复杂程度越低,例如,对于目标设备,图像比例为1/5,对应的控制菜单中仅包含一个控制按键,图像比例为1/2,对应的控制菜单中包含三个控制按键等。

在实施中,如表一所示,技术人员可以设置目标设备的图像比例与控制菜单的对应关系,并且存储至AR应用程序的安装包中,或AR应用程序的后台服务器(后续简称为服务器)中,例如,目标设备是智能灯,对应有控制菜单1、控制菜单2、控制菜单3等,目标设备是智能电视,对应有控制菜单4、控制菜单5、控制菜单6等,智能设备与智能设备对应的控制菜单都可以存储至服务器,或AR应用程序的安装包中。

表一

AR应用程序的安装包中有目标设备的图像比例与控制菜单的对应关系,终端中安装了AR应用程序,终端中存储了目标设备的图像比例与控制菜单的对应关系。终端确定目标设备在取景图像中所占的第一图像比例后,可以从终端中预先存储的目标设备的图像比例与控制菜单的对应关系中,查找目标设备对应的控制菜单,然后在查找到的目标设备对应的控制菜单中,确定第一图像比例对应的第一控制菜单。

或者,终端确定目标设备在取景图像中所占的第一图像比例后,可以向服务器发送控制菜单的获取请求,该获取请求中携带有目标设备的标识,服务器接收到终端发送的控制菜单的获取请求后,可以根据目标设备的标识,查找目标设备的图像比例与控制菜单的对应关系,然后将目标设备的图像比例与控制菜单的对应关系发送至终端。终端接收到服务器发送的目标设备的图像比例与控制菜单的对应关系后,可以从中查找目标设备的第一图像比例对应的控制菜单为第一控制菜单。

另外,终端的取景图像包含多个智能设备时,由于各个智能设备的实际尺寸不相同,各个智能设备与终端的距离也有可能不相同,各个智能设备在取景图像中所占的图像比例有可能不一样,终端根据预先存储的目标设备的图像比例与控制菜单的对应关系,确定出的各个智能设备对应的控制菜单内容复杂度不一样。例如,如图2所示,终端的取景图像中包含两个智能设备(智能电视与智能灯),终端确定智能灯在取景图像中所占的图像比例为1/4,智能电视在取景图像中所占的图像比例为1/2,终端确定智能灯的图像比例1/4对应的控制菜单中包含一个控制按键(开关按键),智能电视的图像比例1/2对应的控制菜单中包含三个控制按键(开关按键、频道音量按键、静音按键)。

可选的,目标设备的图像比例与控制菜单的对应关系为目标设备的图像比例范围与控制菜单的对应关系;相应的,步骤102的步骤可以如下:

根据预先存储的目标设备的图像比例范围与控制菜单的对应关系,确定第一图像比例所属的图像比例范围对应的第一控制菜单。

在实施中,技术人员预设的目标设备的图像比例与控制菜单的对应关系,为目标设备的图像比例范围与控制菜单的对应关系,例如,如表二所示,智能灯的图像比例范围为0~1/4,对应的控制菜单为控制菜单1,控制菜单1中的内容比较简单(如控制按键的数目为1个),智能灯的图像比例范围为1/4~1/2,对应的控制菜单为控制菜单2,控制菜单2中的内容比控制菜单1中的内容复杂(控制按键的数目比控制菜单1中的控制按键数目多),智能灯的图像比例范围为1/2~1,对应的控制菜单为控制菜单3,控制菜单3中的内容比控制菜单2中的内容复杂(控制按键的数目比控制菜单2中的控制按键数目多)。

表二

AR应用程序的安装包中有目标设备的图像比例范围与控制菜单的对应关系,终端中安装了AR应用程序,终端中存储了目标设备的图像比例范围与控制菜单的对应关系。终端确定目标设备在取景图像中所占的第一图像比例后,可以从终端中预先存储的目标设备的图像比例范围与控制菜单的对应关系中,查找目标设备对应的控制菜单,然后在查找到的目标设备对应的控制菜单中,确定第一图像比例所属的图像比例范围对应的第一控制菜单。

或者,终端确定目标设备在取景图像中所占的第一图像比例后,可以向服务器发送控制菜单的获取请求,该获取请求中携带有目标设备的标识,服务器接收到终端发送的控制菜单的获取请求后,可以根据目标设备的标识,查找目标设备的图像比例范围与控制菜单的对应关系,然后将目标设备的图像比例范围与控制菜单的对应关系发送至终端。终端接收到服务器发送的目标设备的图像比例范围与控制菜单的对应关系后,可以从中查找目标设备的第一图像比例所属的图像比例范围,然后确定该图像比例范围对应的控制菜单为第一控制菜单。

可选的,本发明实施例中,不同图像比例对应的控制菜单可以基于实际需求任意设置,下面给出了一个可行的示例:

如果第一图像比例小于第一预设阈值,第一控制菜单中的控制按键是使用频率最高的控制按键;如果第一图像比例大于第一预设阈值,且小于第二预设阈值,第一控制菜单中的控制按键是使用频率最高的控制按键,以及使用频率大于第一预设频率阈值的控制按键;如果第一图像比例大于第二预设阈值,第一控制菜单中的控制按键是使用频率最高的控制按键,以及使用频率大于第二预设频率阈值的控制按键,其中,第一预设频率阈值大于第二预设频率阈值。

在实施中,如果第一图像比例小于第一预设阈值,则确定的第一控制菜单中的控制按键可以是使用频率最高的控制按键。这样,目标设备在取景图像中所占的比例比较小,控制按键的数目比较少,用户也可以清楚的看到控制菜单中的控制按键。例如,如图3所示,智能灯的第一图像比例等于1/6,小于第一预设阈值1/4,第一控制菜单中的控制按键是使用频率最高的开关按键。

另外,如果第一图像比例小于第一预设阈值,则确定的第一控制菜单中的控制按键可以是主菜单控制按键,用户可以点击主菜单控制按键,终端则会接收到主菜单控制按键的点击指令,然后终端会显示目标设备对应的全部控制按键。

如果第一图像比例大于第一预设阈值,且小于第二预设阈值,则确定的第一控制菜单中的控制按键可以是使用频率最高的控制按键,以及使用频率大于第一预设频率阈值的控制按键。这样,目标设备在取景图像中所占的比例比第一预设阈值大,即使设置稍微多一点的控制按键,用户也可以清楚的看到控制菜单中的控制按键。例如,如图4所示,智能灯的第一图像比例等于1/3,大于第一预设阈值1/4,小于第二预设阈值1/2,第一控制菜单中的控制按键可以是开关按键、亮度按键(亮度按键的使用频率大于第一预设频率阈值)。

另外,如果第一图像比例大于第一预设阈值,且小于第二预设阈值,则确定的第一控制菜单中的控制按键可以是使用频率最高的控制按键,以及主菜单控制按键,用户可以点击主菜单控制按键,终端则会接收到主菜单控制按键的点击指令,然后终端会显示目标设备除使用频率最高的控制按键之外的控制按键。

如果第一图像比例大于第二预设阈值,第一控制菜单中的控制按键可以是使用频率最高的控制按键,以及使用频率大于第二预设频率阈值的控制按键。这样,目标设备在取景图像中所占的比例大于第二预设阈值,即使设置比较多的控制按键,用户也可以清楚的看到控制菜单中的控制按键。例如,如图5所示,智能灯的第一图像比例等于2/3,大于第二预设阈值1/2,第一控制菜单中的控制按键可以是开关按键、亮度按键(亮度按键的使用频率大于第一预设频率阈值)、颜色按键(颜色按键的使用频率大于第二预设频率阈值)。

另外,如果第一图像比例大于第二预设阈值,第一控制菜单中的控制按键可以是目标设备对应的全部控制按键。这样,目标设备在取景图像中所占的比例大于第二预设阈值,即使控制菜单中设置了目标设备对应的全部控制按键,用户也可以清楚的看到控制菜单中的每个控制按键。

对于不同图像比例对应的控制菜单,本发明实施例还有很多设置方式,此处不再一一例举。

步骤103,根据目标设备在取景图像中的尺寸,在取景图像中目标设备的位置处,显示第一控制菜单。

在实施中,终端在确定第一控制菜单后,可以在取景图像中目标设备的位置处,以目标设备在取景图像中的尺寸(也就是以目标设备在取景图像中,所占的最小矩形区域的尺寸),显示第一控制菜单,即显示第一控制菜单时,第一控制菜单可以恰好覆盖目标设备。例如,目标设备为智能灯,智能灯在取景图像中,所占的最小矩形区域中的尺寸为2英寸(矩形区域的对角线长度),则第一控制菜单的尺寸为2英寸(第一控制菜单的对角线长度)。

可选的,终端可以以半透明显示方式,显示第一控制菜单,相应的,步骤103的处理可以如下:

根据目标设备在取景图像中的尺寸,在取景图像中目标设备的位置处,通过半透明显示方式,显示第一控制菜单。

在实施中,终端在确定第一控制菜单后,可以在取景图像中目标设备的位置处,以目标设备在取景图像中的尺寸,将第一控制菜单的背景显示为半透明的。这样,用户可以确定该控制菜单对应的智能设备。例如,如图6所示,目标设备为智能灯,第一控制菜单的背景的透明度为50%。

或者,终端以目标设备在取景图像中的尺寸,将第一控制菜单的背景显示为全透明的,第一控制菜单可以恰好覆盖目标设备。

或者,终端以目标设备在取景图像中的尺寸,将第一控制菜单的背景显示为全透明的,第一控制菜单中的控制按键显示为半透明的,第一控制菜单可以恰好覆盖目标设备。

本发明实施例,还提供了用户使用控制菜单控制智能设备的方法,相应的处理可以如下:

第一控制菜单中包括至少一个控制按键;当检测到第一控制菜单中第一控制按键的触发指令时,向目标设备发送第一控制按键对应的控制请求。

在实施中,第一控制菜单中至少包含一个控制按键,用户可以点击第一控制菜单中的第一控制按键,终端则会检测到第一控制按键的触发指令,然后终端确定第一控制按键对应的控制请求,并将该控制请求发送至目标设备。目标设备接收到该控制请求后,可以执行该控制请求对应的操作。例如,目标设备为智能灯,第一控制按键为开关按键,用户点击开关按键,终端确定第一控制按键对应的控制请求为开启请求,然后向智能灯发送开启请求,智能灯接收到开启请求后,可以发光。或者,第一控制按键为颜色按键,用户可以点击颜色按键,触发终端显示可选取的多种颜色,用户可以选择某个颜色,然后点击确定按键,触发终端向目标设备发送控制请求,该控制请求中携带有用户选取的颜色,目标接收到控制请求后,可以更换智能灯的发光颜色。

另外,本发明实施例还提供了技术人员根据控制按键的使用频率,设定不同的图像比例对应的控制菜单中的控制按键的方法,相应的处理可以如下:

技术人员可以在终端的AR应用程序中设置,只要检测到控制按键的点击指令,终端则向服务器上报对应该控制按键的使用操作。服务器接收到对应该控制按键的使用操作后,可以将存储的该控制按键的使用频率增加1次。技术人员可以从服务器查找到预设时长内,对应目标设备的各个控制按键的使用频率,然后根据各个控制按键的使用频率,从高到低进行排序。图像比例小于第一预设阈值时,则说明目标设备在取景图像中的尺寸比较小,控制菜单的内容应该比较简单,对应设置的控制菜单中的控制按键是使用频率最高的控制按键,图像比例大于第一预设阈值,且小于第二预设阈值时,则说明目标设备在取景图像中所占的比例适中,第一控制菜单中的内容应该稍微复杂一点,对应设置的控制菜单中的控制按键是使用频率最高的控制按键,以及使用频率大于第一预设频率阈值的控制按键,图像比例大于第二预设阈值时,则说明目标设备在取景图像中所占的比例比较大,控制菜单中的内容应该最复杂,对应设置的控制菜单中的控制按键是使用频率最高的控制按键,以及使用频率大于第二预设频率阈值的控制按键,其中,第一预设频率阈值大于第二预设频率阈值。

另外,技术人员可以在控制菜单中设置主菜单按键,用户可以点击主菜单按键,触发终端显示目标设备对应的所有控制按键,用户可以点击任一控制按键,触发终端向目标设备发送该控制按键对应的控制请求,目标设备可以执行该控制请求对应的操作。

本发明实施例中,当终端当前的取景图像中包含目标设备时,终端可以确定目标设备在取景图像中所占的第一图像比例,然后根据预先存储的目标设备的图像比例与控制菜单的对应关系,可以确定第一图像比例对应的第一控制菜单,其中,在对应关系中,图像比例越小,对应的控制菜单的内容复杂度越低,根据目标设备在取景图像中的尺寸,在取景图像中目标设备的位置处,显示第一控制菜单。这样,控制菜单的显示尺寸,是根据智能设备在取景图像中的尺寸确定的,即使取景图像中包含多个相距比较近的智能设备,各个智能设备对应的控制菜单也不会重叠,而且控制菜单的内容复杂程度,也是根据智能设备在取景图像中所占的图像比例确定的,从而可以清楚的显示控制菜单。

基于相同的技术构思,本发明实施例还提供了一种显示控制菜单的装置,如图7所示,该装置包括:

第一确定模块710,用于当终端当前的取景图像中包含目标设备时,确定所述目标设备在所述取景图像中所占的第一图像比例;

第二确定模块720,用于根据预先存储的所述目标设备的图像比例与控制菜单的对应关系,确定所述第一图像比例对应的第一控制菜单,其中,在所述对应关系中,图像比例越小,对应的控制菜单的内容复杂度越低;

显示模块730,用于根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,显示所述第一控制菜单。

可选的,所述目标设备的图像比例与控制菜单的对应关系为所述目标设备的图像比例范围与控制菜单的对应关系;

所述第二确定模块720,用于:

根据预先存储的所述目标设备的图像比例范围与控制菜单的对应关系,确定所述第一图像比例所属的图像比例范围对应的第一控制菜单。

可选的,所述显示模块730,用于:

根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,通过半透明显示方式,显示所述第一控制菜单。

可选的,所述第一确定模块710,用于:

确定所述目标设备在所述取景图像中所占的区域对应的像素点的数目,以及所述取景图像中的像素点的总数目;

将所述目标设备在所述取景图像中所占的区域对应的像素点的数目与所述取景图像中的像素点的总数目的比例,确定为所述目标设备在所述取景图像中所占的第一图像比例。

可选的,所述第一控制菜单中包括至少一个控制按键;

如图8所示,所述装置还包括:

发送模块740,用于当检测到所述第一控制菜单中第一控制按键的触发指令时,向所述目标设备发送所述第一控制按键对应的控制请求。

本发明实施例中,当终端当前的取景图像中包含目标设备时,终端可以确定目标设备在取景图像中所占的第一图像比例,然后根据预先存储的目标设备的图像比例与控制菜单的对应关系,可以确定第一图像比例对应的第一控制菜单,其中,在对应关系中,图像比例越小,对应的控制菜单的内容复杂度越低,根据目标设备在取景图像中的尺寸,在取景图像中目标设备的位置处,显示第一控制菜单。这样,控制菜单的显示尺寸,是根据智能设备在取景图像中的尺寸确定的,即使取景图像中包含多个相距比较近的智能设备,各个智能设备对应的控制菜单也不会重叠,而且控制菜单的内容复杂程度,也是根据智能设备在取景图像中所占的图像比例确定的,从而可以清楚的显示控制菜单。

需要说明的是:上述实施例提供的显示控制菜单的装置在显示控制菜单时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的显示控制菜单的装置与显示控制菜单的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。

请参考图9,其示出了本发明实施例所涉及的终端的结构示意图,该终端可以用于实施上述实施例中提供的显示控制菜单的方法。具体来讲:

终端900可以包括RF(Radio Frequency,射频)电路110、包括有一个或一个以上计算机可读存储介质的存储器120、输入单元130、显示单元140、传感器150、音频电路160、WiFi(wireless fidelity,无线保真)模块170、包括有一个或者一个以上处理核心的处理器180、以及电源190等部件。本领域技术人员可以理解,图9中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:

RF电路110可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,交由一个或者一个以上处理器180处理;另外,将涉及上行的数据发送给基站。通常,RF电路110包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(Low Noise Amplifier,低噪声放大器)、双工器等。此外,RF电路110还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global System of Mobile communication,全球移动通讯系统)、GPRS(General Packet Radio Service,通用分组无线服务)、CDMA(Code Division Multiple Access,码分多址)、WCDMA(Wideband Code Division Multiple Access,宽带码分多址)、LTE(Long Term Evolution,长期演进)、电子邮件、SMS(Short Messaging Service,短消息服务)等。

存储器120可用于存储软件程序以及模块,处理器180通过运行存储在存储器120的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器120可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据终端900的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器120还可以包括存储器控制器,以提供处理器180和输入单元130对存储器120的访问。

输入单元130可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,输入单元130可包括触敏表面131以及其他输入设备132。触敏表面131,也称为触摸显示屏或者触控板,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面131上或在触敏表面131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触敏表面131可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器180,并能接收处理器180发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面131。除了触敏表面131,输入单元130还可以包括其他输入设备132。具体地,其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端900的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元140可包括显示面板141,可选的,可以采用LCD(Liquid Crystal Display,液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板141。进一步的,触敏表面131可覆盖显示面板141,当触敏表面131检测到在其上或附近的触摸操作后,传送给处理器180以确定触摸事件的类型,随后处理器180根据触摸事件的类型在显示面板141上提供相应的视觉输出。虽然在图9中,触敏表面131与显示面板141是作为两个独立的部件来实现输入和输入功能,但是在某些实施例中,可以将触敏表面131与显示面板141集成而实现输入和输出功能。

终端900还可包括至少一种传感器150,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板141的亮度,接近传感器可在终端900移动到耳边时,关闭显示面板141和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于终端900还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。

音频电路160、扬声器161,传声器162可提供用户与终端900之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出;另一方面,传声器162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出处理器180处理后,经RF电路110以发送给比如另一终端,或者将音频数据输出至存储器120以便进一步处理。音频电路160还可能包括耳塞插孔,以提供外设耳机与终端900的通信。

WiFi属于短距离无线传输技术,终端900通过WiFi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图9示出了WiFi模块170,但是可以理解的是,其并不属于终端900的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。

处理器180是终端900的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器120内的软件程序和/或模块,以及调用存储在存储器120内的数据,执行终端900的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器180可包括一个或多个处理核心;优选的,处理器180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器180中。

终端900还包括给各个部件供电的电源190(比如电池),优选的,电源可以通过电源管理系统与处理器180逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源190还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

尽管未示出,终端900还可以包括摄像头、蓝牙模块等,在此不再赘述。具体在本实施例中,终端900的显示单元是触摸屏显示器,终端900还包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行述一个或者一个以上程序包含用于进行以下操作的指令:

当终端当前的取景图像中包含目标设备时,确定所述目标设备在所述取景图像中所占的第一图像比例;

根据预先存储的所述目标设备的图像比例与控制菜单的对应关系,确定所述第一图像比例对应的第一控制菜单,其中,在所述对应关系中,图像比例越小,对应的控制菜单的内容复杂度越低;

根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,显示所述第一控制菜单。

可选的,所述目标设备的图像比例与控制菜单的对应关系为所述目标设备的图像比例范围与控制菜单的对应关系;

所述根据预先存储的所述目标设备的图像比例与控制菜单的对应关系,确定所述第一图像比例对应的第一控制菜单,包括:

根据预先存储的所述目标设备的图像比例范围与控制菜单的对应关系,确定所述第一图像比例所属的图像比例范围对应的第一控制菜单。

可选的,所述根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,显示所述第一控制菜单,包括:

根据所述目标设备在所述取景图像中的尺寸,在所述取景图像中所述目标设备的位置处,通过半透明显示方式,显示所述第一控制菜单。

可选的,所述确定所述目标设备在所述取景图像中所占的第一图像比例,包括:

确定所述目标设备在所述取景图像中所占的区域对应的像素点的数目,以及所述取景图像中的像素点的总数目;

将所述目标设备在所述取景图像中所占的区域对应的像素点的数目与所述取景图像中的像素点的总数目的比例,确定为所述目标设备在所述取景图像中所占的第一图像比例。

可选的,所述第一控制菜单中包括至少一个控制按键;

所述方法还包括:

当检测到所述第一控制菜单中第一控制按键的触发指令时,向所述目标设备发送所述第一控制按键对应的控制请求。

本发明实施例中,当终端当前的取景图像中包含目标设备时,终端可以确定目标设备在取景图像中所占的第一图像比例,然后根据预先存储的目标设备的图像比例与控制菜单的对应关系,可以确定第一图像比例对应的第一控制菜单,其中,在对应关系中,图像比例越小,对应的控制菜单的内容复杂度越低,根据目标设备在取景图像中的尺寸,在取景图像中目标设备的位置处,显示第一控制菜单。这样,控制菜单的显示尺寸,是根据智能设备在取景图像中的尺寸确定的,即使取景图像中包含多个相距比较近的智能设备,各个智能设备对应的控制菜单也不会重叠,而且控制菜单的内容复杂程度,也是根据智能设备在取景图像中所占的图像比例确定的,从而可以清楚的显示控制菜单。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。

以上仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1