虚拟键盘的显示方法和装置与流程

本申请涉及计算机视觉技术领域和人工智能技术领域，尤其涉及一种虚拟键盘的显示方法和装置。

背景技术：

终端设备中的输入法作为用户日常交流的重要工具，越来越得到用户的重视，通常，基于第三方的输入法的虚拟键盘来为用户提供输入介质。

相关技术中，基于外观的显示来提高产品的体验感，比如，基于皮肤的设置来满足用户的个人喜好，然而，这种显示方式并不能提高用户的使用真实感，还是会感觉到和真实键盘的巨大差异。

技术实现要素：

本申请实施例提供了一种虚拟键盘的显示方法和装置，实现了根据灯光显示效果与用户按压交互，提高了使用真实感，提升了动画智能感和沉浸式的产品体验。

根据第一方面，提供了一种虚拟键盘的显示方法，包括：确定用户在虚拟键盘上触发的目标按键；获取与所述目标按键对应的至少一个关联按键集合，以及所述至少一个关联按键集合中的每个关联按键集合的显示顺序，其中，所述每个关联按键集合包括至少一个关联按键；根据所述显示顺序控制当前显示关联按键集合中的所有关联按键的显示。

根据第二方面，提供了一种虚拟键盘的显示装置，包括：第一确定模块，用于确定用户在虚拟键盘上触发的目标按键；获取模块，用于获取与所述目标按键对应的至少一个关联按键集合，以及所述至少一个关联按键集合中的每个关联按键集合的显示顺序，其中，所述每个关联按键集合包括至少一个关联按键；显示模块，用于根据所述显示顺序控制当前显示关联按键集合中的所有关联按键的显示。

根据本申请的第三方面，提供了一种电子设备，包括：至少一个处理器；与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如上述第一方面实施例描述的虚拟键盘的显示方法。

根据本申请的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行上述第一方面实施例描述的虚拟键盘的显示方法。

应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

附图说明

附图用于更好地理解本方案，不构成对本申请的限定。其中：

图1是根据本申请第一实施例的虚拟键盘的显示方法的流程示意图；

图2－1是根据本申请第二实施例的虚拟界面场景示意图；

图2－2是根据本申请第三实施例的虚拟界面场景示意图；

图2－3是根据本申请第四实施例的虚拟界面场景示意图；

图3是根据本申请第五实施例的虚拟键盘的显示方法的流程示意图；

图4是根据本申请第六实施例的虚拟界面场景示意图；

图5是根据本申请第七实施例的虚拟键盘的显示场景示意图；

图6是根据本申请第八实施例的虚拟键盘的显示场景示意图；

图7是根据本申请第九实施例的虚拟键盘的显示方法的流程示意图；

图8是根据本申请第十实施例的虚拟键盘的示意图；

图9是根据本申请第十一实施例的虚拟键盘的图层结构示意图；

图10是根据本申请第十二实施例的虚拟键盘的图层动效示意图；

图11是根据本申请第十三实施例的虚拟键盘的显示装置的结构示意图；

图12是根据本申请第十四实施例的虚拟键盘的显示装置的结构示意图；

图13是根据本申请第十五实施例的虚拟键盘的显示装置的结构示意图；

图14是根据本申请第十六实施例的虚拟键盘的显示装置的结构示意图；

图15是用来实现本申请实施例的虚拟键盘的显示的方法的电子设备的框图。

具体实施方式

以下结合附图对本申请的示范性实施例做出说明，其中包括本申请实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本申请的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

针对背景技术中提到的，目前虚拟键盘没有在根本上提高用户的产品使用体验的问题，本申请提供了一种虚拟键盘的显示方法，可以与用户的按压形成灯光交互等显示交互，通过灵活的显示效果来提升按压真实感，从而贴近真实的键盘使用体验。

下面参考附图描述本申请实施例的虚拟键盘的显示方法和装置，其中，虚拟键盘的显示方法的执行主体可以为手机、笔记本电脑等拥有操作系统的终端设备。

具体而言，图1是根据本申请一个实施例的虚拟键盘的显示方法的流程图，如图1所示，该方法包括：

步骤101，确定用户在虚拟键盘上触发的目标按键。

在本实施例中，可以通过指纹检测用户的所在按压位置，将按压位置的坐标与虚拟键盘的按键坐标匹配，确定匹配成功的按键为目标按键。

可以通过检测到的电容值确定用户按压的位置，根据按压位置与虚拟键盘的按键坐标匹配，确定匹配成功的按键为目标按键。

步骤102，获取与目标按键对应的至少一个关联按键集合，以及至少一个关联按键集合中的每个关联按键集合的显示顺序，其中，每个关联按键集合包括至少一个关联按键。

为了给用户以真实的按压体验，在本实施例中，根据用户的按压位置进行按压反馈，该按压反馈主要为灯光效果的反馈，通过灯光的显示营造一种动画效果。

在实际执行过程中，获取目标按键对应的至少一个关联按键集合，其中，每个关联按键集合包括至少一个关联按键，进而，确定与每个关联按键集合对应的显示顺序。其中，不同的关联按键集合包含的关联按键可以相同，也可以不同，当不同的关联按键集合包含的关联按键相同时，实现的效果是对应的关联按键重复闪现。

需要说明的是，在不同的应用场景中，获取与目标按键对应的至少一个关联按键集合，以及至少一个关联按键集合中的每个关联按键集合的显示顺序的方式不同，示例如下：

示例一：

在本示例中，预先构建预设数据库，该预设数据库中存储有与虚拟键盘中每个按键对应的动画描述信息，该动画描述信息可以为“涟漪”、“烟花”、“波形”等多种描述动画效果的信息，该动画描述信息可以是用户个人设置的，也可以是系统设置后，用户选择的等。

从而，可以查询预设数据库，获取与目标按键对应的动画描述信息。

进而，在本示例中，预先构建深度学习模型，该深度学习模型可以根据动画描述信息获取至少一个关联按键集合以及显示顺序。

示例二：

在本示例中，获取该用户的至少一个喜好图案，比如，根据用户的注册信息获取用户的喜好图案，或者，分析用户的历史搜索记录，获取用户的喜好图案，进而，根据用户的喜好图案确定至少一个关联按键集合，其中，每个关联按键集合对应于一个喜好图案。

示例三：

在本示例中，预先构建每个按键和关联按键集合及关联按键集合的显示顺序的对应关系，基于该对应关系确定与目标按键对应的至少一个关联按键集合，以及至少一个关联按键集合中的每个关联按键集合的显示顺序。

步骤103，根据显示顺序控制当前显示关联按键集合中的所有关联按键的显示。

在一些可能的实施例中，显示方式可以为动画显示，即在对应的关联按键中的有关图层显示动画效果等。

在本实施例中，显示的方式可以为亮度提升，即在控制对应按键中的像素点的显示功率提升，或者，可以为控制对应按键上的图层的透明度提升等。

在本实施例中，根据显示顺序制当前显示关联按键集合中的所有关联按键实现高亮显示，以营造一种灯光显示效果，其中，当前显示关联按键集合显示时，之前显示的所有的关联按键集合对应的那件可以熄灭，也可以不熄灭，实现累加显示。在实际执行过程中，至少一个关联按键集合可以按照预设的时间间隔显示，比如，每隔1ms显示下一个关联按键集合等。

举例而言，以目标按键为q，动画描述信息为“涟漪”为例进行说明，确定与“涟漪”对应的关联按键集合为集合1-集合5，其中，如图2-1所示，当用户按压q时，则如图2-2所示，逐步切换高亮显示集合1-集合5对应的关联按键。其中，对应集合1来说，包括的关联按键为“w、e、a、s、↑”。

举例而言，以目标按键为q，动画描述信息为“涟漪”为例进行说明，确定与“涟漪”对应的关联按键集合为集合1-集合5，其中，如图2-1所示，当用户按压q时，则如图2-3所示，逐步累加显示集合1-集合5对应的关联按键。其中，对应集合1来说，包括的关联按键为“w、e、a、s、↑”。

在实际执行过程中，针对目标按键也可以执行对应的灯光显示，比如预设针对目标按键设置对应的灯光显示颜色和灯光显示时长，根据灯光显示颜色和灯光显示时长控制目标按键显示。

综上，本申请实施例的虚拟键盘的显示方法，确定用户在虚拟键盘上触发的目标按键后，获取与目标按键对应的至少一个关联按键集合，以及至少一个关联按键集合中的每个关联按键集合的显示顺序，其中，每个关联按键集合包括至少一个关联按键，进而，根据显示顺序控制当前显示关联按键集合中的所有关联按键高亮显示。由此，实现了根据灯光显示效果与用户按压交互，提高了使用真实感，提升了动画智能感和沉浸式的产品体验。

基于以上实施例，可以理解的是，本实施例中的高亮灯光效果是灵活多变的，可以根据具体的场景实现不同的高亮显示效果，实现了人工智能领域的进步，以及计算机视觉领域的应用。示例如下：

示例一：

在本示例中，如图3所示，上述步骤103包括：

步骤201，确定当前显示关联按键集合中的每个关联按键对应的灯光显示参数，其中，灯光显示参数包括灯光颜色、灯光亮度、灯光显示频率中的至少一种。

在一些可能的示例中，可以预先构建每个关联按键集合的集合标识中包含的关联按键颜色列表，该关联按键颜色列表中记载了对应关联按键集合下每个关联按键和灯光显示参数的对应关系。因而，查询当前显示关联按键集合对应的关联按键颜色列表，确定关联按键集合中的每个关联按键对应的灯光显示参数。

在另一些可能的示例中，如图4所示，预先将虚拟键盘划分为多个区域，该多个显示区域可以是任意形状，每个区域对应于统一的颜色显示参数，从而，可以确定当前显示关联按键集合中的每个关联按键所在的区域，根据所在区域确定当前显示关联按键集合中的每个关联按键的颜色显示参数。

步骤202，根据灯光显示参数控制所有关联按键的显示。

在本实施例中，当灯光显示参数包括颜色时，则根据灯光显示参数控制所有关联按键的显示可以实现不同的颜色变换动效，当灯光显示参数包括显示亮度时，则根据灯光显示参数控制所有关联按键的显示可以实现不同的亮度动效。

其中，当灯光显示参数包括颜色时，基于终端设备的像素结构，该颜色主要包括rgb颜色中的一种或多种的组合，在显示对关联按键的颜色时，如图5左图所示，可以根据颜色点亮关联按键中心点，即对中心点的像素提供较大功率的电流，通过中心点的颜色亮度实现对应的颜色显示，或者，如图5右图所示，可以根据颜色点亮关联按键中心点，根据关键按键中其他像素点距离中心点的距离，逐渐降低对应关联按键的亮度来实现颜色体现，这种显示方式可以在满足显示颜色的覆盖全面性体现的同时，降低功率消耗。

基于本示例中的显示方案，如图6所示，可以实现当前显示关联按键集合中关联按键显示时不同颜色的动效，其中，图6中以不同的灰度值表示对应的颜色。

示例二：

在本示例中，确定当前显示关联按键集合的显示顺序，根据显示顺序确定当前显示关联按键集合对应的显示颜色，由此，在本实施例中，每个关联按键集合的显示颜色是统一的，其中，根据显示顺序确定当前显示关联按键集合对应的显示颜色可以为，预先设置显示顺序和显示颜色的对应关系，查询该对应关系获取得到的。

示例三:

在本示例中，如图7所示，上述步骤103包括：

步骤301，确定所有关联按键对应的中心点坐标。

在本实施例中，确定当期显示关联按键集合的所有关联按键覆盖的区域，根据几何识别算法来确定该区域的中心坐标点。

举例而言，如图8所示，当所有关联按键如图8所示，则确定的中心坐标点为a。

步骤302，计算中心点坐标和目标按键的距离，根据距离确定当前显示关联按键集合的显示时长。

其中，距离可以理解为中心点坐标和目标按键的中心点之间的距离。

在本实施例中，可以预先构建距离和显示时长的对应关系，基于该对应关系确定出当前显示关联按键集合的显示时长，其中，对应关系中限定的距离和显示时长可以为正比关系，也可以为反比关系。

步骤303，根据显示顺序和显示时长，控制当前显示关联按键集合中的所有关联按键的显示。

在本实施例中，根据显示顺序和显示时长，控制当前显示关联按键集合中的所有关联按键的显示，需要说明的是，在达到下一个显示关联按键集合的显示时间时，如没有达到当前显示关联按键集合的显示时长，则会继续显示当前显示关联按键，实现在某些时间段内的同时显示。

示例四：

在本示例中，还可以结合图层来进一步增强虚拟键盘的显示动效。其中，如图9所示，虚拟键盘包含多种类型的图层，自上到下包括字母层、按键层、边框层、背景层，其中，每个类型的图层可以包括多层也可以为单层，其中，每个图层都可以实现对应的动效，比如，如图10所示，字母层可以通过颜色、亮度等的变化实现动效(图中以不同的灰度值表示不同的颜色)，继续参照图10，边框层可以通过颜色、透明度等实现对应的动效(图中以不同的灰度值表示不同的颜色)，继续参照图10，背景层可以通过颜色、动画效果等实现对应的动效，图10中仅仅显示了纯色背景层。

在本示例中，预先构建每个按键和上述提到的图层和图层显示参数的对应关系，该对应关系中，每个按键可以对应于一个图层也可以对应于多个，即查询预设对应关系，确定与目标按键对应的目标图层和与目标图层对应的图层显示参数，其中，图层显示参数包括：动画效果参数、颜色参数、透明度参数中的至少一种，根据图层显示参数显示目标图层。

综上，本申请实施例的虚拟键盘的显示方法，可以在与用户的触发操作形成交互的基础上，灵活实现不同的动效，进一步提升产品体验。

为了实现上述实施例，本申请还提出了一种虚拟键盘的显示装置。图11是根据本申请一个实施例的虚拟键盘的显示装置的结构示意图，如图11所示，该虚拟键盘的显示装置包括：第一确定模块10、获取模块20和显示模块30，其中，

第一确定模块10，用于确定用户在虚拟键盘上触发的目标按键；

获取模块20，用于获取与目标按键对应的至少一个关联按键集合，以及至少一个关联按键集合中的每个关联按键集合的显示顺序，其中，每个关联按键集合包括至少一个关联按键；

显示模块30，用于根据显示顺序控制当前显示关联按键集合中的所有关联按键的显示。

需要说明的是，前述对方法实施例的解释说明，也适用于本申请实施例的装置，其实现原理类似，在此不再赘述。

综上，本申请实施例的虚拟键盘的显示装置，确定用户在虚拟键盘上触发的目标按键后，获取与目标按键对应的至少一个关联按键集合，以及至少一个关联按键集合中的每个关联按键集合的显示顺序，其中，每个关联按键集合包括至少一个关联按键，进而，根据显示顺序控制当前显示关联按键集合中的所有关联按键的显示。由此，实现了根据灯光显示效果与用户按压交互，提高了使用真实感，提升了动画智能感和沉浸式的产品体验。

基于以上实施例，可以理解的是，本实施例中的高亮灯光效果是灵活多变的，可以根据具体的场景实现不同的显示效果，实现了人工智能领域的进步，以及计算机视觉领域的应用。示例如下：

示例一：

在本示例中，如图12所示，在如图11所示的基础上，显示模块30包括：第一确定单元31和第一显示单元32，其中，

第一确定单元31，用于确定所述当前显示关联按键集合中的每个关联按键对应的灯光显示参数，其中，所述灯光显示参数包括灯光颜色、灯光亮度、灯光显示频率中的至少一种；

第一显示单元32，用于根据所述灯光显示参数控制所述所有关联按键的显示。

示例二：

在本示例中，如图13所示，在如图11所示的基础上，显示模块30包括：第二确定单元33、计算单元34和第二显示单元35，其中，

第二确定单元33，用于确定所述所有关联按键对应的中心点坐标；

计算单元34，用于计算所述中心点坐标和所述目标按键的距离，根据所述距离确定所述当前显示关联按键集合的显示时长；

第二显示单元35，用于根据所述显示顺序和所述显示时长，控制当前显示关联按键集合中的所有关联按键的显示。

示例三：

在本示例中，如图14所示，在如图11所示的基础上，还包括第二确定模块40，其中，

第二确定模块40，用于查询预设对应关系，确定与所述目标按键对应的目标图层和与所述目标图层对应的图层显示参数；

在本实施例中，显示模块30，还用于根据所述图层显示参数显示所述目标图层。

需要说明的是，前述对方法实施例的解释说明，也适用于本申请实施例的装置，其实现原理类似，在此不再赘述。

综上，本申请实施例的虚拟键盘的显示装置，可以在与用户的触发操作形成交互的基础上，灵活实现不同的动效，进一步提升产品体验。

根据本申请的实施例，本申请还提供了一种电子设备和一种可读存储介质。

如图15所示，是根据本申请实施例的虚拟键盘的显示的方法的电子设备的框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本申请的实现。

如图15所示，该电子设备包括：一个或多个处理器1501、存储器1502，以及用于连接各部件的接口，包括高速接口和低速接口。各个部件利用不同的总线互相连接，并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在电子设备内执行的指令进行处理，包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如，耦合至接口的显示设备)上显示gui的图形信息的指令。在其它实施方式中，若需要，可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样，可以连接多个电子设备，各个设备提供部分必要的操作(例如，作为服务器阵列、一组刀片式服务器、或者多处理器系统)。图15中以一个处理器1501为例。

存储器1502即为本申请所提供的非瞬时计算机可读存储介质。其中，所述存储器存储有可由至少一个处理器执行的指令，以使所述至少一个处理器执行本申请所提供的虚拟键盘的显示的方法。本申请的非瞬时计算机可读存储介质存储计算机指令，该计算机指令用于使计算机执行本申请所提供的虚拟键盘的显示的方法。

存储器1502作为一种非瞬时计算机可读存储介质，可用于存储非瞬时软件程序、非瞬时计算机可执行程序以及模块，如本申请实施例中的虚拟键盘的显示的方法对应的程序指令/模块(例如，附图11所示的第一确定模块10、获取模块20和显示模块30)。处理器1501通过运行存储在存储器1502中的非瞬时软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述方法实施例中的虚拟键盘的显示的方法。

存储器1502可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据虚拟键盘的显示的电子设备的使用所创建的数据等。此外，存储器1502可以包括高速随机存取存储器，还可以包括非瞬时存储器，例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些实施例中，存储器1502可选包括相对于处理器1501远程设置的存储器，这些远程存储器可以通过网络连接至虚拟键盘的显示的电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

虚拟键盘的显示的方法的电子设备还可以包括：输入装置1503和输出装置1504。处理器1501、存储器1502、输入装置1503和输出装置1504可以通过总线或者其他方式连接，图15中以通过总线连接为例。

输入装置1503可接收输入的数字或字符信息，以及产生与虚拟键盘的显示的电子设备的用户设置以及功能控制有关的键信号输入，例如触摸屏、小键盘、鼠标、轨迹板、触摸板、指示杆、一个或者多个鼠标按钮、轨迹球、操纵杆等输入装置。输出装置1504可以包括显示设备、辅助照明装置(例如，led)和触觉反馈装置(例如，振动电机)等。该显示设备可以包括但不限于，液晶显示器(lcd)、发光二极管(led)显示器和等离子体显示器。在一些实施方式中，显示设备可以是触摸屏。

此处描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、专用asic(专用集成电路)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。

这些计算程序(也称作程序、软件、软件应用、或者代码)包括可编程处理器的机器指令，并且可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。如本文使用的，术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如，磁盘、光盘、存储器、可编程逻辑装置(pld))，包括，接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。

为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，crt(阴极射线管)或者lcd(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(lan)、广域网(wan)和互联网。

计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。

应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发申请中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本申请公开的技术方案所期望的结果，本文在此不进行限制。

上述具体实施方式，并不构成对本申请保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本申请的精神和原则之内所作的修改、等同替换和改进等，均应包含在本申请保护范围之内。