屏幕显示的方法及终端设备的制造方法
【技术领域】
[0001]本发明涉及通信领域，尤其涉及通信领域中屏幕显示的方法及终端设备。
【背景技术】
[0002]随着信息通信技术的不断发展，用户越来越多地通过以智能手机为代表的智能移动终端，进行信息的浏览。通常，智能移动终端的屏幕的大小有限，上面的文字、图片等媒体信息较小，不便于查看和操作。
[0003]智能移动终端的屏幕显示，大多可以通过用户手动调整来更改整个屏幕上元素的大小。但是，手动调整不但增加了用户的工作量，还容易使手动调整的操作与其它操作混淆，造成误操作。并且，手动调整涉及整个屏幕上的所有元素，有可能会改变屏幕上的信息量，不利于用户对信息的整体把握，使得用户可能需要执行更多的滑屏或翻页操作。并且，屏幕上元素的整体放大常常会造成信息的位移，使得用户无法定位放大操作之前在关注的信息，不利于人机交互。
[0004]虽然现在提出了一些改进方法，可以对屏幕上的局部区域进行简单优化，但是现有的方法确定的局部区域的范围和优化的效果都并不理想，人机交互效率低。
【发明内容】
[0005]本发明实施例提供了一种屏幕显示的方法及终端设备，能够提高人机交互效率。
[0006]第一方面，提供了一种屏幕显示的方法，该方法包括:获取所述屏幕上的元素的关系信息，其中，所述元素为所述屏幕上显示的对象或用于人机交互的载体；获取用户的视线信息和手势信息中的至少一种；根据所述视线信息和手势信息中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户的关注区域，其中所述确定的用户的关注区域包括所述视线信息和手势信息中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系；对所述确定的用户的关注区域进行优化处理，并将经过所述优化处理的用户的关注区域显示在所述屏幕上。
[0007]结合第一方面，在第一方面的第二种可能的实现方式中，所述元素的关系信息包括元素之间在功能上的包含、顺序、相关或联动关系。
[0008]结合第一方面或第一方面的第一种可能的实现方式，在第一方面的第二种可能的实现方式中，所述视线信息包括当前视线的焦点位置；所述手势信息包括当前手势的悬浮位置；所述根据所述视线信息和手势信息中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户的关注区域，包括:根据所述当前视线的焦点位置和所述当前手势的悬浮位置中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户当前关注的区域，其中所述确定的用户当前关注的区域包括所述当前视线的焦点位置和所述当前手势的悬浮位置中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系。
[0009]结合第一方面或第一方面的第一种可能的实现方式，在第一方面的第三种可能的实现方式中，所述视线信息包括当前视线的焦点位置和视线的移动趋势；所述手势信息包括当前手势的悬浮位置和手势的移动趋势；所述根据所述视线信息和手势信息中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户的关注区域，包括:根据所述当前视线的焦点位置和视线的移动趋势，以及所述当前手势的悬浮位置和手势的移动趋势中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户下一关注的区域，其中所述确定的用户下一关注的区域包括所述当前视线的焦点位置和视线的移动趋势，以及所述当前手势的悬浮位置和手势的移动趋势中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系。
[0010]结合第一方面和第一方面的第一种至第三种可能的实现方式中的任一种可能的实现方式，在第一方面的第四种可能的实现方式中，该方法还包括:监测用户做出响应的响应区域；在所述响应区域与所述关注区域不完全相同时，根据所述响应区域与所述关注区域的区别，更新所述区域划分算法。
[0011]结合第一方面和第一方面的第一种至第四种可能的实现方式中的任一种可能的实现方式，在第一方面的第五种可能的实现方式中，所述对所述确定的用户的关注区域进行优化处理，并将经过所述优化处理的用户的关注区域显示在所述屏幕上，包括:根据区域优化算法，选择以下至少一种方式对所述确定的用户的关注区域的元素进行优化处理:放大镜显示、鱼眼显示、高亮显示、调整元素的位置和调整元素间的间距；将所述确定的用户的关注区域中经过优化处理后的元素显示在所述屏幕上。
[0012]结合第一方面的第五种可能的实现方式，在第一方面的第六种可能的实现方式中，该方法还包括:获取用户使用习惯，所述用户使用习惯包括浏览习惯、操作习惯和交互习惯中的至少一种；根据所述用户使用习惯，更新所述区域划分算法和/或所述区域优化算法。
[0013]结合第一方面的第五种或第六种可能的实现方式，在第一方面的第七种可能的实现方式中，该方法还包括:计算用户做出响应的响应效率，所述响应效率包括点击时间、切换速度、和视觉搜索效率中的至少一种；根据所述响应效率，更新所述区域优化算法。
[0014]结合第一方面的第五种至第七种可能的实现方式中的任一种可能的实现方式，在第一方面的第八种可能的实现方式中，所述区域划分算法包括连通区域检测、依赖关系图搜索和基于聚类的分层分割中的至少一种算法；或所述区域优化算法包括基于费茨定律、席克定律、格式塔接近法则和奥卡姆剃刀原理中的至少一种的算法。
[0015]第二方面，提供了一种终端设备，该终端设备包括:第一获取模块，用于获取所述屏幕上的元素的关系信息，其中，所述元素为所述屏幕上显示的对象或用于人机交互的载体；第二获取模块，用于获取用户的视线信息和手势信息中的至少一种；确定模块，用于根据所述第二获取模块获取的所述视线信息和手势信息中的至少一种，结合所述第一获取模块获取的所述元素的关系信息，利用区域划分算法确定用户的关注区域，其中所述确定的用户的关注区域包括所述视线信息和手势信息中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系；优化显示模块，用于对所述确定模块确定的用户的关注区域进行优化处理，并将经过所述优化处理的用户的关注区域显示在所述屏幕上。
[0016]结合第二方面，在第二方面的第二种可能的实现方式中，所述第一获取模块获取的所述元素的关系信息包括元素之间在功能上的包含、顺序、相关或联动关系。
[0017]结合第二方面或第二方面的第一种可能的实现方式，在第二方面的第二种可能的实现方式中，所述第二获取模块获取的所述视线信息包括当前视线的焦点位置；所述第二获取模块获取的所述手势信息包括当前手势的悬浮位置；所述确定模块具体用于:根据所述第二获取模块获取的所述当前视线的焦点位置和所述当前手势的悬浮位置中的至少一种，结合所述第一获取模块获取的所述元素的关系信息，利用区域划分算法确定用户当前关注的区域，其中所述确定模块确定的用户当前关注的区域包括所述当前视线的焦点位置和所述当前手势的悬浮位置中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系。
[0018]结合第二方面或第二方面的第一种可能的实现方式，在第二方面的第三种可能的实现方式中，所述第二获取模块获取的所述视线信息包括当前视线的焦点位置和视线的移动趋势；所述第二获取模块获取的所述手势信息包括当前手势的悬浮位置和手势的移动趋势；所述确定模块具体用于:根据所述第二获取模块获取的所述当前视线的焦点位置和视线的移动趋势，以及所述当前手势的悬浮位置和手势的移动趋势中的至少一种，结合所述第一获取模块获取的所述元素的关系信息，利用区域划分算法确定用户下一关注的区域，其中所述确定模块确定的用户下一关注的区域包括所述当前视线的焦点位置和视线的移动趋势，以及所述当前手势的悬浮位置和手势的移动趋势中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系。
[0019]结合第二方面和第二方面的第一种至第三种可能的实现方式中的任一种可能的实现方式，在第二方面的第四种可能的实现方式中，该终端设备还包括:监测模块，用于监测用户做出响应的响应区域；所述更新模块还用于:在所述响应区域与所述关注区域不完全相同时，根据所述响应区域与所述关注区域的区别，更新所述区域划分算法。
[0020]结合第二方面和第二方面的第一种至第四种可能的实现方式中的任一种可能的实现方式，在第二方面的第五种可能的实现方式中，所述优化显示模块具体用于:根据区域优化算法，选择以下至少一种方式对所述确定的用户的关注区域的元素进行优化处理:放大镜显示、鱼眼显示、高亮显示、调整元素的位置和调整元素间的间距；将所述确定的用户的关注区域中经过优化处理后的元素显示在所述屏幕上。
[0021]结合第二方面的第五种可能的实现方式，在第二方面的第六种可能的实现方式中，该终端设备还包括:第三获取模块，用于获取用户使用习惯，所述用户使用习惯包括浏览习惯、操作习惯和交互习惯中的至少一种；更新模块，用于根据所述第三获取模块获取的所述用户使用习惯，更新所述区域划分算法和/或所述区域优化算法。
[0022]结合第二方面的第五种或第六种可能的实现方式，在第二方面的第七种可能的实现方式中，该终端设备还包括:计算模块，用于计算用户做出响应的响应效率，所述响应效率包括点击时间、切换速度、和视觉搜索效率中的至少一种；所述更新模块还用于:根据所述响应效率，更新所述区域优化算法。
[0023]结合第二方面的第五种至第七种可能的实现方式中的任一种可能的实现方式，在第二方面的第八种可能的实现方式中，所述区域划分算法包括连通区域检测、依赖关系图搜索和基于聚类的分层分割中的至少一种算法；或所述区域优化算法包括基于费茨定律、席克定律、格式塔接近法则和奥卡姆剃刀原理中的至少一种的算法。
[0024]基于上述技术方案，本发明实施例的屏幕显示的方法及终端设备，通过根据用户的视线信息和手势信息中的至少一种，结合屏幕上的元素的关系信息，利用区域划分算法确定用户关注区域，使得该关注区域包括目标元素以及扩展元素，即使得关注区域包括的元素在功能上是完整的，优化关注区域的显示，可以提高人机交互效率，改善用户体验。
【附图说明】
[0025]为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例中所需要使用的附图作简单地介绍，显而易见地，下面所描述的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。
[0026]图1是根据本发明实施例的屏幕显示的方法的示意性流程图。
[0027]图2是根据本发明另一实施例的屏幕显示的方法的示意图。
[0028]图3是根据本发明另一实施例的屏幕显示的方法的示意图。
[0029]图4是根据本发明另一实施例的屏幕显示的方法的示意图。
[0030]图5是根据本发明另一实施例的屏幕显示的方法的示意性流程图。
[0031]图6是根据本发明实施例的终端设备的示意性框图。
[0032]图7是根据本发明另一实施例的终端设备的示意性框图。
[0033]图8是根据本发明另一实施例的终端设备的示意性框图。
【具体实施方式】
[0034]下面将结合本发明实施例中的附图，对本发明实施