功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
[0187]所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
[0188]在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。
[0189]所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
[0190]另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
[0191]所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM, Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
[0192]以上所述，仅为本发明的【具体实施方式】，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。
【主权项】
1.一种屏幕显示的方法，其特征在于，包括: 获取所述屏幕上的元素的关系信息，其中，所述元素为所述屏幕上显示的对象或用于人机交互的载体； 获取用户的视线信息和手势信息中的至少一种； 根据所述视线信息和手势信息中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户的关注区域，其中所述确定的用户的关注区域包括所述视线信息和手势信息中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系； 对所述确定的用户的关注区域进行优化处理，并将经过所述优化处理的用户的关注区域显示在所述屏幕上。2.根据权利要求1所述的方法，其特征在于，所述元素的关系信息包括元素之间在功能上的包含、顺序、相关或联动关系。3.根据权利要求1或2所述的方法，其特征在于， 所述视线信息包括当前视线的焦点位置； 所述手势信息包括当前手势的悬浮位置； 所述根据所述视线信息和手势信息中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户的关注区域，包括: 根据所述当前视线的焦点位置和所述当前手势的悬浮位置中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户当前关注的区域，其中所述确定的用户当前关注的区域包括所述当前视线的焦点位置和所述当前手势的悬浮位置中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表不的关系。4.根据权利要求1或2所述的方法，其特征在于， 所述视线信息包括当前视线的焦点位置和视线的移动趋势； 所述手势信息包括当前手势的悬浮位置和手势的移动趋势； 所述根据所述视线信息和手势信息中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户的关注区域，包括: 根据所述当前视线的焦点位置和视线的移动趋势，以及所述当前手势的悬浮位置和手势的移动趋势中的至少一种，结合所述元素的关系信息，利用区域划分算法确定用户下一关注的区域，其中所述确定的用户下一关注的区域包括所述当前视线的焦点位置和视线的移动趋势，以及所述当前手势的悬浮位置和手势的移动趋势中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系。5.根据权利要求1至4中任一项所述的方法，其特征在于，所述方法还包括: 监测用户做出响应的响应区域； 在所述响应区域与所述关注区域不完全相同时，根据所述响应区域与所述关注区域的区别，更新所述区域划分算法。6.根据权利要求1至5中任一项所述的方法，其特征在于，所述对所述确定的用户的关注区域进行优化处理，并将经过所述优化处理的用户的关注区域显示在所述屏幕上，包括: 根据区域优化算法，选择以下至少一种方式对所述确定的用户的关注区域的元素进行优化处理:放大镜显示、鱼眼显示、高亮显示、调整元素的位置和调整元素间的间距； 将所述确定的用户的关注区域中经过优化处理后的元素显示在所述屏幕上。7.根据权利要求6所述的方法，其特征在于，所述方法还包括: 获取用户使用习惯，所述用户使用习惯包括浏览习惯、操作习惯和交互习惯中的至少一种； 根据所述用户使用习惯，更新所述区域划分算法和/或所述区域优化算法。8.根据权利要求6或7所述的方法，其特征在于，所述方法还包括: 计算用户做出响应的响应效率，所述响应效率包括点击时间、切换速度、和视觉搜索效率中的至少一种； 根据所述响应效率，更新所述区域优化算法。9.根据权利要求6至8中任一项所述的方法，其特征在于，所述区域划分算法包括连通区域检测、依赖关系图搜索和基于聚类的分层分割中的至少一种算法；或 所述区域优化算法包括基于费茨定律、席克定律、格式塔接近法则和奥卡姆剃刀原理中的至少一种的算法。10.一种终端设备，其特征在于，包括: 第一获取模块，用于获取所述屏幕上的元素的关系信息，其中，所述元素为所述屏幕上显示的对象或用于人机交互的载体； 第二获取模块，用于获取用户的视线信息和手势信息中的至少一种； 确定模块，用于根据所述第二获取模块获取的所述视线信息和手势信息中的至少一种，结合所述第一获取模块获取的所述元素的关系信息，利用区域划分算法确定用户的关注区域，其中所述确定的用户的关注区域包括所述视线信息和手势信息中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表不的关系； 优化显示模块，用于对所述确定模块确定的用户的关注区域进行优化处理，并将经过所述优化处理的用户的关注区域显示在所述屏幕上。11.根据权利要求10所述的终端设备，其特征在于，所述第一获取模块获取的所述元素的关系信息包括元素之间在功能上的包含、顺序、相关或联动关系。12.根据权利要求10或11所述的终端设备，其特征在于， 所述第二获取模块获取的所述视线信息包括当前视线的焦点位置； 所述第二获取模块获取的所述手势信息包括当前手势的悬浮位置； 所述确定模块具体用于: 根据所述第二获取模块获取的所述当前视线的焦点位置和所述当前手势的悬浮位置中的至少一种，结合所述第一获取模块获取的所述元素的关系信息，利用区域划分算法确定用户当前关注的区域，其中所述确定模块确定的用户当前关注的区域包括所述当前视线的焦点位置和所述当前手势的悬浮位置中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系。13.根据权利要求10或11所述的终端设备，其特征在于， 所述第二获取模块获取的所述视线信息包括当前视线的焦点位置和视线的移动趋势； 所述第二获取模块获取的所述手势信息包括当前手势的悬浮位置和手势的移动趋势； 所述确定模块具体用于: 根据所述第二获取模块获取的所述当前视线的焦点位置和视线的移动趋势，以及所述当前手势的悬浮位置和手势的移动趋势中的至少一种，结合所述第一获取模块获取的所述元素的关系信息，利用区域划分算法确定用户下一关注的区域，其中所述确定模块确定的用户下一关注的区域包括所述当前视线的焦点位置和视线的移动趋势，以及所述当前手势的悬浮位置和手势的移动趋势中的至少一种对应的目标元素以及扩展元素，其中所述扩展元素与所述目标元素具有所述元素的关系信息所表示的关系。14.根据权利要求10至13中任一项所述的终端设备，其特征在于，所述终端设备还包括: 监测模块，用于监测用户做出响应的响应区域； 所述更新模块还用于: 在所述响应区域与所述关注区域不完全相同时，根据所述响应区域与所述关注区域的区别，更新所述区域划分算法。15.根据权利要求10至14中任一项所述的终端设备，其特征在于，所述优化显示模块具体用于: 根据区域优化算法，选择以下至少一种方式对所述确定的用户的关注区域的元素进行优化处理:放大镜显示、鱼眼显示、高亮显示、调整元素的位置和调整元素间的间距； 将所述确定的用户的关注区域中经过优化处理后的元素显示在所述屏幕上。16.根据权利要求15所述的终端设备，其特征在于，所述终端设备还包括: 第三获取模块，用于获取用户使用习惯，所述用户使用习惯包括浏览习惯、操作习惯和交互习惯中的至少一种； 更新模块，用于根据所述第三获取模块获取的所述用户使用习惯，更新所述区域划分算法和/或所述区域优化算法。17.根据权利要求15或16所述的终端设备，其特征在于，所述终端设备还包括: 计算模块，用于计算用户做出响应的响应效率，所述响应效率包括点击时间、切换速度、和视觉搜索效率中的至少一种； 所述更新模块还用于: 根据所述响应效率，更新所述区域优化算法。18.根据权利要求15至17中任一项所述的终端设备，其特征在于，所述区域划分算法包括连通区域检测、依赖关系图搜索和基于聚类的分层分割中的至少一种算法；或 所述区域优化算法包括基于费茨定律、席克定律、格式塔接近法则和奥卡姆剃刀原理中的至少一种的算法。
【专利摘要】本发明公开了一种屏幕显示的方法及终端设备，该方法包括：获取屏幕上的元素的关系信息，元素为屏幕上显示的对象或用于人机交互的载体；获取用户的视线信息和手势信息中的至少一种；根据视线信息和手势信息中的至少一种，结合元素的关系信息，利用区域划分算法确定用户的关注区域，其中确定的用户的关注区域包括视线信息和手势信息中的至少一种对应的目标元素以及扩展元素，其中扩展元素与目标元素具有元素的关系信息所表示的关系；对确定的用户的关注区域进行优化处理，并将经过优化处理的用户的关注区域显示在屏幕上。本发明实施例的屏幕显示的方法及终端设备，通过自动优化关注区域的显示，可以提高人机交互效率。
【IPC分类】G06F3/14
【公开号】CN105446673
【申请号】CN201410364727
【发明人】麻晓娟, 欧阳靖民, 梁颖琪
【申请人】华为技术有限公司
【公开日】2016年3月30日
【申请日】2014年7月28日