交互方法、装置、存储介质、移动终端及交互系统与流程

文档序号:15980350发布日期:2018-11-17 00:15阅读:170来源:国知局

本申请实施例涉及移动终端技术领域,尤其涉及交互方法、装置、存储介质、移动终端及交互系统。

背景技术

目前,许多移动终端已成为人们日常生活中必不可少的电子设备,随着移动终端设备不断地智能化,多数移动终端中都能够安装丰富多样的应用程序,满足用户不同的需求,因此人们使用移动终端的频率也越来越高,基于移动终端的操作也越来越复杂化。

然而,受到移动终端屏幕尺寸的限制,用户在进行复杂操作时变得有些困难。但若单纯的追求大的屏幕尺寸,必然会对移动终端的便携性产生影响,而便携性正是移动终端得到广泛应用的重要原因。因此,权衡屏幕尺寸以及便携性之间的利弊关系已成为移动终端设计的难点之一,同样也成为诸多用户选购移动终端时的痛点。



技术实现要素:

本申请实施例提供交互方法、装置、存储介质、移动终端及交互系统,可以优化基于移动终端的交互方案。

第一方面,本申请实施例提供了一种基于移动终端的交互方法,所述移动终端交互系统包括主设备和从设备,所述方法应用于所述主设备,包括:

获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面;

将所述操控区域界面发送至所述从设备,以供所述从设备进行显示,并将所述当前显示界面替换为所述被控区域界面进行显示;

接收所述从设备发送的操控指令,基于所述操控指令对所述被控区域界面进行相应的更新及显示;其中,所述操控指令由所述从设备根据检测到的用户作用于所述操控区域界面上的操作产生。

第二方面,本申请实施例提供了一种基于移动终端的交互方法,所述移动终端交互系统包括主设备和从设备,所述方法应用于所述从设备,包括:

接收所述主设备发送的操控区域界面;其中,所述主设备获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面,并将所述操控区域界面发送至所述从设备;

显示所述操控区域界面;

检测用户作用于所述操控区域界面上的操作,并根据所述操作生成相应的操控指令;

将所述操控指令发送至所述主设备,所述操作指令用于指示所述主设备基于所述操控指令对所述被控区域界面进行相应的更新及显示。

第三方面,本申请实施例提供了一种基于移动终端交互系统的交互装置,所述移动终端交互系统包括主设备和从设备,所述装置集成于所述主设备中,包括:

界面获取模块,用于获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面;

界面发送模块,用于将所述操控区域界面发送至所述从设备,以供所述从设备进行显示;

显示控制模块,用于将所述当前显示界面替换为所述被控区域界面进行显示;

界面更新模块,用于接收所述从设备发送的操控指令,基于所述操控指令对所述被控区域界面进行相应的更新及显示;其中,所述操控指令由所述从设备根据检测到的用户作用于所述操控区域界面上的操作产生。

第四方面,本申请实施例提供了一种基于移动终端交互系统的交互装置,所述移动终端交互系统包括主设备和从设备,所述装置集成于所述从设备中,包括:

界面接收模块,用于接收所述主设备发送的操控区域界面;其中,所述主设备获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面,并将所述操控区域界面发送至所述从设备;

界面显示模块,用于显示所述操控区域界面;

操控指令生成模块,用于检测用户作用于所述操控区域界面上的操作,并根据所述操作生成相应的操控指令;

操控指令发送模块,用于将所述操控指令发送至所述主设备,所述操作指令用于指示所述主设备基于所述操控指令对所述被控区域界面进行相应的更新及显示。

第五方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本申请实施例所述的应用于主设备的基于移动终端的交互方法,或者,如本申请实施例所述的应用于从设备的基于移动终端的交互方法。

第六方面,本申请实施例提供了一种移动终端,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,所述处理器执行所述计算机程序时实现如本申请实施例所述的应用于主设备的基于移动终端交互系统的交互方法,或者,如本申请实施例所述的应用于从设备的基于移动终端交互系统的交互方法。

第七方面,本申请实施例提供了一种移动终端交互系统,包括主设备和从设备;

所述主设备包括第一存储器,第一处理器及存储在第一存储器上并可在第一处理器运行的第一计算机程序,所述第一处理器执行所述第一计算机程序时实现本申请实施例提供的应用于主设备的基于移动终端交互系统的交互方法;

所述从设备包括第二存储器,第二处理器及存储在第二存储器上并可在第二处理器运行的第二计算机程序,所述第二处理器执行所述第二计算机程序时实现本申请实施例提供的应用于从设备的基于移动终端交互系统的交互方法。

本申请实施例中提供的基于移动终端交互系统的交互方案,由主设备获取主设备中当前显示界面对应的操控区域界面和被控区域界面,将操控区域界面发送至从设备进行显示,并将当前显示界面替换为被控区域界面进行显示,接收从设备发送的操控指令,基于操控指令对被控区域界面进行相应的更新及显示,其中,操控指令由从设备根据检测到的用户作用于操控区域界面上的操作产生。通过采用上述技术方案,可以利用移动终端交互系统中的主设备和从设备之间的配合来实现显示内容的扩展显示,在主设备上仅显示被控区域界面,在从设备上仅显示操控区域界面,可避免在同一设备上同时进行被控区域与操控区域的显示所带来的操控区域面积受限、操控区域遮挡被控区域、以及用户操作时手部遮挡被控区域等问题,提升移动终端操控的便捷性。

附图说明

图1为本申请实施例提供的一种基于移动终端交互系统的交互方法的流程示意图;

图2为本申请实施例提供的另一种基于移动终端交互系统的交互方法的流程示意图;

图3为本申请实施例提供的又一种基于移动终端交互系统的交互方法的流程示意图;

图4为本申请实施例提供的一种游戏界面示意图;

图5为本申请实施例提供的一种游戏界面对应的操控区域界面示意图;

图6为本申请实施例提供的一种游戏界面对应的被控区域界面示意图;

图7为本申请实施例提供的一种主设备与从设备进行交互的信令图;

图8为本申请实施例提供的一种基于移动终端交互系统的交互装置的结构框图;

图9为本申请实施例提供的另一种基于移动终端交互系统的交互装置的结构框图;

图10为本申请实施例提供的一种移动终端的结构示意图;

图11为本申请实施例提供的又一种移动终端的结构示意图;

图12为本申请实施例提供的一种移动终端交互系统的结构示意图。

具体实施方式

下面结合附图并通过具体实施方式来进一步说明本申请的技术方案。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部结构。

在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。

图1为本申请实施例提供的一种基于移动终端交互系统的交互方法的流程示意图。所述移动终端交互系统包括主设备和从设备,该方法应用于主设备中,可以由基于移动终端交互系统的交互装置执行,其中该装置可由软件和/或硬件实现,一般可集成在移动终端中。如图1所示,该方法包括:

步骤101、获取主设备中当前显示界面对应的操控区域界面和被控区域界面。

示例性的,本申请实施例中的移动终端可包括手机、平板电脑以及游戏机等设置有显示屏的移动设备。移动终端交互系统中的主设备一般为一个,而从设备的数量不做限定,可以是一个、两个、甚至更多个。

示例性的,可先建立主设备与从设备之间的通信连接,该通信连接可以是有线连接,也可以是无线连接。其中,有线连接可以是通过数据线进行连接,数据线例如可以是通用串行总线(universalserialbus,usb)数据线或活动式(on-the-go,otg)数据线等;无线连接可以是基于无线保真(wirelessfidelity,wifi)网络的连接,可以是基于蓝牙的连接,还可以是基于移动通信技术网络(如中国移动等移动通信运营商提供的移动数据网络)的连接等。

在移动终端中,许多应用程序的显示界面一般包含了用于人机交互的操控区域以及响应用户操作的被控区域,用户可以在操控区域输入各种如点击、长按及滑动等操作,来实现对应用程序的控制,而应用程序针对用户操作的响应会体现在被控区域。由于移动终端的显示屏幕尺寸是固定的,也就是说能够显示画面的显示区域是有限的,操控区域会占用或遮挡被控区域的显示区域,使得操控区域面积受到很大的限制,另外,用户在操控区域进行输入操作时,手部也经常会遮挡被控区域的显示区域,导致用户无法看到全部的被控区域,严重影响交互体验。

本申请实施例中,当前显示界面可理解为主设备的屏幕正在显示的界面。当前显示界面对应的操控区域界面和被控区域界面可预先存储于主设备中,也可从对应的服务器中获取,本申请实施例不做限定。需要说明的是,操控区域界面和被控区域界面并无法单纯地通过对当前显示界面进行分割处理来得到,也就是说将操控区域界面和被控区域界面直接进行拼接并无法得到当前显示界面。由于操控区域界面和被控区域界面接下来会分别显示在主设备和从设备上,因此,其中包含的操控区域和被控区域的显示尺寸(或分辨率)可进行调整,操控区域和被控区域中包含的各组成对象也可重新进行布局(如增加组成对象、改变组成对象的尺寸以及改变组成对象的位置等等)。示例性的,当前显示界面中包含第一操控区域和第一被控区域,当前显示界面对应的操控区域界面中包含第二操控区域,当前显示界面对应的被控区域包含第二被控区域,第一操控区域和第二操控区域的分辨率和/或组成对象布局方式不同,第一被控区域和第二被控区域的分辨率和/或组成对象布局方式不同。此外,第一操控区域与第二操控区域之间的区别,以及第一被控区域和第二被控区域的区别,还可以体现在其他方面,本申请实施例不做限定,可根据具体的界面设计策略确定。

可选的,可在主设备上设置扩屏选项,例如在当前显示界面中指定位置或任意位置的按钮或浮动图标等,用户可通过触发扩屏选项来触发扩屏操作,使得主设备接收到扩屏指令。在接收到扩屏指令后,获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面。这样设置的好处在于,可允许用户利用扩屏选项来选择进行扩屏显示的时机。

步骤102、将所述操控区域界面发送至所述从设备,以供所述从设备进行显示,并将所述当前显示界面替换为所述被控区域界面进行显示。

示例性的,在获取到当前显示界面对应的操控区域界面和被控区域界面后,将操控区域界面发送至从设备,从设备会对操控区域界面进行显示,同时主设备会将当前显示界面替换为被控区域界面进行显示,这样,便实现了操控区域和被控区域的分离,操控区域的显示不会对被控区域的显示产生干扰。

步骤103、接收所述从设备发送的操控指令,基于所述操控指令对所述被控区域界面进行相应的更新及显示;其中,所述操控指令由所述从设备根据检测到的用户作用于所述操控区域界面上的操作产生。

在将操控区域和被控区域进行分离显示后,用户可在从设备上显示的被控区域界面输入各种控制操作,从设备也会将用户的操作转换为相应的操控指令并反馈给主设备,主设备在接收到操控指令后,基于操控指令对被控区域界面进行相应的更新及显示,以实现对用户操作的响应。这样,用户在利用从设备进行输入时,手部不会遮挡住主设备中的被控区域,也就是说用户能够在看到全部被控区域的情况下进行输入操作,方便用户使用。

本申请实施例中提供的基于移动终端交互系统的交互方法,由主设备获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面,将操控区域界面发送至从设备进行显示,并将当前显示界面替换为被控区域界面进行显示,接收从设备发送的操控指令,基于操控指令对被控区域界面进行相应的更新及显示,其中,操控指令由从设备根据检测到的用户作用于操控区域界面上的操作产生。通过采用上述技术方案,可以利用移动终端交互系统中的主设备和从设备之间的配合来实现显示内容的扩展显示,在主设备上仅显示被控区域界面,在从设备上仅显示操控区域界面,可避免在同一设备上同时进行被控区域与操控区域的显示所带来的操控区域面积受限、操控区域遮挡被控区域、以及用户操作时手部遮挡被控区域等问题,提升移动终端操控的便捷性。

在一些实施例中,所述将所述操控区域界面发送至所述从设备,包括:基于wifi网络将所述操控区域界面发送至所述从设备。所述接收所述从设备发送的操控指令,包括:基于第n代移动通信技术网络接收所述从设备发送的操控指令,其中,所述n大于或等于4。示例性的,第n代移动通信技术网络可以是4g网络、5g网络、或更版本的网络。这样设置的好处在于,采用低时延的无线通信方式来传输操控指令,能够保证操控的流畅性和实时性,而操控区域界面的传输属于图像传输,一般数据量较大,可以采用wifi网络进行传输来节省移动数据流量。

在一些实施例中,所述当前显示界面包括当前游戏界面,所述游戏界面包括游戏背景、叠加于所述游戏背景上的游戏控制图标和叠加于所述游戏背景上的游戏响应区域。所述操控区域界面包括游戏控制图标。所述被控区域界面包括游戏背景以及叠加于所述游戏背景上的游戏响应区域。这样设置的好处在于,可以适用于游戏场景,将游戏应用程序的游戏界面中的控制图标和游戏响应区域进行分离显示,用户可以将从设备当做游戏手柄来进行操作,在玩游戏时,可从主设备观看到完整的游戏背景和游戏响应区域,对游戏的操控更加自如和便捷。

在一些实施例中,所述将所述操控区域界面发送至所述从设备,包括:判断所述从设备中登录的游戏账号是否与所述主设备中登录的游戏账号一致,若一致,则将所述操控区域界面发送至所述从设备。这样设置的好处在于,能够快速对从设备的身份进行核实,从而实现准确地将操控区域界面发送至相应的从设备中。示例性的,游戏开发方可对游戏应用程序进行调整,支持多设备登录功能,进而实现利用游戏账号来进行移动终端的身份识别。

图2为本申请实施例提供的又一种基于移动终端交互系统的交互方法的流程示意图。所述移动终端交互系统包括主设备和从设备,该方法应用于从设备中,可以由基于移动终端交互系统的交互装置执行,其中该装置可由软件和/或硬件实现,一般可集成在移动终端中。如图2所示,该方法包括:

步骤201、接收主设备发送的操控区域界面。

其中,所述主设备获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面,并将所述操控区域界面发送至所述从设备。

示例性的,可基于与主设备预先建立的通信连接来接收主设备发送的操控区域界面。操控区域界面的相关说明可参考上文中的相应内容,此处不再赘述。

步骤202、显示所述操控区域界面。

步骤203、检测用户作用于所述操控区域界面上的操作,并根据所述操作生成相应的操控指令。

示例性的,用户可以在从设备上显示的操控区域界面中输入点击、长按或滑动等操作,用来对操控区域界面所属的应用程序进行控制。在接收到用户的操作后,将操作解析为相应的操控指令,用于发送至主设备。

步骤204、将所述操控指令发送至所述主设备,所述操作指令用于指示所述主设备基于所述操控指令对所述被控区域界面进行相应的更新及显示。

本申请实施例提供的基于移动终端交互系统的交互方法,接收并显示主设备发送的操控区域界面,检测用户作用于操控区域界面上的操作,并根据操作生成相应的操控指令,将操控指令发送至主设备,以指示主设备基于操控指令对被控区域界面进行相应的更新及显示。通过采用上述技术方案,可以利用移动终端交互系统中的主设备和从设备之间的配合来实现显示内容的扩展显示,在主设备上仅显示被控区域界面,在从设备上仅显示操控区域界面,可避免在同一设备上同时进行被控区域与操控区域的显示所带来的操控区域面积受限、操控区域遮挡被控区域、以及用户操作时手部遮挡被控区域等问题,提升移动终端操控的便捷性。

在一些实施例中,所述接收主设备发送的操控区域界面,包括:基于wifi网络接收主设备发送的操控区域界面。所述将所述操控指令发送至所述主设备,包括:基于第n代移动通信技术网络将所述操控指令发送至所述主设备。

在一些实施例中,所述当前显示界面包括当前游戏界面,所述游戏界面包括游戏背景、叠加于所述游戏背景上的游戏控制图标和叠加于所述游戏背景上的游戏响应区域。所述操控区域界面包括游戏控制图标。所述被控区域界面包括游戏背景以及叠加于所述游戏背景上的游戏响应区域。

在一些实施例中,还包括:将从设备中登录的游戏账号发送至主设备,所述游戏账号用于使主设备判断所述从设备中登录的游戏账号是否与所述主设备中登录的游戏账号一致,若一致,则将所述操控区域界面发送至所述从设备。

图3为本申请实施例提供的又一种基于移动终端交互系统的交互方法的流程示意图,该方法以游戏为例进行说明。如图3所示,该方法包括:

步骤301、主设备与从设备建立无线通信连接。

步骤302、主设备登录游戏应用程序。

步骤303、主设备在检测到游戏界面上的扩屏按钮被触发时,获取当前游戏界面对应的操控区域界面和被控区域界面。

图4为本申请实施例提供的一种游戏界面示意图,如图4所示,游戏界面包括游戏背景401、叠加于所述游戏背景上的游戏控制图标402和叠加于所述游戏背景上的游戏响应区域403,可见,游戏控制图标402占用了很多屏幕显示区域,导致游戏响应区域403面积较小,且用户在点击或滑动游戏控制图标402时,手部也容易遮挡到游戏响应区域403,影响用户的视线,此外,游戏控制图标402的尺寸也较小,不方便用户操作。图5为本申请实施例提供的一种游戏界面对应的操控区域界面示意图,如图5所示,所述操控区域界面包括了与游戏控制图标402相对应的游戏控制图标502,区别在于,游戏控制图标502的尺寸和布局与游戏控制图标402不同,更加适合用户操作,用户可以获得游戏手柄的使用体验。另外,由于从设备整个屏幕可用于显示游戏控制图标,因此,还可显示额外的游戏控制图标502,丰富游戏的操作方式。图6为本申请实施例提供的一种游戏界面对应的被控区域界面示意图,如图6所示,所述被控区域界面包括游戏背景以及叠加于所述游戏背景上的游戏响应区域601,由于没有游戏控制图标402的遮挡,游戏响应区域601可以与游戏背景完全叠加,使得游戏背景和游戏响应区域更加丰富。以王者荣耀等游戏为例,在从设备上显示游戏操控按钮,在主设备上显示战场信息,能够使用户在玩游戏过程中,更加专注于战场情况,且主设备上能够显示更加丰富的战场信息,让用户更全面的掌握战场局面,方便与队友商量作战策略,从而有效提升游戏体验。

步骤304、主设备利用wifi网络将操控区域界面发送给从设备,并将当前游戏界面替换为相应的被控区域界面进行显示。

步骤305、从设备接收操控区域界面并进行显示。

步骤306、从设备检测用户作用于操控区域界面上的操作,并根据操作生成相应的操控指令。

步骤307、从设备利用5g网络将操控指令发送给主设备。

步骤308、主设备接收操控指令,并基于操控指令对被控区域界面进行相应的更新及显示。

图7为本申请实施例提供的一种主设备与从设备进行交互的信令图,可结合该信令图对上述实施例进行理解。

本申请实施例提供的基于移动终端交互系统的交互方法,可以将两个移动终端进行通信连接,然后对游戏界面进行分离式显示,在从设备上显示操控区域界面,在主设备上显示被控区域界面,用户可以手持从设备操作控制按钮,并观察主设备中的被控区域的变化,两个移动终端之间的显示互不干扰,可以让用户获得更好的游戏体验。

图8为本申请实施例提供的一种基于移动终端交互系统的交互装置的结构框图,该装置可由软件和/或硬件实现,一般集成在作为主设备的移动终端中,可通过执行基于移动终端的交互方法来与移动终端交互系统中的从设备进行交互。如图8所示,该装置包括:

界面获取模块801,用于获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面;

界面发送模块802,用于将所述操控区域界面发送至所述从设备,以供所述从设备进行显示;

显示控制模块803,用于将所述当前显示界面替换为所述被控区域界面进行显示;

界面更新模块804,用于接收所述从设备发送的操控指令,基于所述操控指令对所述被控区域界面进行相应的更新及显示;其中,所述操控指令由所述从设备根据检测到的用户作用于所述操控区域界面上的操作产生。

本申请实施例提供的基于移动终端交互系统的交互装置,可以利用移动终端交互系统中的主设备和从设备之间的配合来实现显示内容的扩展显示,在主设备上仅显示被控区域界面,在从设备上仅显示操控区域界面,可避免在同一设备上同时进行被控区域与操控区域的显示所带来的操控区域面积受限、操控区域遮挡被控区域、以及用户操作时手部遮挡被控区域等问题,提升移动终端操控的便捷性。

可选的,所述将所述操控区域界面发送至所述从设备,包括:

基于无线保真wifi网络将所述操控区域界面发送至所述从设备;

所述接收所述从设备发送的操控指令,包括:

基于第n代移动通信技术网络接收所述从设备发送的操控指令,其中,所述n大于或等于4。

可选的,所述当前显示界面包括当前游戏界面,所述游戏界面包括游戏背景、叠加于所述游戏背景上的游戏控制图标和叠加于所述游戏背景上的游戏响应区域。所述操控区域界面包括游戏控制图标。所述被控区域界面包括游戏背景以及叠加于所述游戏背景上的游戏响应区域。

可选的,所述将所述操控区域界面发送至所述从设备,包括:

判断所述从设备中登录的游戏账号是否与所述主设备中登录的游戏账号一致,若一致,则将所述操控区域界面发送至所述从设备。

图9为本申请实施例提供的另一种基于移动终端交互系统的交互装置的结构框图,该装置可由软件和/或硬件实现,一般集成在作为从设备的移动终端中,可通过执行基于移动终端的交互方法来与移动终端交互系统中的主设备进行交互。如图9所示,该装置包括:

界面接收模块901,用于接收所述主设备发送的操控区域界面;其中,所述主设备获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面,并将所述操控区域界面发送至所述从设备;

界面显示模块902,用于显示所述操控区域界面;

操控指令生成模块903,用于检测用户作用于所述操控区域界面上的操作,并根据所述操作生成相应的操控指令;

操控指令发送模块904,用于将所述操控指令发送至所述主设备,所述操作指令用于指示所述主设备基于所述操控指令对所述被控区域界面进行相应的更新及显示。

本申请实施例提供的基于移动终端交互系统的交互装置,可以利用移动终端交互系统中的主设备和从设备之间的配合来实现显示内容的扩展显示,在主设备上仅显示被控区域界面,在从设备上仅显示操控区域界面,可避免在同一设备上同时进行被控区域与操控区域的显示所带来的操控区域面积受限、操控区域遮挡被控区域、以及用户操作时手部遮挡被控区域等问题,提升移动终端操控的便捷性。

可选的,所述接收主设备发送的操控区域界面,包括:基于wifi网络接收主设备发送的操控区域界面。所述将所述操控指令发送至所述主设备,包括:基于第n代移动通信技术网络将所述操控指令发送至所述主设备。

可选的,所述当前显示界面包括当前游戏界面,所述游戏界面包括游戏背景、叠加于所述游戏背景上的游戏控制图标和叠加于所述游戏背景上的游戏响应区域。所述操控区域界面包括游戏控制图标。所述被控区域界面包括游戏背景以及叠加于所述游戏背景上的游戏响应区域。

可选的,该装置还包括:账号发送模块,用于将从设备中登录的游戏账号发送至主设备,所述游戏账号用于使主设备判断所述从设备中登录的游戏账号是否与所述主设备中登录的游戏账号一致,若一致,则将所述操控区域界面发送至所述从设备。

本申请实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行应用于主设备的基于移动终端交互系统的交互方法,该方法包括:

获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面;

将所述操控区域界面发送至所述从设备,以供所述从设备进行显示,并将所述当前显示界面替换为所述被控区域界面进行显示;

接收所述从设备发送的操控指令,基于所述操控指令对所述被控区域界面进行相应的更新及显示;其中,所述操控指令由所述从设备根据检测到的用户作用于所述操控区域界面上的操作产生。

存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如cd-rom、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如dram、ddrram、sram、edoram,兰巴斯(rambus)ram等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。

当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的基于移动终端的交互操作,还可以执行本申请任意应用于主设备的实施例所提供的基于移动终端的交互方法中的相关操作。

本申请实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行应用于从设备的基于移动终端交互系统的交互方法,该方法包括:

接收所述主设备发送的操控区域界面;其中,所述主设备获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面,并将所述操控区域界面发送至所述从设备;

显示所述操控区域界面;

检测用户作用于所述操控区域界面上的操作,并根据所述操作生成相应的操控指令;

将所述操控指令发送至所述主设备,所述操作指令用于指示所述主设备基于所述操控指令对所述被控区域界面进行相应的更新及显示。

本申请实施例提供了一种移动终端,该移动终端中可集成本申请实施例提供的基于移动终端的交互装置。图10为本申请实施例提供的一种移动终端的结构示意图。移动终端1000可以包括:存储器1001,处理器1002及存储在存储器1001上并可在处理器1002运行的计算机程序,所述处理器1002执行所述计算机程序时实现如本申请实施例所述的基于移动终端交互系统的交互方法。

本申请实施例提供的移动终端,可以利用移动终端交互系统中的主设备和从设备之间的配合来实现显示内容的扩展显示,在主设备上仅显示被控区域界面,在从设备上仅显示操控区域界面,可避免在同一设备上同时进行被控区域与操控区域的显示所带来的操控区域面积受限、操控区域遮挡被控区域、以及用户操作时手部遮挡被控区域等问题,提升移动终端操控的便捷性。

图11为本申请实施例提供的另一种移动终端的结构示意图,该移动终端可以包括:壳体(图中未示出)、存储器1101、中央处理器(centralprocessingunit,cpu)1102(又称处理器,以下简称cpu)、电路板(图中未示出)和电源电路(图中未示出)。所述电路板安置在所述壳体围成的空间内部;所述cpu1102和所述存储器1101设置在所述电路板上;所述电源电路,用于为所述移动终端的各个电路或器件供电;所述存储器1101,用于存储可执行程序代码;所述cpu1102通过读取所述存储器1101中存储的可执行程序代码来运行与所述可执行程序代码对应的计算机程序,以实现以下步骤:

获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面;

将所述操控区域界面发送至所述从设备,以供所述从设备进行显示,并将所述当前显示界面替换为所述被控区域界面进行显示;

接收所述从设备发送的操控指令,基于所述操控指令对所述被控区域界面进行相应的更新及显示;其中,所述操控指令由所述从设备根据检测到的用户作用于所述操控区域界面上的操作产生。

或者,

接收所述主设备发送的操控区域界面;其中,所述主设备获取所述主设备中当前显示界面对应的操控区域界面和被控区域界面,并将所述操控区域界面发送至所述从设备;

显示所述操控区域界面;

检测用户作用于所述操控区域界面上的操作,并根据所述操作生成相应的操控指令;

将所述操控指令发送至所述主设备,所述操作指令用于指示所述主设备基于所述操控指令对所述被控区域界面进行相应的更新及显示。

可以理解的是,本申请实施例提供的移动终端既可以作为主设备也可以作为从设备,因此,可根据移动终端当前的身份(主设备还是从设备)来执行相应的操作。

所述移动终端还包括:外设接口1103、rf(radiofrequency,射频)电路1105、音频电路1106、扬声器1111、电源管理芯片1108、输入/输出(i/o)子系统1109、其他输入/控制设备1110、触摸屏1112、其他输入/控制设备1110以及外部端口1104,这些部件通过一个或多个通信总线或信号线1107来通信。

应该理解的是,图示移动终端1100仅仅是移动终端的一个范例,并且移动终端1100可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。

下面就本实施例提供的用于交互的移动终端进行详细的描述,该移动终端以手机为例。

存储器1101,所述存储器1101可以被cpu1102、外设接口1103等访问,所述存储器1101可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

外设接口1103,所述外设接口1103可以将设备的输入和输出外设连接到cpu1102和存储器1101。

i/o子系统1109,所述i/o子系统1109可以将设备上的输入输出外设,例如触摸屏1112和其他输入/控制设备1110,连接到外设接口1103。i/o子系统1109可以包括显示控制器11091和用于控制其他输入/控制设备1110的一个或多个输入控制器11092。其中,一个或多个输入控制器11092从其他输入/控制设备1110接收电信号或者向其他输入/控制设备1110发送电信号,其他输入/控制设备1110可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是,输入控制器11092可以与以下任一个连接:键盘、红外端口、usb接口以及诸如鼠标的指示设备。

触摸屏1112,所述触摸屏1112是用户移动终端与用户之间的输入接口和输出接口,将可视输出显示给用户,可视输出可以包括图形、文本、图标、视频等。

i/o子系统1109中的显示控制器11091从触摸屏1112接收电信号或者向触摸屏1112发送电信号。触摸屏1112检测触摸屏上的接触,显示控制器11091将检测到的接触转换为与显示在触摸屏1112上的用户界面对象的交互,即实现人机交互,显示在触摸屏1112上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是,设备还可以包括光鼠,光鼠是不显示可视输出的触摸敏感表面,或者是由触摸屏形成的触摸敏感表面的延伸。

rf电路1105,主要用于建立手机与无线网络(即网络侧)的通信,实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地,rf电路1105接收并发送rf信号,rf信号也称为电磁信号,rf电路1105将电信号转换为电磁信号或将电磁信号转换为电信号,并且通过该电磁信号与通信网络以及其他设备进行通信。rf电路1105可以包括用于执行这些功能的已知电路,其包括但不限于天线系统、rf收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、codec(coder-decoder,编译码器)芯片组、用户标识模块(subscriberidentitymodule,sim)等等。

音频电路1106,主要用于从外设接口1103接收音频数据,将该音频数据转换为电信号,并且将该电信号发送给扬声器1111。

扬声器1111,用于将手机通过rf电路1105从无线网络接收的语音信号,还原为声音并向用户播放该声音。

电源管理芯片1108,用于为cpu1102、i/o子系统及外设接口所连接的硬件进行供电及电源管理。

图12为本申请实施例提供的一种移动终端交互系统的结构示意图,该系统包括主设备1201和从设备1202;

所述主设备1201包括第一存储器,第一处理器及存储在第一存储器上并可在第一处理器运行的第一计算机程序,所述第一处理器执行所述第一计算机程序时实现本申请实施例提供的应用于主设备的基于移动终端交互系统的交互方法;

所述从设备1202包括第二存储器,第二处理器及存储在第二存储器上并可在第二处理器运行的第二计算机程序,所述第二处理器执行所述第二计算机程序时实现本申请实施例提供的应用于从设备的基于移动终端交互系统的交互方法。

本申请实施例提供的移动终端交互系统,可以利用移动终端交互系统中的主设备和从设备之间的配合来实现显示内容的扩展显示,在主设备上仅显示被控区域界面,在从设备上仅显示操控区域界面,可避免在同一设备上同时进行被控区域与操控区域的显示所带来的操控区域面积受限、操控区域遮挡被控区域、以及用户操作时手部遮挡被控区域等问题,提升移动终端操控的便捷性。

上述实施例中提供的基于移动终端交互系统的交互装置、存储介质、移动终端及交互系统可执行本申请相应实施例所提供的基于移动终端交互系统的交互方法,具备执行方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本申请相应实施例所提供的基于移动终端交互系统的交互方法。

注意,上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解,本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由所附的权利要求范围决定。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1