一种任务接续方法、设备及系统与流程

本技术实施例涉及终端，尤其涉及一种任务接续方法、设备及系统。

背景技术：

1、随着增强现实(augmented reality，ar)技术的发展，ar技术可以广泛应用于人们工作生活的各个方面。ar设备可以基于ar技术为用户提供在真实世界中叠加显示虚拟画面的服务。其中，ar设备如ar眼镜、ar头盔、安装有ar应用的电子设备(如手机、平板等)。

2、为了为用户提供更加沉浸式的ar体验，通常ar设备还可以支持用户与ar视场中的ar物体交互。例如，用户可以通过手部与ar物体直接接触的方式、手部延长线指向ar物体的方式、语音交互方式或肢体动作交互方式(如头动交互方式、手势交互方式等)与ar物体交互。

3、但是，上述交互方式常常不能为用户带来良好的交互体验。例如，上述通过手部与ar物体直接接触的方式与通过手部延长线指向ar物体的方式需要用户手部在空中长时间停留，但是人手很难在没有支撑的情况下在空中停留过长时间，因此该方法不适合长时间、连续性的操作。又如，在一些情况下，尤其是在用户处于公共场合时，用户并不希望发出声音或者做出肢体动作，因此上述语音交互方式与肢体动作交互方式通常不被用户欢迎。

技术实现思路

1、本技术提供一种任务接续方法、设备及系统，可以为用户提供更加便捷、易操作的ar交互体验。

2、为达到上述目的，本技术实施例采用如下技术方案：

3、第一方面，提供一种任务接续方法，该方法包括：ar设备识别到满足预设条件时，在ar视场内显示ar设备正在执行的一个或多个ar任务的图标，该一个或多个ar任务的图标包括第一任务图标，第一任务图标对应于第一ar任务；响应于用户对第一任务图标的第一操作，ar设备指示第一电子设备接续ar设备执行第一ar任务。

4、其中，第一操作的意图是将第一任务由ar设备切换至第一电子设备。

5、示例性地，第一任务可以包括界面显示任务和/或音频播放任务。

6、上述第一方面提供的方案，在ar设备执行ar任务时，例如显示ar界面和/或播放ar音频时，可以在识别用户的接续意图时，在ar视场中提供任务图标供用户选择即将要接续的ar任务。进一步的，在接收到用户选择ar任务的操作以及用户确定目标设备的操作之后，ar设备可以指示目标设备(如第一电子设备)接续ar设备执行用户选择的ar任务。基于该方法，用户可以与手机、平板、个人电脑等操作性强且操作方便的目标设备交互，实现与ar视场中ar物体的交互，可以为用户提供更加便捷、易操作的ar交互体验。并且，假设手机、平板、个人电脑等设备相比于ar设备通常显示分辨率较高且不受外界环境(如光照、空间物体折射等)的影响，那么在目标设备接续ar设备执行用户选择的ar任务时，不会出现横纹或显示抖动等问题，因此显示效果更好。

7、在一种可能的实现方式中，上述ar设备识别到满足预设条件，包括：ar设备识别到满足预设条件的第一电子设备。

8、示例性地，上述ar设备识别到满足预设条件的第一电子设备，包括：ar设备接收到用户在ar设备的第一界面上选择第一电子设备的操作，其中第一界面上包括与ar设备建立有通信连接的多个电子设备的列表。

9、或者，示例性地，上述ar设备识别到满足预设条件的第一电子设备，包括：ar设备识别到位于ar设备预设范围内的第一电子设备。可以理解，通常，若用户有将ar设备上的ar任务接续至某一电子设备(如第一电子设备)的意图时，或者有通过某一电子设备(如第一电子设备)进行ar任务接续相关操作时，用户通常会将第一电子设备拿起。在这种情况下，第一电子设备便会落入ar设备的预设范围内。基于此，在本技术实施例中，ar设备可以根据是否识别到位于ar设备预设范围内，确定用户的任务接续意图。

10、在一种可能的实现方式中，上述第一电子设备位于ar设备的ar视场内。可以理解，若用户有将ar设备上的ar任务接续至第一电子设备的意图时，用户可以将第一电子设备拿起并落入ar设备的ar视场内。基于此，在本技术实施例中，ar设备可以根据是否识别到位于ar设备的ar视场内，确定用户的任务接续意图。

11、在一种可能的实现方式中，上述第一电子设备满足预设空间姿态。可以理解，若用户有将ar设备上的ar任务接续至第一电子设备的意图时，用户可以将第一电子设备拿起。其中，用户拿起第一电子设备时第一电子设备的空间姿态通常具备一定的规律，如满足被用户握持时的空间姿态。基于此，在本技术实施例中，ar设备可以根据第一电子设备是否满足预设空间姿态，确定用户的任务接续意图。

12、在一种可能的实现方式中，上述ar设备识别到位于ar设备预设范围内的第一电子设备，包括：ar设备基于自动定位技术，识别到位于ar设备预设范围内的第一电子设备；或者，ar设备根据捕获的真实世界的图像信息，识别到位于ar设备预设范围内的第一电子设备；ar设备根据第一电子设备的运动数据，识别到位于ar设备预设范围内的第一电子设备。本技术不限定识别位于ar设备预设范围内的电子设备的具体方法。

13、示例性地，ar设备可以基于自动定位技术如超声波定位技术，通过设置在其中的第一模块(如扬声器发)射超声波信号，通过设置在其中的第二模块(如麦克风)接收来自其它电子设备的超声波信号的回波信号，并根据发出信号的传输路径、接收信号的传输路径，结合第一模块和第二模块的相对位置关系，确定多个电子设备在环境中的具体位置，进而确定哪些电子设备位于ar设备预设范围内。

14、或者示例性地，ar设备可以根据摄像头捕获的真实世界的图像信息中所包括的关于电子设备的图像信息，进而确定哪些电子设备位于ar设备预设范围内。

15、或者示例性地，ar设备可以根据电子设备的速度、加速度、角速度和角加速度等运动数据确定电子设备的具体位置等，进而确定哪些电子设备位于ar设备预设范围内。

16、在一种可能的实现方式中，上述用户对第一任务图标的第一操作包括以下中的任一种：用户将第一任务图标滑向第一电子设备的操作；用户捏合第一任务图标拖拽至第一电子设备的操作；用户在第一任务图标为当前焦点图标时的预设操作；用户将第一任务图标滑向第一电子设备的虚拟图标的操作；用户将第一任务图标滑向超级终端界面上的第一电子设备图标的操作；用户通过辅助输入设备将第一任务图标拖拽至第一电子设备的操作。本技术提供的任务接续过程可以基于易于操作的方式，同时实现待切换任务选择并触发快速、便捷的目标设备选择。

17、在一种可能的实现方式中，上述方法还包括：ar设备根据用户的操作，切换当前焦点图标。示例性地，用户的操作可以是左右滑动操作、上下滑动操作等，本技术不做限定。基于此，用户可以连贯、快速、便捷地进行焦点图标切换。该设计对用户来说易于操作，用户体验度高。

18、在一种可能的实现方式中，在ar设备识别到满足预设条件之前，上述方法还包括：ar设备执行一个或多个ar任务，在ar视场中显示上述一个或多个ar任务对应的ar界面。基于此，ar设备可以通过ar视场为用户提供上述一个或多个ar任务对应的服务。

19、在一种可能的实现方式中，上述一个或多个ar任务对应的ar界面为一个或多个ar任务对应的任务卡片，其中任务卡片中包括对应ar任务的缩略信息。示例性地，一个或多个ar任务对应的任务卡片如包括当前正在播放的音乐的信息的音乐卡片、包括当前正在编辑的文档信息的文档卡片、包括用户在真实世界中的位置信息以及目的地的位置信息的地图卡片、包括用户当前的聊天对象以及聊天内容的聊天卡片、包括智能家居的设备信息和当前状态信息(如在线状态或者离线状态等)的智能家居卡片、包括备忘录事件的时间和具体事件信息的备忘录卡片等。

20、作为一种示例，一个任务卡片对应于运行在一个设备中的一个ar任务。

21、作为另一种示例，一个任务卡片对应于运行在多个设备中的多个ar任务。该任务卡片也称融合性卡片。

22、在一种可能的实现方式中，上述一个或多个ar任务的图标的排布方式与一个或多个ar任务对应的ar界面在ar视场中的排布方式一致。基于此，可以方便用户在快速、准确地确定想要接续的ar任务对应的任务图标的具体位置。

23、在一种可能的实现方式中，上述一个或多个ar任务对应的应用中至少一个运行在ar设备中；和/或，一个或多个ar任务对应的应用中至少一个运行在与ar设备建立有通信关系的一个或多个电子设备中。例如，上述一个或多个ar任务对应的应用均运行在ar设备中。又如，上述一个或多个ar任务对应的应用运行在其它一个或多个电子设备中。又如，上述一个或多个ar任务对应的应用分别运行在ar设备和其它一个或多个电子设备中。

24、在一种可能的实现方式中，上述在ar视场内显示ar设备正在执行的一个或多个ar任务的图标，包括：在第一电子设备的任务图标显示区显示上述一个或多个ar任务的图标；其中，任务图标显示区位于第一电子设备的上侧、下侧、左侧、右侧或者侧边，或者任务图标显示区位于第一电子设备下拉菜单栏或者锁屏界面。

25、在一种可能的实现方式中，上述一个或多个ar任务的图标的排布方式与运行一个或多个ar任务对应的应用的电子设备与ar设备的位置关系相关。

26、在一种可能的实现方式中，上述一个或多个ar任务的图标的排布方式包括以下任一种：一字型排布方式、双排排布方式、环形排布方式、自由排布方式。

27、在一种可能的实现方式中，上述方法还包括：第一电子设备根据ar设备的指示接续ar设备执行第一ar任务。基于此，用户可以与手机、平板、个人电脑等操作性强且操作方便的目标设备交互，实现与ar视场中ar物体的交互，可以为用户提供更加便捷、易操作的ar交互体验。并且，假设手机、平板、个人电脑等设备相比于ar设备通常显示分辨率较高且不受外界环境(如光照、空间物体折射等)的影响，那么在目标设备接续ar设备执行用户选择的ar任务时，不会出现横纹或显示抖动等问题，因此显示效果更好。

28、在一种可能的实现方式中，上述第一ar任务包括界面显示任务，第一电子设备根据ar设备的指示接续ar设备执行第一ar任务，包括：第一电子设备显示第一ar任务对应的界面；其中，第一ar任务对应的界面是第一ar任务对应的任务卡片，或者第一ar任务对应的界面包括第一ar任务对应的任务卡片中的界面元素。对于目标设备接续ar设备执行界面显示任务时，目标设备可以显示原第一ar任务对应的界面，也可以进行界面自适应，如界面尺寸自适应、界面布局自适应等，以获得更好的显示效果。

29、在一种可能的实现方式中，上述第一ar任务包括音频播放任务，第一电子设备根据ar设备的指示接续ar设备执行第一ar任务，包括：第一电子设备播第一ar任务对应的音频；或者，第一电子设备指示与第一电子设备连接的音频播放设备播放第一ar任务对应的音频。对于目标设备接续ar设备执行音频播放任务时，目标设备可以通过其自身的音频播放模块播放从ar设备接续来的音频，也可以通过其它音频播放外设(如音箱等)播放从ar设备接续来的音频。

30、在一种可能的实现方式中，在第一电子设备根据ar设备的指示接续ar设备执行第一ar任务之后，上述方法还包括：响应于用户对第一任务图标的第二操作，ar设备指示第二电子设备接续第一电子设备执行第一ar任务。基于此，可以实现ar任务在设备之间的自由接续。

31、在一种可能的实现方式中，在第一电子设备根据ar设备的指示接续ar设备执行第一ar任务之后，上述方法还包括：响应于用户对第一任务图标的第三操作，ar设备接续第一电子设备执行第一ar任务。基于此，可以实现ar任务在设备之间的自由接续。

32、第二方面，提供一种任务接续方法，该方法包括：ar设备识别到满足预设条件时，在ar视场内显示ar设备正在执行的一个或多个ar任务的图标，该一个或多个ar任务的图标包括第一任务图标，第一任务图标对应于第一ar任务；响应于用户对第一任务图标的第一操作，ar设备指示第一电子设备接续ar设备执行第一ar任务。

33、其中，第一操作的意图是将第一任务由ar设备切换至第一电子设备。

34、示例性地，第一任务可以包括界面显示任务和/或音频播放任务。

35、上述第二方面提供的方案，在ar设备执行ar任务时，例如显示ar界面和/或播放ar音频时，可以在识别用户的接续意图时，在ar视场中提供任务图标供用户选择即将要接续的ar任务。进一步的，在接收到用户选择ar任务的操作以及用户确定目标设备的操作之后，ar设备可以指示目标设备(如第一电子设备)接续ar设备执行用户选择的ar任务。基于该方法，用户可以与手机、平板、个人电脑等操作性强且操作方便的目标设备交互，实现与ar视场中ar物体的交互，可以为用户提供更加便捷、易操作的ar交互体验。并且，假设手机、平板、个人电脑等设备相比于ar设备通常显示分辨率较高且不受外界环境(如光照、空间物体折射等)的影响，那么在目标设备接续ar设备执行用户选择的ar任务时，不会出现横纹或显示抖动等问题，因此显示效果更好。

36、在一种可能的实现方式中，上述ar设备识别到满足预设条件，包括：ar设备识别到满足预设条件的第一电子设备。

37、示例性地，上述ar设备识别到满足预设条件的第一电子设备，包括：ar设备接收到用户在ar设备的第一界面上选择第一电子设备的操作，其中第一界面上包括与ar设备建立有通信连接的多个电子设备的列表。

38、或者，示例性地，上述ar设备识别到满足预设条件的第一电子设备，包括：ar设备识别到位于ar设备预设范围内的第一电子设备。可以理解，若用户有将ar设备上的ar任务接续至第一电子设备的意图时，用户可以将第一电子设备拿起并落入ar设备的预设范围内。基于此，在本技术实施例中，ar设备可以根据是否识别到位于ar设备的预设范围内，确定用户的任务接续意图。

39、在一种可能的实现方式中，上述第一电子设备位于ar设备的ar视场内。可以理解，若用户有将ar设备上的ar任务接续至第一电子设备的意图时，用户可以将第一电子设备拿起并落入ar设备的ar视场内。基于此，在本技术实施例中，ar设备可以根据是否识别到位于ar设备的ar视场内，确定用户的任务接续意图。

40、在一种可能的实现方式中，上述第一电子设备满足预设空间姿态。可以理解，若用户有将ar设备上的ar任务接续至第一电子设备的意图时，用户可以将第一电子设备拿起。其中，用户拿起第一电子设备时第一电子设备的空间姿态通常具备一定的规律，如满足被用户握持时的空间姿态。基于此，在本技术实施例中，ar设备可以根据第一电子设备是否满足预设空间姿态，确定用户的任务接续意图。

41、在一种可能的实现方式中，上述ar设备识别到位于ar设备预设范围内的第一电子设备，包括：ar设备基于自动定位技术，识别到位于ar设备预设范围内的第一电子设备；或者，ar设备根据捕获的真实世界的图像信息，识别到位于ar设备预设范围内的第一电子设备；ar设备根据第一电子设备的运动数据，识别到位于ar设备预设范围内的第一电子设备。本技术不限定识别位于ar设备预设范围内的电子设备的具体方法。

42、示例性地，ar设备可以基于自动定位技术如超声波定位技术，通过设置在其中的第一模块(如扬声器发)射超声波信号，通过设置在其中的第二模块(如麦克风)接收来自其它电子设备的超声波信号的回波信号，并根据发出信号的传输路径、接收信号的传输路径，结合第一模块和第二模块的相对位置关系，确定多个电子设备在环境中的具体位置，进而确定哪些电子设备位于ar设备预设范围内。

43、或者示例性地，ar设备可以根据摄像头捕获的真实世界的图像信息中所包括的关于电子设备的图像信息，进而确定哪些电子设备位于ar设备预设范围内。

44、或者示例性地，ar设备可以根据电子设备的速度、加速度、角速度和角加速度等运动数据确定电子设备的具体位置等，进而确定哪些电子设备位于ar设备预设范围内。

45、在一种可能的实现方式中，上述用户对第一任务图标的第一操作包括以下中的任一种：用户将第一任务图标滑向第一电子设备的操作；用户捏合第一任务图标拖拽至第一电子设备的操作；用户在第一任务图标为当前焦点图标时的预设操作；用户将第一任务图标滑向第一电子设备的虚拟图标的操作；用户将第一任务图标滑向超级终端界面上的第一电子设备图标的操作；用户通过辅助输入设备将第一任务图标拖拽至第一电子设备的操作。本技术提供的任务接续过程可以基于易于操作的方式，同时实现待切换任务选择并触发快速、便捷的目标设备选择。

46、在一种可能的实现方式中，上述方法还包括：ar设备根据用户的操作，切换当前焦点图标。示例性地，用户的操作可以是左右滑动操作、上下滑动操作等，本技术不做限定。基于此，用户可以连贯、快速、便捷地进行焦点图标切换。该设计对用户来说易于操作，用户体验度高。

47、在一种可能的实现方式中，在ar设备识别到满足预设条件之前，上述方法还包括：ar设备执行一个或多个ar任务，在ar视场中显示上述一个或多个ar任务对应的ar界面。基于此，ar设备可以通过ar视场为用户提供上述一个或多个ar任务对应的服务。

48、在一种可能的实现方式中，上述一个或多个ar任务对应的ar界面为一个或多个ar任务对应的任务卡片，其中任务卡片中包括对应ar任务的缩略信息。示例性地，一个或多个ar任务对应的任务卡片如包括当前正在播放的音乐的信息的音乐卡片、包括当前正在编辑的文档信息的文档卡片、包括用户在真实世界中的位置信息以及目的地的位置信息的地图卡片、包括用户当前的聊天对象以及聊天内容的聊天卡片、包括智能家居的设备信息和当前状态信息(如在线状态或者离线状态等)的智能家居卡片、包括备忘录事件的时间和具体事件信息的备忘录卡片等。

49、作为一种示例，一个任务卡片对应于运行在一个设备中的一个ar任务。

50、作为另一种示例，一个任务卡片对应于运行在多个设备中的多个ar任务。该任务卡片也称融合性卡片。

51、在一种可能的实现方式中，上述一个或多个ar任务的图标的排布方式与一个或多个ar任务对应的ar界面在ar视场中的排布方式一致。基于此，可以方便用户在快速、准确地确定想要接续的ar任务对应的任务图标的具体位置。

52、在一种可能的实现方式中，上述一个或多个ar任务对应的应用中至少一个运行在ar设备中；和/或，一个或多个ar任务对应的应用中至少一个运行在与ar设备建立有通信关系的一个或多个电子设备中。例如，上述一个或多个ar任务对应的应用均运行在ar设备中。又如，上述一个或多个ar任务对应的应用运行在其它一个或多个电子设备中。又如，上述一个或多个ar任务对应的应用分别运行在ar设备和其它一个或多个电子设备中。

53、在一种可能的实现方式中，上述在ar视场内显示ar设备正在执行的一个或多个ar任务的图标，包括：在第一电子设备的任务图标显示区显示上述一个或多个ar任务的图标；其中，任务图标显示区位于第一电子设备的上侧、下侧、左侧、右侧或者侧边，或者任务图标显示区位于第一电子设备下拉菜单栏或者锁屏界面。

54、在一种可能的实现方式中，上述一个或多个ar任务的图标的排布方式与运行一个或多个ar任务对应的应用的电子设备与ar设备的位置关系相关。

55、在一种可能的实现方式中，上述一个或多个ar任务的图标的排布方式包括以下任一种：一字型排布方式、双排排布方式、环形排布方式、自由排布方式。

56、在一种可能的实现方式中，在第一电子设备根据ar设备的指示接续ar设备执行第一ar任务之后，上述方法还包括：响应于用户对第一任务图标的第二操作，ar设备指示第二电子设备接续第一电子设备执行第一ar任务。基于此，可以实现ar任务在设备之间的自由接续。

57、在一种可能的实现方式中，在第一电子设备根据ar设备的指示接续ar设备执行第一ar任务之后，上述方法还包括：响应于用户对第一任务图标的第三操作，ar设备接续第一电子设备执行第一ar任务。基于此，可以实现ar任务在设备之间的自由接续。

58、第三方面，提供一种任务接续方法，该方法包括：第一电子设备根据ar设备的指示接续ar设备执行第一ar任务。

59、上述第三方面提供的方案，用户可以与手机、平板、个人电脑等操作性强且操作方便的目标设备交互，实现与ar视场中ar物体的交互，可以为用户提供更加便捷、易操作的ar交互体验。并且，假设手机、平板、个人电脑等设备相比于ar设备通常显示分辨率较高且不受外界环境(如光照、空间物体折射等)的影响，那么在目标设备接续ar设备执行用户选择的ar任务时，不会出现横纹或显示抖动等问题，因此显示效果更好。

60、在一种可能的实现方式中，上述第一ar任务包括界面显示任务，第一电子设备根据ar设备的指示接续ar设备执行第一ar任务，包括：第一电子设备显示第一ar任务对应的界面；其中，第一ar任务对应的界面是第一ar任务对应的任务卡片，或者第一ar任务对应的界面包括第一ar任务对应的任务卡片中的界面元素。对于目标设备接续ar设备执行界面显示任务时，目标设备可以显示原第一ar任务对应的界面，也可以进行界面自适应，如界面尺寸自适应、界面布局自适应等，以获得更好的显示效果。

61、在一种可能的实现方式中，上述第一ar任务包括音频播放任务，第一电子设备根据ar设备的指示接续ar设备执行第一ar任务，包括：第一电子设备播第一ar任务对应的音频；或者，第一电子设备指示与第一电子设备连接的音频播放设备播放第一ar任务对应的音频。对于目标设备接续ar设备执行音频播放任务时，目标设备可以通过其自身的音频播放模块播放从ar设备接续来的音频，也可以通过其它音频播放外设(如音箱等)播放从ar设备接续来的音频。

62、第四方面，提供一种ar设备，该ar设备包括：光学模组，用于在ar设备的视场内成像；存储器，用于存储计算机程序指令；处理器，用于执行所述指令，使得ar设备实现如第二方面任一种可能的实现方式中所述的方法。

63、第五方面，提供一种电子设备，该电子设备包括：存储器，用于存储计算机程序指令；处理器，用于执行所述指令，使得电子设备实现如第三方面任一种可能的实现方式中所述的方法。

64、第六方面，提供一种ar系统，该ar系统包括：如第四方面所述的ar设备，以及如第五方面所述的电子设备。

65、第七方面，提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机可读指令，该计算机可读指令被处理器执行时实现如第二方面或第三方面任一种可能的实现方式中的方法。

66、第八方面，提供一种芯片系统，该芯片系统包括处理器、存储器，存储器中存储有指令；所述指令被所述处理器执行时，实现如第二方面或第三方面任一种可能的实现方式中的方法。该芯片系统可以由芯片构成，也可以包含芯片和其他分立器件。

67、第九方面，提供一种计算机程序产品，包括计算机可读指令，当该计算机可读指令在计算机上运行时，使得实现如第二方面或第三方面任一种可能的实现方式中的方法。