一种同屏幕多窗口的互动方法、系统及智能电视与流程

1.本发明涉及多窗口显示技术领域，尤其涉及一种同屏幕多窗口的互动方法、系统、智能电视及计算机可读存储介质。


背景技术：

2.智能电视，是基于internet应用技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体，以满足用户多样化和个性化需求的电视产品。其目的是带给用户更便捷的体验，目前已经成为电视的潮流趋势。智能电视具有全开放式平台，搭载了操作系统，用户在欣赏普通电视内容的同时，可自行安装和卸载各类应用软件，持续对功能进行扩充和升级的新电视产品。智能电视能够不断给用户带来有别于，使用有线数字电视接收机(机顶盒)的、丰富的个性化体验。
3.随着电视系统的不断发展，智能电视屏幕越来越大，智能电视不再单单作为信息显示而存在，而是作为了一个大屏的智慧智能电视，现有技术中虽然多窗口分屏技术有很多，但是并没有应用智能电视进行多窗口分屏供用户进行同屏竞技(例如在一个智能电视屏幕上开两个窗口同时供两个玩家进行同一个游戏的pk)的使用场景。
4.因此，现有技术还有待于改进和发展。


技术实现要素：

5.本发明的主要目的在于提供一种同屏幕多窗口的互动方法、智能电视及计算机可读存储介质，旨在解决现有技术中没有应用智能电视进行多窗口分屏供用户进行同屏竞技的使用场景的问题。
6.为实现上述目的，本发明提供一种同屏幕多窗口的互动方法，所述同屏幕多窗口的互动方法包括如下步骤：
7.在一个屏幕上启动多窗口模式，将运行在第一窗口的第一应用进行分身处理，生成第二应用，所述第一应用和所述第二应用的类型相同；
8.将所述第二应用运行在第二窗口，所述第一应用接收第一用户的操作指令，同时所述第二应用接收第二用户的操作指令；
9.获取所述第一应用中所述第一用户和所述第二应用中所述第二用户的互动信息，将处理后的互动信息显示在第三窗口中。
10.可选地，所述的同屏幕多窗口的互动方法，其中，所述在一个屏幕上启动多窗口模式，将运行在第一窗口的第一应用进行分身处理，生成第二应用，具体包括：
11.当在一个屏幕上启动多窗口模式后，所述屏幕上显示三个窗口，分别为第一窗口、第二窗口和第三窗口；
12.若运行在所述第一窗口的所述第一应用为游戏应用，则对游戏应用进行分身处理以生成所述第二应用，所述第二应用为游戏应用。
13.可选地，所述的同屏幕多窗口的互动方法，其中所述第一应用和所述第二应用互
相之间完全独立运行，并进行数据信息的互相关联。
14.可选地，所述的同屏幕多窗口的互动方法，其中，所述将所述第二应用运行在第二窗口，所述第一应用接收第一用户的操作指令，同时所述第二应用接收第二用户的操作指令，具体包括：
15.将所述第二应用的游戏应用运行在所述第二窗口中，同时所述第一应用的游戏应用运行在所述第一窗口中；
16.所述第一应用的游戏应用接收所述第一用户的登录操作指令，所述第二应用的游戏应用接收所述第二用户的登录操作指令；
17.当所述第一用户和所述第二用户登录完成后，所述第一应用和所述第二应用分别接收所述第一用户和所述第二用户的游戏操作指令，所述第一窗口和所述第二窗口分别显示所述第一用户和所述第二用户的游戏比赛视角。
18.可选地，所述的同屏幕多窗口的互动方法，其中，所述获取所述第一应用中所述第一用户和所述第二应用中所述第二用户的互动信息，将处理后的互动信息显示在第三窗口中，具体包括：
19.当所述第一用户和所述第二用户分别在所述第一窗口和所述第二窗口中的游戏竞技结束后，获取所述第一用户和所述第二用户关于游戏竞技的互动信息，所述互动信息包括应用信息和比分信息；
20.将所述互动信息进行过滤处理，并将过滤后的互动信息进行拼接处理，将拼接后的分数对比数据显示在所述第三窗口上。
21.可选地，所述的同屏幕多窗口的互动方法，其中，获取所述互动信息的模式包括：自动识别模式和手动框选模式；
22.所述自动识别模式为根据所述第一窗口和所述第二窗口获取界面元素，并根据界面元素库分析出所述第一窗口和所述第二窗口的所有界面元素对应的应用信息和比分信息；
23.或者所述自动识别模式为对所述第一窗口和所述第二窗口进行截图，识别截图中的所有界面元素对应的应用信息和比分信息；
24.所述手动框选模式为对所述第一窗口和所述第二窗口中包含界面元素的区域进行划分和编号，提示用户按区域标记出对应的应用信息和比分信息。
25.可选地，所述的同屏幕多窗口的互动方法，其中，所述多窗口模式为同一屏幕上显示三个窗口的显示模式；所述第一窗口与所述第二窗口大小相同；所述第一窗口与所述第二窗口相邻排列，所述第三窗口排列在所述第一窗口和所述第二窗口的上方；所述第三窗口的长度等于所述第一窗口和所述第二窗口的长度之和。
26.可选地，所述的同屏幕多窗口的互动方法，其中，所述同屏幕多窗口的互动系统包括：
27.应用分身模块，用于在一个屏幕上启动多窗口模式，将运行在第一窗口的第一应用进行分身处理，生成第二应用，所述第一应用和所述第二应用类型相同；
28.应用操作模块，用于将所述第二应用运行在第二窗口，所述第一应用接收第一用户的操作指令，同时所述第二应用接收第二用户的操作指令；
29.信息显示模块，用于获取所述第一应用中所述第一用户和所述第二应用中所述第
二用户的互动信息，将处理后的互动信息显示在第三窗口中。
30.此外，为实现上述目的，本发明还提供一种智能电视，其中，所述智能电视包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的同屏幕多窗口的互动程序，所述同屏幕多窗口的互动程序被所述处理器执行时实现如上所述的同屏幕多窗口的互动方法的步骤。
31.此外，为实现上述目的，本发明还提供一种计算机可读存储介质，其中，所述计算机可读存储介质存储有同屏幕多窗口的互动程序，所述同屏幕多窗口的互动程序被处理器执行时实现如上所述的同屏幕多窗口的互动方法的步骤。
32.本发明通过在一个屏幕上启动多窗口模式，将运行在第一窗口的第一应用进行分身处理，生成第二应用，所述第一应用和所述第二应用的类型相同；将所述第二应用运行在第二窗口，所述第一应用接收第一用户的操作指令，同时所述第二应用接收第二用户的操作指令；获取所述第一应用中所述第一用户和所述第二应用中所述第二用户的互动信息，将处理后的互动信息显示在第三窗口中。本发明通过在一个屏幕上的两个窗口同时供两个用户通过相同的应用进行登录和使用，并通过另一个窗口显示两个用户的互动信息，应用多窗口分屏技术来启动多窗口模式，为用户提供了进行同屏互动的使用场景。
附图说明
33.图1是本发明同屏幕多窗口的互动方法的较佳实施例的流程图；
34.图2是本发明同屏幕多窗口的互动方法的较佳实施例中步骤s10的流程图；
35.图3为本发明同屏幕多窗口的互动方法的较佳实施例中多窗口多任务模式的示意图；
36.图4是本发明同屏幕多窗口的互动方法的较佳实施例中步骤s20的流程图；
37.图5是本发明同屏幕多窗口的互动方法的较佳实施例中步骤s30的流程图；
38.图6是本发明同屏幕多窗口的互动方法的较佳实施例中同屏竞技的整体流程的示意图；
39.图7是本发明同屏幕多窗口的互动系统的较佳实施例的原理示意图；
40.图8为本发明智能电视的较佳实施例的运行环境示意图。
具体实施方式
41.为使本发明的目的、技术方案及优点更加清楚、明确，以下参照附图并举实施例对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
42.本发明较佳实施例所述的同屏幕多窗口的互动方法，如图1所示，所述同屏幕多窗口的互动方法包括以下步骤：
43.步骤s10、在一个屏幕上启动多窗口模式，将运行在第一窗口的第一应用进行分身处理，生成第二应用。
44.本发明的所述同屏幕多窗口的互动方法应用于智能电视中，用于为用户提供了进行同屏互动(例如同屏竞技)的使用场景，当然也可以应用于其他的智能观看设备中，例如智能手机、智能平板等设备中。
45.具体的过程请参阅图2，其为本发明提供的同屏幕多窗口的互动方法中步骤s10的流程图。
46.如图2所示，所述步骤s10包括：
47.s11、当在一个屏幕上启动多窗口模式后，所述屏幕上显示三个窗口，分别为第一窗口、第二窗口和第三窗口；
48.s12、若运行在所述第一窗口的所述第一应用为游戏应用，则对游戏应用进行分身处理以生成所述第二应用，所述第二应用为游戏应用。
49.具体地，在智能电视开机并在一个屏幕上启动多窗口模式时，智能电视进入到多窗口多任务模式后，本发明中的多窗口优选为三个窗口，例如在屏幕上显示三个窗口，分别为第一窗口、第二窗口和第三窗口(第一窗口和第二窗口为游戏窗口，第三窗口为显示玩家pk信息的窗口)，若运行在所述第一窗口的所述第一应用为游戏应用，则对游戏应用(即第一应用)进行分身处理(将一个应用变成了两个相同的应用，可以供两个用户同时登录不同的账号)以生成所述第二应用，所述第二应用同样为游戏应用，相当于克隆了一个相同的app，但可以登录不同账号，也就是说，所述第一应用和所述第二应用互相之间完全独立运行(不受对方的影响)，并进行数据信息的互相关联，从而实现游戏同屏pk的体验。
50.其中，所述分身处理包括三种模式，分别为修改apk分身、修改framework分身和虚拟机分身；所述修改apk分身为对所述第一应用的apk进行反编译，并修改所述第一应用的apk的包名和签名；所述修改framework分身为通过系统的修改权限修改framework(修改被分身的应用的目录路径、包名、进程名，使用系统不认为它们是同一个应用)；所述虚拟机分身为通过虚拟framework层、虚拟文件系统、模拟android对组件的管理和虚拟应用进程管理将所述第一应用的apk复制到虚拟空间中运行。
51.如图3所示，具体是在智能电视开机并在一个屏幕上启动多窗口模式后，屏幕上会显示三个窗口，分别为第一窗口(窗口1)、第二窗口(窗口2)和第三窗口(窗口2)；若运行在所述第一窗口的所述第一应用为游戏应用(例如a游戏)，则对游戏应用(即a游戏)进行分身处理(包括修改apk分身、修改framework分身和虚拟机分身这三种方式)以生成所述第二应用(例如为a游戏分身b)，所述第二应用同样为游戏应用，所述多窗口模式为同一屏幕上显示三个窗口的显示模式；窗口1与所述窗口2大小相同，且窗口1与窗口2相邻排列，窗口3排列在窗口1和窗口2的上方，窗口3的长度等于窗口1和窗口2的长度之和，三个窗口(即窗口1、窗口2和窗口3)的面积之和占据智能电视的整个屏幕。
52.步骤s20、将所述第二应用运行在第二窗口，所述第一应用接收第一用户的操作指令，同时所述第二应用接收第二用户的操作指令。
53.具体过程请参阅图4，其为本发明提供的同屏幕多窗口的互动方法中步骤s20的流程图。
54.如图4所示，所述步骤s20包括：
55.s21、将所述第二应用的游戏应用运行在所述第二窗口中，同时所述第一应用的游戏应用运行在所述第一窗口中；
56.s22、所述第一应用的游戏应用接收所述第一用户的登录操作指令，所述第二应用的游戏应用接收所述第二用户的登录操作指令；
57.s23、当所述第一用户和所述第二用户登录完成后，所述第一应用和所述第二应用
分别接收所述第一用户和所述第二用户的游戏操作指令，所述第一窗口和所述第二窗口分别显示所述第一用户和所述第二用户的游戏比赛视角。
58.具体地，启动多窗口模式后，用户可开启同屏竞技(同屏竞技就是一个屏幕上开两个窗口同时供两个玩家进行同一个游戏的pk)来进行游戏互动，将所述第二应用的游戏应用运行在所述第二窗口中，同时所述第一应用的游戏应用运行在所述第一窗口中；所述第一应用的游戏应用接收所述第一用户(例如用户a)的登录操作指令，所述第二应用的游戏应用接收所述第二用户(例如用户b)的登录操作指令；当所述第一用户和所述第二用户登录完成后，所述第一应用和所述第二应用分别接收所述第一用户和所述第二用户的游戏操作指令，所述第一窗口和所述第二窗口分别显示所述第一用户和所述第二用户的游戏比赛视角。
59.也就是说，以两个人进行《赛车》游戏为例，原来是两个用户通过a、b两台手机进行《赛车》竞技，两个人的竞技的比赛视角都在a、b各自的手机上，现在通过同一个屏幕上的窗口1和窗口2可以展现各自的比赛视角。
60.步骤s30、获取所述第一应用中所述第一用户和所述第二应用中所述第二用户的互动信息，将处理后的互动信息显示在第三窗口中。
61.具体过程请参阅图5，其为本发明提供的同屏幕多窗口的互动方法中步骤s30的流程图。
62.如图5所示，所述步骤s30包括：
63.s31、当所述第一用户和所述第二用户分别在所述第一窗口和所述第二窗口中的游戏竞技结束后，获取所述第一用户和所述第二用户关于游戏竞技的互动信息，所述互动信息包括应用信息和比分信息；
64.s32、将所述互动信息进行过滤处理，并将过滤后的互动信息进行拼接处理，将拼接后的分数对比数据显示在所述第三窗口上。
65.具体地，当所述第一用户和所述第二用户分别在所述第一窗口和所述第二窗口中的游戏竞技结束后，获取所述第一用户和所述第二用户关于游戏竞技的互动信息，所述互动信息包括应用信息(应用名称、账号昵称等)和比分信息(pk名次、实际分数等)，获取所述互动信息的模式包括：自动识别模式和手动框选模式。
66.其中，所述自动识别模式去获取应用信息、比分信息有两种方式，方式一是基于当前窗口1和窗口2的显示界面，进行本地和云端解析，解析出来的界面元素库，主要是为了通过识别出哪些是应用信息和比分信息；比如，比分信息在游戏中会显示“分数”，也会显示“score”等，这些通过云端的配置，不断的更新本地解析能力，提高自动识别的准确性；方式二是截图对比识别分数关键字，通过系统进行界面截图，使用图片转文字技术，分析出当前界面的所有界面元素对应的应用信息、比分信息，若自动识别无法启动时，则启动手动框选模式；手动框选模式的步骤为：第一步，系统识别界面元素库，将元素库按区域划分，对每个区域进行标记编号：1，2，3...，第二步，指引用户在界面上提示用户“需要你手动标记分数的位置，请根据界面提示，选择当前的分数是对应区域编号”，手动标记出应用信息和比分信息。之后将所获取的应用信息和比分信息进行过滤处理，(过滤是为了提取有效的账号、分数等信息)并将过滤后的互动信息进行拼接处理(拼接成如下格式的结果：账号昵称1vs账号昵称2、名次|名次、分数|分数)，将拼接后的分数对比数据显示在窗口3上。
67.进一步地，如图6所示，本发明中同屏幕多窗口的互动的整个过程如下：
68.步骤s1、启动多窗口模式。
69.步骤s2、选择游戏a将其开启，并用遥控器开启双屏游戏，并将游戏a运行在窗口1。
70.步骤s3、对游戏a应用进行分身，生成了与游戏a应用相同的应用b，可登录不同的账号，并运行在窗口2，应用互相之间完全独立工作，不受对方的影响；其中，分身处理包括：修改apk分身、修改framework分身和虚拟机分身；所述修改apk分身为对所述第一应用的apk进行反编译，并修改所述第一应用的apk的包名和签名；所述修改framework分身为通过系统的修改权限修改framework；所述虚拟机分身为通过虚拟framework层、虚拟文件系统、模拟android对组件的管理和虚拟应用进程管理将所述第一应用的apk复制到虚拟空间中运行。
71.步骤s4、获取玩家相关的信息，如应用信息、比分信息等；其中，所述获取玩家相关的信息的模式包括：自动识别模式和手动框选模式；所述自动识别模式为根据所述第一窗口和所述第二窗口获取界面元素，并根据界面元素库分析出所述第一窗口和所述第二窗口的所有界面元素对应的应用信息和比分信息；或者所述自动识别模式为对所述第一窗口和所述第二窗口进行截图，识别截图中的所有界面元素对应的应用信息和比分信息来获取分数；所述手动框选模式为对所述第一窗口和所述第二窗口中包含界面元素的区域进行划分和编号，提示用户按区域标记出对应的应用信息和比分信息来获取分数。
72.步骤s5、对s4所获取到的玩家信息进行过滤和拼接，并将pk的结果信息展示在窗口3上。
73.进一步地，如图7所示，基于上述同屏幕多窗口的互动方法，本发明还相应提供了同屏幕多窗口的互动系统，所述同屏幕多窗口的互动系统包括：
74.应用分身模块11，用于在一个屏幕上启动多窗口模式，将运行在第一窗口的第一应用进行分身处理，生成第二应用，所述第一应用和所述第二应用类型相同；
75.应用操作模块12，用于将所述第二应用运行在第二窗口，所述第一应用接收第一用户的操作指令，同时所述第二应用接收第二用户的操作指令；
76.信息显示模块13，用于获取所述第一应用中所述第一用户和所述第二应用中所述第二用户的互动信息，将处理后的互动信息显示在第三窗口中。
77.进一步地，如图8所示，基于上述同屏幕多窗口的互动方法，本发明还相应提供了一种智能电视，所述智能电视包括处理器10、存储器20及显示器30。图8仅示出了智能电视的部分组件，但是应理解的是，并不要求实施所有示出的组件，可以替代的实施更多或者更少的组件。
78.所述存储器20在一些实施例中可以是所述智能电视的内部存储单元，例如智能电视的硬盘或内存。所述存储器20在另一些实施例中也可以是所述智能电视的外部存储设备，例如所述智能电视上配备的插接式硬盘，智能存储卡(smart media card，smc)，安全数字(secure digital，sd)卡，闪存卡(flash card)等。进一步地，所述存储器20还可以既包括所述智能电视的内部存储单元也包括外部存储设备。所述存储器20用于存储安装于所述智能电视的应用软件及各类数据，例如所述安装智能电视的程序代码等。所述存储器20还可以用于暂时地存储已经输出或者将要输出的数据。在一实施例中，存储器20上存储有同屏幕多窗口的互动程序40，该同屏幕多窗口的互动程序40可被处理器10所执行，从而实现
本技术中同屏幕多窗口的互动方法。
79.所述处理器10在一些实施例中可以是一中央处理器(central processing unit，cpu)，微处理器或其他数据处理芯片，用于运行所述存储器20中存储的程序代码或处理数据，例如执行所述同屏幕多窗口的互动方法等。
80.所述显示器30在一些实施例中可以是led显示器、液晶显示器、触控式液晶显示器以及oled(organic light
‑
emitting diode，有机发光二极管)触摸器等。所述显示器30用于显示在所述智能电视的信息以及用于显示可视化的用户界面。所述智能电视的部件10
‑
30通过系统总线相互通信。
81.在一实施例中，当处理器10执行所述存储器20中同屏幕多窗口的互动程序40时实现以下步骤：
82.在一个屏幕上启动多窗口模式，将运行在第一窗口的第一应用进行分身处理，生成第二应用，所述第一应用和所述第二应用的类型相同；
83.将所述第二应用运行在第二窗口，所述第一应用接收第一用户的操作指令，同时所述第二应用接收第二用户的操作指令；
84.获取所述第一应用中所述第一用户和所述第二应用中所述第二用户的互动信息，将处理后的互动信息显示在第三窗口中。
85.其中，所述在一个屏幕上启动多窗口模式，将运行在第一窗口的第一应用进行分身处理，生成第二应用，具体包括：
86.当在一个屏幕上启动多窗口模式后，所述屏幕上显示三个窗口，分别为第一窗口、第二窗口和第三窗口；
87.若运行在所述第一窗口的所述第一应用为游戏应用，则对游戏应用进行分身处理以生成所述第二应用，所述第二应用为游戏应用。
88.其中，所述第一应用和所述第二应用互相之间完全独立运行，并进行数据信息的互相关联。
89.其中，所述将所述第二应用运行在第二窗口，所述第一应用接收第一用户的操作指令，同时所述第二应用接收第二用户的操作指令，具体包括：
90.将所述第二应用的游戏应用运行在所述第二窗口中，同时所述第一应用的游戏应用运行在所述第一窗口中；
91.所述第一应用的游戏应用接收所述第一用户的登录操作指令，所述第二应用的游戏应用接收所述第二用户的登录操作指令；
92.当所述第一用户和所述第二用户登录完成后，所述第一应用和所述第二应用分别接收所述第一用户和所述第二用户的游戏操作指令，所述第一窗口和所述第二窗口分别显示所述第一用户和所述第二用户的游戏比赛视角。
93.其中，所述获取所述第一应用中所述第一用户和所述第二应用中所述第二用户的互动信息，将处理后的互动信息显示在第三窗口中，具体包括：
94.当所述第一用户和所述第二用户分别在所述第一窗口和所述第二窗口中的游戏竞技结束后，获取所述第一用户和所述第二用户关于游戏竞技的互动信息，所述互动信息包括应用信息和比分信息；
95.将所述互动信息进行过滤处理，并将过滤后的互动信息进行拼接处理，将拼接后
的分数对比数据显示在所述第三窗口上。
96.其中，获取所述互动信息的模式包括：自动识别模式和手动框选模式；
97.所述自动识别模式为根据所述第一窗口和所述第二窗口获取界面元素，并根据界面元素库分析出所述第一窗口和所述第二窗口的所有界面元素对应的应用信息和比分信息；
98.或者所述自动识别模式为对所述第一窗口和所述第二窗口进行截图，识别截图中的所有界面元素对应的应用信息和比分信息；
99.所述手动框选模式为对所述第一窗口和所述第二窗口中包含界面元素的区域进行划分和编号，提示用户按区域标记出对应的应用信息和比分信息。
100.其中，所述多窗口模式为同一屏幕上显示三个窗口的显示模式；所述第一窗口与所述第二窗口大小相同；所述第一窗口与所述第二窗口相邻排列，所述第三窗口排列在所述第一窗口和所述第二窗口的上方；所述第三窗口的长度等于所述第一窗口和所述第二窗口的长度之和。
101.本发明还提供一种计算机可读存储介质，其中，所述计算机可读存储介质存储有同屏幕多窗口的互动程序，所述同屏幕多窗口的互动程序被处理器执行时实现如上所述的同屏幕多窗口的互动方法的步骤。
102.综上所述，本发明提供一种同屏幕多窗口的互动方法、智能电视及计算机可读存储介质，所述方法包括：在一个屏幕上启动多窗口模式，将运行在第一窗口的第一应用进行分身处理，生成第二应用，所述第一应用和所述第二应用的类型相同；将所述第二应用运行在第二窗口，所述第一应用接收第一用户的操作指令，同时所述第二应用接收第二用户的操作指令；获取所述第一应用中所述第一用户和所述第二应用中所述第二用户的互动信息，将处理后的互动信息显示在第三窗口中。本发明通过多窗口多任务的管理，能够对游戏进行同屏竞技；应用互相之间完全独立工作，不受对方的影响；但是又能够进行数据信息的互相关联，实现游戏同屏pk的体验。
103.需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个
……”
限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
104.当然，本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关硬件(如处理器，控制器等)来完成，所述的程序可存储于一计算机可读取的计算机可读存储介质中，所述程序在执行时可包括如上述各方法实施例的流程。其中所述的计算机可读存储介质可为存储器、磁碟、光盘等。
105.应当理解的是，本发明的应用不限于上述的举例，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，所有这些改进和变换都应属于本发明所附权利要求的保护范围。