一种屏幕共享方法、装置、电子设备及存储介质与流程

[0001]
本发明涉及计算机技术领域，尤其涉及一种屏幕共享方法、装置、电子设备及存储介质。


背景技术：

[0002]
随着科学技术的不断发展，以及人们需求不断变更，为了方便不同用户通过不同终端浏览同一界面的同时可以彼此共享信息，屏幕共享技术应用而生，屏幕共享是不同终端间实时保持屏幕内状态同步的方法。
[0003]
在相关技术中，进行屏幕共享的多个终端而言，各个终端的操作互相发送给其他终端，没有统一的中控，屏幕状态优先级的判断完全依赖于各个终端的本地判断。
[0004]
但是，如果多终端的屏幕状态依靠各个终端本地的优先级判断，而各个端本地的时序可能会不同，从而容易造成各个终端判断出来的优先级不同，进而导致多个终端屏幕状态不同，没有完全实现屏幕同步。


技术实现要素：

[0005]
本发明实施例提供一种屏幕共享方法、装置、电子设备及存储介质，以解决现有的屏幕共享过程容易造成各个终端判断出来的优先级不同，进而导致多个终端屏幕状态不同，没有完全实现屏幕同步的问题。
[0006]
为了解决上述技术问题，本发明是这样实现的：
[0007]
第一方面，本发明实施例提供了一种屏幕共享方法，包括：
[0008]
接收进行屏幕共享的任一终端上传的帧数据，以及所述帧数据的序号标识；
[0009]
根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定关键帧数据，并将所述关键帧数据下发至进行屏幕共享的每个终端，以控制每个所述终端的屏幕同步渲染所述关键帧数据；
[0010]
其中，所述帧数据在所述终端接收到针对屏幕中展示内容的调整操作的情况下触发上传，所述帧数据的序号标识根据所述终端当前展示的关键帧数据的序号标识，以及所述帧数据的上传顺序确认得到。
[0011]
可选地，根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定关键帧数据的步骤，包括：
[0012]
根据当前接收到的各个所述帧数据的序号标识，以及最新一次下发的关键帧数据的序号标识，获取当前的初始关键帧数据；
[0013]
响应于所述初始关键帧数据与最新一次下发的关键帧数据来源于不同的终端，获取所述初始关键帧数据的时间戳，并检测所述初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差是否超出预设的锁定时长；
[0014]
响应于所述初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差超出所述锁定时长，以所述初始关键帧数据作为当前的关键帧数据并下发；
[0015]
响应于所述初始关键帧数据与最新一次下发的关键帧数据来源于相同的终端，以所述初始关键帧数据作为当前的关键帧数据并下发。
[0016]
可选地，每个所述终端上传的所述帧数据的序号标识基于所述终端当前展示的关键帧数据的序号标识，按照所述帧数据的上传顺序依次增大，且所述序号标识每次的变化幅度相同。
[0017]
可选地，所述根据当前接收到的各个所述帧数据的序号标识，以及最新一次下发的关键帧数据的序号标识，获取当前的初始关键帧数据的步骤，包括：
[0018]
根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中获取序号标识最大的第一帧数据；
[0019]
判断所述第一帧数据的序号标识是否大于最新一次下发的关键帧数据的序号标识；
[0020]
响应于所述第一帧数据的序号标识大于最新一次下发的关键帧数据的序号标识，以所述第一帧数据作为当前的初始关键帧数据。
[0021]
可选地，在每次调整操作过程中，所述终端上传的帧数据包括所述调整操作开始时的起始帧数据、所述调整操作结束时的结束帧数据、所述起始帧数据和所述结束帧数据中间的至少一个中间帧数据，且连续两个中间帧数据之间的时间间隔为指定时长。
[0022]
第二方面，本发明实施例提供了一种屏幕共享方法，其特征在于，包括：
[0023]
在屏幕共享过程中，响应于接收到针对屏幕中展示内容的调整操作，获取所述调整操作期间的帧数据，并根据当前展示的关键帧数据的序号标识，确定所述帧数据的序号标识；
[0024]
将所述帧数据以及所述帧数据的序号标识上传至所述共享控制服务器，并接收所述共享控制服务器返回的关键帧数据，并在所述屏幕中渲染所述关键帧数据；
[0025]
其中，所述关键帧数据由所述共享控制服务器根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定得到。
[0026]
第三方面，本发明实施例提供了一种屏幕共享装置，包括：
[0027]
帧数据获取模块，用于接收进行屏幕共享的任一终端上传的帧数据，以及所述帧数据的序号标识；
[0028]
关键帧数据下发模块，用于根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定关键帧数据，并将所述关键帧数据下发至进行屏幕共享的每个终端，以控制每个所述终端的屏幕同步渲染所述关键帧数据；
[0029]
其中，所述帧数据在所述终端接收到针对屏幕中展示内容的调整操作的情况下触发上传，所述帧数据的序号标识根据所述终端当前展示的关键帧数据的序号标识，以及所述帧数据的上传顺序确认得到。
[0030]
可选地，所述关键帧数据下发模块，包括：
[0031]
初始关键帧数据获取子模块，用于根据当前接收到的各个所述帧数据的序号标识，以及最新一次下发的关键帧数据的序号标识，获取当前的初始关键帧数据；
[0032]
锁定时长检测子模块，用于响应于所述初始关键帧数据与最新一次下发的关键帧数据来源于不同的终端，获取所述初始关键帧数据的时间戳，并检测所述初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差是否超出预设的锁定时长；
[0033]
第一关键帧数据确认子模块，用于响应于所述初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差超出所述锁定时长，以所述初始关键帧数据作为当前的关键帧数据并下发；
[0034]
第二关键帧数据确认子模块，用于响应于所述初始关键帧数据与最新一次下发的关键帧数据来源于相同的终端，以所述初始关键帧数据作为当前的关键帧数据并下发。
[0035]
可选地，每个所述终端上传的所述帧数据的序号标识基于所述终端当前展示的关键帧数据的序号标识，按照所述帧数据的上传顺序依次增大，且所述序号标识每次的变化幅度相同。
[0036]
可选地，所述初始关键帧数据获取子模块，具体用于：
[0037]
根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中获取序号标识最大的第一帧数据；
[0038]
判断所述第一帧数据的序号标识是否大于最新一次下发的关键帧数据的序号标识；
[0039]
响应于所述第一帧数据的序号标识大于最新一次下发的关键帧数据的序号标识，以所述第一帧数据作为当前的初始关键帧数据。
[0040]
可选地，在每次调整操作过程中，所述终端上传的帧数据包括所述调整操作开始时的起始帧数据、所述调整操作结束时的结束帧数据、所述起始帧数据和所述结束帧数据中间的至少一个中间帧数据，且连续两个中间帧数据之间的时间间隔为指定时长。
[0041]
第四方面，本发明实施例提供了一种屏幕共享装置，其特征在于，包括：
[0042]
序号标识设置模块，用于在屏幕共享过程中，响应于接收到针对屏幕中展示内容的调整操作，获取所述调整操作期间的帧数据，并根据当前展示的关键帧数据的序号标识，确定所述帧数据的序号标识；
[0043]
帧数据上传模块，用于将所述帧数据以及所述帧数据的序号标识上传至所述共享控制服务器；
[0044]
关键帧数据展示模块，用于接收所述共享控制服务器返回的关键帧数据，并在所述屏幕中渲染所述关键帧数据；
[0045]
其中，所述关键帧数据由所述共享控制服务器根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定得到。
[0046]
第五方面，本发明实施例另外提供了一种电子设备，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如第一方面和第二方面所述的屏幕共享方法的步骤。
[0047]
第六方面，本发明实施例另外提供了一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面和第二方面所述的屏幕共享方法的步骤。
[0048]
在本发明实施例中，通过引入了共享控制服务器，用来判断和存储表征当前最新的屏幕状态操作的关键帧数据，以及该关键帧数据的序号标识，并且将最新的关键帧数据和序号标识转发给屏幕共享的所有终端，从而统一进行中控管理，保证了各个终端获取到统一的最新关键帧数据，实现了各终端的屏幕同步。
[0049]
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，
而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
[0050]
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0051]
图1是本发明实施例中的一种屏幕共享方法的步骤流程图；
[0052]
图2是本发明实施例中的另一种屏幕共享方法的步骤流程图；
[0053]
图3是本发明实施例中的另一种屏幕共享方法的步骤流程图；
[0054]
图4是本发明实施例中的一种屏幕共享装置的结构示意图；
[0055]
图5是本发明实施例中的另一种屏幕共享装置的结构示意图；
[0056]
图6是本发明实施例中的另一种屏幕共享装置的结构示意图；
[0057]
图7是本发明实施例中的一种电子设备的硬件结构示意图。
具体实施方式
[0058]
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
[0059]
参照图1，示出了本发明实施例中一种屏幕共享方法的步骤流程图。
[0060]
步骤110，接收进行屏幕共享的任一终端上传的帧数据，以及所述帧数据的序号标识；
[0061]
步骤120，根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定关键帧数据，并将所述关键帧数据下发至进行屏幕共享的每个终端，以控制每个所述终端的屏幕同步渲染所述关键帧数据；
[0062]
其中，所述帧数据在所述终端接收到针对屏幕中展示内容的调整操作的情况下触发上传，所述帧数据的序号标识根据所述终端当前展示的关键帧数据的序号标识，以及所述帧数据的上传顺序确认得到。
[0063]
在本发明中，为了适用于屏幕共享状态下多终端操作的优先级判断机制，引入了共享控制服务器，用来判断和存储当前最新的屏幕状态操作(即关键帧数据)，以及该关键帧数据的序号标识，并且可以将最新的操作状态，也即关键帧数据和序号标识转发给所有屏幕共享的终端。
[0064]
具体地，对于进行屏幕共享的各个终端而言，为了保证任一终端用户在针对屏幕状态进行调整时，与之共享屏幕的其他各个终端可以保证展示内容完全同步，可以控制每个终端将其屏幕调整过程中的帧数据实时上传至共享控制服务器，而且由于可能存在多个终端的用户同时调整屏幕中的展示内容，或者是同一终端的用户在一段时间内持续调整期屏幕中的展示内容，那么为了方便共享服务器快速且准确地判断其接收到的各个帧数据中
最新产生的关键帧数据，终端在上传帧数据时，还可以生成表征帧数据的生成顺序的序号标识并且与帧数据同时上传至共享控制服务器。
[0065]
对于共享控制服务器而言，在接收到进行屏幕共享的任一终端上传的帧数据，以及所述帧数据的序号标识之后，则可以根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定关键帧数据，并将所述关键帧数据同步下发至进行屏幕共享的每个终端，以控制每个所述终端的屏幕同步渲染所述关键帧数据。具体地，为了保证各个终端展示状态的同步且不卡顿，共享控制服务器可以在接收到帧数据之后即基于当前接收到的帧数据及其序号标识确定当前的关键帧数据并下发。
[0066]
例如，假设共享控制服务器当前同时接收到多个终端上传的帧数据以及各个帧数据的序号标识，那么则可以根据各个帧数据的序号标识判断出其中可以表征屏幕最新的操作状态的关键帧数据，并将该关键帧数据同步下发至各个终端。
[0067]
其中，所述帧数据在所述终端接收到针对屏幕中展示内容的调整操作的情况下触发上传，所述帧数据的序号标识根据所述终端当前展示的关键帧数据的序号标识，以及所述帧数据的上传顺序确认得到。
[0068]
对于同一终端而言，在一次连续的调整操作过程中，其屏幕中的展示内容可能会持续性地发生变化，因此为了可以将屏幕共享过程中任一终端的屏幕中展示内容的调整操作过程中的屏幕状态实时同步至其他各个终端，则可以设置在每次的调整操作过程中，终端以预设时长为周期将其屏幕中展示的帧数据上传至共享控制服务器。其中的预设时长可以根据需求进行自定义设置，对此本发明实施例不加以限定。例如，可以设置预设时长为800ms(毫秒)等。
[0069]
而且，序号标识的生成策略也可以根据需求进行自定义设置，对此本发明实施例不加以限定。例如，在一次屏幕共享过程中，可以设置序号标识的初始值为0，对于屏幕共享的每个终端而言，如果接收到针对其屏幕中展示内容的调整操作，则可以触发上传帧数据，而且在每次上传帧数据时，可以根据该终端当前展示的关键帧数据的序号标识，以及所述帧数据的上传顺序确认得到。例如，假设终端当前展示的关键帧数据的序号标识为初始值0，可以设置序号标识依次加1，那么该终端上传帧数据时，首次上传的帧数据的序号标识可以为初始值加1，即为1，而如果终端当前展示的关键帧数据的序号标识为2，那么当前该终端上传帧数据时，则可以设置当前上传的帧数据的序号标识为3，等等。那么此时，对于共享控制服务器而言，则可以根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定序号标识最大的帧数据即为关键帧数据，并将所述关键帧数据下发至进行屏幕共享的每个终端。
[0070]
需要说明的是，上述终端每次上传的帧数据可以为上传至终端屏幕中展示画面所对应的帧数据，而且在不同的应用场景下，帧数据具体包含的内容可以有所不同，对此本发明实施例不加以限定。
[0071]
例如，对于vr(virtual reality，虚拟现实)看房场景下，为了满足多人看房的同步，屏幕共享的终端的屏幕中展示的画面为房屋的vr视景画面，此时终端接收到用户操作时，上传的帧数据可以包括当前画面的vr空间朝向数据、空间坐标数据、漫游点数据、标记数据等，终端在接收到共享控制服务器下发的关键帧数据之后，则可以通过3d渲染器根据关键帧数据画出来并在屏幕中展示，实现屏幕画面同步；对于3d游戏场景下，终端接收到用
户操作时，每次上传的帧数据可以包括当前画面的3d游戏动画帧；对于动画或者视频共享场景下，终端每次上传的帧数据可以包括当前画面的动画帧或者视频帧；等等。
[0072]
参照图2，在本发明实施例中，所述步骤120进一步可以包括：
[0073]
步骤121，根据当前接收到的各个所述帧数据的序号标识，以及最新一次下发的关键帧数据的序号标识，获取当前的初始关键帧数据；
[0074]
步骤122，响应于所述初始关键帧数据与最新一次下发的关键帧数据来源于不同的终端，获取所述初始关键帧数据的时间戳，并检测所述初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差是否超出预设的锁定时长；
[0075]
步骤123，响应于所述初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差超出所述锁定时长，以所述初始关键帧数据作为当前的关键帧数据并下发；
[0076]
步骤124，响应于所述初始关键帧数据与最新一次下发的关键帧数据来源于相同的终端，以所述初始关键帧数据作为当前的关键帧数据并下发。
[0077]
在实际应用中，如果进行屏幕共享的多个终端在一段时间内连续接收到用户针对其屏幕中展示内容的调整操作，那么相应各个终端也会将上传帧数据至共享控制服务器，如果共享控制服务器在每次接收到帧数据后均基于该帧数据确定关键帧数据并下发，容易导致各个终端的屏幕中的展示内容频繁刷新，而且连个终端在同时调整展示内容时容易导致屏幕展示内容混乱，影响用户的视觉效果。
[0078]
因此，在本发明实施例中，为了避免上述问题，还可以设置关键帧数据下发的锁定时长，对于共享控制服务器而言，可以根据当前接收到的各个所述帧数据的序号标识，以及最新一次下发的关键帧数据的序号标识，获取当前的初始关键帧数据，而如果该初始关键帧数据与共享控制服务器最新一次下发的关键帧数据来源于不同的终端，则可以获取该初始关键帧数据的时间戳，并检测该初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差是否超出预设的锁定时长，如果该初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差超出所述锁定时长，则可以该初始关键帧数据作为当前的关键帧数据并下发至屏幕共享的各个终端。而如果该初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差未超出所述锁定时长，则可以将该初始关键帧数据丢弃，不考虑其最终是否为有效的关键帧数据，也不会将其转发，另外还可以提示上传该初始关键帧数据的终端当前的调整操作有冲突。
[0079]
而如果该初始关键帧数据与最新一次下发的关键帧数据来源于相同的终端，可以认为此时为同一终端针对屏幕中展示内容的连续操作，可以直接以该初始关键帧数据作为当前的关键帧数据并下发。
[0080]
此外，在本发明实施例中，也可以在每次接收到终端上传的每个帧数据并确定此时的关键帧数据之后且下发该关键帧数据之前，即判断该关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差是否超出预设的锁定时长，如果该关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差超出所述锁定时长，则可以该关键帧数据作为当前最新的关键帧数据并下发。如果该关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差未超出所述锁定时长，则可以将该关键帧数据丢弃，不会将其转发，另外还可以提示上传相应关键帧数据的终端当前调整操作有冲突。
[0081]
另外，在本发明实施例中，为了方便共享控制服务器准确判定关键帧数据并下发，共享控制服务器可以保存最新下发的关键帧数据和关键帧数据的序号标识。
[0082]
而且，在根据当前接收到的各个所述帧数据的序号标识，以及最新一次下发的关键帧数据的序号标识，获取当前的初始关键帧数据时，可以基于序号标识与关键帧数据之间的对应关系，确定当前的初始关键帧数据。
[0083]
例如，如果设置序号标识最大的帧数据为当前的关键帧数据，那么此时则可以检测当前接收到的各个帧数据中是否存在比最新一次下发的关键帧数据的序号标识更大的帧数据，如果有则以比最新一次下发的关键帧数据的序号标识更大且序号标识最大的帧数据作为当前的初始关键帧数据；而如果设置序号标识最小的帧数据为当前的关键帧数据，那么此时则可以检测当前接收到的各个帧数据中是否存在比最新一次下发的关键帧数据的序号标识更小的帧数据，如果有则以比最新一次下发的关键帧数据的序号标识更小且序号标识最小的帧数据作为当前的初始关键帧数据；等等。
[0084]
可选地，在本发明实施例中，每个所述终端上传的所述帧数据的序号标识基于所述终端当前展示的关键帧数据的序号标识，按照所述帧数据的上传顺序依次增大，且所述序号标识每次的变化幅度相同。
[0085]
其中序号标识每次的变化幅度可以根据需求进行自定义设置，对此本发明实施例不加以限定。例如，假设序号标识的初始值为0，可以设置序号标识每次的变化幅度为指定数值，例如为1，等等。
[0086]
例如，对于任一终端，假设其中当前展示的关键帧数据的序号标识为n，当该终端接收到用户针对其屏幕中展示内容的调整操作的情况下，则可以触发上传帧数据至共享控制服务器，而且在调整操作过程中上传帧数据时，可以设置上传的帧数据的序号标识基于所述终端当前展示的关键帧数据的序号标识，按照所述帧数据的上传顺序依次增大。
[0087]
例如，假设序号标识每次的变化幅度为1，那么在一次调整操作过程中，周期性地上传帧数据至共享控制服务器，可以按照各个帧数据的上传顺序，依次将每个帧数据的序号标识加1，也即依次为n+1、n+2，等等，而如果终端展示的关键帧数据发生变化，例如终端中展示的关键帧数据变更为另一关键帧数据，且变更后的关键帧数据的序号标识为n+2，那么在调整操作过程中上传帧数据时，则可以重新基于该终端当前展示的调整后的关键帧数据的序号标识，按照此后各个帧数据的上传顺序依次增大其序号标识，例如依次为n+3、n+4，等等。
[0088]
例如，在屏幕共享时，可以设置终端与共享控制服务器之间的交互方式如下：
[0089]
当有终端单独操作时，会将上传的帧数据的序号标识基于当前展示的关键帧数据的序号标识加1，服务端收到该帧数据后可以将该帧数据作为关键帧数据后转发给其他终端，实现屏幕同步；
[0090]
当有终端连续操作时，会依次将上传的各个帧数据的序号标识基于当前展示的关键帧数据的序号标识依次加1，服务端同样的会进行关键帧数据转发，同时保存最新转发的关键帧数据和关键帧数据的序号标识。
[0091]
当多个终端同时操作时，各个终端会各自基于其自身当前展示的关键帧数据的序号标识将上传的帧数据的序号标识依次加1，并发送给服务端，服务端将收到的各个帧数据同共享控制服务器存储的最新下发的关键帧数据进行比对。如果帧数据的序号标识小于最
新关键帧数据的序号标识，则服务器可以丢弃该帧数据，转发给其他终端最新的关键帧数据，并针对该丢弃的帧数据的来源终端提示有冲突。如果帧数据的序号标识大于或等于最新关键帧数据的序号标识，则可以进一步判定其与最新下发的关键帧数据的时间戳之间的时间距离是否超出锁定时长，如果超出则可以该帧数据覆盖共享控制服务器当前最新的关键帧数据，同时进行转发。当有新的终端加入屏幕共享时，共享控制服务器可以将存储的最新关键帧数据转发给该新加入的终端，实现屏幕状态同步的初始化。
[0092]
可选地，在本发明实施例中，所述步骤121进一步可以包括：
[0093]
步骤1211，根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中获取序号标识最大的第一帧数据；
[0094]
步骤1212，判断所述第一帧数据的序号标识是否大于最新一次下发的关键帧数据的序号标识；
[0095]
步骤1213，响应于所述第一帧数据的序号标识大于最新一次下发的关键帧数据的序号标识，以所述第一帧数据作为当前的初始关键帧数据。
[0096]
如上述，如果帧数据的序号标识基于所述终端当前展示的关键帧数据的序号标识，按照所述帧数据的上传顺序依次增大，那么可以认定序号标识越大的帧数据越能表征屏幕的最新状态，因此在本发明实施例中，为了确定初始的关键帧数据，可以根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中获取序号标识最大的第一帧数据，进而判断所述第一帧数据的序号标识是否大于最新一次下发的关键帧数据的序号标识，如果第一帧数据的序号标识大于最新一次下发的关键帧数据的序号标识，则可以所述第一帧数据作为当前的初始关键帧数据，而如果第一帧数据的序号标识不大于最新一次下发的关键帧数据的序号标识，则可以认定当前的关键帧数据仍为最新一次下发的关键帧数据，则无需重新下发该关键帧数据。
[0097]
可选地，在本发明实施例中，在每次调整操作过程中，所述终端上传的帧数据包括所述调整操作开始时的起始帧数据、所述调整操作结束时的结束帧数据、所述起始帧数据和所述结束帧数据中间的至少一个中间帧数据，且连续两个中间帧数据之间的时间间隔为指定时长。
[0098]
在实际应用中，用户在针对终端屏幕中的展示内容进行调整时可能是持续性地，例如拖拽操作等一般会持续一段时间，而且在该持续的调整操作过程中，屏幕中的展示内容会不断发生变化，那么为了使得在该调整操作过程中各个终端可以及时实现展示内容的同步，则需要在一次调整操作过程中，及时将在该调整操作过程中变化产生的帧数据上传至共享控制服务器。而且，所述终端上传的帧数据包括所述调整操作开始时的帧数据，即为起始帧数据、所述调整操作结束时的帧数据，即为结束帧数据、所述起始帧数据和所述结束帧数据中间的至少一个帧数据，即为中间帧数据。例如，可以设置各个终端在一次调整操作过程中，上传完起始帧数据之后，即上传一中间帧数据，另外在该调整操作结束时上传一结束帧数据。
[0099]
另外，还可以上传多个中间帧数据，例如在首次上传中间帧数据后每间隔指定时长即再次上传一次当前的中间帧数据，直至调整操作结束时上传结束帧数据。其中指定时长的时间长度可以根据需求进行自定义设置，对此本发明实施例不加以限定。例如，可以设置指定时长为800ms等。
[0100]
参照图3，示出了本发明实施例中另一种屏幕共享方法的步骤流程图。
[0101]
步骤210，在屏幕共享过程中，响应于接收到针对屏幕中展示内容的调整操作，获取所述调整操作期间的帧数据，并根据当前展示的关键帧数据的序号标识，确定所述帧数据的序号标识；
[0102]
步骤220，将所述帧数据以及所述帧数据的序号标识上传至所述共享控制服务器；
[0103]
步骤230，接收所述共享控制服务器返回的关键帧数据，并并在所述屏幕中渲染所述关键帧数据；其中，所述关键帧数据由所述共享控制服务器根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定得到。
[0104]
本发明实施例的执行主体为进行屏幕共享的任一终端，上述实施例中各个步骤的执行主体为共享控制服务器，但是两者之间的交互过程可以参照上述内容，再次不加以赘述。
[0105]
在本发明实施例中，通过引入了共享控制服务器，用来判断和存储表征当前最新的屏幕状态操作的关键帧数据，以及该关键帧数据的序号标识，并且将最新的关键帧数据和序号标识转发给屏幕共享的所有终端，从而统一进行中控管理，保证了各个终端获取到统一的最新关键帧数据，实现了各终端的屏幕同步。
[0106]
参照图4，示出了本发明实施例中一种屏幕共享装置的结构示意图。
[0107]
本发明实施例的屏幕共享装置包括：帧数据获取模块310和关键帧数据下发模块320。
[0108]
下面分别详细介绍各模块的功能以及各模块之间的交互关系。
[0109]
帧数据获取模块310，用于接收进行屏幕共享的任一终端上传的帧数据，以及所述帧数据的序号标识；
[0110]
关键帧数据下发模块320，用于根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定关键帧数据，并将所述关键帧数据下发至进行屏幕共享的每个终端，以控制每个所述终端的屏幕同步渲染所述关键帧数据；
[0111]
其中，所述帧数据在所述终端接收到针对屏幕中展示内容的调整操作的情况下触发上传，所述帧数据的序号标识根据所述终端当前展示的关键帧数据的序号标识，以及所述帧数据的上传顺序确认得到。
[0112]
参照图5，在本发明实施例中，所述关键帧数据下发模块320，进一步可以包括：
[0113]
初始关键帧数据获取子模块321，用于根据当前接收到的各个所述帧数据的序号标识，以及最新一次下发的关键帧数据的序号标识，获取当前的初始关键帧数据；
[0114]
锁定时长检测子模块322，用于响应于所述初始关键帧数据与最新一次下发的关键帧数据来源于不同的终端，获取所述初始关键帧数据的时间戳，并检测所述初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差是否超出预设的锁定时长；
[0115]
第一关键帧数据确认子模块323，用于响应于所述初始关键帧数据的时间戳与最新一次下发的关键帧数据的时间戳之间的时间差超出所述锁定时长，以所述初始关键帧数据作为当前的关键帧数据并下发；
[0116]
第二关键帧数据确认子模块324，用于响应于所述初始关键帧数据与最新一次下发的关键帧数据来源于相同的终端，以所述初始关键帧数据作为当前的关键帧数据并下
发。
[0117]
可选地，在本发明实施例中，每个所述终端上传的所述帧数据的序号标识基于所述终端当前展示的关键帧数据的序号标识，按照所述帧数据的上传顺序依次增大，且所述序号标识每次的变化幅度相同。
[0118]
可选地，在本发明实施例中，所述初始关键帧数据获取子模块321，具体可以用于：
[0119]
根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中获取序号标识最大的第一帧数据；
[0120]
判断所述第一帧数据的序号标识是否大于最新一次下发的关键帧数据的序号标识；
[0121]
响应于所述第一帧数据的序号标识大于最新一次下发的关键帧数据的序号标识，以所述第一帧数据作为当前的初始关键帧数据。
[0122]
可选地，在本发明实施例中，在每次调整操作过程中，所述终端上传的帧数据包括所述调整操作开始时的起始帧数据、所述调整操作结束时的结束帧数据、所述起始帧数据和所述结束帧数据中间的至少一个中间帧数据，且连续两个中间帧数据之间的时间间隔为指定时长。
[0123]
本发明实施例提供的屏幕共享装置能够实现图1至图2的方法实施例中实现的各个过程，为避免重复，这里不再赘述。
[0124]
参照图6，示出了本发明实施例中另一种屏幕共享装置的结构示意图。
[0125]
本发明实施例的屏幕共享装置包括：序号标识设置模块410、帧数据上传模块420和关键帧数据展示模块430。
[0126]
下面分别详细介绍各模块的功能以及各模块之间的交互关系。
[0127]
序号标识设置模块410，用于在屏幕共享过程中，响应于接收到针对屏幕中展示内容的调整操作，获取所述调整操作期间的帧数据，并根据当前展示的关键帧数据的序号标识，确定所述帧数据的序号标识；
[0128]
帧数据上传模块420，用于将所述帧数据以及所述帧数据的序号标识上传至所述共享控制服务器；
[0129]
关键帧数据展示模块430，用于接收所述共享控制服务器返回的关键帧数据，并在所述屏幕中渲染所述关键帧数据；
[0130]
其中，所述关键帧数据由所述共享控制服务器根据当前接收到的各个所述帧数据的序号标识，从所述帧数据中确定得到。
[0131]
本发明实施例提供的屏幕共享装置能够实现图3的方法实施例中实现的各个过程，为避免重复，这里不再赘述。
[0132]
优选的，本发明实施例还提供了一种电子设备，包括：处理器，存储器，存储在存储器上并可在处理器上运行的计算机程序，该计算机程序被处理器执行时实现上述屏幕共享方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。而且，电子设备在实现上述图1至图2的方法实施例中的实现的屏幕共享方法时，该电子设备可以为上述的共享控制服务器，而电子设备在实现上述图3的方法实施例中的实现的屏幕共享方法时，该电子设备可以为上述的终端。
[0133]
本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有
计算机程序，计算机程序被处理器执行时实现上述屏幕共享方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(read-only memory，简称rom)、随机存取存储器(random access memory，简称ram)、磁碟或者光盘等。
[0134]
图7为实现本发明各个实施例的一种电子设备的硬件结构示意图。
[0135]
该电子设备500包括但不限于：射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、处理器510、以及电源511等部件。本领域技术人员可以理解，图7中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
[0136]
应理解的是，本发明实施例中，射频单元501可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器510处理；另外，将上行的数据发送给基站。通常，射频单元501包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元501还可以通过无线通信系统与网络和其他设备通信。
[0137]
电子设备通过网络模块502为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
[0138]
音频输出单元503可以将射频单元501或网络模块502接收的或者在存储器509中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元503还可以提供与电子设备500执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元503包括扬声器、蜂鸣器以及受话器等。
[0139]
输入单元504用于接收音频或视频信号。输入单元504可以包括图形处理器(graphics processing unit，gpu)5041和麦克风5042，图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元506上。经图形处理器5041处理后的图像帧可以存储在存储器509(或其它存储介质)中或者经由射频单元501或网络模块502进行发送。麦克风5042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元501发送到移动通信基站的格式输出。
[0140]
电子设备500还包括至少一种传感器505，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板5061的亮度，接近传感器可在电子设备500移动到耳边时，关闭显示面板5061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器505还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。
[0141]
显示单元506用于显示由用户输入的信息或提供给用户的信息。显示单元506可包括显示面板5061，可以采用液晶显示器(liquid crystal display，lcd)、有机发光二极管
(organic light-emitting diode,oled)等形式来配置显示面板5061。
[0142]
用户输入单元507可用于接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元507包括触控面板5071以及其他输入设备5072。触控面板5071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板5071上或在触控面板5071附近的操作)。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器510，接收处理器510发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板5071。除了触控面板5071，用户输入单元507还可以包括其他输入设备5072。具体地，其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。
[0143]
进一步的，触控面板5071可覆盖在显示面板5061上，当触控面板5071检测到在其上或附近的触摸操作后，传送给处理器510以确定触摸事件的类型，随后处理器510根据触摸事件的类型在显示面板5061上提供相应的视觉输出。虽然在图7中，触控面板5071与显示面板5061是作为两个独立的部件来实现电子设备的输入和输出功能，但是在某些实施例中，可以将触控面板5071与显示面板5061集成而实现电子设备的输入和输出功能，具体此处不做限定。
[0144]
接口单元508为外部装置与电子设备500连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(i/o)端口、视频i/o端口、耳机端口等等。接口单元508可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到电子设备500内的一个或多个元件或者可以用于在电子设备500和外部装置之间传输数据。
[0145]
存储器509可用于存储软件程序以及各种数据。存储器509可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器509可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
[0146]
处理器510是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器509内的软件程序和/或模块，以及调用存储在存储器509内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。处理器510可包括一个或多个处理单元；优选的，处理器510可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器510中。
[0147]
电子设备500还可以包括给各个部件供电的电源511(比如电池)，优选的，电源511可以通过电源管理系统与处理器510逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
[0148]
另外，电子设备500包括一些未示出的功能模块，在此不再赘述。
[0149]
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个
……”
限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
[0150]
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
[0151]
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。
[0152]
本领域普通技术人员可以意识到，结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
[0153]
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
[0154]
在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
[0155]
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
[0156]
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
[0157]
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
而前述的存储介质包括：u盘、移动硬盘、rom、ram、磁碟或者光盘等各种可以存储程序代码的介质。
[0158]
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。