一种投屏方法、装置、用户端设备和计算机可读存储介质与流程

1.本公开涉及显示技术领域，尤其涉及一种投屏方法、装置、用户端设备和计算机可读存储介质。


背景技术：

2.无线投屏技术已经广泛运用于各种场景，用户在使用手机或平板电脑等移动设备时，可以将其显示画面投屏到电视或投影仪等大尺寸显示设备上进行观看，进而提升观看体验；在处于会议室场景中，发言人可以把演示文稿投屏到会议室大屏幕，供开会或演讲时参会人员更好的理解文稿内容。如今投屏技术和投屏设备非常普及，如dlna、airplay、miracast等技术，各种品牌手机、ipad、pc，不管使用哪种系统macos还是windows都可以使用投屏技术分享内容到大屏幕，由于生活品质的提升，很多家庭用户已经将电视由原来的40寸逐渐升级为70、80寸等更大尺寸，家用70寸以上的都很常见。随着投屏技术的迭代，智能电视系统性能也逐步升级，部分电视厂商的智能电视已经支持多屏混投，如两屏或四屏以前的设备同时投屏，支持多种协议和设备的混合投屏，在同一个网络环境下多个移动端设备都能投屏到智能电视大屏，实现一屏共享，提高电视大屏的利用率。
3.目前的投屏技术针对多个设备在同一网络环境下，同时投屏到一台智显示设备的实际操作较复杂，例如在用户希望进行四个不同显示内容同时显示的情况下，一个用户端设备一次投屏只能把一个显示内容投送到显示设备端，如果需要在显示设备端展示多个投屏窗口则需要连接多台用户端设备，重复多次投屏操作，导致投屏操作繁琐，用户体验较差。


技术实现要素：

4.根据本公开的一方面，提供了一种投屏方法，应用于用户端设备，所述投屏方法包括：获取多个显示内容；根据组合指令，在所述用户端设备的显示画面中对所有所述显示内容进行拼接组合，形成拼屏组合信息；根据投屏指令，将所述拼屏组合信息发送至显示设备，以使所述显示设备根据所述拼屏组合信息将所有所述显示内容在所述显示设备的显示画面中进行展示。
5.根据本公开的另一方面，提供了一种投屏装置，应用于用户端设备，所述投屏装置至少包括：获取模块，用于获取多个显示内容；组合模块，用于根据组合指令，在所述用户端设备的显示画面中对所有所述显示内容进行拼接组合，形成拼屏组合信息；投屏模块，用于根据投屏指令，将所述拼屏组合信息发送至显示设备，以使所述显示设备根据所述拼屏组合信息将所有所述显示内容在所述显示设备的显示画面中进行展示。
6.根据本公开的另一方面，提供了一种用户端设备，包括：处理器；以及存储程序的存储器，其中，所述程序包括指令，所述指令在由所述处理器执行时使所述处理器执行上述的投屏方法。
7.根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储
介质，所述计算机指令用于使所述计算机执行上述的投屏方法。
8.本技术实施例中提供的一个或多个技术方案，将需要进行投屏显示的多个显示内容在用户端设备的显示画面上进行组合，将组合形成的拼屏组合信息直接发送至显示设备即可在显示设备的显示画面中同时显示多个显示内容，利用简单的操作即可实现多个显示内容同时投屏，提升了用户的使用体验。
附图说明
9.在下面结合附图对于示例性实施例的描述中，本公开的更多细节、特征和优点被公开，在附图中：
10.图1示出了根据本公开示例性实施例的投屏方法的流程图；
11.图2示出了根据本公开示例性实施例的投屏装置的一种结构示意图；
12.图3示出了根据本公开示例性实施例的投屏装置的另一种结构示意图；
13.图4示出了能够用于实现本公开的实施例的示例性用户端设备的结构框图。
具体实施方式
14.下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
15.应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
16.本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
17.需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
18.本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
19.以下参照附图描述本公开的方案。本公开示例性实施例公开了一种投屏方法，该方法主要应用与用户端设备，例如手机、平板电脑或者笔记本电脑等，在实际实现时可以将本实施例的投屏方法作为一个应用程序安装在用户端设备中进行使用，也可作为小组件使用。图1为本实施例所公开的投屏方法的流程图，主要包括步骤s10至s30。
20.s10，获取多个显示内容。
21.显示内容是指用户希望进行投屏的内容，其数量和具体内容根据用户实际需求进行设置。一般来说，显示内容通常为某个应用程序或者应用程序的任意一个页面，该应用程
序可以为安装在用户端设备的应用程序，也可以为安装在投屏用的显示设备中的应用程序，显示设备通过网络通信将自身所包括的应用程序情况或者基于用户的选择将某个应用程序的某个页面发送给用户端设备，用户通过操作用户端设备接收显示设备发送的显示内容，并根据投屏需求获取用户端设备内相应的显示内容。另外，显示内容还可以包括云存储服务器中所保存的历史拼屏组合信息，即在显示设备上曾经实现的拼屏组合方式或者用户常用的拼屏组合方式，包含已经完成拼屏的至少两个显示内容以及不同内容在画面中对应的不同位置和尺寸情况，通过云存储的形式上传保存，在需要进行投屏时可直接调用，更便于简化投屏的操作流程。
22.在实际实现时，首先要保证用户端设备和显示设备位于同一个网络环境中，即二者是否连接在同一个路由设备下，对于具有双频段的路由设备(即2.4ghz和5ghz)，还应当保证用户端设备和显示设备连接在该路由设备的同一个频段下，这样才能保证二者之间良好的通信，更便于进行显示内容的传递和后续投屏操作的实现。因此，在获取多个显示内容之前，首先需要检测显示设备的网络连接情况，判断其是否与用户端设备位于同一个网络中，只有在显示设备与用户端设备位于同一个网络中的情况下，才进行获取多个显示内容的操作，尤其是需要进行拼接的显示内容中包含显示设备内安装的应用程序或页面时。当然，在一些实施例中，若用户希望进行组合投屏的显示内容中不包含显示设备的显示内容，也可基于自身安装的应用程序的具体内容优先进行显示内容的获取，或者从云存储服务器中获得历史拼屏组合信息，但是在后续进行投屏时，依然需要确定在显示设备连接到用户端设备所在网络时再进行投屏操作。
23.s20，根据组合指令，在用户端设备的显示画面中对所有显示内容进行拼接组合，形成拼屏组合信息。
24.多个显示内容获取后，可在用户端设备的显示画面中同时呈现所有显示内容，具体可为每个显示内容分配一个显示窗口，将所有显示窗口同时在显示画面中呈现，用户则基于显示画面内的具体情况通过组合指令对各个显示窗口进行调整，并基于调整完毕后显示画面内的各个显示窗口情况形成拼屏组合信息，实现各个显示内容之间拼屏组合方式的记录。
25.具体地，组合指令主要用于调整显示窗口的具体位置和尺寸，用户可基于显示画面内的显示情况对各个显示窗口所在的位置通过点击、拖拽等方式进行调整，使所有显示窗口尽量铺满显示画面，或者通过放大、缩小等操作进行显示窗口尺寸的调节，突出用户主要想观看的显示内容；在显示画面内直观进行的调节过程可以在显示画面中任意两个显示内容之间均不重合，即显示内容之间不会互相遮挡影响用户观看时停止，在实际实现是也允许用户根据实际需求设置显示内容之间重合。在实际调整过程中，用户还可通过组合指令进行显示内容的删除或其他显示内容的增加操作，也可实现不同显示内容之间音频的设置、或者显示时亮度、饱和度、播放倍速等参数的调节，或进行其他任意有关显示内容呈现的参数的调节，本实施例具体不进行限制。
26.s30，根据投屏指令，将拼屏组合信息发送至显示设备，以使显示设备根据拼屏组合信息将所有显示内容在显示设备的显示画面中进行展示。
27.在拼屏组合信息形成后，用户可通过发送投屏指令，将拼屏组合信息发送至显示设备，显示设备在接收到拼屏组合信息后，对拼屏组合信息进行解析，获取各个显示内容之
间的拼屏组合方式，并在自身的显示画面中进行展示。
28.具体地，用户所发送的投屏指令可以通过点击其显示画面上呈现的虚拟按钮进行生成，在实际实现时，当用户端设备判定显示设备为开机状态并且与用户端设备位于同一网络中时，虚拟按钮为可点击状态，否则虚拟按钮可以呈现灰色无法点击的状态，以提示用户操作显示设备使其开机并连入对应路由设备的网络中。另外，在投屏指令生成后，用户端设备还可以弹出投屏样式选择框，例如使用主副窗口或一定程度的缩放比例进行投屏，用户可根据实际需求进行选择，选择相应投屏样式之后，显示设备也会结合投屏样式和拼屏组合信息内的具体拼屏组合方式进行显示内容的相应呈现。
29.在一些实施例中，本实施例所提供的投屏方法可利用小组件的方式在用户端设备内进行实现，每个小组件均可基于多个显示内容生成一个拼屏组合信息，用户端设备可同时利用多个小组件同时生成多个拼屏组合信息，进而实现更多显示内容的同时呈现，用户可在每个小组件对应调整完成后，在显示画面中对各个小组件进行位置和尺寸的调节，或者在进行投屏时通过投屏样式的选择使不同拼屏组合信息对应的显示内容以不同方式呈现，本实施例不进行具体限制，只要符合用户实际需求即可。
30.本实施例将需要进行投屏显示的多个显示内容在用户端设备的显示画面上进行组合，将组合形成的拼屏组合信息直接发送至显示设备即可在显示设备的显示画面中同时显示多个显示内容，利用简单的操作即可实现多个显示内容同时投屏，提升了用户的使用体验。
31.本公开示例性实施例还提供一种投屏装置，其对应的结构示意图如图2所示，主要包括依次耦合的获取模块10、组合模块20以及投屏模块30，其中，获取模块10用于获取多个显示内容；组合模块20用于根据组合指令，在用户端设备的显示画面中对所有显示内容进行拼接组合，形成拼屏组合信息；投屏模块30用于根据投屏指令，将拼屏组合信息发送至显示设备，以使显示设备根据拼屏组合信息将所有显示内容在显示设备的显示画面中进行展示。
32.具体地，显示内容为如下任意一种：安装在所述用户端设备中的应用程序；安装在所述用户端设备中的应用程序的任意一个页面；安装在所述显示设备中的应用程序；安装在所述显示设备中的应用程序的任意一个页面；保存在云存储服务器中的任意一个历史拼屏组合信息。
33.在一些实施例中，组合模块20具体用于，根据所述组合指令，在所述用户端设备的显示画面中对所有所述显示内容在所述显示画面中的位置和尺寸进行调节，使所述显示画面中的任意两个所述显示内容之间均不重合。
34.在一些实施例中，投屏装置还包括与获取模块10耦合的检测模块40，如图3所示，检测模块40则用于检测所述显示设备是否与所述用户端设备位于同一个网络中；并且在所述显示设备与所述用户端设备位于同一个网络中的情况下，获取模块10再进行获取多个显示内容的操作。
35.本实施例将需要进行投屏显示的多个显示内容在用户端设备的显示画面上进行组合，将组合形成的拼屏组合信息直接发送至显示设备即可在显示设备的显示画面中同时显示多个显示内容，利用简单的操作即可实现多个显示内容同时投屏，提升了用户的使用体验。
36.本公开示例性实施例还提供一种用户端设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器。所述存储器存储有能够被所述至少一个处理器执行的计算机程序，所述计算机程序在被所述至少一个处理器执行时用于使所述电子设备执行根据本公开实施例的方法。
37.本公开示例性实施例还提供一种存储有计算机程序的非瞬时计算机可读存储介质，其中，所述计算机程序在被计算机的处理器执行时用于使所述计算机执行根据本公开实施例的方法。
38.本公开示例性实施例还提供一种计算机程序产品，包括计算机程序，其中，所述计算机程序在被计算机的处理器执行时用于使所述计算机执行根据本公开实施例的方法。
39.参考图4，现将描述可以作为本公开的服务器或客户端的电子设备300的结构框图，其是可以应用于本公开的各方面的硬件设备的示例。电子设备旨在表示各种形式的数字电子的计算机设备，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
40.如图4所示，用户端设备300包括计算单元301，其可以根据存储在只读存储器(rom)302中的计算机程序或者从存储单元308加载到随机访问存储器(ram)303中的计算机程序，来执行各种适当的动作和处理。在ram 303中，还可存储设备300操作所需的各种程序和数据。计算单元301、rom 302以及ram 303通过总线304彼此相连。输入/输出(i/o)接口305也连接至总线304。
41.用户端设备300中的多个部件连接至i/o接口305，包括：输入单元306、输出单元307、存储单元308以及通信单元309。输入单元306可以是能向用户端设备300输入信息的任何类型的设备，输入单元306可以接收输入的数字或字符信息，以及产生与电子设备的用户设置和/或功能控制有关的键信号输入。输出单元307可以是能呈现信息的任何类型的设备，并且可以包括但不限于显示器、扬声器、视频/音频输出终端、振动器和/或打印机。存储单元308可以包括但不限于磁盘、光盘。通信单元309允许用户端设备300通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据，并且可以包括但不限于调制解调器、网卡、红外通信设备、无线通信收发机和/或芯片组，例如蓝牙设备、wifi设备、wimax设备、蜂窝通信设备和/或类似物。
42.计算单元301可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元301的一些示例包括但不限于中央处理单元(cpu)、图形处理单元(gpu)、各种专用的人工智能(ai)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(dsp)、以及任何适当的处理器、控制器、微控制器等。计算单元301执行上文所描述的各个方法和处理。例如，在一些实施例中，前述的投屏方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元308。在一些实施例中，计算机程序的部分或者全部可以经由rom 302和/或通信单元309而被载入和/或安装到用户端设备300上。在一些实施例中，计算单元301可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行前述的投屏方法。
43.用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来
编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
44.在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦除可编程只读存储器(eprom或快闪存储器)、光纤、便捷式紧凑盘只读存储器(cd-rom)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
45.如本公开使用的，术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如，磁盘、光盘、存储器、可编程逻辑装置(pld))，包括，接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
46.为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，crt(阴极射线管)或者lcd(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
47.可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(lan)、广域网(wan)和互联网。
48.计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。