屏幕描述方法及装置的制作方法

专利名称：屏幕描述方法及装置的制作方法
技术领域：
本发明涉及屏幕镜像技术，更为具体地，涉及一种屏幕描述方法及装置。
背景技术：
屏幕镜像技术是指将某个设备 (比如，智能手机)的屏幕显示内容传输到另一个设备(如个人电脑)上进行显示的技术。图I示出了屏幕镜像技术的一个应用的示意图。如图I所示，智能手机上的屏幕显示内容可以通过WiFi传输到个人电脑的显示器上进行显示。图2示出了屏幕镜像技术的业务流程的流程图。如图2所示，在该业务流程中，首先，在设备A上获取屏幕显示内容并封装为数据包。接着，通过网络传输(无线传输和/或有线传输，通常是无线传输)，将封装后的数据包传输到设备B。然后，在设备B接收到数据包后，对所接收的数据包进行解包处理，并且在设备B的显示屏幕上描绘并显示设备A上所显示的屏幕内容。依据不同的平台，上述各个步骤的实现各不相同。为了提高描绘性能，在设备B上进行的“描绘”步骤在Windows平台下一般通过基于DirectDraw进行描绘来实现。在现有技术中，为了实现动画效果，一般采用Flip方式进行描绘。Flip的工作原理类似于电影胶片的放映过程。胶片的每一页是一个静态的图片。当把这些胶片快速切换并依次投放到屏眷上时，就广生了动画。Flip正是利用该原理来显不动画。具体而目，Flip描绘方法主要依靠两个表面之间的连续切换来显示动画。通常的做法是申请两个表面(Surface)，一个为主表面(Primary Surface),该表面上存储的内容即为设备A的屏幕上显示的内容；另一个为副表面(Back Surface),作为主表面的一个备用表面。通过不断地更新副表面的内容，并和主表面进行切换产生效果，如图3所示。图4示出了 Flip描述过程的示意图。如图4所示,在步骤S410,当设备B通过网络接收到从设备A传输的数据包后，对所接收的数据包进行解包处理。将解包处理后得到的数据拷贝到副表面(步骤S420)，然后将屏幕更新通知发送给窗口处理函数(步骤S430)。在发送完屏幕更新通知后，网络端进行到步骤S470，等待新的网络数据。窗口处理函数在收到屏幕更新通知(步骤S440)后，调用Flip函数，将副表面切换到前台(步骤S450)，成为主表面显示在屏幕上。接着，在步骤S460，窗口处理函数阻塞，等待新的屏幕更新通知。在接收到新的屏幕更新通知后，返回到步骤S440。与此同时，原来的主表面切换为副表面隐藏起来，由此完成了从一帧到另一帧的过渡。整个描绘过程如图4所示。然而，上述采用Flip方式的描绘方法存在下述问题。首先，该描绘方法采用基于消息通知的异步描绘模式，增大了描绘过程的开销，不能应对性能要求严格的场合。在异步描绘模式中，为了保护描绘过程的上下文环境，在进入描绘过程时需要加锁，退出描绘过程时需要解锁，锁操作属于读写内存的操作，相比于一般的CPU操作来说需要多花费近300倍的时间，这种慢速操作对于快速描绘这种性能要求严格的场合来说是不适用的。其次，在该描绘方法中，采用两个表面进行轮换。在这种情况下，当屏幕只发生了部分变化时会出现问题。如图5所示。假设设备A上将依次显示帧A、帧B和帧C，其中帧A和帧B相比，整个画面发生了变化，而帧B和帧C相比仅变化了一小片区域，即图中的粉红色区域。在时刻I时，设备A显示帧A，并将帧A通过网络传输给设备B，设备B接收到帧A后将其拷贝到副表面，然后发送屏幕更新请求，整个过程如图5A所示。在时刻2时，设备B已经发生了主副表面切换，将前一时刻的副表面的切换为主表面，并显示在屏幕上。此时，设备A正显示帧B，并将帧B传输到设备B，设备B接收到数据后将其拷贝至副表面，如图所示。在时刻3时，同样，设备B的主副表面发生了切换，原来的副表面成为现在的主表面并显示在屏幕上。此时，设备A的屏幕只有一小部分发生了变化，为了节省网络带宽，设备A仅发送发生了变化的区域，即图中的粉红色区域。设备B在接收到该区域后，将其传输到副表面，如图5C所示。这样，在时刻4时，副表面中的内容将显示到屏幕上，如图所示。由此可见，设备A上的帧C传输到设备B上后显示，已经变成了帧A和粉红色变化区域的组合，出现了错误。 此外，在上述描绘方法中，调用Flip函数来切换两个表面，该函数的作用是进行主副表面的切换。该切换需要消耗一定的时间。另外，在画面局部变化的情况下，仍需要进行整个表面的切换，也造成了一定的资源浪费。

发明内容
鉴于上述，本发明的目的在于提供一种网络数据驱动的单表面描绘方法及装置，其能够在接收到网络数据后，使用同步描述机制来在单个表面上实现两个显示设置之间的
屏幕镜像。根据本发明的一个方面，提供了一种屏幕描绘方法，用于实现在第一显示设备上显示第二显示设备上的屏幕显示内容，所述方法包括通过网络接收从第二显示设备发送的屏幕显示内容数据，所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的屏幕区域的屏幕显示内容的数据；在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖第一显示设备的存储装置中存储的全屏显示内容数据副本中的对应区域，所述存储装置中存储的全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在第一显示设备的屏幕上当前显示的全屏屏幕显示内容数据的副本；以及将经过覆盖处理后得到的全屏显示内容数据副本绘制到第一显示设备的主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。在上述方面的一个或多个示例中，所述屏幕显示内容数据仅仅在第二显示设备上的屏幕显示内容发生变化时发送。在上述方面的一个或多个示例中，将经过覆盖处理后得到的全屏显示内容数据副本绘制到所述主表面上进行显示时，仅仅绘制与所述屏幕显示内容数据对应的屏幕区域。在上述方面的一个或多个示例中，所述第二显示设备的数据发送速率根据所述第一显示设备的用于接收数据的缓冲器的实际剩余缓冲大小进行调整。根据本发明的另一方面，提供了一种屏幕描绘装置，用于实现在第一显示设备上显示第二显示设备上的屏幕显示数据，所述屏幕描绘装置包括接收单元，用于通过网络接收从第二显示设备发送的屏幕显示内容数据，所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的屏幕区域的屏幕显示内容的数据；存储单元，用于存储全屏显示内容数据副本，所述全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在所述第一显示设备上当前显示的全屏屏幕显示内容数据的副本；覆盖单元，用于在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖所述存储单元中存储的全屏显示内容数据副本中的对应区域；以及屏幕绘制单元，用于将经过覆盖处理后的全屏显示数据副本绘制在所述主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。在上 述方面的一个或多个示例中，所述屏幕显示内容数据仅仅在第二显示设备上的屏幕显示发生变化时发送。在上述方面的一个或多个示例中，将经过覆盖处理后得到的全屏显示内容数据副本绘制到所述主表面上进行显示时，仅仅绘制与所述屏幕显示内容数据对应的屏幕区域。在上述方面的一个或多个示例中，所述第二显示设备的数据发送速率根据所述第一显示设备的用于接收数据的缓冲器的实际剩余缓冲大小进行调整。根据本发明的另一方面，提供了一种屏幕描绘方法，用于实现在第一显示设备上显示第二显示设备上的屏幕显示内容，所述方法包括通过网络接收从第二显示设备发送的屏幕显示内容数据，所述第二显示设备的屏幕显示区域被分块为多个分块区域，并且所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的分块区域的屏幕显示内容的数据；在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖第一显示设备的存储装置中存储的全屏显示内容数据副本中的对应分块区域，所述全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在所述第一显示设备的屏幕上当前显示的全屏屏幕显示内容数据的副本；获取与所述屏幕显示内容数据对应的所有对应分块区域的并集；以及将该并集对应的屏幕区域绘制到所述第一显示设备的主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。根据本发明的另一方面，提供了一种屏幕描绘装置，用于实现在第一显示设备上显示第二显示设备上的屏幕显示内容，所述屏幕描述装置包括接收单元，用于通过网络接收从第二显示设备发送的屏幕显示内容数据，所述第二显示设备的屏幕显示区域被分块为多个分块区域，并且所述屏幕显示内容数据是第二显示设备的屏幕显示区域中的发生变化的分块区域的屏幕显示内容的数据；存储单元，用于存储全屏显示内容数据副本，所述全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在所述第一显示设备上当前显示的全屏屏幕显示内容数据的副本；覆盖单元，用于在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖所述存储单元中存储的全屏显示内容数据副本中的对应分块区域；并集获取单元，用于获取与所述屏幕显示内容数据对应的所有对应分块区域的并集；以及屏幕绘制单元，用于将该并集对应的屏幕区域绘制到所述第一显示设备的主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。利用上述单表面描绘方法及装置，通过利用单表面进行描绘，可以降低了对显存的要求，减少了描绘过程中的Flip等操作，同时避免了双表面之间画面需要协调匹配的问题。此外，在本发明中，采用网络驱动直接描绘，避免使用消息触发，简化了描绘流程，也减少了对操作系统消息机制的依赖。此外，在本发明中，通过在第一显示设备的存储装置中存储在接收到发生变化的屏幕显示数据之前当前显示的屏幕的全屏显示数据副本，并且在接收到发生变化的屏幕显示数据之后，利用该发生变化的屏幕显示数据覆盖所存储的全屏显示数据副本的对应区域，然后将覆盖后的全屏显示数据副本绘制在第一显示设备的主表面，可以避免单表面描绘出现马赛克的现象。为了实现上述以及相关目的，本发明的一个或多个方面包括后面将详细说明并在权利要求中特别指出的特征。下面的说明以及附图详细说明了本发明的某些示例性方面。然而，这些方面指示的仅仅是可使用本发明的原理的各种方式中的一些方式。此外，本发明旨在包括所有这些方面以及它们的等同物。


根据下述参照附图进行的详细描述，本发明的上述和其他目的、特征和优点将变 得更加显而易见。在附图中图I示出了屏幕镜像技术的一个应用的示意图；图2示出了屏幕镜像技术的业务流程的流程图；图3示出了 Flip描绘方法中的两个表面之间的连续切换过程的示意图；图4示出了 Flip描述过程的示意图；图5A-5D示出当屏幕只发生部分变化时Flip描述方法中的各个过程的效果图；图6示出了根据本发明的第一实施例的屏幕描绘方法的流程图；图7A示出了当发送端只发送发生变化的区域时不进行马赛克消除处理时的示意图；图7B示出了当发送端只发送发生变化的区域时进行马赛克消除处理时的示意图；图8示出了通过调节接收端窗口大小的值来调节发送端发送数据的速率的流程图；图9示出了根据本发明的第一实施例的屏幕描绘装置的方框示意图；图10示出了根据本发明的第二实施例的屏幕描绘方法的流程图；和图11示出了根据本发明的第二实施例的屏幕描绘装置的方框示意图。在所有附图中相同的标号指示相似或相应的特征或功能。
具体实施例方式下面描述本公开的各个方面。应该明白的是，本文的教导可以以多种多样形式具体体现，并且在本文中公开的任何具体结构、功能或两者仅仅是代表性的。基于本文的教导，本领域技术人员应该明白的是，本文所公开的一个方面可以独立于任何其它方面实现，并且这些方面中的两个或多个方面可以按照各种方式组合。例如，可以使用本文所阐述的任何数目的方面，实现装置或实践方法。另外，可以使用其它结构、功能、或除了本文所阐述的一个或多个方面之外或不是本文所阐述的一个或多个方面的结构和功能，实现这种装置或实践这种方法。此外，本文所描述的任何方面可以包括权利要求的至少一个元素。下面将参照图6到图11描述本发明的各个实施例。第一实施例
图6示出了根据本发明的第一实施例的网络数据驱动的单表面描绘方法的流程图，该方法用于实现在第一显示设备上显示第二显示设备上的屏幕显示数据，并且该方法由第一显不设备执行。如图6所示，在步骤S610，通过网络接收从第二显示设备发送的屏幕显示数据。这里，所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的屏幕区域的屏幕显示内容的数据。所述网络可以是无线网络或有线网络。所述无线网络可以是WiFi、蓝牙、2G通信网络、3G通信网络或者其它无线通信网络。所述有线网络可以是电信网络或有线电视网络等。在接收到所述屏幕显示数据后，在步骤S620，在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖第一显示设备的存储装置中存储的全屏显示内容数据副本中的对应区域，所述存储装置中存储的全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在第一显示设备的屏幕上当前显示的全屏屏幕显示内容数据的副本。如果第一显示设备的屏幕上当前显示的全屏屏幕显示内容数据被更新，则存储装置中存储的 副本也将更新。然后，在步骤S630，将经过覆盖处理后得到的全屏显示内容数据副本绘制到第一显示设备的主表面上进行显示，从而在第一显示设备上显示第二显示设备上的屏幕显示数据。所述主表面是第一显示设备获取的唯一显示表面。当屏幕变化范围很小时，为了节省带宽，发送端(S卩，第二显示设备)只会发送发生变化的区域，这样，在接收端(即，第一显示设备)就有可能接收到属于同一帧的很多小矩形。在这种情况下，如果每次接收到一个小矩形即进行描绘，则描绘过程受网络速率的影响，加上描绘过程是一个很快速的过程，则将出现某些更新区域已经刷新，而另一些更新区域来不及刷新的情况。这种处理方式也称为不进行马赛克消除处理的处理方式。图7A示出了当发送端只发送发生变化的区域时不进行马赛克消除处理时的示意图。如图7A所示，当在设备A (即，第二显示设备)上的区域I、区域2、区域3、区域4和区域5中发生变化时，在设备B (即，第一显示设备)上仅仅描绘出区域I和区域2。而在图6中示出的处理过程中，在完成在第一显示设备上绘制并显示全屏显示数据后，在第一显示设备的存储装置中保留该全屏显示数据的一个副本(下文中称为全屏显示数据副本)。这样，在接收到从第二显示设备发送的多个更新区域屏幕显示数据后，无论是一次同时接收到还是多次接收到，都在接收到更新区域屏幕显示数据后，利用所接收的更新区域屏幕显示数据覆盖全屏显示数据副本的相应区域。例如，在一次同时接收到时，将所有数据覆盖在相应区域上。在多次接收到时，每次接收到更新区域屏幕显示数据时，都将所接收的更新屏幕显示数据覆盖在上次经过覆盖处理后得到的全屏显示数据副本上。例如，当接收到第一个更新区域屏幕显示数据时，将该第一个更新区域屏幕显示数据覆盖在存储装置中存储的全屏显示数据副本上，从而得到经过第一次覆盖处理后的全屏显示数据副本。在接收到第二个更新区域屏幕显示数据时，将该第二个屏幕显示数据覆盖在经过第一次覆盖处理后的到的全屏显示数据副本上。依次类推，直到完成所有更新区域屏幕显示数据的覆盖，由此得到完成所有更新的全屏显示数据副本。这样，只需要进行一次描绘操作，就可以实现在第一显示设备上显示第二显示设备上的屏幕显示数据，从而消除了部分描绘将形成马赛克的现象。图7B示出了当发送端只发送发生变化的区域时进行马赛克消除处理时的示意图。当在设备A (即，第二显示设备)上的区域I、区域2、区域3、区域4和区域5中发生变化时，在设备B (S卩，第一显示设备)上描绘出整个全屏显示数据。如上参照图6、图7A和7B对根据本发明的第一实施例的屏幕描述方法进行了描述。上述描述仅仅是例示性的，而不是限制性的。还可以对第一实施例进行各种变型。在该实施例的一个变型中，所述屏幕显示数据仅仅在所述第二显示设备上的屏幕显示发生变化时发送。在该实施例的另一变型中，在将经过覆盖处理后得到的全屏显示内容数据副本绘制到所述主表面上进行显示时，仅仅绘制与所述屏幕显示内容数据对应的屏幕区域。此外，在该实施例的另一变型中，从第二显示设备发送的屏幕显示数据可以是经·过打包处理的网络数据包括。在这种情况下，根据本发明的屏幕描绘方法还可以包括在接收到所述网络数据包后，对所接收的网络数据包进行解包处理，以得到第二显示设备上的屏幕显示数据。此外，在该实施例的另一变型中，在利用网络数据驱动屏幕进行描绘时，如果第一显示设备上的描绘操作未完成，则第一显示设备不会从网络端读取新的数据。在这种情况下，所述第二显示设备的数据发送速率可以根据所述第一显示设备的用于接收数据的缓冲器的实际剩余缓冲大小进行调整。图8示出了通过调节接收端窗口大小的值来调节发送端发送数据的速率的流程图，所述接收端窗口大小即是第一显示设备的用于接收数据的缓冲器的实际剩余缓冲大小。例如，假设在某一时刻，第一显示设备处在屏幕描绘阶段，此时没有从网络侧读取数据。当网络数据源源不断地到达时，TCP的缓冲区会因为数据的到达而逐渐占满，即剩余缓冲区大小逐渐变小。在这种情况下，发送端会利用TCP协议中“窗口大小”数据位来通知发送端，窗口大小的值表示缓冲区还能接收的数据量的多少。从图8中可以看出，数据没有被取出，则窗口大小逐渐变小，发送端的发送速率也逐渐变小，当窗口大小变为O后，则暂停数据发送。直到接收端描绘操作完成，将网络缓冲区数据取走，则接收端又有新的缓冲空间可以用于接收数据。因此，接收端更新自己的窗口大小，通知发送端自己能够接收的数据量，这样，发送端又开始向接收端发送数据。由此，通过TCP窗口大小调节机制，可以将数据的接收速率调整到和屏幕描绘的速率一致，从而实现速率匹配。图9示出了根据本发明的第一实施例的屏幕描绘装置900的方框示意图。如图9所示，屏幕描绘装置900可以包括接收单元910、覆盖单元920、存储单元930以及屏幕绘制单元940。接收单元910用于通过网络接收从第二显示设备发送的屏幕显示内容数据，所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的屏幕区域的屏幕显示内容的数据。存储单元930用于存储全屏显示内容数据副本，所述全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在所述第一显示设备上当前显示的全屏屏幕显示内容数据的副本。
覆盖单元920用于在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖所述存储单元中存储的全屏显示内容数据副本中的对应区域。屏幕绘制单元940用于将经过覆盖处理后的全屏显示数据副本绘制在所述主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。此外，在本发明的其它实施例中，还可以对屏幕描绘装置900进行变型。例如，在从第二显示设备发送的屏幕显示数据是经过打包处理的网络数据包时，所述屏幕描绘装置还可以包括解包单元(未示出)，用于在接 收到所述网络数据包后，对所接收的网络数据包进行解包处理，以得到第二显示设备上的屏幕显示数据。在根据本发明的第一实施例中，利用同步描绘机制替换异步描绘机制，降低了消息传递、描绘过程需要防止竞争等额外消耗，提高了描绘性能。并且仅使用一个表面进行描绘，避免了使用双表面描绘带来的问题。最后，由于采用同步描绘机制，使得网络侧可以感知描绘速度的快慢，通过TCP窗口大小调节机制调整发送端发送数据的速率，从而匹配描绘速率和网络传输速率。在该实施例中，使用单表面进行描绘。该方法是不停地在同一页上做快速的重绘覆盖工作。双表面也需要不断地做重绘覆盖操作，只不过将该操作放到副表面进行，等副表面的准备工作做好后，再将整页切换到前台显示。当重绘速度很快时，双表面描绘的这种工作机制就显得很累赘。而且，在描绘数据的来源是网络端时，相对于描绘速率而言，网络传输的速率一般较慢。同时，为了使屏幕内容经过网络传输后再显示的时间延迟最小，接收到网络数据后应立即进行描绘操作。因此需要考虑减少数据从网络接口流向显存的时间消耗。根据本发明的单表面描绘不仅可以减少Flip操作，同时也降低了对显存的要求。而且，由于只需要一个主表面，与双表面描绘相比节省了一个表面的数据存储空间，特别适用于嵌入式设备等显存不大的场合。此外，在该实施例中，使用同步描绘机制取代异步描绘机制。如上所述，在本发明中，利用网络数据驱动单表面描绘，也就是说，在从第二显示设备接收到网络数据后，就驱动第一显示设备进行屏幕绘制，这是一种同步描绘机制。异步描绘机制需要依靠消息机制来通知描绘操作的进行，因此依赖于操作系统的消息实现机制。而使用同步描绘机制，在存在屏幕描绘需要时直接进行描绘，而不依靠消息传递来进行告知。因此，同步操作节省了一定的时间。此外，在该实施例中，通过利用单表面描绘装置中的存储单元存储在接收到第二显示设备上的发生变化的屏幕显示数据之前在第一显示设备上当前显示的屏幕的全屏显示数据副本，并且在接收到发生变化的屏幕显示数据后，首先对所存储的全屏显示数据副本进行覆盖处理，然后利用覆盖处理后的全屏显示数据副本进行绘制，由此只需要做一次描绘操作，从而消除了部分描绘将形成马赛克的现象。此外，在该实施例中，利用网络数据驱动屏幕刷新。由于发送端设备仅在屏幕显示内容有变化时，才会触发数据包的发送。即，静止的画面将不产生有效数据包(有效数据包是指包含了屏幕帧信息的数据包)，因此接收端也不需要进行屏幕刷新。同样，接收端收到的任何有效数据包，都表明发送端设备的屏幕数据帧发生了变化，相应地，接收端的屏幕也需要进行刷新。正是网络数据接收与屏幕刷新两者之间的这种依赖关系，使得接收到网络数据的行为驱动屏幕刷新变得合理。网络数据驱动屏幕刷新可以避免不必要的屏幕刷新操作。此外，在该实施例中，根据所述第一显示设备的用于接收数据的缓冲器的实际剩余缓冲大小进行调整，从而将数据的接收速率调整到和屏幕描绘的速率一致，由此实现速率匹配。第二实施例图10示出了根据本发明的第二实施例的屏幕描绘方法的流程图。 如图10所示，首先，在步骤S1010中，通过网络接收从第二显示设备发送的屏幕显示内容数据，所述第二显示设备的屏幕显示区域被分块为多个分块区域，并且所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的分块区域的屏幕显示内容的数据。在接收到所述屏幕显示内容数据后，在步骤S1020，利用所接收的屏幕显示内容数据覆盖第一显示设备的存储装置中存储的全屏显示内容数据副本中的对应分块区域，所述 全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在所述第一显示设备的屏幕上当前显示的全屏屏幕显示内容数据的副本。完成上述覆盖处理后，在步骤S1030，获取与所述屏幕显示内容数据对应的所有对应分块区域的并集。然后，在步骤S1040，将该并集对应的屏幕区域绘制到所述第一显示设备的主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。图11示出了根据本发明的第二实施例的屏幕描绘装置1100的方框示意图。如图11所示，屏幕描绘装置1100包括接收单元1110、覆盖单元1120、存储单元1130、并集获取单元1140以及屏幕绘制单元1150。接收单元1110用于通过网络接收从第二显示设备发送的屏幕显示内容数据，所述第二显示设备的屏幕显示区域被分块为多个分块区域，并且所述屏幕显示内容数据是第二显示设备的屏幕显示区域中的发生变化的分块区域的屏幕显示内容的数据。存储单元1130用于存储全屏显示内容数据副本，所述全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在所述第一显示设备上当前显示的全屏屏幕显示内容数据的副本。覆盖单元1120用于在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖所述存储单元中存储的全屏显示内容数据副本中的对应分块区域。并集获取单元1140用于获取与所述屏幕显示内容数据对应的所有对应分块区域的并集。屏幕绘制单元1150用于将该并集对应的屏幕区域绘制到所述第一显示设备的主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。根据第二实施例的屏幕描绘方法，同样可以实现第一实施例的技术效果。尽管前面公开的内容示出了本发明的示例性实施例，但是应当注意，在不背离权利要求限定的本发明的范围的前提下，可以进行多种改变和修改。根据这里描述的发明实施例的方法权利要求的功能、步骤和/或动作不需以任何特定顺序执行。此外，尽管本发明的元素可以以个体形式描述或要求，但是也可以设想多个，除非明确限制为单数。虽然如上参照图描述了根据本发明的各个实施例进行了描述，但是本领域技术人员应当理解，对上述本发明所提出的各个实施例，还可以在不脱离本发明内容的基础上做出各种改进。因此，本发明的保护范围应当由所附的权利要求书的内容确定。
权利要求
1.一种屏幕描绘方法，用于实现在第一显示设备上显示第二显示设备上的屏幕显示内容，所述方法包括 通过网络接收从第二显示设备发送的屏幕显示内容数据，所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的屏幕区域的屏幕显示内容的数据； 在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖第一显示设备的存储装置中存储的全屏显示内容数据副本中的对应区域，所述存储装置中存储的全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在第一显示设备的屏幕上当前显示的全屏屏幕显示内容数据的副本；以及 将经过覆盖处理后得到的全屏显示内容数据副本绘制到第一显示设备的主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。
2.如权利要求I所述的屏幕描绘方法，其中，所述屏幕显示内容数据仅仅在第二显示设备上的屏幕显示内容发生变化时发送。
3.如权利要求I所述的屏幕描述方法，其中，将经过覆盖处理后得到的全屏显示内容数据副本绘制到所述主表面上进行显示时，仅仅绘制与所述屏幕显示内容数据对应的屏幕区域。
4.如权利要求I所述的屏幕描绘方法，其中，所述第二显示设备的数据发送速率根据所述第一显示设备的用于接收数据的缓冲器的实际剩余缓冲大小进行调整。
5.一种屏幕描绘装置，用于实现在第一显示设备上显示第二显示设备上的屏幕显示数据，所述屏幕描绘装置包括 接收单元，用于通过网络接收从第二显示设备发送的屏幕显示内容数据，所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的屏幕区域的屏幕显示内容的数据； 存储单元，用于存储全屏显示内容数据副本，所述全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在所述第一显示设备上当前显示的全屏屏幕显示内容数据的副本； 覆盖单元，用于在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖所述存储单元中存储的全屏显示内容数据副本中的对应区域；以及 屏幕绘制单元，用于将经过覆盖处理后的全屏显示数据副本绘制在所述主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。
6.如权利要求5所述的屏幕描述装置，其中，所述屏幕显示内容数据仅仅在第二显示设备上的屏幕显示发生变化时发送。
7.如权利要求5所述的屏幕描述装置，其中，将经过覆盖处理后得到的全屏显示内容数据副本绘制到所述主表面上进行显示时，仅仅绘制与所述屏幕显示内容数据对应的屏幕区域。
8.如权利要求5所述的屏幕描绘装置，其中，所述第二显示设备的数据发送速率根据所述第一显示设备的用于接收数据的缓冲器的实际剩余缓冲大小进行调整。
9.一种屏幕描绘方法，用于实现在第一显示设备上显示第二显示设备上的屏幕显示内容，所述方法包括 通过网络接收从第二显示设备发送的屏幕显示内容数据，所述第二显示设备的屏幕显示区域被分块为多个分块区域，并且所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的分块区域的屏幕显示内容的数据； 在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖第一显示设备的存储装置中存储的全屏显示内容数据副本中的对应分块区域，所述全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在所述第一显示设备的屏幕上当前显示的全屏屏幕显示内容数据的副本； 获取与所述屏幕显示内容数据对应的所有对应分块区域的并集； 将该并集对应的屏幕区域绘制到所述第一显示设备的主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。
10.一种屏幕描绘装置，用于实现在第一显示设备上显示第二显示设备上的屏幕显示内容，所述屏幕描述装置包括 接收单元，用于通过网络接收从第二显示设备发送的屏幕显示内容数据，所述第二显示设备的屏幕显示区域被分块为多个分块区域，并且所述屏幕显示内容数据是第二显示设备的屏幕显示区域中的发生变化的分块区域的屏幕显示内容的数据； 存储单元，用于存储全屏显示内容数据副本，所述全屏显示内容数据副本是在接收到所述屏幕显示内容数据之前在所述第一显示设备上当前显示的全屏屏幕显示内容数据的副本； 覆盖单元，用于在接收到所述屏幕显示内容数据后，利用所接收的屏幕显示内容数据覆盖所述存储单元中存储的全屏显示内容数据副本中的对应分块区域； 并集获取单元，用于获取与所述屏幕显示内容数据对应的所有对应分块区域的并集；屏幕绘制单元，用于将该并集对应的屏幕区域绘制到所述第一显示设备的主表面上进行显示，所述主表面是所述第一显示设备获取的唯一显示表面。
全文摘要
本发明提供了一种屏幕描绘方法，用于实现在第一显示设备上显示第二显示设备上的屏幕显示内容，所述方法包括通过网络接收从第二显示设备发送的屏幕显示内容数据，所述屏幕显示内容数据是第二显示设备的屏幕显示区域中发生变化的屏幕区域的屏幕显示内容的数据；利用所接收的屏幕显示内容数据覆盖第一显示设备的存储装置中存储的全屏显示内容数据副本中的对应区域；以及将经过覆盖处理后得到的全屏显示内容数据副本绘制到第一显示设备的主表面上进行显示。利用本发明的方法，可以降低对显存的要求，减少了描绘过程中的Flip等操作，同时避免出现双表面之间画面需要协调匹配的问题。
文档编号G09G5/00GK102929570SQ20121036476
公开日2013年2月13日 申请日期2012年9月26日 优先权日2012年9月26日
发明者聂山人, 杨明, 张翼, 包蕊 申请人:东软集团股份有限公司