专利名称：采集指示信息输出的方法、终端及系统的制作方法
技术领域：
本发明涉及计算机、软件技术领域。
背景技术：
随着计算机、互联网的发展，通过网络进行信息交流已成为人们进行人际交往的一种重要方式。在通过网络进行交流时，人们经常需要进行文件、图像等各种信息的共享， 例如用户希望把自己当前所浏览的网页图像发送给对方，目前的技术可以有多种实现方式，可以通过将信息复制到word文档上进行发送，也可以直接将网址链接发送至对方，或者进行屏幕截图发送给对方。对于客户端屏幕上显示的信息内容进行多用户共享，现有技术很容易实现。但是， 对于来自屏幕之外的针对屏幕信息的指示信息，现有技术还无法实现将该指示信息共享给其他用户，这给用户的跨平台交流带来了很大的不便。因此，当前需要本领域技术人员迫切解决的一个技术问题就是对于来自于屏幕之外的指示信息，能够进行有效的采集，并和屏幕信息融合在一起在客户端输出。
发明内容
本发明的目的在于，提供一种采集指示信息输出的方法、终端及系统。利用本发明，将来自于屏幕之外的针对于屏幕信息内容的指示信息，进行有效采集，并和屏幕信息融合在一起在客户端输出，使得用户能够将屏幕之外的指示信息分享给其他用户，更加方便了用户之间的跨平台交流。为了解决上述的技术问题，本发明提供以下技术方案—种采集指示信息输出的方法，包括以下步骤步骤1，采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；步骤2，将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中；步骤3，将融合有指示信息的源客户端屏幕信息，传输到目标客户端中输出。优选的，所述的指示信息是来自于屏幕之外，对屏幕信息内容进行定位的信息，包括用户指示手势或用于指示的指示工具。优选地，所述屏幕信息及指示信息的采集方式，可以通过摄像进行采集或超声波定位进行采集。优选地，通过摄像进行采集时，在显示屏幕前方的左右两侧分别设置一个或多个摄像装置，使得显示屏幕的信息内容被完整采集。优选的，将采集的指示信息，融合在所述的源客户端屏幕信息中采用以下其中之一的方式Al，将采集的包含指示信息及屏幕信息的图像，作为融合的图像信息；
A2，将采集的两个或两个以上包含指示信息的屏幕图像，融合为一个包含指示信息的完整屏幕信息图像；A3，根据采集数据，对采集的指示信息进行定位，再将定位信息加载到所对应的屏幕信息内容中；A4，将采集的指示信息进行数据转换，转化成其它指示图标，然后将该指示图标融合到屏幕信息中。优选的，所述步骤2中将采集的指示信息融合在所述的源客户端屏幕信息中，采用以下其中之一的途径Bi，在源客户端进行数据融合处理；B2，将采集的数据发送到系统服务器，由服务器进行数据融合处理，然后再发送至目标客户端。优选的，源客户端和目标客户端的连接方式有以下几种Cl，源客户端和目标客户端直接进行连接，并进行信息传输；C2，源客户端通过传输网连接于系统服务器，然后，再通过传输网连接到目标客户端；C3，一个源客户端的主机连接着一个或一个以上的包括有显示装置在内的目标客户端。本发明还提供一种采集指示信息输出的终端，该终端包括指示信息采集模块，用以采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；信息融合模块，与所述指示信息采集模块相连，用以将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中；融合信息输出模块，与所述信息融合模块相连，用以将融合有指示信息的源客户端屏幕信息，传输到目标客户端中输出。本发明还提供另一种采集指示信息输出的方法，该方法包括以下步骤步骤1，采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；步骤2，将采集的前述信息发送至目标客户端；步骤3，在目标客户端，将接收的指示信息融合在所述的源客户端屏幕信息中输出ο优选的，针对于所述的步骤1，对应着源客户端，在其显示屏幕前方的左右两侧分别设置一个或多个摄像装置。优选的，所述步骤3中将接收的指示信息融合在所述的源客户端屏幕信息中采用以下其中之一的方式D1，将采集的包含指示信息及屏幕信息的图像，作为融合信息；D2，将采集的两个或两个以上包含指示信息的屏幕图像，融合为一个包含指示信息的完整屏幕信息图像；D3，根据采集数据，对采集的指示信息进行定位，再将定位信息加载到所对应的屏幕信息内容中；
D4，将采集的指示信息进行数据转换，转化成其它指示图标，然后将该指示图标融合到屏幕信息中。本发明还提供另一种采集指示信息输出的终端，该终端包括指示信息采集模块，用以采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；指示信息发送模块，与所述指示信息采集模块相连，用以将采集的前述信息发送至目标客户端；指示信息融合输出模块，与所述指示信息发送模块相连，用以在目标客户端将来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中输出。本发明还提供一种采集指示信息输出的系统，该系统包括指示信息采集模块，设置在源客户端，用于采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；信息融合模块，用于将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中；设置在源客户端或目标客户端或系统服务器三者至少其一中；数据传输系统，用于将数据信息从源客户端传输至目标客户端；信息输出模块，设置在目标客户端，用于将融合有指示信息的源客户端屏幕信息在目标客户端中输出。本发明的优点在于通过对来自于屏幕之外的针对屏幕内容的指示信息进行采集，并将指示信息与屏幕内容进行融合，然后通过数据传输与其他客户端用户进行信息共享，使得人们在网络信息交流中，不仅可以共享客户端屏幕信息内容，而且可以共享来自于屏幕信息之外的指示信息，对于远程信息交流具有重要作用。
图1为本发明实施例中源客户端和目标客户端连接方式一的示意图；图2为本发明实施例中源客户端和目标客户端连接方式二的示意图；图3为本发明实施例中源客户端和目标客户端连接方式三的示意图；图4为本发明实施例中指示信息和屏幕信息融合方式一的示意图；图5为本发明实施例中指示信息和屏幕信息融合方式二的示意图；图6为本发明实施例中指示信息和屏幕信息融合方式三的示意图；图7为本发明实施例中布局有摄像装置的客户端的示意图；图8为本发明第一实施例提供的一种采集指示信息输出的方法流程图；图9为本发明第二实施例提供的一种采集指示信息输出的方法流程图；图10为本发明第三实施例提供的一种采集指示信息输出的终端装置的示意图；图11为本发明第四实施例提供的一种采集指示信息输出的终端装置的示意图；图12为本发明第五实施例提供的一种采集指示信息输出的系统的示意图。
具体实施例方式为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式
对本发明作进一步详细的说明。
6
本发明的核心思想在于在源客户端，将来自于屏幕之外针对于屏幕信息的指示信息进行采集，并将指示信息和屏幕信息融合在一起，然后将融合后的信息内容与目标客户端进行共享。下面结合图1至图7，对本发明的核心思想进行简要说明。源客户端和目标客户端的连接方式有以下三种1，源客户端和目标客户端直接进行连接，并进行信息传输。如图1所示，展示的是源客户端和目标客户端连接方式100的示意图，源客户端 110和目标客户端121以及其它目标客户端之间均是直接连接，它们之间可以直接进行数据传输，其中目标客户端包括有多个，源客户端110可以将数据同时传输到多个目标客户端。2，源客户端通过传输网连接于系统服务器，然后，再通过传输网连接到目标客户端。如图2所示，展示的是源客户端和目标客户端连接方式200的示意图，源客户端 210以及各目标客户端231均和服务器220连接，源客户端210将数据发送给服务器，服务器再将数据发送至多个目标客户端。3，一个源客户端的主机连接一个或一个以上的包括有显示装置在内的目标客户端。如图3所示，为源客户端和目标客户端连接方式300的示意图，源客户端310的主机320和多个包括有显示装置的目标客户端相连接，源客户端屏幕上显示的信息同时在目标客户端331以及其它目标客户端上显示。将采集的指示信息，融合在所述的源客户端屏幕信息中的方式有以下四种方式1，将采集的包含指示信息及屏幕信息的图像，作为融合的图像信息。对于通过摄像装置采集的图像，如果某一个摄像装置所拍摄的图像信息中就包含完整的指示信息以及整个屏幕信息内容，那么就可以将该图像直接作为融合有指示信息的源客户端屏幕信息。方式2，将采集的多个包含指示信息的部分屏幕图像，融合为一个包含指示信息的完整屏幕信息图像。对于通过摄像装置采集的图像，可能每个摄像装置仅拍摄到部分指示信息或屏幕信息内容，需要将不同角度拍摄的多个图像进行拼接后，才能获取到包含有完整的指示信息以及整个屏幕信息内容的图像信息。如图4所示，展示的是指示信息和屏幕信息融合方式400的示意图，其中左图像 410和右图像420为两个摄像装置在不同的角度进行拍摄所采集到的图像，其中左图像410 中包括有左侧指示信息411，右图像420中包含有右侧指示信息421，将左图像410和右图像420拼接在一起，才获取到包含有整个指示信息431的完整屏幕信息图像430。方式3，根据采集数据，对采集的指示信息进行定位，再将采集的指示信息加载到所对应的屏幕信息内容中。通过摄像装置采集图像时，也可以只采集指示信息的内容，并对指示信息针对于屏幕信息的位置关系进行定位，然后将所采集的指示信息加载到屏幕信息中。如图5所示，展示的是指示信息和屏幕信息融合方式500的示意图，采集到的指示信息为用户的手势指示信息510，同时还采集有源客户端的屏幕信息520，在屏幕信息520 中包含有标志信息521以及标志图标522，根据手势指示信息510相对于两个标志的位置关系，对手势指示信息510在整个屏幕信息中的位置进行定位，进而将手势指示信息510融合到客户端屏幕信息中相对应的位置，生成融合有手势指示信息的源客户端屏幕图像530。另外，还可以通过设置坐标形式来对采集的指示信息进行位置定位，首先将摄像装置采集到的整个屏幕设置为坐标图形，采集指示信息时，通过识别指示信息在坐标系中的坐标位置即可确定其在整个屏幕中的位置。方式4，将采集的指示信息进行数据转换，转化成其它指示图标，然后再融合到屏 ^fn息中ο对于通过摄像装置采集的图像，所采集到的指示信息为真实存在的指示手势或者其它指示工具，对于这种指示信息也可以将其转换为其它指示图标形式，然后再融合到屏 ^fn息中ο如图6所示，展示的是指示信息和屏幕信息融合方式600的示意图，采集到的指示信息为用户的手势指示信息610，同时对采集的手势指示信息610针对整个屏幕信息的位置进行定位，然后将手势指示信息610转换成相应的指示图标620，再根据定位信息将指示图标620融合到客户端屏幕信息中相对应的位置，生成融合有指示图标的屏幕图像630。对于摄像装置在客户端的布局方式，根据其摄像采集的效果以及客户端结构进行设置，为了达到更好的摄像采集效果，将摄像装置设置在显示屏幕前方的左右两侧较为合适。如图7所示，为本发明实施例中布局有摄像装置的客户端700的示意图，包括有显示屏幕710，左摄像装置720以及右摄像装置730。如图所示，摄像装置位于显示屏幕710 前方的左右两侧，当一个摄像装置无法拍摄到整个屏幕的图像范围时，通过在不同角度位置设置多个摄像装置，来对整个屏幕图像信息进行采集。下面结合图8和图9所示，对本发明提供的方法作详细描述。参见图8，为本发明第一实施例提供的一种采集指示信息输出的方法流程图，具体步骤如下所述。S11，采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息。对于信息的采集方式可以为摄像采集或超声波定位采集，本实施例优选摄像采集方式，通过对客户端屏幕信息以及针对于屏幕内容的指示信息进行图像拍摄，采集目标信息。其中摄像装置在客户端的位置，应根据拍摄效果进行设置，能够有效的拍摄到指示信息以及屏幕信息的地方为优选位置。如图7所示，摄像装置设置在显示屏幕前方的左右两侧， 拍摄效果较佳。这里所述的指示信息，是指针对屏幕的信息内容进行定位的指示工具。例如，用户通过手势来指引屏幕的信息内容，则用户的指示手势即为所述的指示信息，另外所述的指示信息也可以是激光指示棒等用以指示屏幕信息的指示工具。S12，将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中。将采集的指示信息，融合在所述的源客户端屏幕信息中的方式可采用以下其中之方式1，将采集的包含指示信息及屏幕信息的图像，作为融合的图像信息。
方式2，将采集的多个包含指示信息的部分屏幕图像，融合为一个包含指示信息的完整屏幕信息图像。方式3，根据采集数据，对采集的指示信息进行定位，再将采集的指示信息加载到所对应的屏幕信息内容中。方式4，将采集的指示信息进行数据转换，转化成其它指示图标，然后再融合到屏 ^fn息中ο针对每种融合方式的具体过程在前面已作详细叙述，此处不再赘述。对于进行图像融合处理的系统，可以直接设置在源客户端，由源客户端进行图像融合处理。也可以设置在服务器，由源客户端将采集的图像信息发送至服务器，由服务器对图像信息进行融合处理。S13，将融合有指示信息的源客户端屏幕信息，传输到目标客户端中输出。源客户端和目标客户端之间的连接方式包括有以下几种方式1，源客户端和目标客户端直接进行连接，并进行信息传输。对于这种连接方式，源客户端可以将融合有指示信息的源客户端屏幕信息，直接传输到目标客户端，可以不通过网络进行数据传输。方式2，源客户端通过传输网连接于系统服务器，然后，再通过传输网连接到目标客户端。对于这种连接方式，源客户端将融合有指示信息的源客户端屏幕信息先通过传输网传输至系统服务器，然后再由服务器将数据信息传输至目标客户端。另外也可以在源客户端和目标客户端建立网络传输通道后，不经过服务器，直接通过 P2P方式进行数据信息传输。方式3，一个源客户端的主机连接着一个或一个以上的包括有显示装置在内的目标客户端。对于这种连接方式，融合有指示信息的源客户端屏幕信息在源客户端显示装置上输出显示后，其它的目标客户端上即同时显示所述的屏幕信息。参见图9，为本发明第二实施例提供的一种采集指示信息输出的方法流程图。S21，采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；本步骤的具体实施过程和第一实施例中的步骤Sll中所描述的过程是相同的，此处不再赘述。S22，将采集的前述信息发送至目标客户端；S23，在目标客户端，将接收的指示信息融合在所述的源客户端屏幕信息中输出。本实施例所提供的一种采集指示信息输出的方法，与第一实施例提供的方法主要不同点在于，采集之后的图像信息不是在源客户端进行处理，而是直接将采集的图像信息发送至目标客户端，由目标客户端针对接收的图像将指示信息和屏幕信息进行融合处理， 处理完之后直接进行输出。其具体的图像融合处理方式以及数据传输方式和第一实施例中所描述的方法是相同的。参见图10，为本发明第三实施例提供的一种采集指示信息输出的终端装置810的示意图，该装置具体包括指示信息采集模块811，用以采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；信息融合模块812，与所述指示信息采集模块811相连，用以将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中；融合信息输出模块813，与所述信息融合模块812相连，用以将融合有指示信息的源客户端屏幕信息，传输到目标客户端中输出。本实施例所述的终端装置中，由指示信息采集模块811采集源客户端的屏幕信息以及针对该屏幕信息的指示信息，并将采集的信息发送至信息融合模块812 ；信息融合模块812将来自于屏幕外的指示信息融合到源客户端屏幕信息中；由融合信息输出模块813 将融合有指示信息的屏幕信息，传输到目标客户端中输出。参见图11，为本发明第四实施例提供的一种采集指示信息输出的终端装置820的示意图，该装置具体包括指示信息采集模块821，用以采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；指示信息发送模块822，与所述指示信息采集模块821相连，用以将采集的前述信息发送至目标客户端；指示信息融合输出模块823，与所述指示信息发送模块822相连，用以在目标客户端，将来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中输出。本实施例所述的终端装置中，由指示信息采集模块821采集源客户端的屏幕信息以及针对该屏幕信息的指示信息；指示信息发送模块822将所采集的屏幕信息及指示信息发送至目标客户端；指示信息融合输出模块823，设置在目标客户端，用以接收指示信息发送模块822所发送的屏幕信息及指示信息，并将接收的指示信息融合到屏幕信息中，然后进行输出。参见图12，为本发明第五实施例提供的一种采集指示信息输出的系统900的示意图，该系统包括源客户端910，具体包括指示信息采集模块911，用于采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；数据处理系统920，可设置在源客户端或目标客户端或系统服务器中，具体包括信息融合模块921，用于将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中；目标客户端930，具体包括信息输出模块931，用于将融合有指示信息的源客户端屏幕信息在目标客户端中输出；数据传输系统940，用于将数据信息从源客户端传输至目标客户端；数据信息可以直接从源客户端传输至目标客户端，也可以先传输至系统服务器，再由服务器将数据传输至目标客户端。本实施例所述的系统中，由源客户端910中的指示信息采集模块911，针对源客户端屏幕信息以及针对于屏幕信息的指示信息进行采集；数据传输系统940将采集的信息传输至数据处理系统920 ；由数据处理系统920中的信息融合模块921，将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中；数据传输系统940再将融合后的信息传输至目标客户端930中的信息输出模块931 ；信息输出模块931将融合有指示信息的源客户端屏幕信息在目标客户端中输出。 以上是对本发明的描述而非限定，基于本发明思想的其它实施方式，均在本发明的保护范围之中。
权利要求
1.一种采集指示信息输出的方法，其特征在于，该方法具体包括以下步骤步骤1，采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息； 步骤2，将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中； 步骤3，将融合有指示信息的源客户端屏幕信息，传输到目标客户端中输出。
2.根据权利要求1所述的一种采集指示信息输出的方法，其特征在于所述的指示信息是来自于屏幕之外，对屏幕信息内容进行定位的信息，包括用户指示手势或用于指示的指示工具。
3.根据权利要求1所述的一种采集指示信息输出的方法，其特征在于屏幕信息及指示信息的采集方式，通过摄像采集或超声波定位至少其一的方式进行采集。
4.根据权利要求3所述的一种采集指示信息输出的方法，其特征在于所述摄像采集方式，在显示屏幕前方的左右两侧分别设置一个或多个摄像装置。
5.根据权利要求1所述的一种采集指示信息输出的方法，其特征在于所述步骤2中将采集的指示信息，融合在所述的源客户端屏幕信息中采用以下其中之一的方式，Al，将采集的包含指示信息及屏幕信息的图像，作为融合的图像信息； A2，将采集的两个或两个以上包含指示信息的屏幕图像，融合为一个包含指示信息的完整屏幕信息图像；A3，根据采集数据，对采集的指示信息进行定位，再将定位信息加载到所对应的屏幕信息内容中；A4，将采集的指示信息进行数据转换，转化成其它指示图标，然后将该指示图标融合到屏幕信息中。
6.根据权利要求1所述的一种采集指示信息输出的方法，其特征在于所述步骤2中将采集的指示信息，融合在所述的源客户端屏幕信息中采用以下其中之一的途径，Bi，在源客户端进行数据融合处理；B2，将采集的数据发送到系统服务器，由服务器进行数据融合处理，然后再发送至目标客户端。
7.根据权利要求1所述的一种采集指示信息输出的方法，其特征在于源客户端和目标客户端采用以下至少其一的连接方式，Cl，源客户端和目标客户端直接进行连接，并进行信息传输；C2，源客户端通过传输网连接于系统服务器，然后，再通过传输网连接到目标客户端；C3，一个源客户端的主机连接着一个或一个以上的包括有显示装置在内的目标客户端。
8.一种采集指示信息输出的终端，其特征在于该终端包括，指示信息采集模块，用以采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；信息融合模块，与所述指示信息采集模块相连，用以将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中；融合信息输出模块，与所述信息融合模块相连，用以将融合有指示信息的源客户端屏幕信息，传输到目标客户端中输出。
9.一种采集指示信息输出的方法，其特征在于该方法还可采用以下步骤，步骤1，采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；步骤2，将采集的前述信息发送至目标客户端；步骤3，在目标客户端，将接收的指示信息融合在所述的源客户端屏幕信息中输出。
10.根据权利要求9所述的一种采集指示信息输出的方法，其特征在于针对于所述的步骤1，对应着源客户端，在其显示屏幕前方的左右两侧分别设置一个或多个摄像装置。
11.根据权利要求9所述的一种采集指示信息输出的方法，其特征在于所述步骤3中将接收的指示信息融合在所述的源客户端屏幕信息中采用以下其中之一的方式，D1，将采集的包含指示信息及屏幕信息的图像，作为融合信息；D2，将采集的两个或两个以上包含指示信息的屏幕图像，融合为一个包含指示信息的完整屏幕信息图像；D3，根据采集数据，对采集的指示信息进行定位，再将定位信息加载到所对应的屏幕信息内容中；D4，将采集的指示信息进行数据转换，转化成其它指示图标，然后将该指示图标融合到屏幕信息中。
12.—种采集指示信息输出的终端，其特征在于该终端包括，指示信息采集模块，用以采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；指示信息发送模块，与所述指示信息采集模块相连，用以将采集的前述信息发送至目标客户端；指示信息融合输出模块，与所述指示信息发送模块相连，用以在目标客户端，将来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中输出。
13.一种采集指示信息输出的系统，其特征在于该系统包括源客户端，具体包括指示信息采集模块，用于采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；数据处理系统，可设置在源客户端或目标客户端或系统服务器三者至少其一中，具体包括信息融合模块，用于将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中；目标客户端，具体包括信息输出模块，用于将融合有指示信息的源客户端屏幕信息在目标客户端中输出；数据传输系统，用于将数据信息从源客户端传输至目标客户端；数据信息可以直接从源客户端传输至目标客户端，也可以先传输至系统服务器，再由服务器将数据传输至目标客户端。
全文摘要
本发明提供一种采集指示信息输出的方法、终端及系统，属于计算机、软件技术领域。该方法包括采集源客户端屏幕信息，以及针对于该屏幕的来自于屏幕之外的指示信息；将采集的来自于屏幕之外的指示信息，融合在所述的源客户端屏幕信息中；将融合有指示信息的源客户端屏幕信息，传输到目标客户端中输出。利用本发明，将来自于屏幕之外的针对于屏幕信息内容的指示信息，进行有效采集，并和屏幕信息融合在一起在目标客户端输出，使人们可以共享来自于屏幕信息之外的指示信息，对于远程信息交流具有重要作用。
文档编号G06F3/033GK102426479SQ20111032825
公开日2012年4月25日 申请日期2011年10月26日 优先权日2011年10月26日
发明者刘红梅, 马宇尘 申请人:上海量明科技发展有限公司