一种利用AR进行远程会议的方法与流程

本发明涉及远程会议领域，尤其是指一种利用ar进行远程会议的方法。

背景技术：

现有的远程会议是指利用现代化的通讯手段，实现跨区域召开会议的目的。要召开远程会议，通常需要有通信线路、远程会议系统，当然在某些情况下还需要专业的服务来协助以获得更好的远程会议效果。

现今远程会议已得到了广泛的运用，但是仍然有许多情况需要人员亲自到场参加会议，如会议中需要签署文件等。而代表公司出省、出国参加会议的董事、经理等高管由于公司事务缠身，经常脱不开身，因此需要有公司其他员工能代表他们出席会议，并且该员工还需具备较高的现场应对能力，避免公司利益受损，而要找到这样的员工并不容易。针对这一问题，现今还没有较为完善的现有技术能够解决。

增强现实技术（ar技术）是利用计算机生成一种逼真的视、听、力、触和动等感觉的虚拟环境，通过各种传感设备使用户“沉浸”到该环境中，实现用户和环境直接进行自然交互。它是一种全新的人机交互技术，利用这样一种技术，可以模拟真实的现场景观，它是以交互性和构想为基本特征的计算机高级人机界面。增强现实技术，不仅展现了真实世界的信息,而且将虚拟的信息同时显示出来，两种信息相互补充、叠加。如果能将ar技术应用到远程会议领域，则将有可能彻底改变现有的远程会议模式，但是至今远程会议领域依然鲜有ar技术的身影。

中国发明专利一种基于ar技术和地理信息技术的埋地管线巡检方法及装置（申请公布号：cn106791620a），公开了其包括ar眼镜和安装在ar眼镜上的摄像头、数据处理融合终端；所述数据处理融合终端包括摄像头接口、gps定位模块、网络通信模块、微处理模块、视频接口，所述摄像头接口、gps定位模块、网络通信模块、视频接口分别与微处理模块连接；所述摄像头与摄像头接口连接，所述ar眼镜与视频接口连接。将该发明应用到远程会议，也仅能让与会员工通过云端数据自行调取相应的公司资料、运营策略等信息，而无法让与会员工在画面上与高管进行动态的互动。

技术实现要素：

本发明提供一种利用ar进行远程会议的方法，其主要目的在于克服现有技术中无法让与会人员能够在与会过程中远程与高管进行无碍交流的缺陷。

为解决上述技术问题，本发明采用如下技术方案：

一种利用ar进行远程会议的方法，包括以下步骤：

1)正在参加会议的与会人员戴上ar眼镜，ar眼镜上的摄像头根据与会人员的视角实时采集当前的会议现场实景，并将该会议现场实景实时传输到cpu模块；

2)所述cpu模块通过视频接口将该会议现场实景传输到所述ar眼镜上进行实时的投影显示；同时，该cpu模块还将该会议现场实景的数据通过无线通信模块传输到远程终端控制系统上实时显示；

3)与会人员对ar眼镜投影出来的会议现场实景中需要向高管描述的资料、其他参会人员进行标记，该与会人员标记的数据再实时传输至所述cpu模块中，与cpu模块中的会议现场实景进行叠加；

4)cpu模块将叠加有所述与会人员标记的会议现场实景数据通过无线通信模块传输到所述远程终端控制系统上实时显示；

5)高管对显示在远程终端控制系统上的会议现场实景中需要向与会人员解释的资料、需要注意的参会人员进行标记，该高管标记的数据再通过无线通信模块实时传输到所述cpu模块，与cpu模块中的会议现场实景、与会人员标记进行叠加；

6)cpu模块通过所述视频接口将叠加有所述与会人员标记、高管标记的会议现场实景传输到所述ar眼镜上进行实时的投影显示；

7)步骤1～6进行的同时，与会人员通过ar眼镜上的蓝牙耳机与位于远程终端控制系统处的高管进行实时对话。

进一步的，步骤3中，与会人员进行标记的方法为：与会人员通过操作与所述cpu模块信号控制连接的驱动装置使所述ar眼镜中的系统光标移动至要标记的位置进行标记。

进一步的，所述驱动装置可以为外置的触摸板、手柄、鼠标中的一种。

进一步的，所述远程终端控制系统为pc、手机、平板电脑中的一种。

和现有技术相比，本发明产生的有益效果在于:

本发明将ar眼镜通过无线通信模块与远程终端控制系统远程信号连接，使得与会人员在ar眼镜上看到的图像能够实时传送给位于会议现场之外的远程终端控制系统，让高管不需远赴千里之外，只要呆在公司便能够身临其境般地看到与会人员看到的会议现场，让高管的时间能够得到更有效、充分的利用；由于ar眼镜增强现实的作用，因此即便高管与与会人员相隔千里，也可恍若身处当地地参加会议，注意到会议现场的各个细节、其他参会人员的具体表现细节，从而因地制宜地做出最佳策略，而不存在与会人员由于经验、能力不足而无法做出准确判断的情况，最大程度地实现人才的有效利用；此外，由于ar眼镜的图像叠加功能，使得与会人员可在ar眼镜投影出来的会议现场实景中进行标记，并将该与会人员标记与会议现场实景叠加的图像实时发送给远程终端控制系统，高管则可在远程终端控制系统上的会议现场实景中进行标记，并将该高管标记实时发送给cpu模块，最终使得与会人员与高管能够同步地看到会议现场实景、与会人员标记、高管标记三者叠加的图像，从而让与会人员能够在ar眼镜上与高管进行动态的互动，让与会人员在会议过程中能够及时、准确地向高管指出会议的关键信息及参会人员，让高管及时提出最佳的应对策略，并指出要重点关注的信息资料及需重点关注的参会人员，避免与会人员在会议过程中出现纰漏，以使公司能获得的利益最大化。

附图说明

图1为本发明的结构示意图。

图2为本发明中所述ar眼镜上的模块连接框图。

图3为本发明的数据信号传输框图。

图4为本发明的应用框图。

具体实施方式

下面参照附图说明本发明的具体实施方式。

参照图1、图2、图3和图4。一种利用ar进行远程会议的设备，包括供与会人员佩戴的ar眼镜1、装设于该ar眼镜1上的摄像头2、cpu模块3、无线通信模块4、摄像头接口51、视频接口52、供高管使用的远程终端控制系统7，其中，cpu模块3、无线通信模块4、视频接口52、摄像头接口51集成在一控制盒8内并装设于ar眼镜1上；

cpu模块3通过无线通信模块4与远程终端控制系统7无线信号连接；

摄像头2通过摄像头接口51与cpu模块3连接，ar眼镜1通过视频接口52与cpu模块3连接。

具体的，参照图1、图2、图3和图4。

ar眼镜1具有镜片11和镜架12，该摄像头2可以采用双目深度摄像头，该双目深度摄像头嵌设在镜架12的中间位置，双目深度摄像头是使用立体视觉的原理（stereo，mvs）来估计深度，其利用视差原理来求取深度的，投射一个图案，然后进行比较，其能起到增强现实的作用。

无线通信模块4可以采用wifi、2g、3g、4g等无线通信模式。

远程终端控制系统7可以为pc、手机、平板电脑、另外一个ar眼镜中的一种。远程终端控制系统7中也设有无线通信模块，并能与ar眼镜1上的无线通信模块4达成信号对接。

用于集成cpu模块3、无线通信模块4、视频接口52、摄像头接口51的控制盒8可以装设在镜架12的侧边上或者镜架12的中间位置与摄像头2邻接。

另外，参照图1、图2、图3和图4。还包括一蓝牙耳机9，所述蓝牙耳机9可拆卸地卡设在ar眼镜的镜架12上，具体应用时，也可设置一对蓝牙耳机9，并分别可拆卸地卡设在ar眼镜的镜架12的左右两侧，该蓝牙耳机与与会人员的手机蓝牙对接，其具有接听电话的功能，使得与会人员能通过蓝牙耳机与高端通话，而不需另外再取出手机，释放了与会人员的双手，让他能够边通话边做笔记、标记等。

参照图1、图2、图3和图4。具体的，蓝牙耳机9上具有一与镜架12相适配的卡套91，该蓝牙耳机可通过该卡套91卡设在镜架12上。另外，还包括线绳92，镜架12上开设有环形槽13，线绳92一端绕设在环形槽13内、另一端与蓝牙耳机9连接，该环形槽既能起到固定线绳的作用，而且可以避免线绳绕设在镜架12上时形成凸起而影响戴ar眼镜时的舒适感。其使用方法为：

①、当用户要使用蓝牙耳机时，对卡设在镜架两侧的蓝牙耳机稍微施力，将其取下，并插到耳朵内；由于线绳的作用，使得蓝牙耳机即便从耳朵上脱落，也不会掉落到地上，重新插上便可。

②、当用户使用完蓝牙耳机后，将蓝牙耳机拔离耳朵，将其分别移动至镜架的两侧，并使其上的卡套91正对镜架，将该卡套按压至卡设在镜架外侧。

参照图1、图2、图3和图4。一种利用ar进行远程会议的方法，包括以下步骤：

步骤一

正在参加会议的与会人员戴上ar眼镜1，ar眼镜1上的摄像头2根据与会人员的视角实时采集当前的会议现场实景，并将该会议现场实景实时传输到cpu模块3。

本发明中的会议现场可包括国内、国外，也可包括室内、室外。

步骤二

cpu模块3通过视频接口52将该会议现场实景传输到ar眼镜1上进行实时的投影显示；同时，该cpu模块3还将该会议现场实景的数据通过无线通信模块4传输到远程终端控制系统7上实时显示。

步骤三

与会人员对ar眼镜1投影出来的会议现场实景中需要向高管描述的资料、其他参会人员进行标记，该与会人员标记的数据再实时传输至cpu模块3中，与cpu模块中的会议现场实景进行叠加。

其中，与会人员进行标记的方法为：与会人员通过操作与cpu模块3信号控制连接的驱动装置6使ar眼镜1中的系统光标移动至要标记的位置进行标记。该驱动装置6可以为外置的触摸板、手柄、鼠标中的一种，此外，也可设置该驱动装置为指环或手环，既美观、便于携带，而且操作更加方便。

中国发明专利公开了一种光标控制方法与基于该方法的ar眼镜与智能指环（申请公布号：cn106354253a），该智能指环包括红外发射模块，可以发射出红外信号；蓝牙发射模块，发射蓝牙控制信号；触摸控制模块，通过不同的触摸方式，蓝牙发射模块发射出不同蓝牙控制信号以及控制红外发射模块发射红外信号。若本发明的驱动装置6设为指环，可采用该发明中智能指环的结构进行设计。

步骤四

cpu模块3将叠加有与会人员标记的会议现场实景数据通过无线通信模块4传输到远程终端控制系统7上实时显示。

远程终端控制系统7可以为pc、手机、平板电脑、另外一个ar眼镜中的一种。并且，远程终端控制系统7并不局限于个数只有一个，也可为复数个，并分别位于各个不同的地方（如分别位于公司总部、分部），即一个在会议现场的与会人员，可以有多个高管在会议现场之外提供指导意见，避免与会人员在会议过程中出现纰漏，以使公司能获得的利益最大化。

步骤五

高管对显示在远程终端控制系统7上的会议现场实景中需要向与会人员解释的资料、需要注意的参会人员进行标记，该高管标记的数据再通过无线通信模块4实时传输到cpu模块3，与cpu模块3中的会议现场实景、与会人员标记进行叠加。

其中，高管进行标记的方法为：高管通过pc、手机、平板电脑或另外一个ar眼镜自带的功能组件在屏幕上显示的会议现场实景上相应的位置做涂抹、画圈等标记。为了进一步更加便利地让每个普通人均能无碍地进行使用，还可在ar眼镜1的系统中与远程终端控制系统7中分别安装相同的软件（如app等），双方均打开app便可便捷地进行互动，该app可利用现有的app软件，也可找专业的app开发机构进行设计开发，此处不再赘述。

此外，高管还可以在远程终端控制系统7上通过无线通信模块4将与会人员所需要的会谈资料、公司指标等数据发送至cpu模块3中的存储器内供与会人员调取查看；与会人员调取后，便可依据该会谈资料、公司指标进行有针对性地会谈，相比于印制于实体上的资料寻找、携带均更加方便，也不会存在资料泄露的问题，保密性更佳。另外，由于该会谈资料、公司指标数据传输至cpu模块3中，与cpu模块中的会议现场实景进行叠加，再传输到远程终端控制系统7上显示，高管便可在屏幕上显示的会谈资料、公司指标上重要的位置做涂抹、画圈等标记让与会人员能够依此在会谈中作出最有利于公司的谈判。

除此之外，由于会议现场实景已在远程终端控制系统7上实时显示，因此与会人员所看到会议现场能够实时地存储在后台远程终端控制系统7上，以备后期通过对该会议现场实景中出现的参会人员、资料信息的分析制订出公司的运营方针等。

步骤六

cpu模块3通过视频接口52将叠加有与会人员标记、高管标记的会议现场实景传输到ar眼镜上进行实时的投影显示。

若远程终端控制系统7的个数为复数个，则位于不同远程终端控制系统7处的高管可采用不同颜色的高管标记予以区分。

步骤七

步骤一～六进行的同时，与会人员通过ar眼镜1上的蓝牙耳机9与位于远程终端控制系统7处的高管进行实时对话。

本发明将ar眼镜通过无线通信模块与远程终端控制系统远程信号连接，使得与会人员在ar眼镜上看到的图像能够实时传送给位于会议现场之外的远程终端控制系统，让高管不需远赴千里之外，只要呆在公司便能够身临其境般地看到与会人员看到的会议现场，让高管的时间能够得到更有效、充分的利用；由于ar眼镜增强现实的作用，因此即便高管与与会人员相隔千里，也可恍若身处当地地参加会议，注意到会议现场的各个细节、其他参会人员的具体表现细节，从而因地制宜地做出最佳策略，而不存在与会人员由于经验、能力不足而无法做出准确判断的情况，最大程度地实现人才的有效利用；此外，由于ar眼镜的图像叠加功能，使得与会人员可在ar眼镜投影出来的会议现场实景中进行标记，并将该与会人员标记与会议现场实景叠加的图像实时发送给远程终端控制系统，高管则可在远程终端控制系统上的会议现场实景中进行标记，并将该高管标记实时发送给cpu模块，最终使得与会人员与高管能够同步地看到会议现场实景、与会人员标记、高管标记三者叠加的图像，从而让与会人员能够在ar眼镜上与高管进行动态的互动，让与会人员在会议过程中能够及时、准确地向高管指出会议的关键信息及参会人员，让高管及时提出最佳的应对策略，并指出要重点关注的信息资料及需重点关注的参会人员，避免与会人员在会议过程中出现纰漏，以使公司能获得的利益最大化。

上述仅为本发明的具体实施方式，但本发明的设计构思并不局限于此，凡利用此构思对本发明进行非实质性的改动，均应属于侵犯本发明保护范围的行为。