一种远程会议系统和远程会议中的实物展示方法与流程

文档序号:25538228发布日期:2021-06-18 20:32阅读:来源:国知局

技术特征:

1.一种远程会议系统,其特征在于,包括近端设备,和与所述近端设备远程连接的远端设备,所述远端设备具体为一个或多个,所述近端设备和所述远端设备均包括主机(1),和与所述主机(1)连接的外设(2);

所述外设(2)包括显示模块(21)、摄像模块(22)、拾音模块(23)、麦克风(24)、扬声器(25)和调节装置(26);其中:

所述摄像模块(22)设置在所述调节装置(26)上,所述摄像模块(22)包括3d图像获取装置(221)和深度镜头(222),所述3d图像获取装置(221)用于获取实物的3d虚拟图像;

所述主机(2)通过所述深度镜头(222)获取用户手势,识别用户手势并通过对应手势的指令操控所述3d虚拟图像;主机(2)还通过所述麦克风(24)获取语音信息,识别语音并通过对应语音的指令控制所述调节装置(26);

所述3d图像获取装置(221)包括3d扫描仪或者3d深度感知摄像头;

所述主机(1)还用于远程声像调节,具体的,近端设备的所述主机(1)对远端设备的所述外设(2)输出音视频,远端设备的所述外设(1)通过所述显示模块(21)显示图像,通过所述扬声器(25)的播放声音,再通过所述拾音模块(23)对所述扬声器(25)播放的声音进行采集,获取声音数据,通过所述摄像模块(22)对所述显示模块(21)播放的视频进行采集,获取视频数据,并将视频数据和声音数据发送至近端设备的所述主机(1),工作人员根据视频数据和声音数据对远端设备的所述显示模块(21)和所述扬声器(25)调试。

2.一种远程会议中的实物展示方法,基于权利要求1所述的远程会议系统,其特征在于,包括以下步骤:

步骤一:当要展示实物时,近端设备的用户通过语音发出指令,近端设备的所述主机(1)通过所述麦克风(24)获取语音,识别用户语音并通过对应语音的指令控制所述调节装置(26)调节所述摄像模块(22)位置,通过所述摄像模块(22)获取所述实物影像信息,并实时传输至远端设备;

步骤二:当要展示立体实物的3d虚拟图像时,通过3d扫描仪或者3d深度感知摄像头获取实物的图片数据;当需要调节所述摄像模块(22)的位置或者角度时,近端设备的用户通过语音发出指令,近端设备的所述主机(1)通过麦克风(24)获取语音,识别用户语音并通过对应语音的指令控制所述调节装置(26)调节所述摄像模块(22)位置,通过所述摄像模块(22)同时配合人为翻转实物的方向和角度,获取立体实物各个角度的图形信息,并对立体实物图形信息进行编辑处理,形成虚拟实物立体图像;

步骤三:当实物的3d虚拟图像不清晰时,执行第一步;

步骤四:当要操控实物的3d虚拟图像时,所述主机(1)通过所述深度镜头(222)或3d深度感知摄像头获取用户手势,识别用户手势并通过对应手势的指令操控所述3d虚拟图像;

步骤五:当要展示平面实物的平面图像时,近端设备的所述主机(1)通过所述摄像模块(22)获取平面实物的平面展示图像。

3.根据权利要求2所述的远程会议中的实物展示方法,其特征在于,当所述3d图像获取装置(221)采用3d深度感知摄像头时;

若展示的实物为立体物,则所述主机(1)通过3d深度感知摄像头获取实物的3d虚拟图像,并通过所述深度镜头(222)获取用户的手势发出对应的指令控制所述3d虚拟图像的状态;

若要远程展示实际实物,则通过手来翻转实物的角度,所述主机(1)通过获取语音指令发出控制所述调节装置(26),以此调节所述3d深度感知摄像头的位置,并配合用户对实物的手动翻转展示实物详细结构信息;

当所述显示模块(21)分屏同时展示实物的3d虚拟图像和实物影像时,主机具有同时通过语音控制实物展示和通过手势控制3d虚拟图像的功能。

4.据权利要求2所述的远程会议中的实物展示方法,其特征在于,当需要展示的实物为平面的纸质表格文档时,所述主机(1)通过所述摄像模块(22)获取纸质表格文档的图像;

所述主机(1)对图像进行字段扫描,根据扫描的表格首行和/或首列字段调出对应的预制模板文件,将扫描出的字段对应填入模板文件,形成表格文件,并将该表格文件发送至所有远端设备;

当近端设备需要展示表格时,近端设备的主机(1)打开表格文件,远端设备的主机(1)同步打开表格文件,近端设备的主机(1)获取用户对表格的控制指令并将其发送至远端设备的主机(1),远端设备和近端设备根据指令实时更新表格展示状态。

5.根据权利要求4所述的远程会议中的实物展示方法,其特征在于,对表格图像进行扫描时,首先找到最大包围框,对最大包围框内多个包围框进行定位,确定表格的行列,对表格的各行列的字段进行扫描;调出预制模板,根据扫描出的表格行列信息和首行和/或首列的文字信息,对图像表格与预制模板匹配,确定表格的类型,根据确定的表格类型新建对应的模板表格文件;将识别出的其余行列的字段填入模板格式文件的对应区域,并对文件进行保存,同时将文件分别发送给所有远端设备。

6.根据权利要求5所述的远程会议中的实物展示方法,其特征在于,对表格图像进行扫描时,需要对图像进行校正时,具体的,先找出图像中的最长直线,然后确定最长直线接近水平线还是竖直线,然后找出最长直线与水平线/竖直线的夹角,确定图像的倾向角度,由此对图像的角度进行旋转校正。

7.根据权利要求5所述的远程会议中的实物展示方法,其特征在于,所述主机(1)获取到多个图像文件时,扫描最大包围框之外的标题文字信息,若检测到标题文字信息一致,且模板相同,则将具有相同模板的图像文件的待识别区域进行字段扫描,并根据接收顺序将扫描字段依次填入同一模板格式文件并进行保存。

8.根据权利要求4所述的远程会议中的实物展示方法,其特征在于,所述近端设备获取表格展示指令和表格编辑指令,将所述表格展示指令和表格编辑指令通过近端设备的所述主机(1)发送至其余远端设备,所述远端设备根据所述表格展示指令和表格编辑指令对所述表格进行更新,确认其余所述远端设备均完成更新后,近端设备再根据所述表格展示指令和表格编辑指令对所述表格进行更新。


技术总结
本发明涉及一种远程会议系统和远程会议中的实物展示方法,包括近端设备和远端设备,近端设备和远端设备均包括主机和外设;外设包括摄像模块、麦克风和调节装置;摄像模块与调节装置连接,摄像模块用于获取实物的3D虚拟图像和用户手势,主机识别用户手势并通过形成指令操控3D虚拟图像;主机还通过识别语音并形成指令控制调节装置;3D图像获取装置包括3D扫描仪或者3D深度感知摄像头;方便整个会议或者教学活动的顺利开展,提高了沟通效率;不用单独通过键盘或者鼠标等其他不方便操作的外设操作,避免了不断中止教学讲解或者会议程序,使远程会议或者远程教学活动开展的更加顺利和高效。

技术研发人员:贾涛
受保护的技术使用者:深圳市黑金工业制造有限公司
技术研发日:2021.04.23
技术公布日:2021.06.18
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1