图像处理方法、装置、电子设备和存储介质与流程

文档序号:25526286发布日期:2021-06-18 20:16阅读:来源:国知局

技术特征:

1.一种图像处理方法,其特征在于,包括:

获取现实场景图像;

识别所述现实场景图像中的现实目标对象,并获取与所述现实目标对象对应的第一虚拟三维模型;

确定虚拟目标对象,并确定所述第一虚拟三维模型与所述虚拟目标对象在增强现实ar场景中的相对位姿关系;

将所述第一虚拟三维模型和所述虚拟目标对象按照所述相对位姿关系展示在包含所述现实目标对象的ar场景中。

2.根据权利要求1所述的图像处理方法,其特征在于,所述第一虚拟三维模型的展示状态为透明态。

3.根据权利要求1所述的图像处理方法,其特征在于,所述获取与所述现实目标对象对应的第一虚拟三维模型,包括:

获取预制地图;所述预制地图包括预设地理范围内的多个对象的图像以及每个对象的对象标识信息;

将所述现实场景图像中现实目标对象的图像与和所述预制地图中的所述多个对象中每个对象的图像进行匹配,得到与所述现实目标对象相匹配的目标匹配对象;

将所述目标匹配对象的对象标识信息作为所述现实目标对象的对象标识信息,并基于所述对象标识信息,获取预先设置的所述现实目标对象的第一虚拟三维模型。

4.根据权利要求1所述的图像处理方法,其特征在于,所述确定虚拟目标对象,包括:

基于所述现实场景图像,确定拍摄所述现实场景图像的拍摄设备的位姿信息,

基于所述拍摄设备的位姿信息,确定处于所述拍摄设备的拍摄视野中的虚拟目标对象。

5.根据权利要求1至4任一项所述的图像处理方法,其特征在于,还包括设置所述第一虚拟三维模型的步骤:

获取所述现实目标对象在现实场景中的位姿信息;

基于所述现实目标对象在现实场景中的位姿信息,确定所述现实目标对象在ar场景中的位姿信息;

基于所述现实目标对象在ar场景中的位姿信息,生成所述现实目标对象在所述ar场景中的第一虚拟三维模型。

6.根据权利要求1至4任一项所述的图像处理方法,其特征在于,所述确定所述现实目标对象对应的第一虚拟三维模型与所述虚拟目标对象在增强现实ar场景中的相对位姿关系,包括:

获取所述虚拟目标对象对应的第二虚拟三维模型;

基于所述第一虚拟三维模型在ar场景中的位姿信息,和所述第二虚拟三维模型在所述ar场景中的位姿信息,确定所述现实目标对象对应的第一虚拟三维模型与所述虚拟目标对象在增强现实ar场景中的相对位姿关系。

7.根据权利要求6所述的图像处理方法,其特征在于,所述将所述第一虚拟三维模型和所述虚拟目标对象按照所述相对位姿关系展示在包含所述现实目标对象的ar场景中,包括:

基于所述相对位姿关系,判断所述虚拟目标对象是否被所述现实目标对象遮挡;

在所述虚拟目标对象被所述现实目标对象遮挡的情况下,基于所述相对位姿关系,确定所述虚拟目标对象被所述第一虚拟三维模型所遮挡对应的遮挡信息;

基于所述遮挡信息,展示虚拟目标对象的未被遮挡的部分。

8.根据权利要求1所述的图像处理方法,其特征在于,还包括:

获取所述虚拟目标对象在所述ar场景中的运动状态信息;

基于所述第一虚拟三维模型在ar场景中的位姿信息、所述虚拟目标对象在所述ar场景中的位姿信息和所述运动状态信息,确定碰撞状态信息;

若所述碰撞状态信息指示所述现实目标对象与所述虚拟目标对象发生碰撞,则基于所述碰撞状态信息,获取预制的所述虚拟目标对象在碰撞状态下的第三虚拟三维模型;

基于所述第三虚拟三维模型,在所述ar场景中呈现的碰撞后的虚拟目标对象。

9.根据权利要求8所述的图像处理方法,其特征在于,所述基于所述第三虚拟三维模型,在所述ar场景中呈现的碰撞后的虚拟目标对象,包括:

获取预制的所述现实目标对象在碰撞状态下的第四虚拟三维模型;

基于所述第四虚拟三维模型和所述第三虚拟三维模型,在所述ar场景中呈现的碰撞后的现实目标对象和虚拟目标对象。

10.根据权利要求9所述的图像处理方法,其特征在于,所述第四虚拟三维模型和所述第三虚拟三维模型的展示状态均为非透明态,并且所述第四虚拟三维模型和所述第三虚拟三维模型位于同一图层,所述第四虚拟三维模型的图层位于ar场景中对应的现实目标对象的图像所在的图层的前方。

11.根据权利要求8所述的图像处理方法,其特征在于,所述基于所述碰撞状态信息,获取预制的所述虚拟目标对象在碰撞状态下的第三虚拟三维模型,包括:

基于所述碰撞状态信息,确定碰撞位置和/或碰撞力度;

获取所述虚拟目标对象的、与所述碰撞位置和/或碰撞力度相匹配的所述第三虚拟三维模型。

12.一种图像处理装置,其特征在于,包括:

图像获取模块,用于获取现实场景图像;

对象识别模块,用于识别所述现实场景图像中的现实目标对象,并获取与所述现实目标对象对应的第一虚拟三维模型;

位姿处理模块,用于确定虚拟目标对象,并确定所述第一虚拟三维模型与所述虚拟目标对象在增强现实ar场景中的相对位姿关系;

图像显示模块,用于将所述第一虚拟三维模型和所述虚拟目标对象按照所述相对位姿关系展示在包含所述现实目标对象的ar场景中。

13.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至11任一所述的图像处理方法的步骤。

14.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至11任一所述的图像处理方法的步骤。


技术总结
本申请提供了一种图像处理方法及装置、电子设备及存储介质,其中,首先从获取的现实场景图像中识别现实目标对象,并获取与现实目标对象对应的第一虚拟三维模型;之后根据现实场景图像,确定待展示的虚拟目标对象,并确定现实目标对象对应的第一虚拟三维模型与虚拟目标对象在待展示的AR场景中的相对位姿关系;最后将第一虚拟三维模型和虚拟目标对象按照相对位姿关系展示在包含现实目标对象的AR场景中。本申请基于相对位姿关系来自展示虚拟目标对象和现实目标对象,能够实现对位于现实目标对象后方的虚拟目标对象的遮挡,克服了现有技术中现实对象无法遮挡位于现实对象后方的虚拟对象的缺陷。

技术研发人员:李宇飞;张建博
受保护的技术使用者:深圳市慧鲤科技有限公司
技术研发日:2021.02.10
技术公布日:2021.06.18
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1