一种三维模型的调整方法及装置与流程

文档序号:12035852阅读:229来源:国知局
一种三维模型的调整方法及装置与流程
本发明涉及视频监控
技术领域
,特别涉及一种三维模型的调整方法及装置。
背景技术
:目前,三维监控视频已普遍应用于视频监控领域。三维监控视频能够立体、全景地展现监控区域发生的事件,实现纵览全局和细节把控的有机结合。生成三维监控视频的方法一般包括:建立监控区域的三维场景模型;将针对该监控区域的同一时间段的各个角度的视频融合到该三维场景模型中,生成该监控区域的三维全景监控视频。在实际应用中,经常会出现视频与三维模型融合后生成的平面不平整,导致融合效果不佳。比如,建立三维模型时,某一地面为草坪,但是拍摄视频时该地面已变成了平整的地板。这种情况下,将该三维模型与该视频融合后,该地面会非常不平整,视觉效果很差。针对这种情况的处理办法通常是对该三维模型进行修改,以使得融合后生成的地面为平整的地面。但是,应用这种处理办法,将三维模型与不同的视频进行融合,需要经常对三维模型进行修改,而修改三维场景模型的过程很复杂,人工成本、时间成本均较高。技术实现要素:本发明实施例的目的在于提供一种三维模型的调整方法及装置,在不修改三维模型的基础上,提高视频与三维模型的融合效果。为达到上述目的,本发明实施例公开了一种三维模型的调整方法,应用于计算机,包括:将目标监控区域对应的二维视频和三维模型进行融合,生成网格模型;根据保存的所述三维模型中每个参考平面的位置,判断所述网格模型中每个设定平面是否平整;当所述网格模型中存在不平整的目标设定平面时,针对每一所述目标设定平面,选取所述目标设定平面中的不平整点作为标志点,根据所述标志点及所述目标设定平面对应的参考平面,生成虚拟平面;将所述虚拟平面添加到所述三维模型中,并针对所述二维视频保存添加了所述虚拟平面的三维模型。可选的,所述将目标监控区域对应的二维视频和三维模型进行融合,生成网格模型,可以包括:获取目标监控区域对应的三维模型的二维图像,及所述二维图像与深度信息的对应关系;采用所述目标监控区域对应的二维视频中的各视频图像替换所述二维图像;根据获取的二维图像与深度信息的对应关系,将所述深度信息添加到替换后的二维图像中,生成融合后的网格模型。可选的,所述根据保存的所述三维模型中每个参考平面的位置,判断所述网格模型中每个设定平面是否平整,可以包括:根据保存的设定平面与参考平面的对应关系,确定每个设定平面对应的参考平面;针对每个设定平面,判断所述设定平面上的每个点与所述设定平面对应的参考平面之间的距离是否大于第一阈值,如果是,将所述点确定为不平整点;判断所述设定平面上的不平整点的数量是否大于第二阈值,如果是,确定所述设定平面不平整。可选的,所述选取所述目标设定平面中的不平整点作为标志点,可以包括:在所述目标设定平面中,选取与所述目标设定平面对应的参考平面之间的距离最大的点作为标志点;或者,确定所述目标设定平面中的每个不平整点与所述目标设定平面对应的参考平面的距离,并计算每个距离与所述第一阈值的差;根据预先设定的每个差值 区间,统计位于每个差值区间中所述不平整点的数量;识别数量最大的标志差值区间,将位于所述标志差值区间中的点作为标志点。可选的,所述根据所述标志点及所述目标设定平面对应的参考平面,生成虚拟平面,可以包括:当所述标志点的数量为一时,生成通过所述标志点并与所述目标设定平面对应的参考平面平行的虚拟平面;当所述标志点的数量大于一时,选取所述标志点中的任意一个,生成通过选取的所述标志点并与所述目标设定平面对应的参考平面平行的虚拟平面。可选的,所述设定平面包括地面和/或墙面。为达到上述目的,本发明实施例还公开了一种三维模型的调整装置,应用于计算机,包括:融合模块,用于将目标监控区域对应的二维视频和三维模型进行融合,生成网格模型;判断模块,用于根据保存的所述三维模型中每个参考平面的位置,判断所述网格模型中每个设定平面是否平整,如果是,触发选取模块;选取模块,用于针对每一不平整的目标设定平面,选取所述目标设定平面中的不平整点作为标志点;生成模块,用于根据所述标志点及所述目标设定平面对应的参考平面,生成虚拟平面;添加保存模块,用于将所述虚拟平面添加到所述三维模型中,并针对所述二维视频保存添加了所述虚拟平面的三维模型。可选的,所述融合模块,可以包括:获取子模块,用于获取目标监控区域对应的三维模型的二维图像,及所述二维图像与深度信息的对应关系;替换子模块,用于采用所述目标监控区域对应的二维视频中的各视频图像替换所述二维图像;生成子模块,用于根据获取的二维图像与深度信息的对应关系,将所述深度信息添加到替换后的二维图像中,生成融合后的网格模型。可选的,所述判断模块,可以包括:确定子模块,用于根据保存的设定平面与参考平面的对应关系,确定每个设定平面对应的参考平面;第一判断子模块,用于针对每个设定平面,判断所述设定平面上的每个点与所述设定平面对应的参考平面之间的距离是否大于第一阈值,如果是,将所述点确定为不平整点;第二判断子模块,用于判断所述设定平面上的不平整点的数量是否大于第二阈值,如果是,确定所述设定平面不平整。可选的,所述选取模块,可以包括:第一选取子模块,用于针对每一不平整的目标设定平面,在所述目标设定平面中,选取与所述目标设定平面对应的参考平面之间的距离最大的点作为标志点;或者,第二选取子模块,用于针对每一不平整的目标设定平面,确定所述目标设定平面中的每个不平整点与所述目标设定平面对应的参考平面的距离,并计算每个距离与所述第一阈值的差;根据预先设定的每个差值区间,统计位于每个差值区间中所述不平整点的数量;识别数量最大的标志差值区间,将位于所述标志差值区间中的点作为标志点。可选的,所述生成模块,可以包括:第一生成子模块,用于当所述标志点的数量为一时,生成通过所述标志点并与所述目标设定平面对应的参考平面平行的虚拟平面;第二生成子模块,用于当所述标志点的数量大于一时,选取所述标志点中的任意一个,生成通过选取的所述标志点并与所述目标设定平面对应的参考平面平行的虚拟平面。可选的,所述设定平面包括地面和/或墙面。由上述技术方案可见,将目标监控区域对应的二维视频和三维模型进行融合,生成网格模型;根据保存的所述三维模型中每个参考平面的位置,判断所述网格模型中每个设定平面是否平整;当所述网格模型中存在不平整的目标设定平面时,针对每一所述目标设定平面,选取所述目标设定平面中的不平整点作为标志点,根据所述标志点及所述目标设定平面对应的参考平面,生成虚拟平面;将所述虚拟平面添加到所述三维模型中,并针对所述二维视频保存添加了所述虚拟平面的三维模型。应用本发明实施例,针对视频与三维模型融合后生成的不平整平面,生成虚拟平面,将生成的虚拟平面与三维模型结合存储为调整后的三维模型;对不平整平面进行了处理,提高了视频与三维模型的融合效果;不需要对三维场景模型进行修改,降低了修改三维场景模型的人工成本和时间成本。当然,实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。附图说明为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1为本发明实施例提供的一种三维模型的调整方法的流程示意图;图2为本发明实施例提供的一种三维模型的调整装置的结构示意图。具体实施方式下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。为了解决现有技术问题,本发明实施例提供了一种三维模型的调整方法及装置,应用于计算机。下面首先对本发明实施例提供的一种三维模型的调整方法进行详细说明。图1为本发明实施例提供的一种三维模型的调整方法的流程示意图,包括:s101:将目标监控区域对应的二维视频和三维模型进行融合,生成网格模型。具体的,本步骤中可以包括:获取目标监控区域对应的三维模型的二维图像,及所述二维图像与深度信息的对应关系;采用所述目标监控区域对应的二维视频中的各视频图像替换所述二维图像;根据获取的二维图像与深度信息的对应关系,将所述深度信息添加到替换后的二维图像中,生成融合后的网格模型。在本发明所示实施例中,假设目标监控区域对应的三维模型p中的点的坐标为(x,y,z),获取的三维模型p的二维图像p1中的点的坐标为(x,y),获取二维图像p1与三维模型p的深度信息p2的对应关系,深度信息p2中的点的坐标为(z)。目标监控区域对应的二维视频q中的各视频图像中的点的坐标均为(x,y),将二维视频q中的各视频图像中的点替换二维图像p1中的点,并根据二维图像p1与深度信息p2的对应关系,把深度信息p2添加到替换后的二维图像p1中,即二维视频q中的各视频图像中,生成融合后的网格模型,该网格模型中的点坐标为(x,y,z)。s102:根据保存的所述三维模型中每个参考平面的位置,判断所述网格模型中每个设定平面是否平整。如果否,执行s103;如果是,则不对所述三维模型进行调整。具体的,本步骤中可以包括:根据保存的设定平面与参考平面的对应关系,确定每个设定平面对应的参考平面;针对每个设定平面,判断所述设定平面上的每个点与所述设定平面对应的参考平面之间的距离是否大于第一阈值,如果是,将所述点确定为不平整点;判断所述设定平面上的不平整点的数量是否大于第二阈值,如果是,确定所述设定平面不平整。所述设定平面可以包括地面和/或墙面。在实际应用中,构建三维模型时,通常根据参考平面生成三维模型中的平面,比如根据水平参考平面生成三维模型中的地面,根据垂直参考平面生成三维模型中的墙面等等。针对三维模型,保存了各个参考平面的位置,参考平面的位置可以以坐标的形式保存。比如该三维模型中的地面a的参考平面的z轴坐标为10,该三维模型中的墙面b的参考平面的x轴坐标为50等等。融合后的网格模型中保留了各个参考平面与网格模型中的设定平面的对应关系,根据该对应关系,确定每个设定平面对应的参考平面。比如,该三维模型中的地面a对应到网格模型中为地面a1,地面a1对应的参考平面仍为z轴坐标为10的参考平面;三维模型中的墙面b对应到网格模型中为墙面b1,墙面b1对应的参考平面仍为x轴坐标为50的参考平面。针对地面a1,判断地面a1上的每个点与z轴坐标为10的参考平面之间的距离是否大于第一阈值。假设第一阈值为1,将与参考平面之间的距离大于1的点确定为不平整点。假设第二阈值为5,判断地面a1上的不平整点的数量是否大于5个,如果是,确定地面a1不平整。针对墙面b1,判断墙面b1上的每个点与x轴坐标为50的参考平面之间的距离是否大于1。将与参考平面之间的距离大于1的点确定为不平整点。判断墙面b1上的不平整点的数量是否大于5个,如果是,确定墙面b1不平整。s103:针对每一不平整的目标设定平面,选取所述目标设定平面中的不平整点作为标志点。具体的,所述选取所述目标设定平面中的不平整点作为标志点,可以采用两种方式。第一种方式,在所述目标设定平面中,选取与所述目标设定平面对应的参考平面之间的距离最大的点作为标志点。第二种方式,确定所述目标设定平面中的每个不平整点与所述目标设定平面对应的参考平面的距离,并计算每个距离与所述第一阈值的差;根据预先设定的每个差值区间,统计位于每个差值区间中所述不平整点的数量;识别数量最大的标志差值区间,将位于所述标志差值区间中的点作为标志点。假设地面a1上的不平整点的数量大于5个,墙面b1上的不平整点的数量小于5个,确定地面a1不平整,地面a1为目标设定平面。假设地面a1上的不平整点的数量为6个,这6个不平整点与地面a1对应的参考平面之间的距离分别为4、4、3、7、3、4。可以采用第一种方式,选取与地面a1对应的参考平面之间的距离为7的不平整点作为标志点。或者,可以采用第二种方式,计算上述6个距离(4、4、3、7、3、4)与第一阈值1的差,分别为:3、3、2、6、2、3,假设预设的差值区间为0-1、2-3、4-5、6-7、8-9,统计位于每个差值区间中不平整点的数量,如表1所示:表1差值区间0-12-34-56-78-9不平整点的数量05010识别数量最大的标志差值区间为2-3,将位于2-3的差值区间的5个点(即,与地面a1对应的参考平面之间的距离为2或3的点)作为标志点。s104:根据所述标志点及所述目标设定平面对应的参考平面,生成虚拟平面。具体的,本步骤中可以包括:当所述标志点的数量为一时,生成通过所述标志点并与所述目标设定平面对应的参考平面平行的虚拟平面;当所述标志点的数量大于一时,选取所述标志点中的任意一个,生成通过选取的所述标志点并与所述目标设定平面对应的参考平面平行的虚拟平面。在本发明所示实施例中,虚拟平面为与目标设定平面对应的参考平面平行的平面,因此,确定虚拟平面中的一个点,便可以确定虚拟平面的位置。当只有一个标志点时,通过该标志点,可以确定虚拟平面的位置;当有多个标志点时,选取多个标志点中的任意一个,确定虚拟平面的位置。比如从上述5个标志点中任意选取一个,生成通过该选取的标志点、并与目标设定平面对应的参考平面平行的虚拟平面。s105:将所述虚拟平面添加到所述三维模型中,并针对所述二维视频保存添加了所述虚拟平面的三维模型。生成的虚拟平面为针对二维视频q的,并不一定适用于目标监控区域对应的其他二维视频。比如,三维模型p与二维视频q融合后生成的网格模型中的地面a1之所以不平整,是因为三维模型p中的地面a为铺设的草坪面,但是拍摄二维视频q时,该草坪面变成了平整的地板,草坪面上的点高低不平,因而该平面会不平整。拍摄目标监控区域对应的二维视频s时,原地面a上又重新铺设了草坪,因而,生成的虚拟平面不适用于二维视频s。因此,将生成的虚拟平面添加到三维模型p中,只是针对二维视频q,保存该虚拟平面在三维模型p中的位置关系,而非对三维模型进行修改。另外,针对目标监控区域对应的不同的二维视频,保存不同的虚拟平面,仅在观看该二维视频与目标监控区域对应的三维模型融合生成的全景视频时,展现该二维视频对应的虚拟平面,提高了视频与三维模型的融合效果。在实际应用中,生成的虚拟平面可以为半透明的效果,生成的全景视频观看效果更佳。应用本发明图1所示实施例,将目标监控区域对应的二维视频和三维模型进行融合,生成网格模型;根据保存的所述三维模型中每个参考平面的位置,判断所述网格模型中每个设定平面是否平整;当所述网格模型中存在不平整的目标设定平面时,针对每一所述目标设定平面,选取所述目标设定平面中的不平整点作为标志点,根据所述标志点及所述目标设定平面对应的参考平面,生成虚拟平面;将所述虚拟平面添加到所述三维模型中,并针对所述二维视频保存添加了所述虚拟平面的三维模型。应用本发明实施例,针对视频与三维模型融合后生成的不平整平面,生成虚拟平面,将生成的虚拟平面与三维模型结合 存储为调整后的三维模型;对不平整平面进行了处理,提高了视频与三维模型的融合效果;不需要对三维场景模型进行修改,降低了修改三维场景模型的人工成本和时间成本。与上述的方法实施例相对应,本发明实施例还提供一种三维模型的调整装置。图2为本发明实施例提供的一种三维模型的调整装置的结构示意图,包括:融合模块201,用于将目标监控区域对应的二维视频和三维模型进行融合,生成网格模型;在本发明所示实施例中,融合模块201,可以包括:获取子模块、替换子模块和生成子模块(图中未示出),其中,获取子模块,用于获取目标监控区域对应的三维模型的二维图像,及所述二维图像与深度信息的对应关系;替换子模块,用于采用所述目标监控区域对应的二维视频中的各视频图像替换所述二维图像;生成子模块,用于根据获取的二维图像与深度信息的对应关系,将所述深度信息添加到替换后的二维图像中,生成融合后的网格模型。判断模块202,用于根据保存的所述三维模型中每个参考平面的位置,判断所述网格模型中每个设定平面是否平整,如果否,触发选取模块203;在本发明所示实施例中,判断模块202,可以包括:确定子模块、第一判断子模块和第二判断子模块(图中未示出),其中,确定子模块,用于根据保存的设定平面与参考平面的对应关系,确定每个设定平面对应的参考平面;第一判断子模块,用于针对每个设定平面,判断所述设定平面上的每个点与所述设定平面对应的参考平面之间的距离是否大于第一阈值,如果是,将所述点确定为不平整点;第二判断子模块,用于判断所述设定平面上的不平整点的数量是否大于第二阈值,如果是,确定所述设定平面不平整。选取模块203,用于针对每一不平整的目标设定平面,选取所述目标设定平面中的不平整点作为标志点;在本发明所示实施例中,选取模块203,可以包括:第一选取子模块,用于针对每一不平整的目标设定平面,在所述目标设定平面中,选取与所述目标设定平面对应的参考平面之间的距离最大的点作为标志点;或者,第二选取子模块,用于针对每一不平整的目标设定平面,确定所述目标设定平面中的每个不平整点与所述目标设定平面对应的参考平面的距离,并计算每个距离与所述第一阈值的差;根据预先设定的每个差值区间,统计位于每个差值区间中所述不平整点的数量;识别数量最大的标志差值区间,将位于所述标志差值区间中的点作为标志点。生成模块204,用于根据所述标志点及所述目标设定平面对应的参考平面,生成虚拟平面;在本发明所示实施例中,生成模块204,可以包括:第一生成子模块和第二生成子模块(图中未示出),其中,第一生成子模块,用于当所述标志点的数量为一时,生成通过所述标志点并与所述目标设定平面对应的参考平面平行的虚拟平面;第二生成子模块,用于当所述标志点的数量大于一时,选取所述标志点中的任意一个,生成通过选取的所述标志点并与所述目标设定平面对应的参考平面平行的虚拟平面。添加保存模块205,用于将所述虚拟平面添加到所述三维模型中,并针对所述二维视频保存添加了所述虚拟平面的三维模型。在本发明所示实施例中,所述设定平面包括地面和/或墙面。应用本发明图2所示实施例,将目标监控区域对应的二维视频和三维模型进行融合,生成网格模型;根据保存的所述三维模型中每个参考平面的位置,判断所述网格模型中每个设定平面是否平整;当所述网格模型中存在不平整的 目标设定平面时,针对每一所述目标设定平面,选取所述目标设定平面中的不平整点作为标志点,根据所述标志点及所述目标设定平面对应的参考平面,生成虚拟平面;将所述虚拟平面添加到所述三维模型中,并针对所述二维视频保存添加了所述虚拟平面的三维模型。应用本发明实施例,针对视频与三维模型融合后生成的不平整平面,生成虚拟平面,将生成的虚拟平面与三维模型结合存储为调整后的三维模型;对不平整平面进行了处理,提高了视频与三维模型的融合效果;不需要对三维场景模型进行修改,降低了修改三维场景模型的人工成本和时间成本。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。本领域普通技术人员可以理解实现上述方法实施方式中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以存储于计算机可读取存储介质中,这里所称得的存储介质,如:rom/ram、磁碟、光盘等。以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。当前第1页12
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1