技术特征：
1.一种基于物体定位添加ar讲解的方法，其特征在于，包括：获取相机采集的目标物体的图像；对所述图像进行2d目标检测，并根据检测结果获取所述目标物体的属性信息，以及所述目标物体的多个关键点的2d像素坐标，其中，所述属性信息至少包含所述多个关键点的3d世界坐标和所述目标物体的ar讲解的内容信息；根据所述多个关键点的2d像素坐标和3d世界坐标，以及预先标定的相机参数，确定所述目标物体相对于所述相机的位姿信息；根据所述位姿信息中所述目标物体与所述相机间的距离，确定所述内容信息的目标尺寸；按照所述目标尺寸，将所述ar讲解的内容信息叠加显示在所述目标物体的图像中。2.如权利要求1所述的方法，其特征在于，所述按照所述目标尺寸，将所述ar讲解的内容信息叠加显示在所述目标物体的图像中，包括：根据所述多个关键点的2d像素坐标确定所述目标物体的2d中心点和ar讲解拐点；根据所述ar讲解拐点，确定所述ar讲解的内容信息在所述目标物体的图像中的叠加位置；从所述2d中心点开始、经过所述ar讲解拐点做指向所述叠加位置的连线，并在所述叠加位置处，按照所述目标尺寸显示所述ar讲解的内容信息。3.如权利要求1所述的方法，其特征在于，当所述图像中检测出的目标物体的数量有多个时，所述根据所述位姿信息中所述目标物体与所述相机间的距离，确定所述内容信息的目标尺寸，包括：当第一目标物体与所述相机间的第一距离小于第二目标物体与所述相机间的第二距离时，确定所述第一目标物体对应的ar讲解的第一内容信息的第一目标尺寸，大于所述第二目标物体对应的ar讲解的第二内容信息的第二目标尺寸。4.如权利要求3所述的方法，其特征在于，所述第一目标尺寸和所述第二目标尺寸的大小，满足以下条件：所述第一目标物体对应的ar讲解的第一内容信息，不覆盖所述第二目标物体对应的ar讲解的第二内容信息。5.如权利要求1所述的方法，其特征在于，当所述图像中检测出多个目标物体时，所述方法还包括：在所述图像中不叠加显示都相机的距离大于预设距离阈值的目标物体对应的ar讲解的内容信息。6.如权利要求1所述的方法，其特征在于，当所述图像中检测出多个目标物体时，所述按照所述目标尺寸，将所述ar讲解的内容信息叠加显示在所述目标物体的图像中包括：针对位于所述图像中心的一个目标物体，按照所述目标物体的目标尺寸，在所述图像中叠加显示所述目标物体的ar讲解的内容信息。7.如权利要求1所述的方法，其特征在于，将所述目标物体的ar讲解的内容信息叠加显示在所述图像中之后，所述方法还包括：响应于对所述目标物体的图像的缩放操作，根据所述缩放操作的缩放比例，同比例调整所述ar讲解的内容信息的尺寸。
8.如权利要求1-7中任一项所述的方法，其特征在于，所述ar讲解的内容信息包括文字、视频中的至少一项。9.一种客户端设备，其特征在于，包括相机、处理器、存储器和显示屏，所述相机、所述显示屏、所述存储器和所述处理器通过总线连接；所述存储器存储有计算机程序，所述处理器根据所述计算机程序，执行以下操作：获取所述相机采集的目标物体的图像；对所述图像进行2d目标检测，并根据检测结果获取所述目标物体的属性信息，以及所述目标物体的多个关键点的2d像素坐标，其中，所述属性信息至少包含所述多个关键点的3d世界坐标和所述目标物体的ar讲解的内容信息；根据所述多个关键点的2d像素坐标和3d世界坐标，以及预先标定的相机参数，确定所述目标物体相对于所述相机的位姿信息；根据所述位姿信息中所述目标物体与所述相机间的距离，确定所述内容信息的目标尺寸；按照所述目标尺寸，通过所述显示屏将所述ar讲解的内容信息叠加显示在所述目标物体的图像中。10.如权利要求9所述的客户端设备，其特征在于，当所述图像中检测出的目标物体的数量有多个时，所述处理器根据所述位姿信息中所述目标物体与所述相机间的距离，确定所述内容信息的目标尺寸，具体操作为：当第一目标物体与所述相机间的第一距离小于第二目标物体与所述相机间的第二距离时，确定所述第一目标物体对应的ar讲解的第一内容信息的第一目标尺寸，大于所述第二目标物体对应的ar讲解的第二内容信息的第二目标尺寸。
技术总结
本申请涉及AR技术领域，提供一种基于物体定位添加AR讲解的方法及设备，用于提高AR讲解添加的速度和AR讲解与目标物体的贴图度。该方法采用2D目标检测模型对采集的目标物体的图像进行检测，相对于3D目标检测算法，检测速度更快，且对相机的要求较低；根据检测出的目标物体的多个关键点的2D像素坐标和3D世界坐标以及相机参数，快速、准确的定位出目标物体在相机坐标系下的位姿信息，并根据位姿信息中目标物体与相机间的距离，自适应确定AR讲解的内容信息的目标尺寸，这样，按照目标尺寸将AR讲解的内容叠加显示在图像中时，AR讲解与目标物体会更加贴合，从而有效提升增强现实与真实感官的互动体验。官的互动体验。官的互动体验。
技术研发人员：宗达 孟亚州 曹帅
受保护的技术使用者：海信视像科技股份有限公司
技术研发日：2022.10.27
技术公布日：2023/3/14