输出物体距离信息的方法、装置及移动设备与流程

本公开涉及通信技术领域，尤其涉及一种输出物体距离信息的方法、装置及移动设备。

背景技术：

移动设备的图像采集功能被广泛应用于人们的日常生活和工作中。以智能手机为例，用户可以利用手机中集成的摄像头实时拍摄周围环境图像，由此可以辅助人们了解视力范围之外的物体信息。然而，在一些应用场景中，比如倒车过程中，以及对于视力缺陷者如弱视者、眼睛近视者，即便借助上述环境图像也可能发生碰撞或撞击事件，影响用户的财产或人身安全。

技术实现要素：

有鉴于此，本公开提供一种输出物体距离信息的方法、装置及移动设备，以方便用户借助物体的图像信息直观了解周围物体的距离信息，提高移动设备的用户体验。

根据本公开实施例的第一方面，提供了一种输出物体距离信息方法，所述方法包括：

获取通过图像采集装置采集的环境图像和通过超声波测距装置测得的物体距离图像；

将所述物体距离图像包含的物体距离信息标记至所述环境图像中，获得包括距离信息的目标图像信息；

输出标记有距离信息的目标图像。

可选地，在所述获取通过图像采集装置采集的环境图像和通过超声波测距装置测得的物体距离图像之前，所述方法还包括：

调节所述图像采集装置和所述超声波测距装置的信息采集方向，使二者的信息采集方向一致。

可选地，将所述物体距离图像包含的物体距离信息标记至所述环境图像中，获得包括距离信息的目标图像信息，包括：

将所述物体距离图像与所述环境图像进行匹配，确定目标物体图像；

根据所述物体距离图像，确定每个所述目标物体图像对应的距离信息；

将所述目标物体图像的距离信息标记在所述环境图像中，获得目标图像信息。

可选地，所述输出标记有距离信息的目标图像，包括：

将所述目标物体图像的距离信息与预设第一距离阈值作比较；

若所述目标物体图像的距离信息小于等于所述第一距离阈值，将所述目标物体图像对应的距离信息显示在所述环境图像中对应目标物体图像处。

可选地，在所述输出标记有距离信息的目标图像之前，所述方法还包括：

将所述目标物体图像的距离信息与预设第二距离阈值作比较；

当所述目标物体图像的距离小于所述第二距离阈值时，输出提醒用户距离所述目标物体太近的报警信息。

可选地，所述输出标记有距离信息的目标图像，还包括：

根据所述标记有距离信息的目标图像，获得所述目标图像中包括物体的名称及对应的距离信息；

通过声音播放器将所述物体名称及对应的距离信息输出。

根据本公开实施例的第二方面，提供了一种输出物体距离信息的装置，设置于移动设备中，所述装置包括：

信息获取模块，被配置为获取通过图像采集装置采集的环境图像和通过超声波测距装置测得的物体距离图像；

标记模块，被配置为将所述物体距离图像包含的物体距离信息标记至所述环境图像中，获得包括距离信息的目标图像信息；

输出模块，被配置为输出标记有距离信息的目标图像。

可选的，所述装置还包括：

方向调节模块，被配置为调节所述图像采集装置和所述超声波测距装置的信息采集方向，使二者的信息采集方向一致。

可选的，所述标记模块包括：

匹配子模块，被配置为将所述物体距离图像与所述环境图像进行匹配，确定目标物体图像；

距离信息确定子模块，被配置为根据所述物体距离图像，确定每个所述目标物体图像对应的距离信息；

标记子模块，被配置为将所述目标物体图像的距离信息标记在所述环境图像中，获得目标图像信息。

可选的，所述输出模块包括：

比较子模块，被配置为将所述目标物体图像的距离信息与预设第一距离阈值作比较；

显示子模块，被配置为在所述目标物体图像的距离信息小于等于所述第一距离阈值的情况下，将所述目标物体图像对应的距离信息显示在所述环境图像中对应目标物体图像处。

可选的，所述装置还包括：

距离比较模块，被配置为将所述目标物体图像的距离信息与预设第二距离阈值作比较；

报警模块，被配置为在所述目标物体图像的距离小于所述第二距离阈值的情况下，输出提醒用户距离所述目标物体太近的报警信息。

可选的，所述输出模块还包括：

信息提取子模块，被配置为根据所述标记有距离信息的目标图像，获得所述目标图像中包括物体的名称及对应的距离信息；

信息播放子模块，被配置为通过声音播放器将所述物体名称及对应的距离信息输出。

根据本公开实施例的第三方面，提供了一种移动设备，包括：图像采集装置、主控芯片、显示装置，其中，所述主控芯片用于获取超声波测距装置测得的物体距离图像和所述图像采集装置输出的环境图像，并将所述物体距离图像包含的物体距离信息标记至所述环境图像中，获得标记有距离信息的目标图像；

所述显示装置用于显示所述主控芯片输出所述目标图像。

可选的，所述移动设备还集成有超声波测距装置，所述超声波测距装置包括：超声波控制芯片、超声波通信模块；所述超声波控制芯片与所述主控芯片连接；

所述超声波控制芯片用于控制超声波束的发射方向，使待测距物体属于图像采集装置同步采集的环境图像中的物体，并根据各物体反射的超声波获得物体距离图像。

可选的，所述超声波通信模块包括：

超声波发射单元和超声波接收单元；所述超声波发射单元为所述移动设备声音播放器，所述超声波接收单元为所述移动设备的受话器。

可选的，所述移动设备还包括：声音播放器，用于播放所述主控芯片根据所述目标图像生成的声音信息。

本公开实施例提供的技术方案可以包括以下有益效果：

本公开中，移动设备在采集周围环境的图片时，同时通过超声波测距装置获得当前拍摄环境中物体的距离信息，并将上述周围环境中的物体距离信息与环境图片中的物体图像进行关联，输出标记有距离信息的目标图像，以使用户更加直观地获知物体的距离信息，提升移动设备的用户体验。

本公开中，移动设备在获取环境图像和物体距离图像之前，可以根据图像采集装置采集图像的视角范围，控制超声波测距装置的超声波发射范围，从而使超声波测距装置输出物体距离图像对应的信息采集范围与图像采集装置的信息采集范围一致，以使移动设备后续可以更加准确地匹配出目标物体图像，从而在显示目标图像时，可以更加准确地显示目标物体图像对应的距离信息，提高输出物体距离信息的准确性。

本公开实施例中，可以采用图像匹配方式在环境图像中确定目标物体图像，并根据物体距离图像确定目标物体图像对应的距离信息，之后将各目标物体的距离信息与对应的目标物体图像进行关联，即实现将各物体的距离信息标记在环境图像中，获得目标图像信息，有效提高目标图像信息的准确性。

本公开中，移动设备在输出标记有距离信息的目标图像时，可以将各物体图像的水平距离与第一预设距离阈值比较，当确定目标物体距离移动设备的水平距离小于上述第一预设阈值时，向移动设备用户发出距离目标物体太近的报警信息，有效防止碰撞事件发生，有效保障用户的人身及财产安全。

本公开中，移动设备在输出标记有距离信息的目标图像之前，还可以将各物体图像的水平距离与第二预设距离阈值比较，若确定目标物体距离移动设备的水平距离大于上述第二预设阈值，在对符合上述条件的目标物体图像进行显示时，即当实际物体距离移动设备较远时，可以不显示该目标物体图像对应的距离信息，避免环境图像中包括很多物体图像时，显示界面中显示的信息过多造成对用户的信息干扰。

本公开中，移动设备在输出标记有距离信息的目标图像时，还可以根据上述目标图像获得环境图像中包括的物体图像对应的物体名称和方位信息，并将各物体图像的物体名称和方位信息处理成声音信息进行播放，确保存在视力障碍的用户也可以通过上述移动设备提前获知周围环境信息，避免碰撞事件发生，保障视力障碍用户的人身安全。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是本公开根据一示例性实施例示出的一种移动设备的结构框图；

图2是本公开根据一示例性实施例示出的另一种移动设备的结构框图；

图3是本公开根据一示例性实施例示出的一种输出物体距离信息的方法流程图；

图4是本公开根据一示例性实施例示出的另一种输出物体距离信息的方法流程图；

图5是本公开根据一示例性实施例示出的另一种输出物体距离信息的方法流程图；

图6是本公开根据一示例性实施例示出的另一种输出物体距离信息的方法流程图；

图7是本公开根据一示例性实施例示出的另一种输出物体距离信息的方法流程图；

图8是本公开根据一示例性实施例示出的另一种输出物体距离信息的方法流程图；

图9是本公开根据一示例性实施例示出的一种输出物体距离信息的装置框图；

图10是本公开根据一示例性实施例示出的另一种输出物体距离信息的装置框图；

图11是本公开根据一示例性实施例示出的另一种输出物体距离信息的装置框图；

图12是本公开根据一示例性实施例示出的另一种输出物体距离信息的装置框图；

图13是本公开根据一示例性实施例示出的另一种输出物体距离信息的装置框图；

图14是本公开根据一示例性实施例示出的另一种输出物体距离信息的装置框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

在本公开使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其它含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。

应当理解，尽管在本公开可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本公开范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。

针对相关技术中存在的问题，本公开提供了一种移动设备，可以在显示周围环境图像时，同步显示环境中各物体与移动设备间的距离，以便携带移动设备的用户可以直观了解周围物体以及该物体的距离，避免碰撞事件发生，保障用户的财产和人身安全。本公开中，上述移动设备可以具体为移动电话，行车记录仪，导盲电子器械，可穿戴设备如智能手表、智能眼镜、智能手环、智能跑鞋等，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。

参照图1根据一示例性实施例示出的一种移动设备的结构框图，可以包括：图像采集装置11、主控芯片12、显示装置13，其中，所述图像采集装置11可以是设置于设备中后置摄像头，可以实时采集周围环境的图像。

所述主控芯片12用于获取超声波测距装置测得的物体距离图像和所述图像采集装置输出的环境图像，并将所述物体距离图像包含的物体距离信息标记至所述环境图像中，获得标记有距离信息的目标图像；

本公开一实施例中，移动设备上可以设置有连接超声波测距装置的接口，通过该接口，主控芯片12可以获取外设超声波测距装置输出的距离图像。

所述显示装置13用于显示所述主控芯片输出所述目标图像。上述显示装置13可以具体为移动设备的液晶显示屏或可触控液晶显示屏。

另外，本公开还提供了一种集成了超声波测距装置的移动设备，参照图2根据一示例性实施例示出的另一种移动设备的结构框图，在图1所示实施例的基础上，所述移动设备还包括：超声波测距装置14。所述超声波测距装置14可以包括：超声波控制芯片141、超声波通信模块142。其中，超声波控制芯片141与主控芯片12连接。

所述超声波控制芯片141用于控制超声波通信模块发射超声波束的方向，使待测距物体属于图像采集装置11同步采集的环境图像中的物体，并根据各物体反射的超声波获得物体距离图像。

物体距离图像是基于超声波测距原理获得的图像，其中，超声波测距原理是：超声波具有很强的指向性，移动设备可以记录超声波的发射时间；当超声波遇到障碍物后，发生反射返回，移动设备记录收到回波信号的时间，即超声波的返回时间，根据发射时刻与返回时刻间的间隔时长和声波在空气中的传播速度，可计算物体的距离信息。根据每个物体的距离信息可获得物体距离图像。

超声波通信模块142，用于发射超声波并接收从物体返回的超声波。

本公开实施例中，超声波通信模块可以包括：超声波发射单元和超声波接收单元。由于超声波是频率高于20000赫兹(hz)的声波，属于一种人无法听见的声波，因此，若移动设备中已设置有声音播放器和受话器，则在生产本公开提供的移动设备时，可以不用再单独设置超声波发射单元和超声波接收单元，从而可以降低移动设备的生产成本。本公开在移动设备的软硬件基础上添加超声测距电路和相关的功能软件实现超声测距功能，拓宽了移动设备的应用范围，提升手机的用户体验。

在本公开另一实施例中，上述主控芯片12还可以将目标图像包含的信息转换成声音信息。相应的，该移动设备包括声音播放器，用于播放所述目标图像对应的声音信息。采用本公开实施例提供的移动设备，可以采用声音播放方式时具有视力缺陷的用户获取周围环境物体的名称以及距离信息，避免在行走过程中撞到周围物体出现意外。

基于本公开上述实施例提供的移动设备，本公开还提供了一种输出物体距离信息的方法，参照图3根据一示例性实施例示出的一种输出物体距离信息的方法流程图，所述方法可以包括：

在步骤21中，获取通过图像采集装置采集的环境图像和通过超声波测距装置测得的物体距离图像；

本公开中，移动设备可以通过图像采集装置如摄像头拍摄的环境图像，该环境图像中包括各种物体信息。同时，通过内置或外部连接的超声波测距装置测量摄像头当前拍摄环境对应的物体距离图像。其中，物体距离图像中包括的物体在所述环境图像中存在对应的物体图像。

在步骤23中，将所述物体距离图像包含的物体距离信息标记至所述环境图像中，获得包括距离信息的目标图像信息；

本公开实施例中，移动设备可以根据物体距离信息获取各物体距离移动设备的距离信息如水平距离。然后，将各物体的距离信息与环境图像中的物体图像关联，获得标记有距离信息的目标图像信息。

参照图4根据一示例性实施例示出的另一种输出物体距离信息的方法流程图，上述步骤23可以包括：

在步骤231中，将所述物体距离图像与所述环境图像进行匹配，确定目标物体图像；

本公开中，移动设备获取的物体距离图像主要表征物体的距离信息，比如，道路边几棵树的距离信息，物体距离图像中可能采用简单符号比如一个圆点表示该位置存在一个物体。移动设备获取的环境图像中包括周围物体的详细图像信息，比如，上述几棵树的颜色、形状以及树叶、树干等各种细节信息。由于物体距离图像中包括的部分或全部物体在所述环境图像中存在对应的物体图像，可以根据相关技术将两幅图像进行匹配，为物体距离图像中的物体在环境图像中找到对应的物体图像，即目标物体图像。

在步骤232中，根据所述物体距离图像，确定每个所述目标物体图像对应的距离信息；

因为上述物体距离图像是由各个物体的距离信息生成的图像，所以，根据上述物体距离图像可以获取各目标物体图像对应的距离信息，比如，物体与移动设备间的水平距离。

在步骤233中，将所述目标物体图像的距离信息标记在所述环境图像中，获得目标图像信息。

本公开实施例中，可以将各目标物体的距离信息与对应的物体图像进行关联，即实现将各物体的距离信息标记在环境图像中，获得目标图像信息。

在步骤25中，输出标记有距离信息的目标图像。

在获得上述目标图像之后，可以在移动设备的显示屏幕显示环境图像并显示各物体的距离信息，使用户了解周围物体的同时，还可以直观了解当前距离各物体有多远，提升移动设备的用户体验。

本公开中，移动设备可以采用以下至少两种方式显示目标图像：

第一种方式，显示各个目标物体图像的距离信息。

假设匹配出了四个目标物体图像并获取各个物体的距离信息，二者之间的对应关系采用物体距离信息列表记录如下：

表一

移动设备在显示目标图像时，除了显示表一所示各目标物体图像的同时，还在每个目标物体图像的预设位置显示对应的距离信息。

第二种方式，当环境图像与物体距离图像匹配出的目标物体图像很多时，为避免图像显示画面混乱，可以根据用户需要显示部分物体的距离信息。比如，对目标物体图像的距离信息进行分类显示，如仅显示环境图像中邮筒的距离信息；或者，按照预设距离阈值进行显示等。

参照图5根据一示例性实施例示出的另一种输出物体距离信息的方法流程图，上述步骤25可以包括：

在步骤251中，将所述目标物体图像的距离信息与预设第一距离阈值作比较；

在某些应用场景中，用户可能不需要了解比预设距离更远的物体的距离信息，因此，用户可以在图像显示设置界面中设置显示距离阈值，比如50米，移动设备在获取上述距离阈值之后，将各目标物体图像的距离信息与上述距离阈值作比较，获得目标显示距离。

在步骤252中，若所述目标物体图像的距离信息小于等于所述第一距离阈值，将所述目标物体图像对应的距离信息显示在所述环境图像中对应目标物体图像处。

仍以上述表一为例，若预设的第二距离阈值为50米，则移动设备在显示目标图像时，会在大树、邮筒、垃圾桶的物体图像上显示对应的距离信息，而因为电线杆距离大于50米，无需在其图像位置显示距离信息。

本公开实施例中，可以根据用户需求显示目标物体图像的距离信息，避免显示冗余距离信息，可以使用户快速获取目标信息，提升用户体验。

在本公开另一实施例中，移动设备在获取目标图像之后，还可以将所述目标图像的信息转化声音信息进行播放，以满足特殊人群比如具有视力缺陷的人群的需求。参照图6根据一示例性实施例示出的另一种输出物体距离信息的方法流程图，上述步骤25可以包括：

在步骤25-1中，根据所述标记有距离信息的目标图像，获得所述目标图像中包括物体的名称及对应的距离信息；

在步骤25-2中，通过声音播放器将所述物体名称及对应的距离信息输出。

参照图7根据一示例性实施例示出的另一种输出物体距离信息的方法流程图，在上述步骤25之前，所述方法还包括：

在步骤24-1中，将所述目标物体图像的距离信息与预设第二距离阈值作比较；

本公开实施例中，移动设备可以预设有第二距离阈值，比如2米，将各目标物体的距离信息与上述第二距离阈值作较，以输出报警信息。

在步骤24-2中，当所述目标物体图像的距离小于所述第二预设距离阈值时，输出提醒用户距离所述目标物体太近的报警信息。

示例性的，目标物体图像与距离信息的对应关系仍如表一所示，通过比较可知，垃圾筒的距离已经小于2米，由此，可以触发移动设备以声音、文字、振动等方式输出提示垃圾桶距离用户太近的报警信息。该实施例可以在倒车场景中、用户没有注意到周围物体时，及时提醒用户注意避让周围物体，避免意外事件发生，保障用户的财产及人身安全。

参照图8根据一示例性实施例示出的另一种输出物体距离信息的方法流程图，在上述步骤21之前，所述方法还可以包括：

在步骤20中，调节所述图像采集装置和所述超声波测距装置的信息采集方向，使二者的信息采集方向一致。

本公开实施例中，移动设备在获取环境图像和物体距离图像之前，可以根据图像采集装置采集图像的视角范围，控制超声波测距装置的超声波发射范围，从而使超声波测距装置输出物体距离图像对应的信息采集范围与图像采集装置的信息采集范围一致，以使移动设备后续可以更加准确地匹配出目标物体图像，从而在显示目标图像时，可以更加准确地显示目标物体图像对应的距离信息，提高输出物体距离信息的准确性。

对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本公开并不受所描述的动作顺序的限制，因为依据本公开，某些步骤可以采用其它顺序或者同时进行。

其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于可选实施例，所涉及的动作和模块并不一定是本公开所必须的。

与前述应用功能实现方法实施例相对应，本公开还提供了应用功能实现装置及相应的终端的实施例。

参照图9根据一示例性实施例示出的一种输出物体距离信息的装置框图，设置于移动设备中，所述装置可以包括：

信息获取模块31，被配置为获取通过图像采集装置采集的环境图像和通过超声波测距装置测得的物体距离图像；

标记模块33，被配置为将所述物体距离图像包含的物体距离信息标记至所述环境图像中，获得包括距离信息的目标图像信息；

输出模块35，被配置为输出标记有距离信息的目标图像。

参照图10根据一示例性实施例示出的另一种输出物体距离信息的装置框图，在图9所示实施例的基础上，所述装置还可以包括：

方向调节模块30，被配置为调节所述图像采集装置和所述超声波测距装置的信息采集方向，使二者的信息采集方向一致。

参照图11根据一示例性实施例示出的另一种输出物体距离信息的装置框图，在图9所示实施例的基础上，所述标记模块33可以包括：

匹配子模块331，被配置为将所述物体距离图像与所述环境图像进行匹配，确定目标物体图像；

距离信息确定子模块332，被配置为根据所述物体距离图像，确定每个所述目标物体图像对应的距离信息；

标记子模块333，被配置为将所述目标物体图像的距离信息标记在所述环境图像中，获得目标图像信息。

参照图12根据一示例性实施例示出的另一种输出物体距离信息的装置框图，在图9所示实施例的基础上，所述输出模块35可以包括：

比较子模块351，被配置为将所述目标物体图像的距离信息与预设第一距离阈值作比较；

显示子模块352，被配置为在所述目标物体图像的距离信息小于等于所述第一距离阈值的情况下，将所述目标物体图像对应的距离信息显示在所述环境图像中对应目标物体图像处。

参照图13根据一示例性实施例示出的另一种输出物体距离信息的装置框图，在图9所示实施例的基础上，所述装置还可以包括：

距离比较模块341，被配置为将所述目标物体图像的距离信息与预设第二距离阈值作比较；

报警模块342，被配置为在所述目标物体图像的距离小于所述第二距离阈值的情况下，输出提醒用户距离所述目标物体太近的报警信息。

参照图14根据一示例性实施例示出的另一种输出物体距离信息的装置框图，在图12所示实施例的基础上，所述输出模块35还可以包括：

信息提取子模块353，被配置为根据所述标记有距离信息的目标图像，获得所述目标图像中包括物体的名称及对应的距离信息；

信息播放子模块354，被配置为通过声音播放器将所述物体名称及对应的距离信息输出。

对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本公开方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。