屏幕定位方法及装置与流程

本发明涉及计算机领域，尤其涉及一种屏幕定位方法及装置。

背景技术：

现有的手机等终端的屏幕位置的定位的方式存在定位过程复杂和定位准确度不高的问题。

技术实现要素：

本发明的一个目的是提供一种屏幕定位方法及装置。

根据本发明的一个方面，提供了一种屏幕定位方法，该方法包括：

将屏幕亮屏显示为白底画面；

拍摄包括所述白底画面的屏幕的照片；

从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

进一步的，上述方法中，从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置，包括：

将所述照片转换为灰度图片；

指定预设像素阈值t1对所述灰度图片进行分割，其中，将所述照片中超过所述预设像素阈值t1的像素点的像素值设为255，将所述照片中未超过所述预设像素阈值t1的像素点的像素值设为0；

获取所述灰度图片中的像素值为255的各个像素点连续的区域；

计算每个像素点连续的区域中的像素点的个数，对每个像素点连续的区域进行筛选，其中，舍弃像素点的个数量小于预设个数阈值t2的像素点连续的区域，并保留像素点的个数量大于等于预设个数阈值t2的像素点连续的区域；

计算每个保留的像素点连续的区域的最小外接旋转矩形的面积，计算每个保留的像素点连续的区域的最小外接旋转矩形的饱满度s，其中，饱满度s＝某个保留的像素点连续的区域中的像素点的个数/该个保留的像素点连续的区域的最小外接旋转矩形的面积；

将饱满度s大于预设饱满度阈值t3的保留的像素点连续的区域作为所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

进一步的，上述方法中，将屏幕亮屏显示为白底画面中，包括：

所述白底画面的中间区域叠加显示有待识别图像。

进一步的，上述方法中，从所述照片中识别出所述白底画面的边界之后，还包括：

获取所述白底画面的边界所围的范围内的待识别图像；

识别所述待识别图像，以得到带有所述屏幕的终端设备的属性信息。

进一步的，上述方法中，所述待识别图像包括二维码或条形码。

根据本发明的另一方面，还提供一种屏幕定位装置，其中，该装置包括：

显示模块，用于将屏幕亮屏显示为白底画面；

拍摄模块，用于拍摄包括所述白底画面的屏幕的照片；

识别模块，用于从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

进一步的，上述装置中，所述识别模块，用于将所述照片转换为灰度图片；指定预设像素阈值t1对所述灰度图片进行分割，其中，将所述照片中超过所述预设像素阈值t1的像素点的像素值设为255，将所述照片中未超过所述预设像素阈值t1的像素点的像素值设为0；获取所述灰度图片中像素值为255的各个像素点连续的区域；计算每个像素点连续的区域中的像素点的个数，对每个像素点连续的区域进行筛选，其中，舍弃像素点的个数量小于预设个数阈值t2的像素点连续的区域，并保留像素点的个数量大于等于预设个数阈值t2的像素点连续的区域；计算每个保留的像素点连续的区域的最小外接旋转矩形的面积，计算每个保留的像素点连续的区域的最小外接旋转矩形的饱满度s，其中，饱满度s＝某个保留的像素点连续的区域中的像素点的个数/该个保留的像素点连续的区域的最小外接旋转矩形的面积；将饱满度s大于预设饱满度阈值t3的保留的像素点连续的区域作为所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

进一步的，上述装置中，所述显示模块，用于在所述白底画面的中间区域叠加显示待识别图像。

进一步的，上述装置中，所述识别模块，还用于获取所述白底画面的边界所围的范围内的待识别图像；识别所述待识别图像，以得到带有所述屏幕的终端设备的属性信息。

进一步的，上述装置中，所述待识别图像包括二维码或条形码。

根据本发明的另一方面，还提供一种基于计算的设备，其中，包括：

处理器；以及

被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器：

将屏幕亮屏显示为白底画面；

拍摄包括所述白底画面的屏幕的照片；

从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

根据本发明的另一方面，还提供一种计算机可读存储介质，其上存储有计算机可执行指令，其中，该计算机可执行指令被处理器执行时使得该处理器：

将屏幕亮屏显示为白底画面；

拍摄包括所述白底画面的屏幕的照片；

从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

与现有技术相比，本发明通过将屏幕亮屏显示为白底画面，基于白底画面的边界可以简单、准确的定位设备的屏幕位置。另外，通过指定预设像素阈值t1对所述灰度图片gray进行分割；计算每个像素点连续的区域中的像素点的个数，对每个像素点连续的区域进行筛选；计算每个保留的像素点连续的区域的最小外接旋转矩形的面积，计算每个保留的像素点连续的区域的最小外接旋转矩形的饱满度s；将饱满度s大于预设饱满度阈值t3的保留的像素点连续的区域作为所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置，从而准确、可靠的识别出各种终端的屏幕位置。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：

图1示出根据本发明一实施例的屏幕定位方法的流程图。

附图中相同或相似的附图标记代表相同或相似的部件。

具体实施方式

下面结合附图对本发明作进一步详细描述。

在本申请一个典型的配置中，终端、服务网络的设备和可信方均包括一个或多个处理器(cpu)、输入/输出接口、网络接口和内存。

内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(ram)和/或非易失性内存等形式，如只读存储器(rom)或闪存(flashram)。内存是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(pram)、静态随机存取存储器(sram)、动态随机存取存储器(dram)、其他类型的随机存取存储器(ram)、只读存储器(rom)、电可擦除可编程只读存储器(eeprom)、快闪记忆体或其他内存技术、只读光盘只读存储器(cd-rom)、数字多功能光盘(dvd)或其他光学存储、磁盒式磁带，磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括非暂存电脑可读媒体(transitorymedia)，如调制的数据信号和载波。

如图1所示，本发明提供一种屏幕定位方法，所述方法包括：

步骤s1，将屏幕亮屏显示为白底画面；

在此，所述屏幕可以是手机、pad等带有显示屏幕的终端设备；

步骤s2，拍摄包括所述白底画面的屏幕的照片；

在此，拍摄屏幕的时候，会同时把屏幕区域之外的无关区域也拍摄进去，后续需要从中识别屏幕区域；

步骤s3，从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

在此，本发明通过将屏幕亮屏显示为白底画面，基于白底画面的边界可以简单、准确的定位设备的屏幕位置。

本发明的屏幕定位方法一实施例中，步骤s3，从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置，包括：

步骤s31，将所述照片src转换为灰度图片gray；

步骤s32，指定预设像素阈值t1对所述灰度图片gray进行分割，其中，将所述照片src中超过所述预设像素阈值t1的像素点的像素值设为255，将所述照片src中未超过所述预设像素阈值t1的像素点的像素值值设为0；

步骤s33，获取所述灰度图片gray中的像素值为255的各个像素点连续的区域；

在此，某个像素点在另一个像素点的8邻域内，可以认为两者是连续的，2个或2个以上连续像素点可以形成一个像素点连续的区域；

像素值为0为黑色的像素点，像素值为255表示白色的像素点，像素值为0的像素点的连接区域不需要考虑，视为屏幕区域之外的背景；

步骤s34，计算每个像素点连续的区域中的像素点的个数，对每个像素点连续的区域进行筛选，其中，舍弃像素点的个数量小于预设个数阈值t2的像素点连续的区域，并保留像素点的个数量大于等于预设个数阈值t2的像素点连续的区域；

步骤s35，计算每个保留的像素点连续的区域的最小外接旋转矩形的面积，计算每个保留的像素点连续的区域的最小外接旋转矩形的饱满度s，其中，饱满度s＝某个保留的像素点连续的区域中的像素点的个数/该个保留的像素点连续的区域的最小外接旋转矩形的面积；

步骤s36，将饱满度s大于预设饱满度阈值t3的保留的像素点连续的区域作为所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

在此，可以遍历每个保留的像素点连续的区域，用每个保留的像素点连续的区域的像素点个数除以其最小外接旋转矩形的面积，得到该区域的饱满度s，如果某个保留的像素点连续的区域的饱满度s值大于预设饱满度阈值t3则其为屏幕区域，若小于，则为非屏幕区域。

本实施通过指定预设像素阈值t1对所述灰度图片gray进行分割；计算每个像素点连续的区域中的像素点的个数，对每个像素点连续的区域进行筛选；计算每个保留的像素点连续的区域的最小外接旋转矩形的面积，计算每个保留的像素点连续的区域的最小外接旋转矩形的饱满度s；将饱满度s大于预设饱满度阈值t3的保留的像素点连续的区域作为所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置，从而准确、可靠的识别出各种终端的屏幕位置。

本发明的屏幕定位方法一实施例中，步骤s1，将屏幕亮屏显示为白底画面中，包括：

所述白底画面的中间区域叠加显示有待识别图像。

在此，所述待识别图像可以是二维码、条形码等可识别码，

通过在所述白底画面的中间的屏幕非边界区域叠加显示有待识别图像，实现自动识别到屏幕的位置后，可以获取到屏幕中间的待识别图像，以进一步高效、准确的获取到待识别图像中所包含的信息。

所述待识别图像中所包含的信息包括带有所述屏幕的终端设备的属性信息，如终端设备的内存、型号的信息。

本发明的屏幕定位方法一实施例中，步骤s3，从所述照片中识别出所述白底画面的边界之后，还包括：

获取所述白底画面的边界所围的范围内的待识别图像；

识别所述待识别图像，以得到带有所述屏幕的终端设备的属性信息。

在此，通过在所述白底画面的中间的屏幕非边界区域叠加显示有待识别图像，实现自动识别到屏幕的位置后，可以获取到屏幕中间的待识别图像，以进一步高效、准确的获取到待识别图像中所包含的信息。

本发明提供一种屏幕定位装置，所述装置包括：

显示模块，用于将屏幕亮屏显示为白底画面；

在此，所述屏幕可以是手机、pad等带有显示屏幕的终端设备；

拍摄模块，用于拍摄包括所述白底画面的屏幕的照片；

在此，拍摄屏幕的时候，会同时把屏幕区域之外的无关区域也拍摄进去，后续需要从中识别屏幕区域；

识别模块，用于从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

在此，本发明通过将屏幕亮屏显示为白底画面，基于白底画面的边界可以简单、准确的定位设备的屏幕位置。

本发明的屏幕定位装置一实施例中，所述识别模块，用于将所述照片src转换为灰度图片gray；指定预设像素阈值t1对所述灰度图片gray进行分割，其中，将所述照片src中超过所述预设像素阈值t1的像素点的像素值设为255，将所述照片src中未超过所述预设像素阈值t1的像素点的像素值设为0；获取所述灰度图片gray中像素值为255的各个像素点连续的区域；计算每个像素点连续的区域中的像素点的个数，对每个像素点连续的区域进行筛选，其中，舍弃像素点的个数量小于预设个数阈值t2的像素点连续的区域，并保留像素点的个数量大于等于预设个数阈值t2的像素点连续的区域；计算每个保留的像素点连续的区域的最小外接旋转矩形的面积，计算每个保留的像素点连续的区域的最小外接旋转矩形的饱满度s，其中，饱满度s＝某个保留的像素点连续的区域中的像素点的个数/该个保留的像素点连续的区域的最小外接旋转矩形的面积；将饱满度s大于预设饱满度阈值t3的保留的像素点连续的区域作为所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

在此，某个像素点在另一个像素点的8邻域内，可以认为两者是连续的，2个或2个以上连续像素点可以形成一个像素点连续的区域；

像素值为0为黑色的像素点，像素值为255表示白色的像素点，像素值为0的像素点的连接区域不需要考虑，视为屏幕区域之外的背景；

可以遍历每个保留的像素点连续的区域，用每个保留的像素点连续的区域的像素点个数除以其最小外接旋转矩形的面积，得到该区域的饱满度s，如果某个保留的像素点连续的区域的饱满度s值大于预设饱满度阈值t3则其为屏幕区域，若小于，则为非屏幕区域。

本实施通过指定预设像素阈值t对所述灰度图片gray进行分割；计算每个像素点连续的区域中的像素点的个数，对每个像素点连续的区域进行筛选；计算每个保留的像素点连续的区域的最小外接旋转矩形的面积，计算每个保留的像素点连续的区域的最小外接旋转矩形的饱满度s；将饱满度s大于预设饱满度阈值t3的保留的像素点连续的区域作为所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置，从而准确、可靠的识别出各种终端的屏幕位置。

本发明的屏幕定位装置一实施例中，所述显示模块，用于在所述白底画面的中间区域叠加显示待识别图像。

在此，所述待识别图像可以是二维码、条形码等可识别码，

通过在所述白底画面的中间的屏幕非边界区域叠加显示有待识别图像，实现自动识别到屏幕的位置后，可以获取到屏幕中间的待识别图像，以进一步高效、准确的获取到待识别图像中所包含的信息。

所述待识别图像中所包含的信息包括带有所述屏幕的终端设备的属性信息，如终端设备的内存、型号的信息。

本发明的屏幕定位装置一实施例中，所述识别模块，还用于获取所述白底画面的边界所围的范围内的待识别图像；识别所述待识别图像，以得到带有所述屏幕的终端设备的属性信息。

在此，通过在所述白底画面的中间的屏幕非边界区域叠加显示有待识别图像，实现自动识别到屏幕的位置后，可以获取到屏幕中间的待识别图像，以进一步高效、准确的获取到待识别图像中所包含的信息。

根据本发明的另一方面，还提供一种基于计算的设备，其中，包括：

处理器；以及

被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器：

将屏幕亮屏显示为白底画面；

拍摄包括所述白底画面的屏幕的照片；

从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

根据本发明的另一方面，还提供一种计算机可读存储介质，其上存储有计算机可执行指令，其中，该计算机可执行指令被处理器执行时使得该处理器：

将屏幕亮屏显示为白底画面；

拍摄包括所述白底画面的屏幕的照片；

从所述照片中识别出所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置。

本发明的各设备和存储介质实施例的详细内容，具体可参见各方法实施例的对应部分，在此，不再赘述。

与现有技术相比，本发明通过将屏幕亮屏显示为白底画面，基于白底画面的边界可以简单、准确的定位设备的屏幕位置。另外，通过指定预设像素阈值t1对所述灰度图片gray进行分割；计算每个像素点连续的区域中的像素点的个数，对每个像素点连续的区域进行筛选；计算每个保留的像素点连续的区域的最小外接旋转矩形的面积，计算每个保留的像素点连续的区域的最小外接旋转矩形的饱满度s；将饱满度s大于预设饱满度阈值t3的保留的像素点连续的区域作为所述白底画面的边界，将所述边界作为所述屏幕的轮廓的位置，从而准确、可靠的识别出各种终端的屏幕位置。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

需要注意的是，本发明可在软件和/或软件与硬件的组合体中被实施，例如，可采用专用集成电路(asic)、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中，本发明的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地，本发明的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中，例如，ram存储器，磁或光驱动器或软磁盘及类似设备。另外，本发明的一些步骤或功能可采用硬件来实现，例如，作为与处理器配合从而执行各个步骤或功能的电路。

另外，本发明的一部分可被应用为计算机程序产品，例如计算机程序指令，当其被计算机执行时，通过该计算机的操作，可以调用或提供根据本发明的方法和/或技术方案。而调用本发明的方法的程序指令，可能被存储在固定的或可移动的记录介质中，和/或通过广播或其他信号承载媒体中的数据流而被传输，和/或被存储在根据所述程序指令运行的计算机设备的工作存储器中。在此，根据本发明的一个实施例包括一个装置，该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发该装置运行基于前述根据本发明的多个实施例的方法和/或技术方案。

对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。