应用于移动终端的FOV图片的病理标注方法及装置与流程

本发明涉及智能医疗领域，尤其涉及一种应用于移动终端的fov图片的病理标注方法及装置。

背景技术：

人工智能在医疗领域中的应用正处在高速发展的过程中，人工智能辅助病理诊断也是未来即将面临和待解决的难题。机器学习病理诊断，首先需要大量的标注数据和深度学习训练，作为机器学习前期的“老师”。只有经过了对大量病理学图像(自然图像)的学习和归类，后续才有可能成为辅助病理诊断的助手。但目前一般的病理数字切片大小均在几个g到几十个g，通过一定的手段切割呈中等大小的fov图片。人工智能在前期标注时，一般选择全片整体性标注、大至中等fov图片的标注。以上两个方式，均存在漏标注、标注步骤繁琐和工作量巨大等问题。造成病理医师在标注时的不适和疲劳。目前一般的标注工具多在pc端呈现，标注上多数会受工作地域的限制。大图片的数据，由于安全性和网速的问题，多数在非连网状态下完成。在工作单位标注和家中标注往往不能同步。病理医师目前人员短缺，据官方统计我国注册病理医生大概在一万人左右，而国内病理医生的缺口在10万左右。现在职的病理医生已属于超负荷工作量了，无法达到利用在家或者单位工作时间完成大量的标注任务。

技术实现要素：

本发明实施例提供一种应用于移动终端的fov图片的病理标注方法及装置，能有效解决现有的病理图像标注工作繁琐，标注地点受限，无法完成短期内大量病理图像机器学习标注的工作技术问题，有利于标注工作者随时随地进行标注工作，提高标注效率，且能降低标注工作者的工作量，方便快捷。

本发明一实施例提供一种应用于移动终端的fov图片的病理标注方法，包括步骤：

响应于用户在移动终端输入的病理标注指令，调用任一fov图片并显示于所述移动终端的显示界面上；其中，所述fov图片通过对病理切片的原始扫描图像进行分割后得到，且所述fov图片所占用的存储空间小于预设的阈值；

响应于所述用户对所述fov图片的标注指令，保存所述用户对所述fov图片的标注结果。

与现有技术相比，本发明实施例公开的应用于移动终端的fov图片的病理标注方法，通过响应于用户在移动终端输入的病理标注指令，调用任一fov图片并显示于所述移动终端的显示界面上；其中，所述fov图片通过对病理切片的原始扫描图像进行分割后得到，且所述fov图片所占用的存储空间小于预设的阈值；响应于所述用户对所述fov图片的标注指令，保存所述用户对所述fov图片的标注结果，标注工作者无需面对全片整体性标注，仅需对分割后的小图片进行标注，减少标注工作者的工作量，降低其疲劳感，提高标注准确率，且在移动终端上操作，可随时随地进行标注，不受地点的限制，有利于提高标注工作的效率。

作为上述方案的改进，所述fov图片存储于本地或云端；

当所述fov图片存储于本地时，通过查找本地的存储器调用任一所述fov图片；

当所述fov图片存储与云端时，通过向云端发送请求指令获取任一所述fov图片。

作为上述方案的改进，所述方法还包括：

所述fov图片通过以下步骤生成：

对所述病理切片的原始扫描图像分割成n个小图片后，计算所述n个小图片中每一所述小图片的病理指数；其中，10^10≥n≥10；

所述n个小图片中每一所述小图片的病理指数，获取所述n个小图片中病理指数最高的前m个小图片作为所述fov图片；其中，50≥m≥5。

作为上述方案的改进，所述响应于所述用户对所述fov图片的标注指令，保存所述用户对所述fov图片的标注结果包括步骤：

在显示所述fov图片时，在所述显示界面上显示是否有病变细胞和病变细胞类型的第一选项按钮；

当接收到所述用户对任一所述第一选项按钮的点击操作时，完成所述用户对所述fov图片的标注，并保存所述用户对所述fov图片的标注结果。

作为上述方案的改进，所述响应于所述用户对所述fov图片的标注指令，保存所述用户对所述fov图片的标注结果包括步骤：

在显示所述fov图片时，在所述显示界面上显示其他用户或机器对所述fov图片的标注结果，并同时显示是否同意其他用户或机器对所述fov图片的标注结果的第二选项按钮；

当接收到所述用户对任一所述第二选项按钮的点击操作时，完成所述用户对所述fov图片的标注，并保存所述用户对所述fov图片的标注结果。

作为上述方案的改进，所述第二选项按钮包括同意按钮和反对按钮；

所述当接收到所述用户对任一所述第一选项按钮的点击操作时，完成所述用户对所述fov图片的标注具体为：

当接收到所述用户对所述同意按钮的点击操作时，将所述其他用户或机器对所述fov图片的标注结果作为所述用户的标注结果；

当接收到所述用户对所述反对按钮的点击操作时，将所述用户重新输入的标注结果作为所述用户的标注结果。

作为上述方案的改进，所述方法还包括步骤：

在显示所述第二选项按钮时，同时显示语音输入标记；其中，所述语音输入标记的显示状态包括正在检测语音输入状态和停止检测语音输入状态；

所述当接收到所述用户对所述反对按钮的点击操作时，将所述用户重新输入的标注结果作为所述用户的标注结果具体为：

当接收到所述用户对所述反对按钮的点击操作时，将所述语音输入标记的显示状态修改为正在检测语音输入状态，并通过语音设备获取所述用户输入的标注结果。

作为上述方案的改进，所述语音输入标记为语音输入进度条，当所述语音输入标记的显示状态为停止检测语音输入状态时，在所述显示界面显示处于满格状态的所述语音进度条；当所述语音输入标记的显示状态为正在检测语音输入状态，在所述显示界面在预设的时间段内逐渐缩短的所述语音进度条。

本发明另一实施例对应提供了一种应用于移动终端的fov图片的病理标注装置，包括：

fov图片显示模块，用于响应于用户在移动终端输入的病理标注指令，调用任一fov图片并显示于所述移动终端的显示界面上；其中，所述fov图片通过对病理切片的原始扫描图像进行分割后得到，且所述fov图片所占用的存储空间小于预设的阈值；

标注模块，用于响应于所述用户对所述fov图片的标注指令，保存所述用户对所述fov图片的标注结果。

本发明另一实施例提供了一种应用于移动终端的fov图片的病理标注，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现上述任一发明实施例所述的应用于移动终端的fov图片的病理标注方法。

本发明另一实施例提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行上述任一发明实施例所述的应用于移动终端的fov图片的病理标注方法。

附图说明

图1是本发明一实施例提供的一种应用于移动终端的fov图片的病理标注方法的流程示意图；

图2是本发明一实施例提供的不同类型的移动终端从云端加载fov图片的示意图。

图3是本发明一实施例提供的病理切片的原始扫描图像的切割示意图。

图4(a)是宫颈细胞学单细胞切割小图片，图4(b)是宫颈细胞学细胞团切割小图片。

图5是本发明一实施例提供的移动终端的显示界面示意图。

图6是本发明另一实施例提供的移动终端的显示界面示意图。

图7是本发明一实施例提供的一种应用于移动终端的fov图片的病理标注装置的结构示意图。

图8，是本发明第三实施例提供的应用于移动终端的fov图片的病理标注装置的结构示意图

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

参见图1，是本发明一实施例提供的一种应用于移动终端的fov图片的病理标注方法的流程示意图，包括：

s1、响应于用户在移动终端输入的病理标注指令，调用任一fov图片并显示于所述移动终端的显示界面上；其中，所述fov图片通过对病理切片的原始扫描图像进行分割后得到，且所述fov图片所占用的存储空间小于预设的阈值；

其中，所述fov图片存储于本地或云端；

当所述fov图片存储于本地时，通过查找本地的存储器调用任一所述fov图片；

如图2所示，当所述fov图片存储与云端时，通过向云端发送请求指令获取任一所述fov图片。

由此可见，小图片可以方便在互联网上下载至不同的接收平台下，可便于在云端快速响应到移动端设备中，实现快速的操作，从而完成标注的过程。因此，标注工作者可在闲暇的空余时间(例如，在坐车、等车过程)使用手机进行标注，也可在家或办公室使用一般的pc进行标注，可在不同设备上同步性操作，大大增加了便捷性，最大时间利用标注工作者的零碎时间操作。

所述fov图片通过以下方式生成：

首先，如图3所示，对病理切片的原始扫描图像分割成n个小图片后，计算所述n个小图片中每一所述小图片的病理指数；其中，10^10≥n≥10；

然后，所述n个小图片中每一所述小图片的病理指数，获取所述n个小图片中病理指数最高的前m个小图片作为所述fov图片；其中，50≥m≥5。

一般来说，原始扫描图像通过将细胞病理玻片，通过数字切片扫描仪，转化为x400倍的数字图像，其大小可达到几个g到几十个g。如果标注工作者通过对全片进行标注，工作量非常大，而且只能在大容量的计算机上工作，地点受限，因此，原有的标注工作存在漏标注、标注步骤繁琐和工作量巨大等问题。因此，通过对原始数字图像进行切割后，可使标注工作者能随时随地进行标注，切割后的图像无需在大容量的计算机才能加载，降低标注工作者的工作量。如图4(a)所示，为宫颈细胞学单细胞切割小图片，如图4(b)所示，为宫颈细胞学细胞团切割小图片。

s2、响应于所述用户对所述fov图片的标注指令，保存所述用户对所述fov图片的标注结果。

具体地，在显示所述fov图片时，在所述显示界面上显示是否有病变细胞和病变细胞类型的第一选项按钮；

当接收到所述用户对任一所述第一选项按钮的点击操作时，完成所述用户对所述fov图片的标注，并保存所述用户对所述fov图片的标注结果。

例如，如图5所示，在移动终端的显示界面上，除了显示fov图片外，还在该图片周围显示是否有病变细胞和病变细胞类型的第一选项按钮(包括asc、lsil、agc、hsil等)，当接收到用户对任一第一选项按钮的选择操作时，保存该操作记录，并自动前往下一张fov图片。一般来说，标注结果为lsil的概率最高，因此，系统首先默认用户选择lsil，并按照病变概率分布的特点调节多种标签选项的位置，提高了系统操作的友好型和便捷性。

在另一优选方式中，在显示所述fov图片时，在所述显示界面上显示其他用户或机器对所述fov图片的标注结果，并同时显示是否同意其他用户或机器对所述fov图片的标注结果的第二选项按钮；

当接收到所述用户对任一所述第二选项按钮的点击操作时，完成所述用户对所述fov图片的标注，并保存所述用户对所述fov图片的标注结果。

所述第二选项按钮包括同意按钮和反对按钮；

所述当接收到所述用户对任一所述第一选项按钮的点击操作时，完成所述用户对所述fov图片的标注具体为：

当接收到所述用户对所述同意按钮的点击操作时，将所述其他用户或机器对所述fov图片的标注结果作为所述用户的标注结果；

当接收到所述用户对所述反对按钮的点击操作时，将所述用户重新输入的标注结果作为所述用户的标注结果。

例如，如图6所示，在移动终端的显示界面上，除了显示fov图片外，还显示有前期人工标注结果或者机器标注结果，同时显示是否同意其他用户或机器对所述fov图片的标注结果的第二选项按钮(即图中的“yes”和“no”按钮)，正确，点击yes，保存并进入下一张。错误，点击no，重新输入新的标注结果。通过这种复核的方式，提高了纠正错误的快捷性，最大限度的降低人操作的复杂性。

由图5和图6的显示界面可知，该方案还兼顾了标注界面的友好性及游戏性，可降低标注病理医师的不适感及疲劳性。

在显示所述第二选项按钮时，同时显示语音输入标记；其中，所述语音输入标记的显示状态包括正在检测语音输入状态和停止检测语音输入状态；

所述当接收到所述用户对所述反对按钮的点击操作时，将所述用户重新输入的标注结果作为所述用户的标注结果具体为：

当接收到所述用户对所述反对按钮的点击操作时，将所述语音输入标记的显示状态修改为正在检测语音输入状态，并通过语音设备获取所述用户输入的标注结果。

优选地，所述语音输入标记为语音输入进度条，当所述语音输入标记的显示状态为停止检测语音输入状态时，在所述显示界面显示处于满格状态的所述语音进度条；当所述语音输入标记的显示状态为正在检测语音输入状态，在所述显示界面在预设的时间段内逐渐缩短的所述语音进度条。

例如，如图6所示，当标注工作者点击“no”时，显示5-10s倒计时语音纠错功能，进度条处于逐渐缩短的状态。例如一张lsil的片子，之前机器标注asc-us，标注工作者说出lsil的发音，移动终端则自动纠正。

参见图7，为本发明实施例提供的一种应用于移动终端的fov图片的病理标注装置的结构示意图，包括：

fov图片显示模块101，用于响应于用户在移动终端输入的病理标注指令，调用任一fov图片并显示于所述移动终端的显示界面上；其中，所述fov图片通过对病理切片的原始扫描图像进行分割后得到，且所述fov图片所占用的存储空间小于预设的阈值；

标注模块102，用于响应于所述用户对所述fov图片的标注指令，保存所述用户对所述fov图片的标注结果。

本发明实施例的应用于移动终端的fov图片的病理标注装置的实施过程和工作原理可参考上述任一项对应用于移动终端的fov图片的病理标注方法的描述，在此不再赘述。

本发明另一实施例提供了一种应用于移动终端的fov图片的病理标注装置，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现上述任一发明实施例所述的应用于移动终端的fov图片的病理标注方法。

本发明另一实施例提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行上述任一发明实施例所述的应用于移动终端的fov图片的病理标注方法。

参见图8，是本发明实施例提供的应用于移动终端的fov图片的病理标注装置的示意图。所述应用于移动终端的fov图片的病理标注装置包括：至少一个处理器11，例如cpu，至少一个网络接口14或者其他用户接口13，存储器15，至少一个通信总线12，通信总线12用于实现这些组件之间的连接通信。其中，用户接口13可选的可以包括usb接口以及其他标准接口、有线接口。网络接口14可选的可以包括wi-fi接口以及其他无线接口。存储器15可能包含高速ram存储器，也可能还包括非不稳定的存储器(non-volatilememory)，例如至少一个磁盘存储器。存储器15可选的可以包含至少一个位于远离前述处理器11的存储装置。

在一些实施方式中，存储器15存储了如下的元素，可执行模块或者数据结构，或者他们的子集，或者他们的扩展集:

操作系统151，包含各种系统程序，如电池管理系统等等，用于实现各种基础业务以及处理基于硬件的任务；

程序152。

具体地，处理器11用于调用存储器15中存储的程序152，执行上述实施例所述应用于移动终端的fov图片的病理标注方法，例如图1所示的步骤s11。或者，所述处理器11执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能，例如标注模块102。

示例性的，所述计算机程序可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器中，并由所述处理器执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序在所述应用于移动终端的fov图片的病理标注装置中的执行过程。

所述应用于移动终端的fov图片的病理标注装置可包括，但不仅限于，处理器11、存储器15。本领域技术人员可以理解，所述示意图仅仅是应用于移动终端的fov图片的病理标注装置的示例，并不构成对应用于移动终端的fov图片的病理标注装置的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述应用于移动终端的fov图片的病理标注装置还可以包括输入输出设备、网络接入设备、总线等。

所称处理器11可以是中央处理单元(centralprocessingunit，cpu)，还可以是其他通用处理器、数字信号处理器(digitalsignalprocessor，dsp)、专用集成电路(applicationspecificintegratedcircuit，asic)、现成可编程门阵列(field-programmablegatearray，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器11是所述应用于移动终端的fov图片的病理标注装置的控制中心，利用各种接口和线路连接整个应用于移动终端的fov图片的病理标注装置的各个部分。

所述存储器15可用于存储所述计算机程序和/或模块，所述处理器11通过运行或执行存储在所述存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现所述应用于移动终端的fov图片的病理标注装置的各种功能。所述存储器15可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器15可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(smartmediacard,smc)，安全数字(securedigital,sd)卡，闪存卡(flashcard)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

其中，所述应用于移动终端的fov图片的病理标注装置集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、u盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。

以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。