使用对象检测与活动估计的医学视频注释的制作方法

示例涉及用于记录外科手术的方法和装置。

背景技术：

1、医疗手术经常被记录下来。例如，在许多国家，手术可能被拍摄为法律要求，并作为世界各地医科学生的教学资源。手术的视频记录可以由包括计算机系统的装置生成。

技术实现思路

1、可能需要改进如何确定注释和/或将注释添加到外科手术的视频中。注释的自动化可以减少用户在繁琐的重复过程中的疲劳，有助于减少视频注释中的错误。

2、在此公开了一种装置，配置为基于以下的至少一个对外科手术的视频进行注释：外科手术期间执行的命令、器械设置或视频。装置可以包括处理器和/或存储器。注释方法可以减少注释中的错误，和/或减轻用户手动地进行注释的负担。

3、命令可用于确定/设置外科器械诸如光学外科器械的多个设置中的至少一个。光学外科器械可以被配置用于在人眼上进行的手术。可以通过加快手术速度来减少病人的创伤。允许基于命令的注释可以提高确定的注释的准确性。基于命令的注释可以在很少或没有用户干预的情况下确定注释。具有准确的注释可以帮助提高经注释的视频的教学价值和/或减少未能满足手术的证明文件的法律义务的风险。

4、命令可用于设置外科装置和/或光学器械诸如外科显微镜的多个设置中的至少一个。允许注释的确定的基础包括用于外科装置和/或光学器械诸如外科显微镜的设置的命令可以增加注释的准确性。命令可以用于设置光学设置。

5、光学设置可包括照明强度、焦点、放大率、照明源、滤色器(例如滤色器选择)中的至少一个。可替代地/附加地，命令可以是开始记录的命令，它也可以至少形成注释的部分基础。允许注释的确定的基础包括光学设置可以增加注释的准确性。希望有命令/设置的“基本集”，可以帮助准确地注释视频，特别是在使用机器学习算法时。

6、命令可以是外科器械诸如外科显微镜的多个外科命令中的至少一个。允许注释的确定的基础包括外科命令可以增加注释的准确性。

7、外科命令可以用于超声激活、超声去激活、泵激活、泵去激活、注射和/或抽吸。允许注释的确定的基础包括特定的外科命令可以增加注释的准确性。

8、注释的确定可以基于以下中的至少一个：视频的图像参数、视频中的对象、视频中至少两个对象的相对位置或视频中的运动。允许注释的确定的基础包括特定参数、对象、相对位置和/或运动可以提高注释的准确性。

9、对象可以是一个或多个可识别对象，诸如至少一个外科器械(诸如刀片或超声乳化剂)或至少一个解剖结构。允许注释的确定的基础包括特定对象和/或运动可以增加注释的准确性。

10、装置可以确定与注释相关联的时间戳。时间戳可以改善在编辑注释和/或在视频中查找内容的用户体验。

11、装置可包括存储器，存储器可存储从中选择注释的库。注释库可以将注释标准化，这可能有助于满足手术的证明文件的法律要求，和/或提供被广泛理解的注释。

12、可以使用多于一个注释对视频进行注释，每个注释具有关联的时间戳。多个注释有助于准确描述多步骤外科手术。

13、可以使用机器学习算法来确定注释。机器学习算法可以提供准确的注释和/或减轻用户制作/编辑注释的负担。机器学习算法也可以适应和纳入新的信息。机器学习可以提高准确性和/或提供更相关/信息量更大的注释。

14、机器学习算法可以识别命令、图像参数、对象或运动中的至少一个；或对命令、图像参数、对象或运动中的至少一个进行分类。能够识别和/或分类的算法可以提高注释的准确性和/或提供更相关/信息量更大的注释。

15、本文公开了一种注释外科手术视频的方法。方法包括确定用于外科手术的视频的注释，并使用注释对视频进行注释。基于以下中的至少一个确定注释：由视频记录的手术期间执行的命令、器械设置、或以下中的至少一个的确定：视频的图像参数、视频中的对象或视频中的运动。使用命令、设置、图像参数、对象识别和/或运动可以提高注释的准确性和/或提供更多相关/信息量更大的注释。

16、本文公开了一种具有用于注释外科手术的视频的程序代码的计算机程序。注释可以基于以下中的至少一个：外科手术期间执行的命令、器械参数或视频。使用命令、设置、器械参数或视频可以提高注释的准确性和/或提供更多相关/信息量更大的注释。

1.一种装置(120)，被配置为：

2.如权利要求1所述的装置(120)，其中

3.如权利要求2所述的装置(120)，其中

4.如先前权利要求中任何一个所述的装置(120)，其中

5.如权利要求4所述的装置(120)，其中

6.如先前权利要求中任何一个所述的装置(120)，

7.如权利要求6所述的装置(120)，其中

8.如权利要求所述的装置(120)，其中

9.如先前权利要求中任何一个所述的装置(120)，被配置为确定

10.如先前权利要求中任何一个所述的装置(120)，进一步包括：

11.如先前权利要求中任何一个所述的装置(120)，其中

12.如先前权利要求中任何一个所述的装置(120)，被配置为

13.如权利要求12所述的装置(120)，其中

14.一种对外科手术的视频(120)注释的方法，包括：

15.一种计算机程序，具有用于对外科手术的视频(120)注释的程序代码，所述注释基于以下中的至少一个：