用于管理便条的系统和方法
【技术领域】
[0001] 本公开涉及便条捕获、识别、提取，和/或管理工具和系统。
【背景技术】
[0002] 便条已被广泛用于记录、共享，以及传达想法和信息。例如，在协作会话（例如，集 体研讨会话）期间，参与者在Post-It⑧便条、白板，或纸材上写下想法，然后彼此共享。此 外，人们常常全天使用便条以记住个人不想忘记的信息或内容。如另外的实例，人们通常使 用便条作为将来要发生的动作或事件（诸如打电话、修改文档或填写时间表）的提醒。
[0003] 在许多情况下，人们可习惯在基于纸材的便条诸如Post-It?便条上写下适当的 信息。纸材Post-It?便条从背部粘贴的纸材Post-It?便条的分配便签簿被简单地移除， 并且被应用于多种表面诸如文档、桌子的顶部、电话等。可在纸材Post-It?便条与它们的 分配便签簿分离或附接到它们的目标表面之前或之后，将信息写在纸材Post-It?便条上。 纸材Post-It?便条可容易地从一个表面移动到另一个表面诸如在文档之间或在文档和桌 子的顶部之间，它们可重叠边缘或文档的边界，它们可以是分层的，并且它们可随它们所附 接到的对象移动。
【发明内容】
[0004] 本公开的至少一些方面以一种收集便条的内容的方法为特征，该方法包括以下步 骤：由传感器来捕获具有多个便条的场景的视觉表示；由处理单元来从视觉表示识别所述 多个便条中的一个便条；以及由处理单元来提取多个便条中的一个便条的内容。
[0005] 本公开的至少一些方面以一种便条识别系统为特征，该便条识别系统包括传感 器、便条识别模块，和便条提取模块。该传感器被构造成捕获具有多个便条的场景的视觉表 示。该便条识别模块耦接到传感器。该便条识别模块被构造成接收所捕获的视觉表示，并 且从所捕获的视觉表示确定所述多个便条中的一个便条的一般边界。该便条提取模块被构 造成基于所述多个便条中的所述一个便条的所确定的一般边界，从所捕获的视觉表示提取 所述多个便条中的所述一个便条的内容。
【附图说明】
[0006] 附图包含在本说明中并构成本说明的一部分，并且与【具体实施方式】一起解释本发 明的优点和原理。在附图中，
[0007] 图IA是示出了用户使用移动装置上的图像捕获装置来捕获具有便条的工作空间 的图像的一个实例的表示；
[0008] 图IB是示出了移动装置的一个实例的框图；
[0009] 图IC示出了便条识别系统的实施例；
[0010] 图ID示出了便条管理系统的实施例；
[0011] 图2A至图2C示出了具有标记的便条的一些实例；
[0012] 图3A示出了便条识别系统和/或便条管理系统的实施例的流程图；
[0013] 图3B示出了提取便条的内容的实施例的流程图；
[0014] 图3C示出了验证便条的实施例的流程图；
[0015] 图4A至图4D示出了具有标记的便条的内容提取过程的实例；
[0016] 图5A至图示出了具有逆向反射标记的多个便条的内容提取的实施例；
[0017] 图6示出了便条识别系统的实施例的模块图；
[0018] 图7A示出了便条管理系统的实施例的流程图；
[0019] 图7B示出了系统可如何标记便条的实例；以及
[0020] 图8示出了便条管理系统的实施例的模块图。
【具体实施方式】
[0021] 便条已经广泛用于记录、共享，以及传达想法和信息。例如，在协作会话（例如，集 体研讨会话）期间，参与者在Post-丨t?便条、白板、纸材上写下想法，然后彼此共享。本公 开的至少一些方面涉及捕获多个便条并提取便条的内容的系统和方法。在一些实施例中， 便条中的至少一些便条包括促进便条的识别和提取的标记。在一些情况下，在场景的一个 视觉表示中捕获并且确认/识别便条。场景的视觉表示例如可以是一个或多个便条和周围 环境的数字照片。另外，本公开的至少一些方面涉及管理多个便条的系统和方法，诸如存储 并检索便条、将便条分类或分组等。在一些情况下，便条管理系统可改善在从大量便条中捕 获并提取便条的内容的效率。此外，便条管理系统可改善对便条进行分组并管理的效率。
[0022] 便条可包括物理便条和数字便条。物理便条通常是指具有一般边界和可识别内容 的对象。物理便条可包括人们在对象（诸如纸材、白板、或接受输入的其它对象）上书写、 绘画、或者经由其他类型的输入而进入之后的所得的对象。以举例的方式，物理便条可包括 手写Post-R?便条、纸材，或膜、具有图片的白板、招贴，以及标记。在一些情况下，一个对 象可包括若干个便条。例如，若干个想法可被书写在一张招贴纸或白板上。在一些具体实 施中，为了促进这些便条的识别，标记诸如线、标记物、标贴可被应用于便条的边缘。物理便 条可以是二维的或三维的。物理便条可具有各种形状和尺寸。例如，物理便条可以是3英 寸X3英寸的便条；物理便条可以是26英寸X39英寸的招贴；并且物理便条可以是三角 形金属标记。在一些情况下，物理便条具有已知的形状和/或尺寸。数字便条一般是指具 有信息和/或想法的数字对象。数字便条可使用数字输入来生成。数字输入可包括例如键 盘、触摸屏、数字相机、数字记录装置、触笔、数字笔等。
[0023] 在一些情况下，便条在协作空间中使用。协作空间一般是指允许多于一个人彼此 共享想法和思想的采集区域。除采集区域之外，该协作空间还可包括允许一群人远程共享 想法和思想的虚拟空间。
[0024] 图IA示出了便条识别环境10的实例。在图IA的实例中，环境10包括从工作空 间20捕获并识别一个或多个便条22的移动装置15。如本文所述，移动装置为一个或多个 软件应用程序提供执行环境，如所描述的，该软件应用程序可有效地从大量物理便条诸如 来自工作空间20的便条22的集合捕获并提取便条内容。在该实例中，便条22可以是具有 多个参与者的协作集体研讨会话的结果。如所描述的，移动装置15和在该移动装置上执行 的软件可执行多种便条相关的操作，该多种便条相关的操作包括自动创建代表工作空间20 的物理便条22的数字便条。
[0025] 在所述示例性具体实施中，除其他部件之外，移动装置15还包括图像捕获装置18 和呈现装置28。此外，虽然未在图IA中示出，但移动装置15可包括一个或多个处理器、微 处理器、内部存储器和/或数据存储装置以及用于执行软件或固件以提供本文所述的功能 的其他电子电路。
[0026] -般来讲，图像捕获装置18是相机或被构造成捕获代表工作空间20和固定在工 作空间20中的便条22的图像数据的其他部件。换句话讲，该图像数据捕获具有多个视觉 便条的环境（诸如工作空间20)的视觉表示。虽然被论述为移动装置15的相机，但图像捕 获装置18可包括能够捕获图像数据的其他部件，诸如视频记录器、红外相机、CDD(电荷耦 合装置）阵列、激光扫描器等。此外，所捕获的数据可包括图像、视频、一系列图像（即，在 一定时间段内和/或按次序获取的多个图像）、图像的集合等中的至少一者，并且术语输入 图像在本文中用于指多种示例性类型的图像数据。
[0027] 呈现装置28可包括但不限于电子可寻址的显示器，诸如液晶显示器（IXD)或用于 与移动装置28 -起使用的其他类型的显示装置。在一些具体实施中，移动装置15针对多 种格式的便条生成内容例如分成行和/或列的列表、流程图等以在显示装置28上显示。在 一些情况下，移动装置15可传输显示信息以用于由其他装置诸如平板电脑、投影仪、电子 布告板或其他外部装置来呈现。
[0028] 如本文所述，移动装置15和在其上执行的软件提供用于创建并操纵代表物理便 条22的数字便条的工作台。例如，一般来讲，移动装置15被构造成处理由图像捕获装置18 产生的图像数据，以检测并识别被定位在工作台20内的物理便条22中的至少一个物理便 条。在一些实例中，移动装置15被构造成通过确定一个或多个便条的一般边界来识别该一 个或多个便条。在便条被识别之后，移动装置15提取所述一个或多个便条中的至少一个一 个或多个的内容，其中内容是便条22的视觉信息。
[0029] 如下面进一步描述的，移动装置15可实现用于自动检测和识别物理便条22以及 提取与物理便条中的每个物理便条相关联的信息、内容或其他特性的技术。
[0030] 在图IA的实例中，移动装置15被示出为移动电话。然而，在其他实例中，移动装 置15可以是平板电脑、个人数字助理（PAD)、膝上型计算机、媒体播放器、电子书阅读器、可 佩戴计算装置（例如，手表、眼镜、手套），或适于执行本文所述的技术的任何其他类型的移 动或非移动计算装置。
[0031] 图IB示出了根据本文所述的技术操作的移动装置的实例的框图。为了示例性目 的，将相对于图IA的移动装置15来描述图IB的移动装置。
[0032] 在该实例中，移动装置15包括提供用于装置的操作的核心功能的各种硬件部件。 例如，移动装置15包括一个或多个可编程处理器70,该一个或多个可编程处理器70被构 造成根据可执行指令（即，程序代码）进行操作，该可执行指令通常存储在计算机可读介质 或数据存储装置68中，诸如静态随机存取存储器（SRAM)装置或闪存存储器装置。I/O 76 可包括一个或多个装置，诸如如图IA所述的键盘、相机按钮、电源按钮、音量