用于支持至少一个用户执行个人护理活动的装置和方法与流程

本发明涉及支持至少一个用户执行个人护理活动，并且具体地涉及一种用于修改至少一个用户的图像以支持至少一个用户执行个人护理活动的装置和方法。

背景技术：

执行个人护理活动的用户可以常常从在个人护理活动期间被辅助获益。例如，一些智能反射镜提供除反射之外添加要显示的额外视觉信息的机会(或者场景的表示，如果显示器正被用于接近反射镜)。这可以是有用的，因为人们常常在反射镜的前面执行各种个人护理活动。例如，在反射镜的前面执行的个人护理活动可以包括个人健康活动(其可以被监测以研究执行个人健康活动的用户的健康)、个人卫生活动(例如，诸如清洁牙齿、刷牙或用牙线剔牙的牙齿护理活动、或者诸如处置或清洁皮肤的皮肤护理活动)和个人理容(grooming)活动(例如，除毛发，诸如理发或者剃其身体的任何部分上的毛发、或刷洗或拉直头发)。

因此，在个人护理活动的执行期间存在使用额外的视觉(或者谱)信息辅助用户的机会。尽管谱数据通过使用谱传感器是当前可用的，但是谱数据通常被显示在单独的图像中，在并排式图像中或者在单幅组合图像(即，与如将由人眼看到的场景组合)中，而没有场景内的活动特异性对象或动作的任何描绘。而且，在并排式图像的情况下，用户常常被要求在图像之间进行选择。因此，现有技术导致小于最佳的用户体验。

技术实现要素：

当用户正执行个人护理活动时通过向用户提供额外信息来向用户提供增强图像将是有益的，其被优化以使用户在执行所述个人护理活动中获益，同时总体图像对于用户保持尽可能自然。因此，需要一种用于支持至少一个用户执行个人护理活动的经改进的装置和方法。

如上所述，关于现有技术的限制在于，当所述用户正执行个人护理活动时被提供给所述用户的额外信息未被优化到所述个人护理活动并且因此未向用户提供将在所述个人护理活动中足够地支持他们的最佳体验。

因此，根据本发明的第一方面，提供了一种用于支持至少一个用户执行个人护理活动的装置。所述装置包括控制单元，所述控制单元被配置为：确定由所述至少一个用户执行的个人护理活动；基于所确定的个人护理活动来识别所述至少一个用户的图像中的一个或多个感兴趣区域；采集与所确定的个人护理活动相关联的信息；并且基于所采集的信息在所识别的一个或多个感兴趣区域处修改所述至少一个用户的所述图像以支持所述至少一个用户执行所述个人护理活动。

在一些实施例中，所述控制单元可以被配置为从至少一个视觉传感器采集所述至少一个用户的所述图像。

在一些实施例中，所述控制单元可以被配置为控制一个或多个传感器以采集指示由所述至少一个用户执行的所述个人护理活动的关于所述至少一个用户的数据并且处理所采集的数据以确定由所述至少一个用户执行的所述个人护理活动。

在一些实施例中，所述控制单元可以被配置为从一个或多个存储器单元和/或一个或多个视觉传感器采集与所确定的个人护理活动相关联的信息。

在一些实施例中，所述控制单元可以被配置为控制一个或多个用户接口来绘制所述至少一个用户的经修改的图像。

在一些实施例中，所采集的信息可以包括与所确定的个人护理活动相关联的谱增强。

根据本发明的第二方面，提供了一种操作支持至少一个用户执行个人护理活动的装置的方法。所述方法包括：确定由所述至少一个用户执行的个人护理活动；基于所确定的个人护理活动来识别所述至少一个用户的图像中的一个或多个感兴趣区域；采集与所确定的个人护理活动相关联的信息；并且基于所采集的信息在所识别的一个或多个感兴趣区域处修改所述至少一个用户的所述图像以支持所述至少一个用户执行所述个人护理活动。

在一些实施例中，确定由所述至少一个用户执行的个人护理活动可以包括将从一个或多个传感器采集的关于所述至少一个用户的数据与连同相关联的个人护理活动一起存储在一个或多个存储器单元中的多个预定义活动标志进行比较以确定由所述至少一个用户执行的所述个人护理活动，所述数据指示由所述至少一个用户执行的所述个人护理活动。

在一些实施例中，由所述至少一个用户执行的所述个人护理活动可以被确定为是与所述多个预定义活动标志之一相关联的个人护理活动，其中，采集的关于所述至少一个用户的数据匹配或者实质上匹配所述预定义活动标志。

在一些实施例中，所述多个预定义活动标志和相关联的个人护理活动可以连同与所述个人护理活动相关联的信息一起存储在所述一个或多个存储器单元中，并且从所述一个或多个存储器单元采集与所确定的个人护理活动相关联的信息。

在一些实施例中，确定由所述至少一个用户执行的个人护理活动可以包括或者还包括检测与被用于所述个人护理活动中的至少一个个人护理设备相关联的信号，其中，所述信号指示所述个人护理活动正被执行。

在一些实施例中，所述方法还可以包括检测所述至少一个用户的所述图像中的至少一个个人护理设备。

在一些实施例中，检测所述至少一个用户的所述图像中的至少一个个人护理设备可以包括：检测所述至少一个用户的所述图像中的至少一个对象；将检测到的至少一个对象与连同相关联的个人护理设备一起存储在一个或多个存储器单元中的多个预定义对象标志进行比较；并且将至少一个检测到的对象确定为与所述多个预定义对象标志之一相关联的至少一个个人护理设备，其中，检测到的至少一个对象匹配或者实质上匹配所述预定义对象标志。

在一些实施例中，所述图像中的所识别的一个或多个感兴趣区域可以由所述至少一个个人护理设备在所述至少一个用户的所述图像中被检测到的位置定义。

根据本发明的第三方面，提供了一种包括计算机可读介质的计算机程序产品，所述计算机可读介质具有实现在其中的计算机可读代码，所述计算机可读代码被配置为使得在由适合的计算机或处理器运行时，使所述计算机或者处理器执行上文所描述的方法中的任一个。

根据上文所描述的方面和实施例，解决了现有技术的限制。例如，在基于所述至少一个用户正执行的所述个人护理活动识别的一个或多个感兴趣区域处修改所述至少一个用户的图像。以这种方式，所述至少一个用户经由被优化到所述个人护理活动的经修改的图像被提供有信息。经由经修改的图像提供的信息可以支持所述用户执行所述个人护理活动，并且因此所述用户可以实现来自所述个人护理活动的经改进的结果。

因此，提供了一种用于支持至少一个用户执行个人护理活动的经改进的装置和方法，其克服了现有问题。

附图说明

为了本发明的更好理解并且更清楚地示出其可以如何实现，现在将仅通过范例对附图进行参考，其中：

图1是根据实施例的装置的框图；

图2是图示根据实施例的方法的流程图；并且

图3是图示根据另一实施例的方法的流程图。

具体实施方式

如上所述，本发明提供一种用于支持至少一个用户执行个人护理活动的经改进的装置和方法，其克服了现有问题。

图1示出了可以被用于支持至少一个用户执行个人护理活动的根据本发明的实施例的装置100的框图。

个人护理活动可以包括个人健康活动(例如，皮肤评估(诸如光学皮肤评估)、生理状况评估(诸如心率评估或者血压评估)、葡萄糖评估、体型评估(诸如光学体型评估)、身体灵活性评估、伤口评估或者任何其他个人健康活动)、个人卫生活动(例如，诸如清洁牙齿、刷牙或用牙线剔牙的牙齿护理活动、诸如处置或清洁皮肤的皮肤护理活动或者任何其他个人卫生活动)、个人理容活动(例如，除毛发，诸如理发或者剃身体的任何部分上的毛发、或刷洗或拉直头发)、或者任何其他个人护理活动。

装置100包括控制单元102，控制单元102控制装置100的操作并且可以实施本文中所描述的方法。控制单元102可以包括一个或多个处理器、控制单元、多核处理器或者模块，其被配置或者被编程为以本文所描述的方式控制装置100。在具体实施方式中，控制单元102可以包括多个软件和/或硬件模块，每个被配置为执行或者用于执行根据本发明的实施例的方法的个体或者多个步骤。

简要地，装置100的控制单元102被配置为：确定由至少一个用户执行的个人护理活动；基于所确定的个人护理活动来识别至少一个用户的图像中的一个或多个感兴趣区域；采集与所确定的个人护理活动相关联的信息；并且基于采集的信息在所识别的一个或多个感兴趣区域处修改至少一个用户的图像以支持至少一个用户执行个人护理活动。图像可以是单幅图像或者一系列图像(例如，视频)。图像可以是二维(2d)图像或者三维(3d)图像。采集的信息可以是当被用于修改图像时允许用户使与用户正执行的个人护理活动有关的特征可视化的任何信息。这些特征可以通常不单独地对人眼可见。例如，特征可以包括与热量、光频率、颜色变化有关的特征、或者与用户正执行的个人护理活动有关的任何其他特征。

如上文所提到的，装置100的控制单元102被配置为确定由至少一个用户执行的个人护理活动。更具体地，控制单元102可以被配置为处理所采集的关于至少一个用户的数据以确定由至少一个用户执行的个人护理活动。在一些实施例中，控制单元102被配置为控制一个或多个传感器来采集指示由至少一个用户执行的个人护理活动的关于至少一个用户的数据。换言之，在一些实施例中，控制单元102被配置为从一个或多个传感器采集指示由至少一个用户执行的个人护理活动的关于至少一个用户的数据。

在图1的所图示的实施例中，装置100包括一个或多个传感器104，一个或多个传感器104可以包括可操作于采集指示由至少一个用户执行的个人护理活动的关于至少一个用户的数据。然而，将理解，这些传感器中的一个或多个可以备选地或者额外地在装置100外部(即，与装置100分离或者远离)。在一些实施例中，被用于执行个人护理活动的个人护理设备可以包括传感器中的一个或多个。个人护理设备可以包括：光学皮肤评估设备、牙齿护理设备(诸如清洁设备、牙刷或者牙线设备)、皮肤护理设备(诸如处置或者清洁设备)、理容设备(诸如脱毛设备，例如理发设备、剃须刀或者脱毛器、毛刷设备或者直发器)或者任何其他个人护理设备。备选地或者额外地，可以在用户的环境中(诸如在被用于个人护理活动中的智能反射镜附近或者在智能反射镜自身中)提供传感器中的一个或多个。

可以可操作于采集指示由至少一个用户执行的个人护理活动的关于至少一个用户的数据的传感器的范例可以包括活动(或运动)传感器、视觉(或图像或谱)传感器、音频传感器、接近传感器、姿势传感器、注视传感器、接触传感器、压力传感器、生物计量传感器、设备状态传感器、医学传感器、或任何其他传感器、或者可操作于采集指示由至少一个用户执行的个人护理活动的关于至少一个用户的数据的传感器的组合。

活动(或运动)传感器可以是适于采集关于至少一个用户的活动或运动数据的任何传感器。例如，活动传感器可以是加速度计、陀螺仪、磁强计、视觉传感器、压力传感器、或者任何其他活动传感器或者活动传感器的任何组合。视觉(或图像或谱)传感器可以是可以采集至少一个用户的图像的任何类型的传感器或者传感器的组合。在一些实施例中，视觉传感器可以是能够将光的频率解析为一组窄频带的任何视觉传感器。视觉传感器可以具有比可见谱更大的谱范围(诸如延伸到紫外uv或者红外ir范围中)。可以使用的视觉传感器的范例是图像传感器(诸如电荷耦合器件ccd图像传感器、互补金属氧化物半导体cmos图像传感器)、相机(诸如rgb相机)、视频、窄带视觉传感器(诸如红外传感器或者紫外传感器)、超谱相机、多谱相机、或者任何其他视觉传感器、或者视觉传感器的任何组合。音频传感器可以是适于采集关于至少一个用户的音频数据的任何传感器。例如，音频传感器可以是麦克风、或者任何其他音频传感器、或者音频传感器的任何组合。

接近传感器可以是适于采集关于至少一个用户的接近数据的任何传感器。例如，接近传感器可以是红外接近传感器、相机、声学接近传感器(诸如超声接近传感器)、或者任何其他接近传感器、或者接近传感器的任何组合。姿势传感器可以是适于采集关于至少一个用户的姿势数据的任何传感器。例如，姿势传感器可以是视觉传感器(诸如相机)、重量分布传感器、体重秤传感器、穿戴式姿势传感器、声学(成像)传感器或任何其他姿势传感器、或者姿势传感器的任何组合。注视传感器可以是适于采集关于至少一个用户的注视(即，至少一个用户正看的方向)的数据的任何传感器。例如，注视传感器可以是视觉传感器(诸如相机)、与红外照明组合的红外相机或任何其他注视传感器、或者注视传感器的任何组合。

接触传感器可以是适于采集关于设备与至少一个用户的身体或皮肤的接触的数据的任何传感器。例如，接触传感器可以是接触开关、压力传感器、电容式接触传感器、电阻式接触传感器或任何其他接触传感器、或者接触传感器的任何组合。压力传感器可以是适于采集将个人护理设备应用到至少一个用户的处置区的压力的数据的任何传感器。例如，压力传感器可以是压阻应变计、电容传感器、电磁传感器、压电传感器、光学传感器、电位计传感器或者任何其他压力传感器、或者压力传感器的任何组合。

生物计量传感器可以是适于采集关于至少一个用户的生物计量数据的任何传感器。例如，生物计量传感器可以是指纹传感器、掌纹传感器、相机(例如，用于面部或者虹膜识别)、麦克风(例如，用于语音识别)或者任何其他生物计量传感器、或者生物计量传感器的任何组合。医学传感器可以是适于从至少一个用户采集医学或者健康数据的任何传感器。例如，医学传感器可以是(例如，光学)心率传感器、血脉冲传感器、血液灌注或者脉搏血氧测定传感器、葡萄糖传感器、牙菌斑传感器、光学或者电皮肤传感器、温度传感器、身体组成传感器、静脉传感器或者任何其他医学传感器、或者医学传感器的任何组合。

设备状态传感器可以是适于采集关于由至少一个用户使用于执行个人护理活动中的个人护理设备的数据的任何传感器。例如，设备状态传感器可以是可以检测个人护理设备由至少一个用户接通(或者关断)的传感器、可以检测至少一个用户与个人护理设备交互的传感器、可以检测个人护理设备被连接到充电站的传感器、或者任何其他设备状态传感器、或者设备状态传感器的任何组合。

尽管范例已经被提供用于可以采集指示由至少一个用户执行的个人护理活动的关于至少一个用户的数据的传感器的类型并且用于那些传感器的布置，但是将理解到，可以使用适于采集指示由至少一个用户执行的个人护理活动的关于用户的数据的任何传感器、或者传感器的任何组合以及那些传感器的任何布置。在一些实施例中，多种类型的传感器可以被用于采集指示由至少一个用户执行的个人护理活动的关于用户的活动数据。

备选地或者额外地，为了从至少一个传感器采集数据，可以从另一源(诸如云)采集数据。例如，在一些实施例中，数据可以包括处置的历史(诸如强脉冲光ipl的历史、某些天数上的处置)、来自医学专家的建议(诸如来自皮肤学家的用于某个区的最好处理的建议)、群体健康统计、或者可以与至少一个用户相关并且在指示由至少一个用户执行的个人护理活动中有用的任何其他数据。

如先前所提到的，装置100的控制单元102被配置为基于所确定的个人护理活动来识别至少一个用户的图像中的一个或多个感兴趣区域。在一些实施例中，控制单元102被配置为控制一个或多个视觉(或图像或谱)传感器来采集至少一个用户的图像。换言之，在一些实施例中，控制单元102被配置为从至少一个视觉传感器(诸如先前所提到的那些)采集至少一个用户的图像。至少一个视觉传感器可以包括以下中的至少一项：被用于采集关于用户的数据的相同的视觉传感器或者与被用于采集关于用户的数据的至少一个视觉传感器不同的至少一个视觉传感器。

在图1的所图示的实施例中，装置100包括一个或多个传感器104，一个或多个传感器104可以包括可操作于采集至少一个用户的图像的至少一个视觉(或图像或谱)传感器。然而，将理解，可操作于采集至少一个用户的图像的一个或多个视觉传感器可以备选地或者额外地在装置100外部(即，即，与装置100分离或者远离)。例如，可以在用户的环境中(诸如在用户的环境中的智能反射镜中或者在用户的环境中的任何其他位置处)提供可操作于采集至少一个用户的图像的一个或多个视觉传感器。

如先前所提到的，视觉传感器可以是可以采集至少一个用户的图像的任何类型的传感器或者传感器的任何组合。在一些实施例中，可操作于采集至少一个用户的图像的视觉传感器可以是能够将光的频率解析为一组窄频带的任何视觉传感器。可操作于采集至少一个用户的图像的视觉传感器可以具有比可见谱更大的谱范围(诸如延伸到紫外uv或者红外ir范围中)。

可以被用于采集至少一个用户的图像的视觉传感器的范例是图像传感器(诸如电荷耦合器件ccd图像传感器、互补金属氧化物半导体cmos图像传感器)、相机(诸如rgb相机)、视频、红外传感器、紫外传感器、或者任何其他视觉传感器、或者视觉传感器的任何组合。在一个实施例中，rgb相机可以与被投影在至少一个用户的至少部分上(例如，在用户的面部和/或身体上)的窄带光结合用于采集至少一个用户的图像。以这种方式，可以创建超谱相机。在其中图像的部分要基于采集的信息修改(例如要谱学地增强)的实施例中，可以对一个或多个环境状况进行调整(例如，以优化用于感测的状况或者使能感测)。这可以包括至少一个用户的环境中的颜色、投影、照明等的使用。在一个范例中，可以在有和没有被投影在至少一个用户的至少部分上的窄带光的情况下拍摄图像。

尽管范例已经被提供用于可以采集至少一个用户的图像的视觉传感器的类型并且用于传感器的布置，但是将理解，可以使用适于采集至少一个用户的图像的任何视觉传感器、或者适于采集至少一个用户的图像的视觉传感器的任何组合和视觉传感器的任何布置。在一些实施例中，可以使用多种类型的视觉传感器。

如先前所提到的，装置100的控制单元102被配置为采集与所确定的个人护理活动相关联的信息并且基于所采集的信息在识别的一个或多个感兴趣区域处修改至少一个用户的图像以支持至少一个用户执行个人护理活动。在一些实施例中，控制单元102被配置为从一个或多个存储器单元106和/或一个或多个传感器104采集与所确定的个人护理活动相关联的信息。传感器104可以包括一个或多个视觉传感器。一个或多个视觉传感器可以包括以下中的至少一项：从其采集至少一个用户的图像的相同视觉传感器或者与从其采集至少一个用户的图像的一个或多个视觉传感器不同的至少一个视觉传感器。例如，可以从反射镜中的视觉传感器采集至少一个用户的图像，并且可以从个人护理设备中的一个或多个视觉传感器采集与所确定的个人护理活动相关联的信息。以这种方式，从第一传感器采集的图像可以使用从一个或多个感兴趣区域处的第二传感器采集的信息来修改(例如，从第一传感器采集的图像可以通过应用到来自第二传感器的图像信息来修改)。

在一些实施例中，装置100可以包括被配置为存储可以由控制单元102运行以执行本文所描述的方法的程序代码。存储器单元106还可以被用于存储由装置100的控制单元102或者由装置100外部的部件、接口、单元、传感器和设备做出或者采集的信息、数据、信号和测量结果。因此，例如，装置100的存储器单元106可以被配置为存储与多个个人护理活动相关联的信息并且控制单元102可以被配置为从装置100的存储器单元106采集与所确定的个人护理活动相关联的信息。然而，将理解，控制单元102可以备选地或者额外地被配置为从装置100外部(即，与装置100分离或者远离)的存储器单元采集与所确定的个人护理活动相关联的信息。一个或多个存储器单元可以备选地或者额外地存储具有相关联的个人护理活动的多个预定义活动标志。活动标志是指示特定活动的至少一个特征或者特性。例如，用于活动的活动标志可以包括将活动与至少一个其他活动区分的一个或多个特征或特性。

根据一些实施例，装置100还可以包括至少一个用户接口108。备选地或者额外地，用户接口108可以在装置100外部(即，与装置100分离或者远离)。例如，用户接口108可以是另一设备的部分。在一些实施例中，一个或多个用户接口可以被提供在被用在个人护理活动中的智能反射镜(诸如在家、商店或者任何其他位置)、被用作个人护理活动中的反射镜的移动设备(诸如智能电话、平板电脑、膝上型电脑或者任何其他移动设备)上的显示器(诸如经由移动设备上的应用或者程序)、智能眼镜、被用在个人护理活动中的光学皮肤评估设备等中。被用在个人护理活动中的智能反射镜可以是任何类型的智能反射镜，诸如反射性智能反射镜、基于显示器的智能反射镜、用作智能反射镜的移动设备(诸如移动电话、平板电脑等)(例如，经由移动设备上的应用)或者任何其他类型的智能反射镜。

用户接口108可以用于向装置100的用户提供产生于根据本发明的方法的信息。控制单元102可以被配置为控制一个或多个用户接口106来提供产生于根据本发明的方法的信息。例如，在一些实施例中，控制单元102可以被配置为控制一个或多个用户接口108来绘制(或者输出)至少一个用户的经修改的图像以支持至少一个用户执行个人护理活动。可以实时或者近实时绘制(或者输出)至少一个用户的经修改的图像。备选地或者额外地，用户接口108可以被配置为接收用户输入。换言之，用户接口108可以允许装置100的用户手动地录入数据、指令或者信息。例如，在一些实施例中，用户接口108可以允许用户设置个人设置，诸如关于要在修改图像中使用的信息的水平和/或类型的设置。个人设置的范例可以包括要利用增强数据覆盖的区、围绕皮肤设备尖端的区等。

因此，用户接口106可以是或者可以包括使得能够将信息、数据或者信号绘制或者输出到装置100的用户的任何部件。备选地或者额外地，用户接口106可以是或者可以包括使得装置100的用户能够提供用户输入，与装置100交互和/或控制装置100的任何部件。例如，用户接口108可以包括一个或多个开关、一个或多个按钮、小键盘、键盘、触摸屏或应用(例如，在平板电脑或者智能电话上)、显示屏、高清晰度(hd)显示器、或者任何其他图像绘制部件、一个或多个灯、或者任何其他用户接口部件、或者用户接口部件的组合。

在其中用户接口被提供在反射性智能反射镜中的实施例中，用户接口可以包括可以反射光以向用户产生反射图像的材料的反射层和图像叠加层作为可操作于通过将与所确定的个人护理活动相关联的采集的信息叠加到反射图像上来修改图像的显示。在其中用户接口被提供在显示器智能反射镜中的实施例中，用户接口可以包括可操作于捕获反射镜的前面的场景的相机和可操作于显示经修改的图像的显示器(诸如平面控制板)，所述经修改的图像包括在由基于与所确定的个人护理活动相关联的所采集的信息修改的相机捕获的反射镜的前面的场景。以这种方式，可以经由智能反射镜提供增强现实。然而，将理解，可以以与任何其他适合的对象(诸如可穿戴智能眼镜等)类似的方式提供增强现实。

返回图1，在一些实施例中，装置100还可以包括通信接口(或者电路)110，所述通信接口用于使得装置100能够与装置100内部或者外部的任何部件、接口、单元、传感器和设备通信(或者连接到其)。通信接口110可以无线地或者经由有线连接与任何部件、接口单元、传感器和设备通信。例如，在其中一个或多个传感器104在装置100外部的实施例中，通信接口110可以无线地或者经由有线连接与外部传感器通信。类似地，在其中一个或多个存储器单元106在装置100外部的实施例中，通信接口110可以无线地或者经由有线连接与外部存储器单元通信。

类似地，在其中一个或多个用户接口108在装置100外部的实施例中，通信接口110可以无线地或者经由有线连接与外部用户接口通信。

将意识到，图1仅示出图示本发明的该方面所要求的部件，并且在实际的实施方式中装置100可以包括除了所示的那些的额外部件。例如，装置100可以包括用于对装置100进行供电的电池或者其他电源或者用于将装置100连接到干线供电电源的模块。

图2图示了根据实施例的操作支持至少一个用户执行个人护理活动的装置的方法200。所图示的方法200可以通常由装置100的控制单元102的控制或者在其下执行。

参考图2，在框202处，确定由至少一个用户执行的个人护理活动(或者个人护理任务)。例如，可以确定在智能反射镜的前面发生的个人护理活动。由至少一个用户执行的个人护理活动可以通过处理采集的关于至少一个用户的数据来确定以确定由至少一个用户执行的个人护理活动。如先前所提到的，在一些实施例中，关于至少一个用户的数据可以从一个或多个传感器采集，所述一个或多个传感器可以是装置100的传感器104和/或装置100外部的传感器。

在一些实施例中，由至少一个用户执行的个人护理活动可以通过将从一个或多个传感器采集的关于至少一个用户的数据与连同相关联的个人护理活动存储在一个或多个存储器单元中的多个预定义活动标志进行比较来确定以确定由至少一个用户执行的个人护理活动。在一些实施例中，从一个或多个传感器采集的关于至少一个用户的数据当其被采集时连续地与多个预定义活动标志进行比较。如先前所提到的，一个或多个存储器单元可以包括装置100的存储器单元106和/或装置100外部的一个或多个存储器单元。关于相关联的个人护理活动的多个预定义活动标志可以以查找表(lut)的形式被存储在一个或多个存储器单元中。提供了用于该查找表的形式的范例：

然而，尽管范例已经被提供用于该查找表的形式，但是将理解，其他形式的查找表也是可能的，并且查找表可以包括任何数目的预定义活动标志和相关联的个人护理活动。

由至少一个用户执行的个人护理活动可以被确定为是与多个预定义活动标志之一相关联的个人护理活动，其中，采集的关于至少一个用户的数据匹配或者实质上匹配(例如，在预定义容限内或者超过预定义概率)预定义活动标志。在一些实施例中，装置100的控制单元102可以控制一个或多个用户接口108来输出与匹配的预定义活动标志相关联的活动的名称。

备选地或者额外地，在一些实施例中，可以通过检测与被用在个人护理活动中的至少一个个人护理设备相关联的信号来确定由至少一个用户执行的个人护理活动，其中，信号指示个人护理活动正被执行。例如，信号可以指示用户拾取被用在个人护理活动中的至少一个个人护理设备，接通被用在个人护理活动中的至少一个个人护理设备，将被用在个人护理活动中的至少一个个人护理设备连接到充电站，或者指示个人护理活动正被执行的与被用在个人护理活动中的至少一个个人护理设备相关联的任何其他信号。在一些实施例中，可以经由通信接口110由装置100的控制单元102从个人护理设备自身接收信号。如先前所提到的，个人护理设备可以包括光学皮肤评估设备、牙齿护理设备(诸如清洁设备、牙刷或者牙线设备)、皮肤护理设备(诸如处置或者清洁设备)、理容设备(诸如脱毛设备，例如剪发设备、剃须刀或者脱毛器、毛刷设备或者直发器)或者任何其他个人护理设备。

在框204处，基于所确定的个人护理活动来在至少一个用户的图像中识别一个或多个感兴趣区域。如先前所描述的，在一些实施例中，至少一个用户的图像可以从一个或多个视觉传感器采集，所述一个或多个视觉传感器可以是装置100的传感器104和/或装置100外部的传感器。至少一个用户的图像可以是其中个人护理活动正发生的场景的图像。任何适合的成像技术可以被用于采集至少一个用户的图像。例如，成像技术可以包括标准成像技术，诸如经由电荷耦合器件ccd、互补金属氧化物半导体cmos或者具有适合的光学器件的foveon传感器的数字成像技术、谱成像技术或者任何其他适合的成像技术。图像中的一个或多个感兴趣区域可以是其中与正由用户执行的个人护理活动相关的信息的图像的区。例如，一个或多个感兴趣区域可以是其中活动相关信息有利于用户的区(诸如个人护理活动正被执行的至少一个用户的身体的部分(例如头发护理活动中的头发))、被用在个人护理活动中的个人护理设备存在的区等。

在框206处，采集与所确定的个人护理活动相关联的信息。在一些实施例中，多个预定义活动标志和相关联的个人护理活动可以连同与个人护理活动相关联的信息一起存储在一个或多个存储器单元中。在这些实施例中，可以从一个或多个存储器单元采集与所确定的个人护理活动相关联的信息。如先前所描述的，一个或多个存储器单元可以包括装置100的存储器单元106或者装置100外部的一个或多个存储器单元。与个人护理活动相关联的信息可以利用唯一名称存储。

多个预定义活动标志、相关联的个人护理活动以及与个人护理活动相关联的信息可以以查找表(lut)的形式存储。下面提供了用于该查找表的形式的范例：

然而，尽管范例已经被提供用于该查找表的形式，但是将理解，其他形式的查找表也是可能的，并且查找表可以包括任何数目的预定义活动标志、相关联的个人护理活动以及与个人护理活动相关联的信息。

在一些实施例中，查找表可以是预编程的查找表。备选地或者额外地，在一些实施例中，查找表可以是由用户可修改的。例如，对于用户而言修改要被用于根据用户的个人品味在那些个人护理活动期间修改图像的与个人护理活动相关联的信息可以是可能的。在一些情况下，可以存在与个人护理活动相关联的各种类型的信息，并且至少一个用户可以被提供有选择哪些信息来用于修改图像以在个人护理活动的情况下支持其的机会(例如，经由用户接口108)。

在一些实施例中，采集的信息可以包括与所确定的个人护理活动相关联的一个或多个图形。备选地或者额外地，在一些实施例中，采集的信息可以包括与所确定的个人护理活动相关联的谱增强或者修改。例如，谱增强可以包括使用从一个或多个视觉传感器采集的谱数据作为输入的要应用到图像的算法修改。备选地或者额外地，在一些实施例中，采集的信息可以包括缩放修改、使得不同的视图被绘制的修改(例如，通过图像通过其采集的视觉传感器的倾斜的改变)或者使得图像的仅部分被显示的修改。

在框208处，基于采集的信息在所识别的一个或多个感兴趣区域处修改至少一个用户的图像以支持至少一个用户执行个人护理活动。由于在所识别的一个或多个感兴趣区域处修改图像，因此由修改所提供的信息更容易由至少一个用户理解。例如，可以是修改未被应用到图像中的至少一个用户上的整个处置区。在一些范例中，经修改的图像可以当设备在距处置区(例如，面部、腿等)的预定义距离(诸如预定义处置距离)处被显示并且当设备更远离该区时不显示。在一些范例中，图像可以根据至少一个用户的姿势不同地修改。例如，被应用到图像的视觉修改可以当至少一个用户向前倾斜时(例如，当至少一个用户向前倾斜时，可以提供更特定的信息)或者当至少一个用户向后倾斜时改变(例如，可以激活不同的修改模式，诸如其中用于个人护理活动的过程被显示给至少一个用户的模式)。在一些范例中，用户可能能够改变图像的修改(诸如经由至少一个用户接口或者手持式设备)。例如，用户可能能够放大或者缩小图像。

在一些实施例中，可以通过将采集的信息叠加在至少一个用户的图像上来修改图像。这可以是其中经修改的图像要经由图像叠加层由反射性智能反射镜绘制的情况，如先前所描述的。例如，如先前所提到的，采集的信息可以包括与所确定的个人护理活动相关联的一个或多个图形。备选地或者额外地，在一些实施例中，可以通过将采集的信息直接地应用到图像来修改图像。例如，可以通过放大所识别的一个或多个感兴趣区域处的至少一个用户的图像或者通过仅显示所识别的一个或多个感兴趣区域基于采集的信息来修改图像。

备选地或者额外地，在一些实施例中，可以通过空间地将采集的信息与图像组合来修改图像。这可以是其中经修改的图像要经由显示器(诸如平面控制板)由基于显示器的智能反射镜绘制的情况，如先前所描述的。例如，如先前所提到的，采集的信息可以包括与所确定的个人护理活动相关联的谱增强或者修改。图像可以通过显示与用户的面部或者用户的面部的模型(例如，二维或三维模型)的反射的图像共同定位的谱增强或者修改来修改。在一些实施例中，用户的面部可以使用任何适合的面部跟踪在用户的图像中跟踪，并且图像可以通过相对于用户的面部定位的谱增强或者修改来修改。例如，谱增强可以被显示在用户的面部上或者与其对齐。

谱增强的范例是可以应用于至少一个用户的图像的算法修改，其使用从一个或多个视觉传感器采集的谱数据作为输入。例如，图像可以利用简单的背景来采集并且对象a可以存在于前景中。视觉传感器捕获场景并且对其进行表示，例如，使用rgb颜色模型。另一视觉传感器捕获相同的场景并且以不同的方式对其进行表示，例如，使用1000个谱带。换言之，图像的每个像素具有针对b0、b1、b2、…b999的值，其中，bi指代谱带。因此，每个像素具有rgb值和“b”值两者。谱增强可以然后是这样的算法：对于表示对象a的区内的像素，利用255，0，0(即，亮红色)的rgb值替换具有b950…b975之间的“b”值每个像素的rgb值。以这种方式，用户可以看到不可能单独地利用其眼睛看到的特征。例如，可以是带b950…b975在可见谱外部并且因此对于单独地利用其眼睛的用户不可见。

经修改的图像向至少一个用户提供信息以支持用户执行个人护理活动。例如，在一些实施例中，经修改的图像可以向至少一个用户提供以下项的信息：身体的不被处置的区、身体的仍然需要处置的区域、个人护理活动的进展或者与个人护理活动相关联的任何其他特征，以支持用户执行该个人护理活动。由经修改的图像提供的信息可以被用于引导用户执行个人护理活动和/或向用户通知个人护理活动的进展。在一个范例中，经修改的图像可以包括已经利用个人护理设备处置的区上或周围的数据的叠加，并且该数据可以随时间淡出。在另一范例中，经修改的图像可以提供其中处置仍然需要将用户引导到这些区域的区域处的信息。在另一范例中，经修改的图像可以提供示出要应用的处置的水平的信息(诸如指示例如仍然要在特定区域处移除的化妆品量的值)。

尽管范例已经被提供用于可以被用于修改图像的信息，但是将理解，可以使用适于支持至少一个用户执行个人护理活动的任何形式的信息。

图3图示了根据另一实施例的操作支持至少一个用户执行个人护理活动的装置的方法300。所图示的方法300可以通常由装置100的控制单元102的控制或者在其下执行。

参考图3，在框302处确定由至少一个用户执行的个人护理活动。换言之，执行上文相对于图2的框202所描述的方法，并且因此对应的描述将被理解为适用但是此处将不重复。

在图3的框304处，在至少一个用户的图像中检测(或者识别)至少一个个人护理设备。个人护理设备是与由用户执行的个人护理活动相关联的设备。在一些实施例中，检测(或者识别)至少一个用户的图像中的至少一个个人护理设备可以包括检测至少一个用户的图像中的至少一个对象并且将检测到的至少一个对象与连同相关联的个人护理设备一起存储在一个或多个存储器单元中的多个(或者一组)预定义对象标志以确定至少一个用户的图像中的至少一个检测到的对象是否是至少一个个人护理设备。至少一个检测到的对象可以被确定为是与多个预定义对象标志之一相关联的至少一个个人护理设备，其中，检测到的至少一个对象匹配或者实质上匹配(例如，在预定义容限内或者超过预定义概率)预定义对象标志。以这种方式，从至少一个用户的图像内的一组对象检测已知对象(具体地，个人护理设备)是可能的。如先前所提到的，一个或多个存储器单元可以包括装置100的存储器单元106和/或装置100外部的一个或多个存储器单元。针对相关联的个人护理设备的多个预定义对象标志可以以查找表(lut)的形式被存储在一个或多个存储器单元中。下面提供了用于该查找表的形式的范例：

然而，尽管范例已经被提供用于该查找表的形式，但是将理解，其他形式的查找表也是可能的，并且查找表可以包括任何数目的预定义对象标志和相关联的个人护理设备。

在图3的框306处，基于所确定的个人护理活动来在至少一个用户的图像中识别一个或多个感兴趣区域。换言之，执行上文相对于2的框204所描述的方法，并且因此对应的描述将被理解为适用但是此处将不重复。

然而，在图3中所图示的实施例中，图像中的所识别的一个或多个感兴趣区域还可以由至少一个个人护理设备在至少一个用户的图像中被检测到的位置来定义。例如，包含至少一个个人护理设备的图像的区可以被定义为感兴趣区域。

在图3的框308处，采集与所确定的个人护理活动相关联的信息。换言之，执行上文相对于图2的框202所描述的方法，并且因此对应的描述将被理解为适用但是此处将不重复。在图3中所图示的实施例中，多个预定义对象标志、相关联的个人护理活动以及与个人护理活动相关联的信息可以例如以查找表(lut)的形式被存储在一个或多个存储器单元中。下面提供了用于该查找表的形式的范例：

然而，尽管范例已经被提供用于该查找表的形式，但是将理解，其他形式的查找表也是可能的，并且查找表可以包括任何数目的预定义对象标志、相关联的个人护理活动以及与个人护理活动相关联的信息。

在一些实施例中，查找表可以是预编程的查找表。备选地或者额外地，在一些实施例中，查找表可以是由用户可修改的。例如，对于用户而言修改要根据用户的个人品味在那些个人护理活动期间使用的与个人护理活动相关联的信息可以是可能的。

在图3的框310处，基于采集的信息在所识别的一个或多个感兴趣区域处修改至少一个用户的图像以支持至少一个用户执行个人护理活动。换言之，执行上文相对于2的框208所描述的方法，并且因此对应的描述将被理解为适用但是此处将不重复。然而，如先前所提到的，在图3中所图示的实施例中，包含至少一个个人护理设备的图像的区可以被定义为感兴趣区域。因此，至少一个用户的图像可以基于包含至少一个个人护理设备的感兴趣区域的边界内的采集的信息来修改以支持至少一个用户执行个人护理活动。

尽管未图示在图2或图3中，但是在图2和图3中所图示的实施例中的任一个中，方法还可以包括绘制(或者输出)至少一个用户的经修改的图像以支持至少一个用户执行个人护理活动。至少一个用户的经修改的图像可以由装置100的用户接口108或者装置100外部的用户接口绘制(或者输出)。如先前所描述的，可以实时或者近实时绘制(或者输出)至少一个用户的经修改的图像。

在本文所描述的实施例中的任一个中，装置100可以适于其中多个(即，超过一个)用户存在于图像中的多用户环境。例如，装置100在其中多个用户正同时执行个人护理活动(诸如在相同反射镜的前面)的情况下能够是适合的。在多用户实施例中，装置100的控制单元102可以被配置为识别图像中的多个用户中的每个并且确定由每个用户执行的个人护理活动以针对每个用户适当地修改图像。

在使用中的装置100的范例实施例中，用户可以拾取吹风机。装置100的控制单元102可以通过将谱增强应用到图像(诸如通过使用远红外fir)以使头发的湿度可视化来修改图像。在该范例实施例中，头发可以是感兴趣区域并且可视化可以仅被投影在头发上(即，可以排除面部和其他身体区)。以这种方式，装置100可以指示何时已经到达头发的适当的湿度并且可以警告某些头发区的过度加热。

在使用中的装置100的另一范例实施例中，用户可以拾取皮肤清洁设备来清洁其面部。在该范例实施例中，面部区可以是感兴趣区域，并且因此装置100的控制单元102可以通过将谱增强应用到面部区来修改图像。例如，在镜像图像中，可以增强面部区的颜色，同时可以以其自然的颜色示出身体的其他部分(诸如头发、颈部和其他身体部分)的颜色。以这种方式，装置100可以示出哪些区已经处置并且哪些区尚未处置。例如，谱增强可以包括示出通常肉眼不可见的皮肤发红的特定色带。备选地，谱增强可以示出其中适当地移除化妆品或将乳膏吸收到皮肤中的区。在一个范例中，可以已知应用到皮肤的乳膏或流体的类型(诸如经由用户输入或经由乳膏或流体中的视觉标记)，至少一个传感器可以检测皮肤上的乳膏或流体的迹线(或者覆盖范围)，并且谱增强可以突出显示皮肤的特定区(诸如其中应用或未应用乳膏或流体的区)以支持用户。装置100还可以示出在面部清洁活动期间覆盖面部的哪些区。其他实施例还可以示出在个人护理活动期间(例如，在剃须、脱毛、强脉冲光ipl脱毛或任何其他个人护理活动期间)覆盖身体的哪些区。

在使用中的装置100的另一范例实施例中，在清洁面部之后，用户可以向前倾斜以更紧密地查看其颈部和上胸部区。在该范例实施例中，装置100的控制单元102可以检测用户的身体姿势改变和注视并且然后开始作为感兴趣区域的颈部和上胸部区的谱增强，诸如以使该区中的皮肤的皮肤健康和/或外观可视化。备选地，这可以通过检测用户与使用在个人护理活动中的反射镜的更近的接近度实现。

在使用中的装置100的另一范例实施例中，用户可以拾取光学皮肤评估(osa)设备。装置100的控制单元102可以提供使用智能反射镜中的相机使皮肤油性、皮肤损伤、uv或皮肤的任何其他性质可视化的谱增强。当用户将osa设备保持在距皮肤特定距离(例如距皮肤5-10cm)处时，装置100的控制单元102可以通过切换到osa设备中的相机并且示出来自反射镜显示器中的osa相机的谱增强图像来修改图像。当将osa设备保持到皮肤上时，装置100的控制单元102可以将来自这两个相机的图像混合以提供与osa设备和周围皮肤接触的区的增强视图。

在使用中的装置100的另一范例实施例中，用户可以拾取剃须设备并且执行在智能反射镜的前面抬腿的活动。装置100的控制单元102可以从该活动检测到用户想要剃腿。在反射性智能反射镜的情况下，控制单元102可以提供关于智能反射镜中的腿的反射的谱增强叠加图像以改进头发的可见性，使得用户可以看到哪些部分已经处置并且哪些部分尚未处置。在基于显示器的智能反射镜的情况下，相机(例如，超谱相机)可以倾斜、平移或者缩放到当前正被处置以创建处置区的最佳可见性的腿部区中。

在使用中的装置100的另一范例实施例中，在剃须之后，用户可以拾取强脉冲光(ipl)设备。在检测这一点时装置100的控制单元102开始腿部区的图像的谱增强以使用户已经处置的腿部的部分可视化。例如，控制单元102可以通过将自先前的处置计算的头发生长信息叠加到图像上来修改图像以指示处置是否是必要的或者在哪些部分上处置是必要的。当用户开始处置区时，控制单元102可以监测并且可视化处置的覆盖范围。

因此，如上文所描述的，提供了一种支持至少一个用户执行个人护理活动的经改进的装置和方法。具体地，装置和方法可以识别正由至少一个用户执行的个人护理活动，确定个人护理活动的执行是否可以通过至少一个用户的图像的修改来辅助并且确定要修改的图像中的相关区。由经修改的图像所提供的信息可以允许至少一个用户将与通常单独对人眼不可见的个人护理活动有关的特征可视化。由经修改的图像提供的信息可以支持用户执行个人护理活动，并且因此用户可以实现来自个人护理活动的经改进的结果。本文所公开的装置和方法适于任何类型的个人护理活动，包括但不限于健康护理活动、个人卫生活动和个人理容活动。

还提供了一种包括计算机可读介质的计算机程序产品，所述计算机可读介质具有实现在其中计算机可读代码，所述计算机可读代码被配置使得在由适合的计算机或处理器运行时，使所述计算机或者处理器执行本文所描述的一个或多个方法。

通过研究附图、说明书和权利要求书，本领域的技术人员在实践请求保护的本发明时可以理解和实现所公开的实施例的变型。在权利要求中，词语“包括”不排除其他元件或步骤，并且词语“一”或“一个”不排除多个。单个处理器或其他单元可以履行权利要求中记载的若干项的功能。尽管在互不相同的从属权利要求中记载了特定措施，但是这并不指示不能有利地使用这些措施的组合。计算机程序可以被存储/分布在合适的介质上，例如与其他硬件一起提供或作为其他硬件的部分提供的光学存储介质或固态介质，但计算机程序也可以以其他形式来分布，例如经由因特网或者其他有线或无线电信系统分布。权利要求中的任何附图标记不应当被解释为对范围的限制。