基于智能镜的化妆辅助方法、智能镜及存储介质与流程

文档序号:14677912发布日期:2018-06-12 21:45阅读:147来源:国知局
本发明涉及智能终端
技术领域
:,尤其涉及一种基于智能镜的化妆辅助方法、智能镜及存储介质。
背景技术
::随着社会物质生活水平的提高,越来越多的人,尤其是女性群体,开始关注自己的精神面貌,使得镜子成为人们居家生活的必需品。为了赋予镜子除镜像功能之外的其他功能,提出一种智能镜子,从而增加显示实时天气、推送新闻和路况信息等功能。此外,为了迎合大多数女性群体的化妆需求,在现有智能镜子的基础上增加一种试妆功能,用户在需要化妆时,可以快速地查看到每一款妆容的试妆效果,进而快速地选择自己需要的款式。但是,在用户选择需要的妆容后只能依靠化妆经验实现选择的妆容,对于零化妆基础的用户来说美妆效果较差。而且,现有智能镜提供的试妆妆容适用所有人,无法满足用户的个性化需求,缺乏针对性,美妆效果也相对较差。技术实现要素:本发明的主要目的在于提供一种基于智能镜的化妆辅助方法,旨在提高智能镜的个性化美妆效果。为实现上述目的,本发明提出的基于智能镜的化妆辅助方法,包括以下步骤:扫描用户的面部图像,以获取用户的面部数据;将所述面部数据与预存的预设标准脸模型进行比对,并推荐与比对结果匹配的至少一面部部位的妆容;当接收到用户在智能镜的显示区域选择化妆部位产生的化妆指令时,在面部图像的对应部位显示用于化妆的辅助线,以供用户根据所述辅助线化出为所述面部部位推荐的妆容。进一步地,在扫描用户的面部图像的步骤之前,还包括:当接收到面部扫描指令时,在智能镜的显示区域显示面部图像采集框,并输出面部对准在所述采集框内的提示。进一步地,所述扫描用户的面部图像,以获取用户的面部数据的步骤,包括:当检测到用户的面部对准在所述采集框内时,扫描所述采集框内的面部图像;基于卷积操作提取所述面部图像中五官结构的特征向量,并融合为用户的五官结构特征,以获取用户的五官结构比例数据。进一步地,所述将所述面部数据与预存的预设标准脸模型进行比对,并推荐与比对结果匹配的至少一面部部位的妆容的步骤,包括:在获取到用户的五官结构比例数据时,生成相应的比对指令;根据所述比对指令,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断;基于比对结果推荐与用户五官各结构匹配的至少一面部部位的妆容。进一步地,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断的步骤,包括:将用户五官结构比例数据中的脸长与脸宽之比,颞骨、颧骨、腮骨的宽度之比以及三庭之比与预设标准脸模型中的对应数据进行比对,判断出用户的脸型;将用户五官结构比例数据中的眼高与脸长之比,眼间距与脸宽之比以及内外眦与水平面的夹角与预设标准脸模型中的对应数据进行比对,判断出用户的眼型以及眼睛在面部的相对位置;将用户五官结构比例数据中的嘴裂宽与脸宽之比,嘴厚度与脸长之比,上唇与下唇的厚度之比与预设标准脸模型中的对应数据进行比对,判断出用户的嘴型以及嘴在面部的相对位置。进一步地,所述当接收到用户在智能镜的显示区域选择化妆部位产生的化妆指令时,在面部图像的对应部位显示用于化妆的辅助线,以供用户根据所述辅助线化出为所述面部部位推荐的妆容的步骤,包括:当接收到待化妆指令时,激活所推荐妆容对应的妆容模板,以将所述妆容模板包括的化妆部位选项显示于智能镜的显示区域;当接收到用户在所述显示区域选择化妆部位产生的化妆指令时,在用户的面部图像上显示用于化妆的参考线,并在对应部位显示所述辅助线,以供用户在所述参考线和辅助线标示出的化妆区域化出推荐的所述妆容。进一步地,所述当接收到用户在所述显示区域选择化妆部位产生的化妆指令时,在用户的面部图像上显示用于化妆的参考线,并在对应部位显示所述辅助线,以供用户在所述参考线和辅助线标示出的化妆区域化出推荐的所述妆容的步骤,包括:当接收到用户在所述显示区域选择眉毛部位产生的第一化妆指令时,在所述面部图像上显示所述参考线,并将眉毛所在区域进行放大后以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的眉妆;当接收到用户在所述显示区域选择眼睛部位产生的第二化妆指令时,在所述面部图像上显示所述参考线,并将眼睛所在区域进行放大后以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的眼妆;当接收到用户在所述显示区域选择嘴唇部位产生的第三化妆指令时,在所述面部图像上显示所述参考线,并将嘴唇所在区域进行放大后以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的唇妆;当接收到用户在所述显示区域选择脸腮部位产生的第四化妆指令时,在所述面部图像上显示所述参考线,并将脸腮所在区域以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的腮红妆。进一步地,在执行所有步骤之后,还包括:对用户化出所推荐妆容时的面部图像进行拍照保存,并更新至数据库和/或保存为二维码以供分享。本发明进一步提出一种智能镜,该智能镜包括存储器、处理器及存储在所述存储器并可在所述处理器上运行的化妆辅助程序,所述化妆辅助程序被所述处理器执行时实现如上所述的基于智能镜的化妆辅助方法的步骤。本发明还提出一种存储介质,该存储介质存储有化妆辅助程序,所述化妆辅助程序被处理器执行时实现如上所述的基于智能镜的化妆辅助方法的步骤。本发明的基于智能镜的化妆辅助方法,通过扫描用户的面部图像获取用户的面部数据,将所述面部数据与预存的预设标准脸模型进行比对,以推荐与比对结果匹配的至少一面部部位的妆容,最后当接收到用户在智能镜的显示区域选择化妆部位产生的化妆指令时,在面部图像的对应部位显示用于化妆的辅助线,以供用户根据所述辅助线化出为所述面部部位推荐的妆容。该基于智能镜的化妆辅助方法,通过获取到的用户面部数据,推荐与用户面部数据匹配的至少一面部部位的妆容,并根据用户选择的化妆部位,在对应区域显示用于化妆的辅助线,以便零化妆基础的用户化出推荐的部位妆容,提高了智能镜的个性化美妆效果。附图说明为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图示出的结构获得其他的附图。图1为本发明的智能镜一实施例的硬件结构示意图;图2为本发明的基于智能镜的化妆辅助方法第一实施例的流程示意图;图3为本发明的基于智能镜的化妆辅助方法第二实施例的流程示意图;图4为图2、图3中步骤S20一实施例的流程示意图;图5为图2、图3中步骤S30一实施例的流程示意图;图6为图2、图3中步骤S40一实施例的流程示意图。附图标号说明:本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。具体实施方式应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身没有特定的意义。因此,“模块”、“部件”或“单元”可以混合地使用。智能镜可以以各种形式来实施。例如,本发明中描述的智能镜可以由诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(PersonalDigitalAssistant,PDA)、便捷式媒体播放器(PortableMediaPlayer,PMP)、导航装置、可穿戴设备、智能手环、计步器等具有显示界面的移动终端实现,也可以由诸如数字TV、台式计算机等具有显示界面的固定终端实现。后续描述中将以智能镜为例进行说明,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的智能镜。请参阅图1,其为实现本发明各个实施例的一种智能镜的硬件结构示意图,该智能镜100可以包括:RF(RadioFrequency,射频)单元101、WiFi模块102、音频输出单元103、A/V(音频/视频)输入单元104、传感器105、显示区域106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解,图1中示出的智能镜结构并不构成对智能镜的限定,智能镜可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。下面结合图1对智能镜的各个部件进行具体的介绍:射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将基站的下行信息接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于GSM(GlobalSystemofMobilecommunication,全球移动通讯系统)、GPRS(GeneralPacketRadioService,通用分组无线服务)、CDMA2000(CodeDivisionMultipleAccess2000,码分多址2000)、WCDMA(WidebandCodeDivisionMultipleAccess,宽带码分多址)、TD-SCDMA(TimeDivision-SynchronousCodeDivisionMultipleAccess,时分同步码分多址)、FDD-LTE(FrequencyDivisionDuplexing-LongTermEvolution,频分双工长期演进)和TDD-LTE(TimeDivisionDuplexing-LongTermEvolution,分时双工长期演进)等。WiFi属于短距离无线传输技术,智能镜通过WiFi模块102可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图1示出了WiFi模块102,但是可以理解的是,其并不属于智能镜的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。例如本实施例中,智能镜100可以基于WiFi模块102与App终端建立同步关联关系。音频输出单元103可以在智能镜100处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时,将射频单元101或WiFi模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与智能镜100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103可以包括扬声器、蜂鸣器等等。如本实施例中,在输出选择无人机飞行控制方式的提示时,该提示可以是语音提示、基于蜂鸣器的震动提示等。A/V输入单元104用于接收音频或视频信号。A/V输入单元104可以包括图形处理器(GraphicsProcessingUnit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示区域106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或WiFi模块102进行发送。麦克风1042可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风1042接收声音(音频数据),并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。麦克风1042可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。智能镜100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示界面1061的亮度,接近传感器可在智能镜100移动到耳边时,关闭显示界面1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。显示区域106用于显示由用户输入的信息或提供给用户的信息。显示区域106可包括显示界面1061,可以采用液晶显示器(LiquidCrystalDisplay,LCD)、有机发光二极管(OrganicLight-EmittingDiode,OLED)等形式来配置显示界面1061。用户输入单元107可用于接收输入的数字或字符信息,以及产生与智能镜的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107可包括操控界面1071以及其他输入设备1072。操控界面1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在操控界面1071上或在操控界面1071附近的操作),并根据预先设定的程式驱动相应的连接装置。操控界面1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,并能接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现操控界面1071。除了操控界面1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种,具体此处不做限定。进一步的,操控界面1071可覆盖显示界面1061,当操控界面1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示界面1061上提供相应的视觉输出。虽然在图1中,操控界面1071与显示界面1061是作为两个独立的部件来实现智能镜的输入和输出功能,但是在某些实施例中,可以将操控界面1071与显示界面1061集成而实现智能镜的输入和输出功能,具体此处不做限定。接口单元108用作至少一个外部装置与智能镜100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到智能镜100内的一个或多个元件或者可以用于在智能镜100和外部装置之间传输数据。存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如化妆辅助功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、控制指令、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。处理器110是智能镜的控制中心,利用各种接口和线路连接整个智能镜的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行智能镜的各种功能和处理数据,从而对智能镜进行整体监控。处理器110可包括一个或多个处理单元;优选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。智能镜100还可以包括给各个部件供电的电源111(比如电池),优选的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。尽管图1未示出,智能镜100还可以包括可与App终端建立同步关联关系的蓝牙模块等,在此不再赘述。基于上述智能镜的硬件结构,本发明实施例的智能镜,通过扫描用户的面部图像获取用户的面部数据,将所述面部数据与预存的预设标准脸模型进行比对,以推荐与比对结果匹配的至少一面部部位的妆容,最后当接收到用户在智能镜的显示区域选择化妆部位产生的化妆指令时,在面部图像的对应部位显示用于化妆的辅助线,以供用户根据所述辅助线化出为所述面部部位推荐的妆容。该智能镜通过获取到的用户面部数据,推荐与用户面部数据匹配的至少一面部部位的妆容,并根据用户选择的化妆部位,在对应区域显示用于化妆的辅助线,以便零化妆基础的用户化出推荐的部位妆容,提高了智能镜的个性化美妆效果。如图1所示,作为一种计算机存储介质的存储器109中可以包括操作系统及控制程序。在图1所示的智能镜100中,WiFi模块102主要用于连接后台服务器或大数据云端,与后台服务器或大数据云端进行数据通信,并可实现与App终端建立同步关联关系;处理器110可以用于调用存储器109中存储的化妆辅助程序,并执行以下操作:扫描用户的面部图像,以获取用户的面部数据;将所述面部数据与预存的预设标准脸模型进行比对,并推荐与比对结果匹配的至少一面部部位的妆容;当接收到用户在智能镜的显示区域选择化妆部位产生的化妆指令时,在面部图像的对应部位显示用于化妆的辅助线,以供用户根据所述辅助线化出为所述面部部位推荐的妆容。进一步地,处理器110还可以用于调用存储器109中存储的化妆辅助程序执行以下操作:当接收到面部扫描指令时,在智能镜的显示区域显示面部图像采集框,并输出面部对准在所述采集框内的提示。进一步地,处理器110还可以用于调用存储器109中存储的化妆辅助程序执行以下操作:当检测到用户的面部对准在所述采集框内时,扫描所述采集框内的面部图像;基于卷积操作提取所述面部图像中五官结构的特征向量,并融合为用户的五官结构特征,以获取用户的五官结构比例数据。进一步地,处理器110还可以用于调用存储器109中存储的化妆辅助程序执行以下操作:在获取到用户的五官结构比例数据时,生成相应的比对指令;根据所述比对指令,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断;基于比对结果推荐与用户五官各结构匹配的至少一面部部位的妆容。进一步地,处理器110还可以用于调用存储器109中存储的化妆辅助程序执行以下操作:将用户五官结构比例数据中的脸长与脸宽之比,颞骨、颧骨、腮骨的宽度之比以及三庭之比与预设标准脸模型中的对应数据进行比对,判断出用户的脸型;将用户五官结构比例数据中的眼高与脸长之比,眼间距与脸宽之比以及内外眦与水平面的夹角与预设标准脸模型中的对应数据进行比对,判断出用户的眼型以及眼睛在面部的相对位置;将用户五官结构比例数据中的嘴裂宽与脸宽之比,嘴厚度与脸长之比,上唇与下唇的厚度之比与预设标准脸模型中的对应数据进行比对,判断出用户的嘴型以及嘴在面部的相对位置。进一步地,处理器110还可以用于调用存储器109中存储的化妆辅助程序执行以下操作:当接收到待化妆指令时,激活所推荐妆容对应的妆容模板,以将所述妆容模板包括的化妆部位选项显示于智能镜的显示区域;当接收到用户在所述显示区域选择化妆部位产生的化妆指令时,在用户的面部图像上显示用于化妆的参考线,并在对应部位显示所述辅助线,以供用户在所述参考线和辅助线标示出的化妆区域化出推荐的所述妆容。进一步地,处理器110还可以用于调用存储器109中存储的化妆辅助程序执行以下操作:当接收到用户在所述显示区域选择眉毛部位产生的第一化妆指令时,在所述面部图像上显示所述参考线,并将眉毛所在区域进行放大后以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的眉妆;当接收到用户在所述显示区域选择眼睛部位产生的第二化妆指令时,在所述面部图像上显示所述参考线,并将眼睛所在区域进行放大后以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的眼妆;当接收到用户在所述显示区域选择嘴唇部位产生的第三化妆指令时,在所述面部图像上显示所述参考线,并将嘴唇所在区域进行放大后以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的唇妆;当接收到用户在所述显示区域选择脸腮部位产生的第四化妆指令时,在所述面部图像上显示所述参考线,并将脸腮所在区域以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的腮红妆。进一步地,处理器110还可以用于调用存储器109中存储的化妆辅助程序执行以下操作:对用户化出所推荐妆容时的面部图像进行拍照保存,并更新至数据库和/或保存为二维码以供分享。本发明进一步提出一种基于智能镜的化妆辅助方法。参照图2,图2为本发明的基于智能镜的化妆辅助方法第一实施例的流程示意图。在该实施例中,所述基于智能镜的化妆辅助方法包括以下步骤:S10:当接收到面部扫描指令时,在智能镜的显示区域显示面部图像采集框,并输出面部对准在所述采集框内的提示;本实施例的智能镜可以单独用来辅助用户化妆,当所述智能镜接收到开机指令后,自动搜索可识别范围内的网络连接信号,一般是WiFi信号,当智能镜为首次连接该WiFi信号时,在智能镜的显示界面显示输入WiFi密码的提示,当用户输入正确的密码时,自动更新相关的数据,如,天气数据、应用通知数据等。当智能镜为非首次连接所述WiFi信号时,自动接入所述WiFi网络,进行数据更新和数据同步。所述智能镜还能够自动根据距感控制智能镜的运行状态,如当检测到有人接近时将处于待机状态的智能镜唤醒,或者在检测到人离开时控制处于唤醒状态的智能镜进入待机状态。在其他实施例中,所述智能镜还可以基于所述WiFi连接与App终端建立同步关联关系,在智能镜与App终端建立同步关联关系之后,用户可以基于App终端实现对智能镜的远程控制,如调节智能镜的显示亮度、控制智能镜的摄像头开关、控制智能镜关机等。当用户通过手势动作或语音指令或通过App终端向智能镜发送面部扫描指令时,智能镜基于接收到的面部扫描指令检测摄像头或图像传感器的运行状态,如当摄像头或图像传感器处于关闭状态时,控制其开启,当其处于运行状态时,将智能镜的显示界面显示摄像头或图像传感器摄取到的图像,并在智能镜的显示区域、也即显示界面显示面部图像采集框,并输出将面部对准在所述图像采集框内的语音提示或文字提示。S20:扫描用户的面部图像,以获取用户的面部数据;用户基于所述将面部对准在所述采集框内的语音提示或文字提示,可以调整面部与智能镜的摄像头或图像传感器的相对位置,当用户的面部对准在所述采集框内时,采集该帧用户面部图像,并生成相应的扫描信号,反馈给处理器,由处理器调用存储器中的美妆程序对该帧用户面部图像进行扫描,以获取用户的面部数据。S30:将所述面部数据与预存的预设标准脸模型进行比对,并推荐与比对结果匹配的至少一面部部位的妆容;在获取到用户的面部数据之后,调用预存的预设标准脸模型进行比对,主要对用户面部的五官结构进行比对判断,如对用户的脸型、嘴型、眼型、以及嘴巴和眼睛在面部区域中的相对位置进行判断,然后根据本地存储的妆容模板或者从云端获取的妆容模板中推荐与比对结果匹配的至少一面部部位的妆容,如眉妆、眼妆、唇妆、腮红妆等。S40:当接收到用户在智能镜的显示区域选择化妆部位产生的化妆指令时,在面部图像的对应部位显示用于化妆的辅助线,以供用户根据所述辅助线化出为所述面部部位推荐的妆容。智能镜将基于所述比对结果推荐的妆容显示于智能镜的显示区域中,当用户在所述显示区域选择化妆部位时,智能镜基于用户的选择动作产生相应的化妆指令,并根据用户选择的化妆部位在用户的面部图像的对应部位显示用户化妆的辅助线,所述辅助线的形状和大小根据用户的五官机构数据进行匹配,以便用户参照所述辅助线化出为所述面部部位推荐的所述眼妆、眉妆、唇妆或腮红妆。本发明实施例的基于智能镜的化妆辅助方法,通过扫描用户的面部图像获取用户的面部数据,将所述面部数据与预存的预设标准脸模型进行比对,以推荐与比对结果匹配的至少一面部部位的妆容,最后当接收到用户在智能镜的显示区域选择化妆部位产生的化妆指令时,在面部图像的对应部位显示用于化妆的辅助线,以供用户根据所述辅助线化出为所述面部部位推荐的妆容。该基于智能镜的化妆辅助方法,通过获取到的用户面部数据,推荐与用户面部数据匹配的至少一面部部位的妆容,并根据用户选择的化妆部位,在对应区域显示用于化妆的辅助线,以便零化妆基础的用户化出推荐的部位妆容,提高了智能镜的个性化美妆效果。进一步地,参照图4,基于上述实施例的基于智能镜的化妆辅助方法,步骤S20,包括:S21:当检测到用户的面部对准在所述采集框内时,扫描所述采集框内的面部图像;在本实施例中,在用户根据智能镜输出的将面部对准在面部图像采集框的提示,将面部对准在所述采集框内时,由所述面部图像采集框对采集框内的图像信息进行检测,当检测到用户面部图像对准在所述采集框内时,扫描所述采集框内的面部图像。S22:基于卷积操作提取所述面部图像中五官结构的特征向量,并融合为用户的五官结构特征,以获取用户的五官结构比例数据。对采集框内的面部图像进行扫描的过程主要是基于卷积操作提取所述面部图像中的五官结构的特征向量,然后将提出的五官各结构的特征向量融合为用户的五官结构特征,在此过程中可以获取用户五官各结构的数据值,如五官中的脸长、脸宽、嘴裂宽、嘴唇厚度等,以及五官各结构之间的比例数据,如脸长与脸宽之比,颞骨、颧骨、腮骨的宽度之比,嘴裂宽与脸宽之比等。进一步地,参照图5,基于上述实施例的基于智能镜的化妆辅助方法,步骤S30,包括:S31:在获取到用户的五官结构比例数据时,生成相应的比对指令;在本实施例中,在通过扫描用户的面部图像获取用户的五官结构比例数据时,根据存储在存储器中的美妆程序生成相应的比对指令。S32:根据所述比对指令,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断;在接收到所述比对指令后,根据所述比对指令从智能镜的存储器中调用预存的预设标准脸模型对用户的脸型、眼型、嘴型进行比对判断,如将脸长大于脸宽的脸型判定为椭圆形脸、将脸长与脸宽近似的脸型判定为圆形脸、将脸宽小于脸长的脸型判定为长形脸、将下颌比较尖的脸型判定为锥形脸;将眼高相对于整个脸长的比率小于标准脸的比率的眼型判定为小眼、将唇裂与脸宽的比值大于预设值的嘴型判定为嘴唇过大。在对眼睛和嘴巴在面部的相对位置进行比对判断时,主要对眼距、眼角度、嘴唇厚度进行判断,如将眼间距与脸宽的比值超过标准脸的比值时判定为眼间距大。S33:基于比对结果推荐与用户五官各结构匹配的至少一面部部位的妆容。在调用标准脸模型对用户的嘴型、眼型、脸型、及眼睛和嘴巴在面部的相对位置进行比对判断后,将比对结果显示于智能镜的显示区域,并基于所述比对结果从本地存储的妆容模板或从云端获取的妆容模板中推荐与用户五官各结构匹配的至少一面部部位的妆容,如在本地存储的主题妆容或品牌妆容中推荐,或者在智能镜处于联网状态时,从云端获取与用户五官结构匹配的部位妆容或整套妆容,所述主题妆容主要根据妆容的风格、适用场合、潮流类型以及其他款系进行分类,所述品牌妆容主要根据品牌列表及型号进行分类,用户也可以自行选择搭配需要的妆容。进一步地,调用预存的预设标准脸模型对用户的脸型、眼型、嘴型以及眼睛和嘴在面部的相对位置进行比对判断的步骤,包括:将用户五官结构比例数据中的脸长与脸宽之比,颞骨、颧骨、腮骨的宽度之比以及三庭之比与预设标准脸模型中的对应数据进行比对,判断出用户的脸型;在本实施例中,在对用户的脸型进行比对判断时,首先将用户的脸长与脸宽之比与标准脸模型的脸长与脸宽的比值进行比较,如本本实施例中预设的标准脸的脸长与脸宽之比为1.62:1,当用户的脸长与脸宽之比与1.62:1相差较远时,如小于4:3时,则进一步获取用户的腮骨宽与颧骨宽之比,当二者之比在预设范围如0.68~0.87之间时,判定用户的脸型为圆形脸;当二者之比小于0.68时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为锥形脸,否则为菱形脸;当二者之比大于0.87时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为方形脸,否则为正三角形脸。当用户的脸长与脸宽之比大于3:2、小于1.62:1时,进一步获取用户的腮骨宽与颧骨宽之比,当二者之比在预设范围如0.68~0.87之间时,判定用户的脸型为椭圆形脸;当二者之比小于0.68时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为锥形脸,否则为菱形脸;当二者之比大于0.87时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为长形脸,否则为正三角形脸。当用户的脸长与脸宽之比在4:3~3:2之间时,进一步获取用户的腮骨宽与颧骨宽之比,当二者之比在预设范围如0.68~0.87之间时,判定用户的脸型为椭圆形脸;当二者之比小于0.68时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为锥形脸,否则为菱形脸;当二者之比大于0.87时,进一步比较颞骨与颧骨的宽度大小,当颞骨宽大于等于颧骨宽时判定用户的脸型为方形脸,否则为正三角形脸。当用户的脸长与脸宽之比为1.62:1,腮骨、颧骨、颞骨之比为0.82:1:0.68,且三庭之比为1:1:1时,判定用户的脸型为标准脸。将用户五官结构比例数据中的眼高与脸长之比,眼间距与脸宽之比以及内外眦与水平面的夹角与预设标准脸模型中的对应数据进行比对,判断出用户的眼型以及眼睛在面部的相对位置;在判断出用户的脸型之后,需要对用户的眼型进行比对判断,具体为判断用户的眼高与脸长的比值是否小于预设阈值,如本实施例中预设的0.05263,若是,则判定用户为小眼,若否则进一步获取用户的眼间距与脸宽之比,当二者之比小于第一预设值如0.2725时,判定用户的眼距偏大,当二者之比大于第二预设值如0.3236时,判定用户的眼距偏小,当二者之比在0.2725和0.3236之间时,进一步获取内外眦与水平面的夹角,当所述夹角在0~10°时,判定用户的眼型为标准眼;当所述夹角小于0°时,判定用户的眼尾下垂;当所述夹角大于10°时,判定用户的眼尾上扬。将用户五官结构比例数据中的嘴裂宽与脸宽之比,嘴厚度与脸长之比,上唇与下唇的厚度之比与预设标准脸模型中的对应数据进行比对,判断出用户的嘴型以及嘴在面部的相对位置。在判断出用户的脸型和眼型之后,还需要对用户的嘴型进行比对判断,具体为判断用户的嘴裂宽与脸宽之比是否小于第一预设值0.4494,若是,则直接判定用户的嘴唇过大;若否,则进一步判断嘴厚与脸长之比是否大于第二预设值0.0926,当嘴厚与脸长之比大于0.0926时,判定用户的嘴唇过厚;当嘴厚与脸长之比小于等于0.0926时,进一步获取上唇与下唇之比,当二者之比小于第三预设值1:1.5时,进一步判断下唇与脸长之比是否大于第四预设值1:18,若是,则判定用户的下唇过厚,若否,则判定用户的上唇过薄;当二者之比大于第三预设值1:1.5时,进一步判断下唇与脸长之比是否小于第四预设值1:18,若是,则判定用户的下唇过薄,若否,则判定用户的上唇过厚;当二者之比为第三预设值1:1.5时,进一步判断嘴唇的仰角是否小于10°,若是,则判定用户的嘴唇为椭圆形嘴唇,若否则判定用户的嘴唇为标准嘴。进一步地,参照图6,基于上述实施例的基于智能镜的化妆辅助方法,步骤S40,包括:S41:当接收到待化妆指令时,激活所推荐妆容对应的妆容模板,以将所述妆容模板包括的化妆部位选项显示于智能镜的显示区域;在本实施例中,在智能镜从本地存储的妆容模板或从云端获取的妆容模板中推荐与比对结果匹配的妆容后,将所述妆容更新至智能镜的当前妆容列表中,如将根据用户的嘴型、眼型、脸型及眼睛和嘴巴在面部区域的相对位置推荐的适合当前用户的某一主题款或品牌妆容更新至智能镜的妆容列表,在接收到待化妆指令时智能镜自动从所述妆容列表中调用该主体款妆容或品牌妆容进行显示,以供用户进行参照化妆。当智能镜检测到用户点击智能镜显示界面或显示区域的化妆图标,或接收到用户的语音指令时,生成对应的待化妆指令,并根据所述待化妆指令激活所述试妆妆容对应的妆容模板,当所述妆容模板被激活后,将智能镜的当前显示界面切换为该妆容模板的内容,如包括面部各化妆部位的指示标识、放大显示、参考线显示和辅助线显示的标识,以及透明度调整的标识。S42:当接收到用户在所述显示区域选择化妆部位产生的化妆指令时,在用户的面部图像上显示用于化妆的参考线,并在对应部位显示所述辅助线,以供用户在所述参考线和辅助线标示出的化妆区域化出推荐的所述妆容。为了增加智能镜的智能性,提高用户化妆体验,在接收到用户在所述显示区域选择化妆部位产生的化妆指令时,在用户的面部图像上显示用户化妆的参考线,在其他实施例中,所述参考线也可以根据用户的选择进行显示或不显示,并且在对应部位显示于该部位特征数据匹配的辅助线,如针对长脸型或方脸型用户可以将标示化腮红的化妆区域调成长轴在竖直方向的椭圆形,对于圆脸型用户则可以将标示化腮红的化妆区域调成相对圆润的圆形,以方便用户在所述参考线和辅助线标示出的化妆区域内化出推荐的所述妆容。此外,在利用所述参考线和辅助线进行标注时,也可以对该用户的图像进行整体放大或局部放大,以将所述化妆区域放大显示于智能镜的显示区域,便于用户化出推荐的所述妆容。进一步地,所述当接收到用户在所述显示区域选择化妆部位产生的化妆指令时,在用户的面部图像上显示用于化妆的参考线,并在对应部位显示所述辅助线,以供用户在所述参考线和辅助线标示出的化妆区域化出推荐的所述妆容的步骤,包括:当接收到用户在所述显示区域选择眉毛部位产生的第一化妆指令时,在所述面部图像上显示所述参考线,并将眉毛所在区域进行放大后以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的眉妆;在本实施例中,在接收到用户在所述显示区域选择眉毛部位产生的第一化妆指令时,在用户的面部图像上显示用户化妆的参考线,在其他实施例中,所述参考线也可以根据用户的选择进行显示或不显示,并且面部图像上对应眉毛的部位显示于眉毛特征数据匹配的辅助线,如针对不同的眼睛大小将标示眉形的化妆区域调成短眉或长眉、粗眉或细眉,以方便用户在所述参考线和辅助线标示出的化妆区域内化出推荐的眉妆。此外,在利用所述参考线和辅助线进行标注时,也可以对该用户的面部图像进行整体放大或眉毛区域的局部放大,以将所述化妆区域放大显示于智能镜的显示区域,便于用户化出推荐的眉妆。当接收到用户在所述显示区域选择眼睛部位产生的第二化妆指令时,在所述面部图像上显示所述参考线,并将眼睛所在区域进行放大后以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的眼妆;在接收到用户在所述显示区域选择眼睛部位产生的第二化妆指令时,在用户的面部图像上显示用户化妆的参考线,在其他实施例中,所述参考线也可以根据用户的选择进行显示或不显示,并且面部图像上对应眼睛的部位显示于眼睛特征数据匹配的辅助线,如针对不同的眼睛大小将标示眼线或眼影的化妆区域调成长形或圆形,以方便用户在所述参考线和辅助线标示出的化妆区域内化出推荐的眼妆。此外,在利用所述参考线和辅助线进行标注时,也可以对该用户的面部图像进行整体放大或眼睛区域的局部放大,以将所述化妆区域放大显示于智能镜的显示区域,便于用户化出推荐的眼妆。当接收到用户在所述显示区域选择嘴唇部位产生的第三化妆指令时,在所述面部图像上显示所述参考线,并将嘴唇所在区域进行放大后以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的唇妆;在接收到用户在所述显示区域选择嘴唇部位产生的第三化妆指令时,在用户的面部图像上显示用户化妆的参考线,在其他实施例中,所述参考线也可以根据用户的选择进行显示或不显示,并且面部图像上对应嘴唇的部位显示于嘴唇特征数据匹配的辅助线,如针对不同的嘴巴大小将标示口红或唇彩的化妆区域调成长形或圆形,以方便用户在所述参考线和辅助线标示出的化妆区域内化出推荐的唇妆。此外,在利用所述参考线和辅助线进行标注时,也可以对该用户的面部图像进行整体放大或嘴唇区域的局部放大,以将所述化妆区域放大显示于智能镜的显示区域,便于用户化出推荐的唇妆。当接收到用户在所述显示区域选择脸腮部位产生的第四化妆指令时,在所述面部图像上显示所述参考线,并将脸腮所在区域以所述辅助线标示出化妆区域,以供用户在所述化妆区域化出推荐的腮红妆。在接收到用户在所述显示区域选择脸腮部位产生的第四化妆指令时,在用户的面部图像上显示用户化妆的参考线,在其他实施例中,所述参考线也可以根据用户的选择进行显示或不显示,并且面部图像上对应脸腮的部位显示于脸腮特征数据匹配的辅助线,如针对不同的脸部大小将标示腮红的化妆区域调成长形或圆形,以方便用户在所述参考线和辅助线标示出的化妆区域内化出推荐的腮红妆。此外,在利用所述参考线和辅助线进行标注时,也可以对该用户的面部图像进行整体放大或脸腮区域的局部放大,以将所述化妆区域放大显示于智能镜的显示区域,便于用户化出推荐的腮红妆。进一步地,参照图3,基于上述实施例的基于智能镜的化妆辅助方法,提出基于智能镜的化妆辅助方法的第二实施例,在该实施例中,所述基于智能镜的化妆辅助方法包括:S50:对用户化出所推荐妆容时的面部图像进行拍照保存,并更新至数据库和/或保存为二维码以供分享。在本实施例中,在检测到用户完成面部各部位的化妆动作后,可以对用户完成所有化妆动作时的面部图像或用户化出所述试妆妆容时的面部图像进行拍照保存,当然,也可以根据用户输入的拍照指令对用户化出所述试妆妆容时的面部图像进行拍照保存,对应地可以将所述面部图像保存为照片或二维码,然后将保存的照片更新至数据库或保存为二维码分享至云端或朋友。进一步地,用户还可以基于App终端实现对智能镜的亮度、运行模式和状态进行调节。而所述智能镜在联网状态下,也可以在其显示界面实现对天气、当前温湿度、空气质量、网络连接状态等进行显示。此外,本发明实施例还提出一种存储介质,该存储介质存储有化妆辅助程序,所述化妆辅助程序被处理器执行时实现如上所述的基于智能镜的化妆辅助方法的步骤。其中,化妆辅助程序被执行时所实现的方法可参照本发明基于智能镜的化妆辅助方法的各个实施例,此处不再赘述。需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的
技术领域
:,均同理包括在本发明的专利保护范围内。当前第1页1 2 3 当前第1页1 2 3 
当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1