专利名称：用于使用脸部识别来选择信息递送方式的装置和关联方法
技术领域：
本公开大体上涉及向无线或其他电子设备的用户递送信息的方式。更具体地，本公开涉及基于脸部识别指示来选择信息递送方式的装置和关联方法。如果用户的脸部识别指示指明最好以可听的形式而非文本或其他形式递送信息时，则以可听的形式递送信息。脸部识别的使用允许选择在递送信息时最合适的信息递送方式。当在设备上接收到信息时，或者在其他情况下信息可递送给用户时，获取用户的脸部识别指示。以及，基于该指示，来选择递送方式。
背景技术：
蜂窝和其他无线通信系统被许多人使用。已经安装了无线通信系统的网络基础设施，以涵盖全世界的居住区域的重要部分。当无线设备位于涵盖一地理区域的网络基础设施所限定的覆盖区域中，并且允许接入网络时，该无线设备能够经由网络基础设施与通信端点进行通信。以及，因为在无线设备和网络基础设施之间的通信是经由在该基础设施和该设备之间形成的无线电空中接口上定义的无线电信道来执行的，所以提供无线设备发起的通信和与无线设备的通信不需要到无线设备的物理连接。蜂窝或类蜂窝通信系统中使用的无线设备经常是小型尺寸的，由此允许用户手持携带或以其他方式随身携带无线设备。由于无线设备具有的该便携性，设备的用户能够容易地将设备保持在很近的地方，使得在需要的时候容易地就可以使用设备。早期的蜂窝通信系统和可操作于其中的设备通常提供语音通信和仅仅有限的数据通信能力，而后来的系统和可操作于其中的设备提供数据量日益增加的数据服务。无线设备的用户越来越多地使用无线设备，不仅用于电话通信服务，而且用于执行数据通信服务。诸如电子邮件和即时消息服务等的消息服务属于无线设备的用户可获得和使用的数据服务。这样的消息通常使用在无线设备和通信端点之间传送的字母数字文本数据。字母数字(例如文本)消息的使用允许查看者(诸如无线设备的用户)在有空的时候查看消息。特别地，当通信服务包括电子邮件通信服务时，接收者基于自身意愿，即在接收者(诸如无线设备的用户)有空时，查看传送的消息。近些年已经见证了下述无线设备的推广和广泛使用，该无线设备包括将这种消息推送给无线设备以使得其可被立即查看并且在需要时形成回复的能力。已经对提供数据服务的无线和其他设备中使用的用户接口投注了大量关注。用户接口提供用户接收传送给设备的信息的机制，还提供形成将由设备传送的信息的机制。用户接口经常包括显示屏和输入键盘。在一些实现中，用户接口实现为触摸屏显示器，在触摸屏显示器中通过触摸显示屏来生成输入。经常，还在无线设备接收消息时，生成警报以向设备的用户提醒消息的递送。设备的用户一旦被提醒，如果期望，能够立即查看接收到的消息。基于与无线或其他电子设备的用户接口有关的信息的该背景技术，做出了实现本公开的显著改进的设备。
发明内容
本公开因此有利地提供了用于向无线或其他电子设备递送信息的装置和关联方法。贯穿本公开的实现的操作，提供了基于脸部识别指示来选择信息递送的方式。响应于用户的脸部识别指示指明最好以可听的形式而不是文本或其他形式来递送信息，以可听的形式递送信息。在本发明的一个方面，使用脸部识别来选择在递送消息时最合适的递送方式。当在设备上接收到信息时，或者在其他情况下信息可递送给设备的用户时，获取用户的脸部识别指示。以及，基于该指示，来选择递送方式。
在本公开的另一方面，在无线或其他电子设备上提供了图像检测器，诸如拍摄镜头组件。拍摄镜头组件提供对图像的记录或其他查看。拍摄镜头组件的拍摄镜头是可定位的，以检测设备的用户的脸部区域的图像。在本公开的另一方面，一旦记录或者以其他方式获取了脸部图像，对脸部图像进行分析。执行该分析，以检测对象的神情，即用户的脸部图像。通过确定脸部图像的各部分的脸部配置来确定神情。以及，通过该确定，获取对象的神情的指示。在本公开的另一方面，响应于在无线或其他电子设备上递送数据消息，获取脸部识别指示。或者，以选定间隔来获取脸部识别指示。脸部识别指示是在接近以人可察觉的方式向设备的用户递送接收的信息时获取的。也即，基于在接近向设备的用户递送接收的信息时获取的脸部图像，做出该确定。在本公开的另一方面，脸部识别指示被用于选择以何种方式向设备的用户递送接收的信息。如果脸部识别指明对象的脸部特征是第一特征，则选择以第一方式递送信息。以及，如果脸部识别指示指明对象的脸部特征是第二特征，则选择以第二方式递送信息。在本公开的另一方面，如果脸部识别指示指明对象的脸部特征是第一特征，则以可听的形式递送信息。以及，如果脸部识别指示指明对象的脸部特征是第二特征，则选择以文本形式递送信息。在本公开的另一方面，如果脸部识别指明对象呈现选定的脸部特征，例如严肃的神情，则选择以第一方式递送信息。以及，如果脸部识别指示指明对象没有呈现选定的脸部特征，则选择以第二方式递送信息。在本公开的另一方面，对选择进行确认或肯定。对选择的肯定或确认是在以选定方式递送信息之前进行的。向设备的用户提供对选择的指示。以及，响应于提供了选择指示，用户能够确认或拒绝该选择。传感器选择用户做出的确认或拒绝。在本公开的另一方面，确认检测器通过感测在用户确认或拒绝该选择时的用户脸部图像来检测用户的脸部特征。通过分析感测到的脸部图像来形成脸部识别指示。作为对对象的脸部特征的分析的结果，确认检测器确认或拒绝该选择。在本公开的另一方面，以选定的方式来递送信息。当选定的方式包括信息的可听递送时，将接收的信息转换成可听的形式以供递送。例如通，过文本到音频变换器来执行该转换。
因此，基于在接近信息递送时的用户的脸部特征，以最适合用户的方式向设备的用户递送信息。因此，在这些和其他方面，提供了便于电子设备上的信息递送的装置和关联方法。递送类型选择器被配置为选择采用第一方式和第二方式中的哪种方式来递送信息。选择取决于第一脸部识别指示。可听变换器(aural transducer)配置为如果递送类型选择器选择以第一方式递送信息，则将信息转换成可听的形式。
图I示出了包括本公开的实现的无线设备的功能框图。图2示出了示例性的检测到的脸部图像，根据本公开的实现的示例性操作，根据 该脸部图像来生成脸部识别指示。图3示出了表示本公开的实现的示例性操作的消息程序图。图4示出了表示本公开的实现的操作的方法的方法流程图。
具体实施例方式因此，首先参考图1，通信系统(总地示出为10)提供与无线设备的通信，无线设备12是所述无线设备的代表。在示例性实现中，通信系统包括蜂窝通信系统。以及，下面的对示例性操作的描述将是关于示例性实现的。然而，应该理解，在其他实现中，可以以其他方式来实现该通信系统。以及，本公开的教导可以类似地应用于这些其他类型的通信系统中，包括无线和有线系统。通信系统包括网络部分，此处网络部分包括无线接入网(RAN)16和数据网络18(诸如互联网)。通信端点22可被安置在与数据网络的通信连接中。在无线接入网的收发器基站(BTS)24中包括的收发器电路和以无线设备12的接收机(Rx)部分28和发射机(Tx)部分32为代表的收发器电路之间进行无线通信。经由在网络和无线设备之间形成的无线电空中接口上定义的无线信道(由箭头34表示)，以通信信号的形式来发送信息。在示例性实现中，无线设备12既能够执行传统的电话通信服务，也能够执行消息通信服务，诸如电子邮件消息收发。例如，源自通信端点22的电子邮件消息可经由数据网络18、无线接入网16、以及在无线电空中接口上定义的无线信道34进行路由，以便递送到无线设备12的接收机部分28。源自无线设备的消息由发射机部分32经由反向路线进行发送，以便递送到通信端点22。以及，在设备10的电话操作期间，由麦克风36来转换语音信号。如前面提到的，通常使得在无线设备处接收的消息可供无线设备的用户进行查看。然而，有时存在下述情形，其中无线设备的用户不可能以可视的形式来查看接收消息。无线设备12包括本公开的实现的装置42，其提供向无线设备的用户递送接收消息的信息内容的备选方式。该装置以功能表示，可以用任何期望的方式实现，包括硬件单元、固件单元、处理电路可执行的算法、及其组合。此处，装置42示为包括拍摄单元46、脸部识别传感器48、选择器52、确认请求生成器56、确认检测器58、语音到音频转换器62、以及用户接口660
在操作中，当消息被递送到无线设备并被接收机部分28检测到时，将消息存储到消息缓存68中。以及，响应于该消息，提供指示，此处由箭头72表示。响应于经由线72提供的指示，拍摄单元用于检测或记录图像。拍摄单元包括例如镜头组件、传感器单元、以及检测或记录图像所需的其他电路。该图像包括对象的脸部图像，即无线设备的用户或接收消息的目标接收者的脸部图像。一旦拍摄模块46获取了感测到的或记录的图像，由脸部识别传感器48对其进行分析。传感器48操作用于检测拍摄单元感测到的或分析的对象的脸部图像的脸部特征。传感器操作用于感测对象的选定特征。例如，基于拍摄单元获取的图像来感测对象的神情。该确定例如是通过分析脸部图像的多个位置来进行的。以及，基于该多个位置，确定对象的神情、或者其他选定特征。例如，如果对象正在操作机动车，则对象的神情很可能是严肃的。以及，如果需要读取或者以其他方式查看接收消息，很可能将分散对象的注意力。相反，如果确定对象不具有严肃的神情，则对象很可能有空读取或以其他传统方式查看接收消息。通过使得选定特征是对象的神情的严肃性，做出向机动车驾驶员递送消息的递送方式的合适选择。向选择器52提供脸部识别传感器48形成的指示。以及，选择器选择向用户递送接收消息的方式。如果确定对象表现出选定特征，选择器选择以第一方式(此处是可听的形式)递送接收消息(即信息)。以及，如果对象没有表现出选定特征，选择器选择以第二方式(此处是文本形式)来递送接收信息。在示例性实现中，响应于对递送类型的初始选择，获得来自用户的确认，特别地，如果选择器做出的选择是以可听的形式递送信息，更是如此。为了获取确认，选择器使得确认请求生成器56生成确认请求，诸如用户接口的扬声器76生成的可听的声音。可听的声音的声级足够大以允许无线设备的用户检测到该声音。作为响应，无线设备的用户做出脸部活动，以确认或拒绝选择器做出的选择。拍摄单元46检测用户的脸部配置，以及脸部识别传感器操作用于感测用户响应于所请求的确认的脸部配置。确定确认选择还是拒绝选择。以及确认检测器58检测该确定。检测器检测用户是否已经确认或拒绝该选择。以及，将检测器做出的检测提供给选择器52。如果已经做出选择并且确认以可听的形式递送信息，选择器基于该选择和对该选择的确认，使得通过语音到音频转换器62将存储在消息缓存68中的接收消息转换到可听的形式，并且由扬声器76进行播放。相反，如果选择以文本形式递送信息，则将存储在消息缓存68中的信息提供给用户接口的显示单元82以及用传统方式进行显示。由此，递送接收消息的方式取决于脸部识别传感器形成的脸部识别指示。如果感测到的脸部配置属于第一种配置类型，则选择以第一方式(例如，可听的方式)递送接收消息。相反，如果感测到的配置属于第二特征，则使得以其他方式(例如文本方式)递送接收消息。该选择在不需要特殊用户输入的情况下做出。相反，拍摄单元感测脸部指示，例如用户的神情，以及基于感测到的脸部配置或指示做出选择。例如，如果感测到的指示指明用户表现出严肃的神情，则选择以可听的形式递送接收信息的内容。相反，如果例如用户表现出不怎么严肃的神情，则以可视形式递送消息，从而必需查看在显示单元上显示的消息。
图2说明了遵循图I示出的装置42的实现的操作所形成的示例性的感测到的图像的代表92。此处，感测到的图像包括对象的身体的一部分，该部分包括对象的头94的脸的部分。对象的脸被分成多个部分96和不同部分96中的兴趣点98。分析兴趣点以获取脸部识别指示，该脸部识别指示指明对象的特征，诸如对象的神情。图3说明了表示本公开的实现的操作的过程的流程图106。该过程提供在无线或其他电子设备上的接收信息的递送。以某种方式来完成消息的信息内容向用户的递送，该方式是基于设备的用户的脸部特征的定量(quantitatively)获取的特征确定为最适合的方式。首先，如步骤108所示，在设备上接收和检测到信息，诸如电子邮件消息。接着，如步骤112所示，存储接收和检测到的信息。接着，如步骤114所示，获取脸部配置特征。通过定位拍摄单元以感测对象(设备的用户)的脸部部分，获取脸部配置特征。
一旦已经获取脸部配置特征，则分析该特征，如步骤116所示。接着，如步骤122所示，做出对象的脸部配置是否表现出选定特征的判断。如果没有，则执行“否”分支到步骤126，并且在显示单元上显示接收信息，即以文本形式显示接收信息，或由用户查看接收信息。相反，如果在判决步骤122处做出对象表现出选定特征的判断，则执行“是”分支，并且如步骤128所示，生成确认请求。以及，如步骤132所示，在生成确认请求之后，获取对象的脸部配置特征。接着，如判决步骤136所示，做出关于对象是否确认以可听的形式递送接收信息的选择的判断。如果没有，则执行“否”分支到步骤126。否则，执行“是”分支到步骤138，以及将接收信息转换成可听的形式。接着，如步骤142所示，以可听的形式播放信息。在步骤126或142处递送信息之后，转到结束步骤144，该过程结束。图4说明了表示本公开的实现的操作的方法的方法流程图162。该方法有助于无线设备上的消息递送。首先，如步骤166所示，形成第一脸部识别指示。接着如步骤168所示，分析脸部识别指示。以及，如步骤172所示，做出以第一方式和第二方式中的哪种方式递送信息的选择。该选择取决于第一脸部识别指示。接着，如步骤174所示，检测对选择的确认。以及，如果已经做出以选定形式递送信息的选择并且进行了确认，则如步骤178所示，将信息转换成选定形式。由此，提供了基于接收者的脸部特征、以最合适的方式递送信息的方式。因此，当在无线设备或其他通信设备(诸如图I中的通信设备10)上接收到消息时，基于对设备的用户的脸部特征的确定，以最适合脸部特征的方式管理消息的警报和通知，例如当用户正在操作机动车时，这将使得较少地分散用户操作机动车的注意力。已经以一定的具体程度描述了本公开的当前优选的实现及其很多改进和优点。该描述是实现该公开的优选示例，以及对示例的描述并不必然旨在限制本公开的范围。本公开的范围由所附权利要求定义。
权利要求
1.一种便于电子设备上的信息递送的装置，所述装置包括 递送类型选择器，被配置为选择以第一方式和第二方式中的哪种方式来递送信息，所述选择基于第一脸部识别指示；以及 转换器，被配置为如果所述递送类型选择器选择以第一方式向用户递送信息，则将信息转换成以第一方式递送的形式。
2.根据权利要求I所述的装置，其中所述递送类型选择器被配置为选择以可听的递送方式和可视的递送方式中的哪种方式来递送信息。
3.根据权利要求I所述的装置，还包括脸部识别传感器，被配置为形成第一脸部识别指示，其中所述递送类型选择器被配置为响应于所述第一脸部识别指示，选择采用第一和第二方式中的哪种方式来递送信息。
4.根据权利要求3所述的装置，其中所述脸部识别传感器包括用户可调向的、无线设备定位的拍摄单元，所述拍摄单元被配置为感测拍摄图像。
5.根据权利要求4所述的装置，还包括脸部图像分析器，所述脸部图像分析器被配置为当所述用户可调向的、无线设备定位的拍摄单元感测到脸部图像时，分析脸部特征。
6.根据权利要求5所述的装置，其中所述脸部图像分析器分析的脸部特征包括脸部神情特征。
7.根据权利要求5所述的装置，其中所述脸部图像分析器分析的脸部特征包括严肃的神情。
8.根据权利要求I所述的装置，其中所述信息包括文本信息，以及，所述递送类型选择器被配置为基于所述第一脸部识别指示来选择以可听的递送方式和非可听的递送方式中的哪种方式来递送该文本信息。
9.根据权利要求I所述的装置，其中所述转换器包括文本到语音转换器。
10.根据权利要求I所述的装置，还包括确认检测器，所述确认检测器被配置为检测对所述递送类型选择器选择以第一方式递送信息的确认。
11.根据权利要求10所述的装置，其中所述确认检测器包括脸部识别传感器，所述脸部识别传感器被配置为检测对所述递送类型选择器所做选择的确认。
12.根据权利要求11所述的装置，还包括指示器，所述指示器被配置为对所述递送类型选择器做出的选择生成指示，以及，所述确认检测器被配置为在所述指示器生成指示之后做出选择。
13.一种便于电子设备上的信息递送的方法，所述方法包括 选择以第一方式和第二方式中的哪种方式递送信息，所述选择基于第一脸部识别指示；以及 如果在所述选择期间做出的选择包括选择以第一方式递送信息，则将信息转换成以第一方式递送的形式。
14.根据权利要求13所述的方法，其中所述选择包括选择以可听的递送方式和可视的递送方式中的哪种方式来递送信息。
15.根据权利要求13所述的方法，其中所述信息包括文本信息，以及所述选择包括基于所述第一脸部识别指示，选择以可听的递送方式和非可听的递送方式中的哪种方式来递送该文本信息。
16.根据权利要求13所述的方法，还包括形成所述第一脸部识别指示。
17.根据权利要求13所述的方法，还包括分析所述第一脸部识别指示，以及，所述选择对所述分析期间所做分析的响应。
18.根据权利要求13所述的方法，还包括检测对所述选择期间做出的选择的确认。
19.根据权利要求18所述的方法，其中，所述检测确认包括形成第二脸部识别指示。
20.一种用于以人可察觉的形式递送在无线设备上接收的信息的方法，所述方法包括 基于脸部识别指示来判定是否以可听的形式递送信息；以及 如果所述脸部识别指示指明最好以可听的形式接收所述信息，则以可听的形式来递送信息。
全文摘要
一种装置和关联方法，选择在无线或其他电子设备处的接收信息的递送方式。获取和分析脸部识别指示。响应于对脸部识别指示的分析，来选择信息的递送方式。如果脸部识别指示指明接收者呈现严肃的神情，则以可听的形式提供信息，由此允许在不要求接收者读取或以其他方式查看信息的情况下递送信息。
文档编号H04L12/58GK102647367SQ20121002332
公开日2012年8月22日 申请日期2012年1月17日 优先权日2011年2月17日
发明者托马斯·爱德华·伯德, 朱利恩·卡米尔·保罗-卡瓦利尔, 芬巴·迈克尔·奥卡罗, 詹姆斯·艾伦·海梅尔 申请人:捷讯研究有限公司