专利名称：用于在移动通信终端中提供情绪表达的装置和方法
技术领域：
本发明涉及移动通信终端。更具体地，本发明涉及用于在移动通信终端中提供情绪表达服务的装置和方法。
背景技术：
移动通信终端不仅提供语音通信服务，并且，对应于无线通信技术的进步，还提供数据通信服务。例如，移动通信终端不仅可以提供语音呼叫服务，还可以提供因特网服务和视频呼叫服务。 视频呼叫服务不仅把呼叫方的语音，还把呼叫方的图像传送到另一个移动通信终
丄山顺。 如上所述，移动通信终端可以提供使用图像的通信服务。此外，对应于无线通信技术的进步，移动通信终端用户正在要求更有效率并且逼真的通信服务。 因此，存在如下需求在移动通信终端中提供用于除了把呼叫终端的用户图像还把呼叫终端的用户情绪传送到被呼叫终端的装置和方法。
发明内容
本发明的一个方面是解决至少上述问题和/或缺点，并至少提供下面描述的优点。因此，本发明的一个方面是提供用于在移动通信终端中提供情绪表达服务的装置和方法。 本发明的另一个方面是提供用于在移动通信终端中的视频呼叫期间提供情绪表达服务的装置和方法。 本发明的又一个方面是提供用于依赖于移动通信终端中的消息中所包括的句子或者词汇提供情绪表达服务的装置和方法。 根据本发明的一个方面，提供了一种用于在移动通信终端中提供情绪表达服务的方法。所述方法包括由与呼叫终端执行视频呼叫的移动通信终端识别从呼叫终端接收到的图像中的情绪表达信息，以及由移动通信终端产生对应于被识别的情绪表达信息的事件。 根据本发明的另一个方面，提供了一种用于在移动通信终端中提供情绪表达服务的方法。所述方法包括由与被呼叫终端执行视频呼叫的移动通信终端产生用于传送到被呼叫终端的情绪表达信息，以及由移动通信终端传送对应于情绪表达信息的事件请求信息。 根据本发明的另一个方面，提供了一种用于在移动通信终端中提供情绪表达服务的装置。所述装置包括控制单元，用于识别从使用视频呼叫服务的呼叫终端接收到的图像中的情绪表达信息，以及用于产生对应于被识别的情绪表达信息的事件。
根据本发明的又一个方面，提供了 一种用于在移动通信终端中提供情绪表达服务
的装置。所述装置包括照相机单元，用于产生供传送到使用视频呼叫服务的被呼叫终端的
情绪表达信息，以及，通信模块，用于传送对应于情绪表达信息的事件请求信息。 从下面的详细描述，本发明的其他方面、优点和突出特征对于本领域技术人员将
变得清晰，下面的详细描述结合附图公开了本发明的示范性实施例。
从下面结合附图的详细描述，本发明的某些示范性实施例的上述和其他方面、特征和优点将变得更为清晰，在附图中 图1是根据本发明的示范性实施例说明用于在移动通信终端中提供情绪表达服务的过程的流程图； 图2是根据本发明的示范性实施例说明用于在移动通信终端中向被呼叫终端提供情绪表达信息的过程的流程图； 图3是根据本发明的另一个示范性实施例说明用于在移动通信终端中提供情绪表达服务的过程的流程图；和， 图4是根据本发明的示范性实施例说明移动通信终端的框图。 应该注意，贯穿附图，相同的参考数字用来描绘相同的或相似的元素、特征和结构。
具体实施例方式
提供下面参考附图的描述以帮助理解由所附权利要求及其等同物限定的本发明的示范性实施例。其包括各种具体细节以帮助理解，但是这些要被看作仅仅是示范性的。因此，本领域技术人员将发现，在不偏离本发明的精神和范围的条件下，可以对这里描述的实施例做出各种变化和修改。而且，为了清晰和简洁，省略了对公知的功能和构造的描述。
下面的描述和权利要求中的术语和词汇不局限于书面含义，而只是被发明人用来实现对本发明的清晰和一致的理解。因此，本领域技术人员应该清楚，提供下面的对本发明示范性实施例的描述只用于说明目的而非限制本发明的目的，本发明由所附权利要求及其等同物限定。 应该理解，"一个"和"该"的单数形式包括了复数指示，除非上下文清晰地另有规定。因此，例如对"一个部件表面"的引用包括对一个或更多个这样的表面的引用。
将描述用于在移动通信终端中提供情绪表达服务的示范性装置和方法。这里，情绪表达服务表示用于表达使用视频呼叫服务的呼叫终端的用户(即呼叫方，此后呼叫终端的用户被称作"呼叫方")的情绪的服务。 在示范性实施例中，使用视频呼叫服务的移动通信终端识别呼叫终端的情绪或者显示单元上的表情，并提供用于表达呼叫方的情绪的情绪表达事件。这里，情绪表达事件可以包括移动通信终端的振动、由移动通信终端产生的声音效果，以及由移动通信终端产生的屏幕效果。
在示范性实施例中，移动通信终端执行用于识别呼叫终端的用户的摇动
(shaking)或显示单元上的表情的方法，并提供如图1中所示的情绪表达服务。 图1是根据本发明的示范性实施例说明用于在移动通信终端中提供情绪表达服
务的过程的流程图。 参考图l，移动通信终端在步骤101中与呼叫终端执行视频呼叫。 在步骤103中，移动通信终端确定用户是否设置了情绪表达服务。 如果确定未设置情绪表达服务，则移动通信终端结束根据本发明的过程。这里，移
动通信终端提供一般的视频呼叫服务。 另一方面，如果确定设置了情绪表达服务，则移动通信终端在步骤105确定是否检测到视频呼叫屏幕上的图像的摇动。例如，移动通信终端确定帧间的差别、即形成视频呼叫屏幕的帧的像素值间的差别是否大于基准值。这里，移动通信终端可以确定在一个时间间隔内帧间的平均差别，并且确定视频呼叫屏幕上的图像是否摇动。即，在步骤105中，移动通信终端确定在视频呼叫屏幕的图像中是否检测到情绪表达信息。例如，移动通信终端可以识别从呼叫终端接收的图像中的呼叫方的面部表情，并确定情绪表达信息是否对应于例如微笑表情、愤怒表情等的情绪。 当帧间的平均差别小于基准值时，移动通信终端确定视频呼叫屏幕上的图像不是在摇动，并且前进到步骤109。 否则，如果在步骤105确定帧间的平均差别大于或等于基准值，则移动通信终端确定视频呼叫屏幕上的图像正在摇动。因此，在步骤107，移动通信终端产生对应于摇动图像的事件。例如，移动通信终端产生振动。在示范性实施方案中，移动通信终端确定对应于摇动的量、持续时间或强度的振动强度，并产生对应的振动。摇动的量、持续时间或强度由帧间的差别确定。 在步骤109中，移动通信终端确定在视频呼叫屏幕的图像中是否检测到情绪表达信息。例如，移动通信终端可以识别视频呼叫屏幕中呼叫方的面部表情，并确定情绪表达信息是否对应于所识别的表情，例如微笑表情、愤怒表情等。 如果确定未检测到情绪表达信息，则移动通信终端在步骤113确定视频呼叫是否终止。 否则，如果在步骤109确定检测到情绪表达信息，则在步骤lll，移动通信终端产生对应于在步骤109中检测到的情绪表达信息的情绪表达事件。例如，如果检测到呼叫方的微笑表情，则移动通信终端可以产生笑声。又例如，如果检测到呼叫方的微笑表情，则移动通信终端可以显示例如微笑表情的屏幕效果或者产生振动。
然后，移动通信终端在步骤113确定视频呼叫是否终止。 如果确定视频呼叫不被终止，则移动通信终端返回步骤105，并执行所描述的过程。 否则，如果确定视频呼叫被终止，则移动通信终端结束根据本发明的过程。 如在上面的示范性实施例中描述的那样，当在显示单元上的图像中检测到摇动或
者情绪表达信息时，移动通信终端产生情绪表达事件。 在另一个示范性实施例中，移动通信终端产生对应于从呼叫终端接收到的情绪表达信息的情绪表达事件。
图2是根据本发明的示范性实施例说明用于在移动通信终端中向被呼叫终端提供情绪表达信息的过程的流程图。 参考图2，在步骤201，移动通信终端与被呼叫终端执行视频呼叫。 在步骤203，移动通信终端确定用户是否设置了情绪表达服务。 如果确定未设置情绪表达服务，则移动通信终端结束根据本发明的过程。这里，移
动通信终端提供一般的视频呼叫服务。 另一方面，如果在步骤203确定设置了情绪表达服务，则移动通信终端在步骤205
确定是否检测到移动通信终端的摇动。例如，移动通信终端可以使用Geo磁传感器检测移
动通信终端的摇动。又例如，移动通信终端确定用户是否输入振动产生按钮。 如果在步骤205确定未检测到移动通信终端的摇动，则移动通信终端在步骤209
确定视频呼叫是否终止。 否则，如果在步骤205确定检测到移动通信终端的摇动，则在步骤207，移动通信终端把事件请求信号传送到使用视频呼叫服务的被呼叫终端。例如，移动通信终端把事件请求信息添加到视频呼叫信号，并把视频呼叫信号传送到被呼叫终端。又例如，移动通信终端可以使用额外的控制信号传送事件请求信息。这里，移动通信终端使用根据H. 324协议的控制信号把事件请求信息传送到被呼叫终端。而且，移动通信终端可以通过使用分组交换网络的因特网协议(IP)的控制信号传送事件请求信息。
此后，移动通信终端在步骤209确定视频呼叫是否终止。 如果确定视频呼叫不被终止，则移动通信终端返回步骤205，并执行所描述的过程。 否则，如果确定视频呼叫被终止，则移动通信终端结束根据本发明的过程。 如在上面的示范性实施例中所描述的那样，当检测到移动通信终端的摇动时，移
动通信终端传送事件请求信息。 在另一个示范性实施例中，当在用于传输到被呼叫终端的图像中检测到情绪表达信息时，移动通信终端把对应于情绪表达信息的事件请求信号传送到被呼叫终端。例如，移动通信终端可以包括照相机模块，用于捕获要被传送到被呼叫终端的用户图像。如果在照相机模块捕获并要被传送到被呼叫终端的图像中检测到情绪表达信息，移动通信终端可以传送对应于所检测到的情绪表达信息的事件请求信号。 如上所述，如果移动通信终端把事件请求信号传送到被呼叫终端，则被呼叫终端产生对应于事件请求信号的情绪表达事件，如图3所示。 图3是根据本发明的示范性实施例说明用于在移动通信终端中提供情绪表达服务的过程的流程图。 参考图3，移动通信终端在步骤301中与呼叫终端执行视频呼叫。 在步骤303中，移动通信终端确定用户是否设置了情绪表达服务。 如果确定未设置情绪表达服务，则移动通信终端结束根据本发明的过程。这里，移
动通信终端提供一般的视频呼叫服务。 否则，如果在步骤303确定设置了情绪表达服务，则移动通信终端在步骤305确定是否从使用视频呼叫服务的呼叫终端接收到事件请求信号。 如果在步骤305确定未接收到事件请求信号，则移动通信终端在步骤309确定在视频呼叫屏幕的图像中是否检测到情绪表达信息。例如，移动通信终端可以识别视频呼叫 屏幕中的呼叫方的面部表情，并确定情绪表达信息是否对应于例如微笑表情、愤怒表情等 的情绪。 否则，如果在步骤305确定接收到事件请求信号，则在步骤307中移动通信终端产 生对应于事件请求信号的摇动事件。例如，移动通信终端产生振动。在示范性实施方式中， 移动通信终端确定对应于事件请求信号的量、持续时间或强度的振动强度，并产生对应的 振动。 然后，在步骤309中，移动通信终端确定在视频呼叫屏幕的图像中是否检测到情 绪表达信息。例如，移动通信终端可以识别视频呼叫屏幕中呼叫方的面部表情，并确定情绪 表达信息是否对应于例如微笑表情、愤怒表情等的情绪。 如果在步骤309中确定未检测到情绪表达信息，则移动通信终端在步骤313确定 视频呼叫是否终止。 否则，如果在步骤309确定检测到情绪表达信息，则在步骤311，移动通信终端产 生对应于在步骤309中检测到的情绪表达信息的情绪表达事件。例如，如果检测到呼叫方 的微笑表情，则移动通信终端可以产生笑声。又例如，如果检测到呼叫方的微笑表情，则移 动通信终端可以显示例如微笑表情的屏幕效果或者产生振动。
然后，移动通信终端在步骤313确定视频呼叫是否终止。 如果确定视频呼叫不被终止，则移动通信终端返回步骤305，并执行所描述的过程。 否则，如果确定视频呼叫被终止，则移动通信终端结束根据本发明的过程。 换句话说，用于在移动通信终端中提供情绪表达服务的示范性方法包含由移动
通信终端识别从使用视频呼叫服务的呼叫终端接收到的图像中的情绪表达信息，并由移动
通信终端产生对应于被识别的情绪表达信息的事件。 此外，情绪表达信息可以包含所接收图像的摇动和呼叫方的可视表情中的至少一 个。 此外，可以通过检测一个时间间隔内所接收的图像中的帧的像素值间的差别来识 别所接收的图像的摇动。 此外，可以根据来自呼叫终端的事件请求信息执行对情绪表达信息的识别。
此外，所述事件可以包括以下中至少一个移动通信终端的振动、由移动通信终端 产生的声音效果，以及由移动通信终端产生的屏幕效果。 换句话说， 一种用于在移动通信终端中提供情绪表达服务的示范性方法包含由 移动通信终端产生用于传送到使用视频呼叫服务的被呼叫终端的情绪表达信息，以及，由 移动通信终端传送对应于被识别的情绪表达信息的事件请求信息。 此外，情绪表达信息可以包含用于传送到被呼叫终端的图像的摇动和被呼叫方的 表情中的至少一个。 此外，事件请求信息的传送可以包含由移动通信终端识别关于情绪表达信息的事 件请求信息，以及，由移动通信终端传送包括事件请求信息的视频呼叫信号。
此外，事件请求信息的传送可以包含由移动通信终端识别关于情绪表达信息的事 件请求信息，以及，由移动通信终端传送包括事件请求信息的事件请求信号。
此外，所述事件可以包括以下中至少一个移动通信终端的振动、由移动通信终端 产生的声音效果，以及由移动通信终端产生的屏幕效果。 如在上面的示范性实施例中描述的那样，移动通信终端可以产生对应于从被呼叫 终端接收到的事件请求信号的事件，并产生对应于检测到的视频呼叫屏幕中的情绪表达信 息的情绪表达事件。 在另一个示范性实施例中，移动通信终端产生对应于从被呼叫终端接收到的事件 请求信号的情绪表达事件。 下面描述用于提供情绪表达服务的移动通信终端的示范性框图。 参考图4，移动通信终端可以包括控制单元400、照相机单元402、显示单元404、输
入单元406、存储器408、通信模块410、语音处理器412、麦克风414、扬声器416和振动器
418。 控制单元400执行用于移动通信终端的一般操作的处理和控制。例如，控制单元 400执行用于语音电话和数据通信的处理和控制。根据本发明的示范性实施例，控制单元 400对在视频呼叫期间提供情绪表达服务进行控制。例如，当如图l所示检测到来自呼叫终 端的图像的摇动时，或者当情绪表达信息被包括在显示单元404上检测到的呼叫终端的图 像中时，控制单元400控制情绪表达事件的产生。又例如，控制单元400控制对应于从呼叫 终端接收到的事件请求信号的情绪表达事件的产生，如图3所示。在这种状态中，当检测到 在用于传输到被呼叫终端的图像中的情绪表达信息和如图2中所示用于传输到被呼叫终 端的图像的摇动其中之一时，控制单元400控制事件请求信号到被呼叫终端的传送。
照相机单元402拍摄图像，并把所拍摄的图像转换为对应的数字数据。照相机单 元402处理数字数据并获取静态图像，然后把该静态图像输出到控制单元400或显示单元 404。 显示单元404显示在移动通信终端的操作期间产生的状态信息、由用户输入的字 符、运动图像和静态图像。而且，显示单元404显示从照相机单元402输入的运动图像和静 态图像。 输入单元406把对应于用户所按的键的功能输出到控制单元400。例如，输入单元 406可以包括小键盘、触摸板和光学鼠标。 存储器408存储用于控制移动通信终端的一般操作的程序、在移动通信终端的操 作期间产生的临时数据、系统参数，以及其他存储数据，即电话号码、短消息，等等。
通信模块410处理通过天线输入/输出的射频(RF)信号。 语音处理器412控制用于使用麦克风414和扬声器416的语音呼叫的语音的输入
/输出。 振动器418工作以便在移动通信终端中引起物理振动。即，振动器418在控制单 元400的控制下运行，以便在检测到对应的情绪表达事件或者接收到对应的事件请求信号 时导致移动通信终端物理地摇动或者振动。 移动通信终端使用振动、声音效果或者屏幕效果产生情绪表达事件。如果使用声 音效果产生情绪表达事件，则扬声器416根据控制单元400的控制产生情绪表达声音效果。 同样，如果使用屏幕效果产生情绪表达事件，则显示单元404根据控制单元400的控制显示 情绪表达屏幕效果。同样，如果使用振动产生情绪表达事件，则振荡器418根据控制单元400的控制产生用于情绪表达的振动。 如上所述，本发明的示范性实施例产生对应于在消息或者视频呼叫中所包括的情 绪表达信息的事件，并在移动通信终端中产生或显示对应于该情绪的事件。因此，本发明的 示范性实施例有益地改善了用户对呼叫的兴趣。 虽然已经参考本发明的某些示范性实施例示出并描述了本发明，但是，本领域技 术人员将会理解，在不偏离由所附权利要求及其等同所限定的本发明的精神和范围的条件 下，可以对其做出形式和细节上的各种变化。
权利要求
一种用于在移动通信终端中提供情绪表达服务的方法，所述方法包含由与呼叫终端执行视频呼叫的移动通信终端识别从该呼叫终端接收到的图像中的情绪表达信息；以及产生对应于被识别的情绪表达信息的事件。
2. 如权利要求1所述的方法，其中，根据来自该呼叫终端的事件请求信息执行对所述 情绪表达信息的识别。
3. —种用于在移动通信终端中提供情绪表达服务的装置，所述装置包含 控制单元，用于识别从使用视频呼叫服务的呼叫终端接收到的图像中的情绪表达信息，并用于产生对应于被识别的情绪表达信息的事件。
4. 如权利要求3所述的装置，其中，所述控制单元根据来自该呼叫终端的事件请求信息确定情绪表达信息。
5. 如权利要求1所述的方法或者如权利要求3所述的装置，其中，所述情绪表达信息包含所接收的图像的摇动和呼叫方的可视表情其中至少一个。
6. 如权利要求5所述的方法或装置，其中，通过检测一个时间间隔内所接收的图像中的帧的像素值间的差别来识别所接收的图像的摇动。
7. —种用于在移动通信终端中提供情绪表达服务的方法，所述方法包含 由与被呼叫终端执行视频呼叫的移动通信终端产生用于传送到该被呼叫终端的情绪表达信息；以及传送对应于该情绪表达信息的事件请求信息。
8. 如权利要求7所述的方法，其中，所述事件请求信息的传送包含 由该移动通信终端识别关于情绪表达信息的事件请求信息；禾口 由该移动通信终端传送包括该事件请求信息的视频呼叫信号。
9. 如权利要求7所述的方法，其中，所述事件请求信息的传送包含 由该移动通信终端识别关于情绪表达信息的事件请求信息；禾口 由该移动通信终端传送包括该事件请求信息的事件请求信号。
10. —种用于在移动通信终端中提供情绪表达服务的装置，所述装置包含 照相机单元，用于产生供传送到使用视频呼叫服务的被呼叫终端的情绪表达信息；以及通信模块，用于传送对应于该情绪表达信息的事件请求信息。
11. 如权利要求10所述的装置，还包含 控制单元，用于识别关于情绪表达信息的所述事件信息，其中，所述通信模块传送包括所述事件请求信息的视频呼叫信号。
12. 如权利要求10所述的装置，还包含 控制单元，用于识别关于情绪表达信息的所述事件信息，其中，所述通信模块传送包括所述事件请求信息的事件请求信号。
13. 如权利要求IO所述的装置，其中，所述通信模块把关于被识别的情绪表达信息的事件请求信息包括到额外的事件请求信号，并传送该额外的事件请求。
14. 如权利要求7所述的方法或者如权利要求10所述的装置，其中，所述情绪表达信息 包含用于传送到被呼叫终端的图像的摇动和被呼叫方的表情其中至少一个。
15.如权利要求1所述的方法，如权利要求4所述的装置，如权利要求7所述的方法，或 者如权利要求IO所述的装置，其中，所述事件包括以下中的至少一个移动通信终端的振 动、由移动通信终端产生的声音效果，以及由移动通信终端产生的屏幕效果。
全文摘要
提供了一种用于在移动通信终端中提供情绪表达服务的方法和装置。所述方法包括由与呼叫终端执行视频呼叫的移动通信终端识别从呼叫终端接收到的图像中的情绪表达信息，以及由移动通信终端产生对应于被识别的情绪表达信息的事件。
文档编号H04M3/42GK101720010SQ20091018022
公开日2010年6月2日 申请日期2009年10月9日 优先权日2008年10月8日
发明者徐希元, 殷政辉 申请人:三星电子株式会社