用于提供语音分析服务的方法和系统及其装置的制作方法

专利名称：用于提供语音分析服务的方法和系统及其装置的制作方法
技术领域：
本发明涉及一种移动通信服务，尤其涉及用于基于分层语音分析分析处于 通话状态的用户的语音并且提供分析结果的方法和系统。
背景技术：
通常，在听人的语音时，人类能够在某种程度上判断这个人的情绪状态。 例如，在人兴奋或生气时，他/她的语音的平均节距变得高于平常，并且尽管他/ 她说一个由与平常相同的词构成的句子，句子中的平均节距变得更快。并且， 因为语音变得更大声，能量在与平常相同的环境中变得相对更高并且平均能量 变得相对更快。
基于这个事实，关于用于识别人类语音以理解情绪状态的爱的检测技术的 研究在活跃地进行中。爱的检测技术包括情绪状态识别技术，根据情绪状态识 别的信号处理技术，或者应用技术。涉及爱的检测技术的现有技术已经取得专 利权或者尚在申请中，例如"情绪识别方法以及灵敏性生成方法、装置和软件"
(韩国专利申请No.l0-2003-7003615)，"用于根据手机(mobile)上的感觉提供 声源以及具体化的方法"(韩国专利申请No.l0-2003-0081299)，"利用小波变换 在语音中的情绪识别"(韩国专利申请No.l0-2002-0026056),"用于表现用户情 绪的玩偶"(韩国登记(Registration) No.20-0313090-0000 )或"能够表达人的 情绪的配件"(韩国登记No.20-0301592-0000 )。
最近，有-、件标题为"具有谎言搜索功能的携带式电话机及其搜索方法" 的发明(韩国登记No.lO-0381970-0000)，其通过谈话者的语音识别检测谎言。 该发明诱导谈话者在舒适的气氛中说话并且判断谈话者的话的真实性。
然而，上述现有技术的情绪分析是通过主观判断或用户设置做出的，并且 因此其分析结果不是客观的。并且，没有提出对于爱的检测结杲的建议或克服 当前状态的方案。
同时，随着移动通信技术的发展，提供了超出简单的语音通信功能的各种 附加的服务。换句话说，除了语音通信或短消息服务，移动通信服务供应者开发了各种附加的服务例如，个人化的回铃音服务、通话背景声服务、蜂鸣
(singing)服务或音乐邮件，并且为移动通信订户提供所述附加的服务。进一 步地，随着移动通信技术的发展，已经建立了第三代移动通信网络(例如， W-CDMA (宽带码分多址移动通信系统)网络或HSDPA (高速下行分组接入) 网络)以便以高速传送大容量的数据，这超出了传统的语音通信服务并且允许 在主叫用户和被叫用户用电话说话的同时直接相互看到他们的脸的视频通信。 然而，当前采用爱的检测技术的移动通信附加服务还没有提供。

发明内容
本发明设计成解决现有技术的问题，并且因此本发明的目的是提供用于提 供语音分析服务的方法和系统，其基于分层语音分析分析处于通话状态中的用 户的语音并且以各种方式提供情绪分析结果，及其装置。
为了达到上述目的，根据本发明的第 一方面用于在通信网络中提供语音分 析服务的方法，包括根据主叫终端的通话连接在主叫终端和被叫终端之间建立 通信信道；对通过建立的通信信道从被叫终端传送到主叫终端的被叫用户的语 音实时执行分层语音分析以提取被叫用户的情绪状态信息；并且将提取的被叫 用户的情绪状态信息实时传送到主叫终端。
以及，根据本发明的第二方面，用于在视频通信网络中视频通信过程中提 供语音分析服务的方法，包括根据主叫终端的视频通信通话连接在所述主叫终 端和被叫终端之间建立视频通信信道；对通过所述建立的视频通信信道从所述 被叫终端传送到所述主叫终端的被叫用户的语音实时执行分层语音分析以提取 所述被叫用户的情绪状态信息；将所述提取的所述被叫用户的情绪状态信息转 换成可视数据；并且通过所述视频通信信道将所述转换的可视数据以及要传送 给所述主叫终端的所述^^叫用户的^L频传送并且显示给所迷主叫终端。
以及，根据本发明的第三方面用于在通信网络中提供语音分析服务的方法， 包括接收来自主叫终端的用于所述语音分析服务的通话连接；将所述语音分析
服务的模式信息通知所述主叫终端并且接收响应所述通知的选择；在主叫用户 选择练习模式的情况，将虛拟对方和练习方法通知所述主叫终端并且来自主叫 终端的接收响应所述通知的选择；根据由所述主叫用户选定的所述虚拟对方和 练习方法接收来自所述主叫终端的所述主叫用户的语音；并且对所述主叫用户的所述接收的语音执行分层语音分析以提取语音分析结果，并且将所述提取的 语音分析结果实时传送到所述主叫终端。
以及，根据本发明的第四方面用于在通信网络中提供语音分析服务的系统， 包括交换中心，用于从主叫终端接收包括用于所述语音分析服务的特征代码和
被叫用户的电话号码的通话发源，并且基于所述特征代码发送所述通话发源； 以及分层语音分析服务器，用于接收所述发送的通话，对应于所述被叫用户的 电话号码在所述主叫终端和被叫终端之间建立通信信道，分析通过所述建立的 通信信道传送到所述主叫终端的所述被叫用户的语音以实时提取被叫用户的情 绪状态信息，并且将所述提取的情绪状态信息实时传送到所述主叫终端。
以及，根据本发明的第五方面用于在移动通信网络中视频通信过程中提供 语音分析服务的移动通信装置，包括服务控制单元，用于根据来自主叫终端的 视频通信通话连接信号控制服务操作模式；视频通信单元，用于在所述服务控 制单元的控制下在所述主叫终端和被叫终端之间建立通信信道以支持视频通 信；以及语音分析引擎，用于分析在所述服务控制单元的控制下通过所述建立 的通信信道传送到所述主叫终端的被叫用户的语音以将所述被叫用户的情绪状 态转换成可视数据。


本发明优选实施例的这些以及其它的特征、方面和优点将在下列详细说明 中，参照附图更充分地介绍。在附图中
图1是根据本发明实施例显示移动通信网络的语音分析服务系统配置的视图。
图2是根据本发明实施例显示图1的分层的语音分析服务器的框图。
图3是根据本发明实施例显示语音分析服务方法的流程图。
图4是根据另一本发明实施例显示语音分析服务方法的流程图。
图5仍是根据另一本发明实施例显示语音分析服务方法的流程图。
图6是根据本发明实施例显示用于在视频通信过程中提供情绪状态分析服
务的移动通信服务器的框图。
图7是根据本发明另一实施例显示用于在视频通信过程中提供情绪状态分
析服务的移动通信服务器的框图。图8是根据本发明实施例显示用于在视频通信过程中提供语音分析服务的 系统的流程图。
图9是根据本发明实施例显示作为语音分析结果提供的MMS消息的i见图。 图IO是根据本发明实施例显示作为爱的检测结果提供的SMS消息的视图。
图11
视图
图12是根据本发明实施例显示通过网络服务提供爱的检测结果的屏幕的视
图
图13是根据本发明另一实施例显示通过网络服务提供爱的检测结果的屏幕 的视图。
图14是显示用于使主叫用户和被叫用户之间的全部对话与#:叫用户的语音
分析结果同步的方法的实施例的视图。
具体实施例方式
在下文中，将参考附图详细地介绍本发明的优选实施例。在说明之前，应 当理解用在说明书和附加的权利要求书中的术语不应解释成限于通常的以及字 典意义，而是以允许发明人对于最佳解释适当地限定术语的原理为基础基于对 应于本发明的技术特征的含意和概念来解释。因此，在这里提议的说明不过是 仅为了举例说明起见的优选示例，而非意在限制本发明的范围，所以应当理解 其它等价物和修改可在其上做出而不背离本发明的精神和范围。
图1是根据本发明实施例显示移动通信网络的语音分析服务系统配置的视图。
参照图1,根据本发明的语音分析服务系统包括移动交换中心(MSC) 120、 标识位置寄存器(HLR )130、分层语音分析服务器140、短消息服务中心(SMSC) 150以及多媒体消息服务中心(MMSC) 160。根据本发明的语音分析服务系统 配置不限制在这点上，而该语音分析服务系统可包括所有变型以及上述部件的 结合。
特别地，尽管图1的这个实施例说到移动通信网络，分层语音分析服务器 140可连接到能够语音通信以提供语音分析服务的互联网网络，或者可连接到基 于公共交换电话网络(PSTN)、综合服务数字网络(ISDN)以及局域网(LAN)
9的通信网络以提供语音分析服务。
分层语音分析服务器140通过(over) E1/T1与MSC120协作以运行用于本发明的语音分析服务的通话处理功能。并且，分层语音分析服务器140利用内部语音分析引擎运行实时在线语音分析或运行事先录音的声音文件的离线语音分析。
根据本发明用于语音分析的分层语音分析使用语音作为大脑的々某介以产生大脑活动的蓝图并且分析谈话者完整的情绪系统，但不集中在对话上，而是集中在从进行对话出现的大脑活动上。换句话说，通常人类大脑对于所有经过大脑的"事件"留下"指紋"。根据本发明的分层语音分析服务器140不予处理分析对象(主叫用户或^皮叫用户)的言语，而仅集中在分析对象的大脑活动上。换句话说，根据本发明的语音分析不集中在分析对象说的'内容，，而集中在分析对象说的'方式，。
根据本发明的分层语音分析服务可实时分析主叫用户110或^皮叫用户170的语音并且提供实时语音分析结果。并且，在通话结束之后，分层语音分析服务可以短消息或多媒体消息的类型或者利用有线或无线互联网提供语音分析结果。在这时，主叫用户110和被叫用户170使用能够语音通信的终端，例如手机、笔记本电脑、PDA或者典型的电话。
分层语音分析服务器140存储处于通话状态的主叫用户110和被叫用户170之间的对话。并且，分层语音分析服务器140仅将主叫用户110或被叫用户170的语音从主叫用户110和被叫用户170之间的对话中分离出来，存储经过分离的语音，并且从存储语音的声音文件析取预定的语音参数。在这时，该声音文件是由6/8/11KHz， 8/16bit单声ii/立体声非压缩的脉沖编码调制(PCM)格式声音资源文件形成的。分层语音分析服务器140基于析取的语音参数最多利用八个语音解析式提取语音分析结果。
这八个语音解析式可包括谎言着重(stress)解析式、兴奋等级(level)解析式、关心等级解析式、情绪等级解析式、沖突或抵触等级解析式、欺诈和欺骗模式结合解析式，或者用于可信赖性评价的附加的公式。
语音分析结果包括表现语音分析对象的兴奋程度的兴奋等级，以及表现语音分析对象关于他/她的言语的信服程度的信服等级。并且，语音分析结果包括表现知道他/她不能逃脱当前状况的语音分析对象的着重程度的着重等级，以及
10表现语音分析对象设法寻找响应的程度的思考等级。并且，语音分析结果包括
表现是否语音分析对象逃避对话的s.o.s (说或者停止)等级，以及表现是否语
音分析对象全神贯注于该对话的专心等级。并且，语音分析结果包括表现语音
分析对象对于对方(opponent)的期待程度的期待等级、表现是否语音分析对象是馗尬的尴尬等级，或者表现语音分析对象爱的程度的爱的等级。
一部分或全部语音分析结果是选定的并且一艮据服务类型提供。或者，语音分析结果可合成以提取和提供另一服务等级。例如，可提供谎言检测等级。
根据本发明实施例，语音分析服务可以实际模式和练习模式提供。实际模式是使得语音分析结果在实际通话过程中传送到主叫用户110或被叫用户170。练习模式是当主叫用户110用电话与虚拟对方说话时使得其接收他/她的语音分析结果。练习模式使主叫用户110能够与虚拟对方做虚拟通话，使得主叫用户110可减少在与被叫用户170实际通话过程中可能出现的错误或误解并且判断是否他/她在适当地表达他/她的情绪。
例如，在主叫用户110接通用于实际模式的通话时，分层语音分析服务器140在主叫用户110和被叫用户170之间建立通信信道，并且分析通过已经建立的通信信道传送到主叫用户110的被叫用户170的语音以析取爱的等级。在这时，分层语音分析服务器140分别记录并存储主叫用户110和被叫用户170之间的对话。同时，分层语音分析服务器140实时通知主叫用户110通过分析被叫用户170的语音提取的爱的等级，或者将对应于爱的等级的内容提供给主叫用户110或被叫用户170。分层语音分析服务器140可在爱的等级超过预定的临界值时提供爱的等级，或者分层语音分析服务器140可以预定的时间间隔平均爱的等级并且通知主叫用户110平均的爱的等级。分层语音分析服务器140可存储主叫用户110和^皮叫用户170之间的对话或通话历史，并且在通话结束之后，将通过详细地分析记录的对话获得的语音分析结果以及对应于语音分析结果的内容作为短消息或多媒体消息或者通过有线或无线互联网提供给主叫用户110。
对于另一个示例，在主叫用户110接通用于练习模式的通话时，分层语音分析服务器140接收由主叫用户110选定的虚拟对方和练习方法以及来自主叫用户110的言语。虚拟对方可包括母亲或父亲、兄弟或姐妹、女朋友或男朋友、单相思的对象(interest)或者朋友，而练习方法可包括劝说、安慰或坦白。分层语音分析服务器140分析主叫用户110的语音，提取爱的等级并且将提取的爱的等级或对应于爱的等级的内容提供给主叫用户110。以相同的方式作为实际模式，分层语音分析服务器140可在爱的等级超过预定的临界值时提供爱的等级，或者分层语音分析^^务器140可以预定的时间间隔平均爱的等级并且将平均的爱的等级提供给主叫用户110。并且，分层语音分析服务器140可存储主叫用户IIO的言语和通话历史，并且在练习模式结束之后，将通过详细地分析他/
体消息或通过有线或无线互联网提供给主叫用户110。
务器140。换句话说，在用户将预定的特征代码(例如"**45")和被叫用户的电话号码输入终端时，MSC120基于包括在从用户的终端传送的通话连接请求消息中的特征代码识别出相应的通话是语音分析^^务通话。MSC120请求分层语音分析服务器140到HLR130的路由选择信息。MSC120基于来自HLR130的响应将用户的通话发送(routing)到分层语音分析服务器140。或者，在用户输入被叫用户的电话号码和无线互联网密钥(key)(例如，KTF的MagicN密钥)时，
音分析服务器140。
图2是才艮据本发明实施例显示图1的分层语音分析服务器140的框图。如图2中所示，根据本发明分层语音分析服务器140包括通话设置单元210、记录单元230、语音分析引擎250和存储装置270。并且，语音分析引擎250包括分析对象分离单元251、语音析取单元253以及语音分析单元255，而存储装置270包括分析结果存储单元271和内容存储单元273。语音分析引擎250作为分层语音分析服务器140的主要部件可由软件开发包(kit)形成。然而，语音分析引擎250不限制在这点上。
首先，分层语音分析服务器140的通话设置单元210与移动通信网络的MSC120、 SMSC150和MMSC160协作以运行用于本发明语音分析服务的通话处理。例如，在主叫用户110以实际模式使用语音分析服务的情况，通话设置单元210在主叫用户110和被叫用户170之间建立通信信道以传送和4妾收主叫用户IIO和被叫用户170的语音。以及，在主叫用户IIO以练习模式使用语音分析服务的情况，通话设置单元210与主叫用户110建立通信信道以接收主叫用户110的语音。并且，通话设置单元210将语音分析对象的语音分析结果以及对应于语音分析结果的内容作为短消息或多媒体消息传送，从而在通话结束之后提供语音分析服务。
记录单元230记录由通话设置单元210接收的语音。由记录单元230记录的声音文件由6/8/1 lKHz, 8/16bit单声道/立体声非压缩的脉沖编码调制(PCM)格式声音资源文件形成。由记录单元230记录的声音文件存储在存储装置270中。
同时，语音分析引擎250的分析对象分离单元251从通过记录单元230输入的声音文件分离语音分析对象的语音。例如，在主叫用户110以实际才莫式4吏用语音分析服务的情况，分析对象分离单元251仅从通过记录单元230输入的声音文件分离被叫用户170的语音。或者，根据服务类型，在被叫用户170以实际模式使用语音分析服务的情况，分析对象分离单元251仅从通过记录单元230输入的声音文件分离主叫用户IIO的语音。
语音析取单元253从由分析对象分离单元251分离的语音分析对象的声音文件析取预定的语音参数。
语音分析单元255基于由语音析取单元253析取的语音参数最多利用八个语音解析式提取语音分析结果。语音分析结果包括兴奋等级、信服等级、着重等级、思考等级、S,O.S (说或停止)等级、专心等级、尴尬等级或爱的等级。语音分析单元255根据服务类型选择性地提供上述等级的一部分或者全部。并且，语音分析单元255可将上述等级合成以计算另一类型的等级，例如谎言检测等级。优选地，语音分析单元255用数字或以图形或文本提供上述等级。
同时，存储装置270的分析结果存储单元271存储由记录单元230记录的主叫用户110和^皮叫用户170之间的对话。并且，分析结果存储单元271存储由语音分析单元255提取的语音分析对象的语音分析结果。在这时，分析结果存储单元271将使用语音分析服务的用户的信息和语音分析服务的日期与语音分析结果和语音分析对象的全部对话一起映射(map)并存储。并且，存储装置
或情绪。因此，存储在分析结果存储单元271中的全部对话和语音分析结果以及存储在内容存储单元273中的预定的内容通过短消息服务、多媒体消息服务或者有线或无线互联网服务提供给用户。
13图3是根据本发明实施例显示语音分析服务方法，并且显示用于分析在在主叫用户和被叫用户之间通话过程中被叫用户的语音并且将语音分析结果提供给主叫用户的方法的流程图。
如图3中所示，为了被叫用户170的语音分析，首先，主叫用户110利用终端接通分层语音分析服务器140( S301 )。预定的特征密钥用于将主叫用户110接通分层语音分析服务器140。
例如，在主叫用户110将'*007+被叫用户的电话号码，输入主叫终端时，主叫终端的通话经由MSC120发送到分层语音分析服务器140。或者，主叫用户110可将'被叫用户的电话号码+互联网接通密钥，输入主叫终端以接通分层语音分析服务器140。然而，主叫用户IIO接通分层语音分析服务器140的方法不限制在这点上，而是可根据服务类型以不同的方式修改。
在这时，在语音分析服务需要服务预约的情况，分层语音分析服务器140可在主叫用户110接通通话时运行用户身份验证。优选地，用户身份验证是基于主叫用户IIO的信息自动做出的，然而本发明不限制在这点上。
以及，在主叫用户IIO接通通话时，分层语音分析服务器140可通知主叫用户110语音分析服务。优选地，语音分析服务是以语音通知的类型通知的，并且该通知可包括语音分析服务的简短说明以及服务收费信息的说明。
因此，在主叫用户IIO为了被叫用户170的语音分析接通分层语音分析服务器140时，分层语音分析服务器140基于被叫用户170的电话号码接通通话以在主叫用户IIO和被叫用户170之间建立通信信道(S303)。
在通信信道建立在主叫用户IIO和被叫用户170之间之后，分层语音分析服务器140从主叫用户IIO和被叫用户170之间的对话分离被叫用户170的声音文件(S305)。在这时，分层语音分析服务器140记录并且存储主叫用户110和被叫用户170之间的对话，以及然后仅从该对话分离被叫用户170的声音文件。
其次，分层语音分析服务器140从分离的被叫用户170的声音文件析取预定的语音参数(S307 )。该声音文件由6/8/1 lKHz， 8/16bit单声道/立体声非压缩的脉冲编码调制(PCM)格式声音资源文件形成。
以及，分层语音分析服务器140基于析取的语音参数运行语音分析以提取语音分析结果(S309)。语音分析结杲包括兴奋等级、信服等级、着重等级、思考等级，s.o.s (说或停止)等级、专心等级、期待等级、尴尬等级或爱的等级。
并且，语音分析结果可包括通过合成上述等级计算的谎言检测等级(换句话说，可信赖性等级)。在这个示例中，语音分析结果包括爱的等级、专心等级、期待等级和馗抢等级。
由分层语音分析服务器140分析的专心等级在0到100的范围内提取。0到44的范围意味着专心等级低或困惑，45到65的范围意味着普通状态，而66到100的范围意味着专心等级高。专心等级可由百分率表示或根据预定的标准分类为非常低、低、中、高和非常高，并且可以文本或图表提供。
以及，期待等级在0到IOO的范围内提取。0到30的范围意味着普通状态，而31到100的范围意味着对对方的高期待并且可能提出欺骗的尝试。期待等级可由百分率表示或者根据预定的标准分类为低、中和高，并且可以文本或图表提供。
尴尬等级提取为在0到100范围内分类的五级。尴尬等级0意味着没有馗尬，尴抢等级25意味着轻微的尴尬，尴尬等级50意味着普通状态，尴尬等级75意味着相当馗尬，而尴尬等级100意味着非常尴尬。尴尬等级可由百分率表示或者根据预定的标准分类为非常低、低、中、高和非常高，并且可以文本或图表提供。
最后，爱的等级在-10到50的范围内提取。根据爱的4全测结果，-IO到O和1到10的爱的等级意味着未从被叫用户170检测到爱。11到50的爱的等级意味着从被叫用户170检测到爱。爱的等级可由百分率提供。在爱的等级是-10到O的情况，爱的等级的百分率是通过用相应的爱的等级乘以O计算的，而在爱的等级是1到50的情况，爱的等级的百分率是通过用相应的爱的等级乘以2计算的。
通过分析被叫用户170的语音提取的语音分析结果是实时提供给处于通话状态的主叫用户110的(S311)。优选地，实时传送到通话中的主叫用户110的语音分析结果是在上述等级之中由百分率计算的爱的等级。在这时，语音分析结果可以预定的周期(例如，以十秒的时间间隔)提供给通话中的主叫用户110，或在爱的等级超过预定的临界值时提供。或者，实时传送到通话中的主叫用户110的语音分析结果可为对应于爱的等级的内容。在提供的内容例如是音乐文件的情况，相应的音乐可在主叫用户IIO和被叫用户170之间通话过程中作为背景音乐提供。
以及，在通话结束之后，分层语音分析服务器140将通过分析被叫用户170 语音提取的并且作为短消息或多媒体消息或通过有线或无线互联网存储的语音 分析结果提供给主叫用户110 (S313)。优选地，在通话结束之后作为短消息或 多媒体消息或通过有线或无线互联网提供的语音分析结果，包括爱的等级、专 心等级、期待等级以及尴尬等级全体。作为短消息或多媒体消息或通过有线或 无线互联网提供的语音分析结果，以不同的方式显示，例如，以文本或者图表。 特别地，在语音分析结果是通过有线或无线互联网提供的情况，分层语音分析 服务器140仅可提供被叫用户170的语音分析结果(也就是图表)或将语音分 析结果与全部对话一起提供。换句话说，在分层语音分析服务器140仅提供#皮
叫用户170的语音分析结果的情况，主叫用户110可4企查^皮叫用户170情绪的 变化，但不能4全查被叫用户170情绪的变化在对话中出现在何处。因此，分层 语音分析服务器140将被叫用户170情绪的变化与全部对话一起提供。当重放 全部对话时，分层语音分析服务器140在被叫用户170的语音开始的时间使全 部对话与语音分析结果同步以便以图表提供语音分析结果。其详细方法如下所 述。
语音分析服务可与通话持续的时间或使用的时间成比例收费。然而，因为 记账方法可能根据移动通信服务供应者或提供语音分析服务单独的服务供应者 而不同，本发明不限制在这点上。
图4是根据本发明另 一实施例显示语音分析服务方法的流程图。
语音分析服务可根据语音分析对象以实际模式和练习模式提供。实际模式 是使得主叫用户和被叫用户的语音在实际通话过程中被分析并且提供语音分析 结果。练习模式是使得用电话与虚拟对方说话的主叫用户的语音被分析并且将 语音分析结果传送到相应的主叫用户。参照图3介绍练习^f莫式。
为了在练习模式中进行爱的检测，主叫用户110通过终端接通分层语音分 析服务器140 (S401)。为了在练习模式中进行爱的检测，预定的特征密钥可用 于将主叫用户IIO接通分层语音分析服务器140。例如，如图3中所示，主叫用 户110将"用于语音分析的特征代码(*007) +被叫用户的电话"输入终端。在 这种情况下，分层语音分析服务器140通知主叫用户110实际模式和练习模式， 并且接收来自主叫用户110的练习模式的选择。或者，主叫用户IIO可直接将
16用于练习模式的特征代码和被叫用户的电话号码输入终端。在这种情况下，分
层语音分析服务器140可不通知主叫用户IIO练习模式。进一步地，主叫用户 110为了在练习模式中进行语音分析，可根据服务类型以各种方式接通分层语音 分析服务器140。
在这时，在语音分析服务需要服务预约的情况，分层语音分析服务器140 可在主叫用户110接通通话时运行用户身份验证。优选地，用户身伤i^i正是基 于主叫用户110的信息自动完成的，然而本发明不限制在这点上。
以及，在主叫用户110接通通话时，分层语音分析服务器140可通知主叫 用户110语音分析服务。优选地，语音分析服务以语音通知的类型提供，并且 该通知可包括语音分析服务的简短说明以及服务收费信息。
为了在练习模式中进行语音分析，在主叫用户110接通分层语音分析服务 器140之后，分层语音分析服务器140接收来自主叫用户110的用于练习的对 方选择(S403)。用于练习的对方是选定的使得语音通知提供给主叫用户110并 且从主叫用户110 ^:收在其上的响应。例如，用于练习的对方可包4舌母亲或父 亲、兄弟或姐妹、女朋友或男朋友、单相思的对象，或朋友。
在分层语音分析服务器140接收来自主叫用户110的用于练习的对方之后， 分层语音分析服务器140接收来自主叫用户110的适合于用于练习的对方的练 习方法的选择(S405)。该练习方法是以与用于练习的对方相同的方式选定的。 例如，该练习方法可包括劝说、安慰或坦白。
例如，主叫用户110选择单相思的对象作为用于练习的对方并且选择坦白 作为练习方法。这意味着主叫用户110有他/她秘密地爱着的人并且想要对单相 思的对象坦白他/她的爱，而主叫用户110在实际坦白之前打算练习4也/她的爱的 坦白。因此，在主叫用户110用电话与单相思的对象说r活时，主叫用户110可 减少可能的错误或误解。
在分层语音分析服务器140接收用于练习的对方和练习方法的选择之后， 分层语音分析服务器140接收主叫用户IIO的语音(S407)。优选地，当接收主 叫用户IIO的语音时，分层语音分析服务器140记录主叫用户IIO的语音。
其次，分层语音分析服务器140从主叫用户110的声音文件析取预定的语 音参数(S409)。主叫用户110的声音文件由6/8/llKHz， 8/16bit单声ii/立体声 非压缩的脉冲编码调制(PCM)格式声音资源文件形成。以及，分层语音分析服务器140基于析取的语音参数运行语音分析以提取 语音分析结果(S411)。在这里，语音分析与参照图3介绍的语音分析是相同的， 并且因此省略其详细说明。
通过分析主叫用户110的语音提取的语音分析结果是实时提供给处于通话 状态的主叫用户110的(S413)。优选地，实时传送给主叫用户110的语音分冲斤 结果是以百分率计算的爱的等级。在这时，语音分析结果可以预定的周期(例 如，以十秒的时间间隔)提供给通话中的主叫用户110,或者在爱的等级超过预 定的临界值时提供。或者，实时传送给通话中的主叫用户110的语音分析结果 可为对应于爱的等级的内容。语音分析结果可根据服务类型不同地提供。
以及，在通话结束之后，分层语音分析服务器140将通过分析主叫用户110 的语音提取并且作为短消息或多媒体消息或通过有线或无线互联网存储的语音 分析结果提供给主叫用户110。优选地，在通话结束之后作为短消息或多媒体消 息或通过有线或无线互联网提供的语音分析结果，包括爱的等级、专心等级、 期待等级和尴尬等级全体。作为短消息或多媒体消息或通过有线或无线互联网 提供的语音分析结果，以不同的方式显示，例如以文本或图表。
语音分析服务可与通话持续的时间或者使用时间成比例收费。然而，因为 记账方法可能根据移动通信服务供应者或提供语音分析服务的单独的服务供应 者是不同的，本发明不限制在这点上。
同时，在步骤S413之后，在主叫用户110的通话结束或主叫用户IIO请求 改变模式的情况，分层语音分析服务器140可对应于用于练习的对方在主叫用 户IIO和被叫用户170之间建立通话以在实际模式提供语音分析服务。在步骤 S401中主叫用户IIO输入被叫用户170的电话号码以接通分层语音分析服务器 140的情况，分层语音分析服务器140仅检查是否主叫用户IIO打算以实际模式 使用语音分析服务并且在主叫用户IIO和被叫用户170之间建立通话。或者， 在主叫用户IIO接通分层语音分析服务器140而没有输入被叫用户170的电话 号码的情况，分层语音分析服务器140接收来自主叫用户110的净皮叫用户170 的选择并且在主叫用户IIO和被叫用户170之间接通通话。
因此，在主叫用户IIO和被叫用户170之间建立了通信信道之后，分层语 音分析服务器140执行参照图3介绍的步骤S305到S313。
图5是根据本发明另一实施例显示语音分析服务方法的流程图，以及介绍在紧急通话服务中用于检测虚假报告的方法。将分层语音分析服务器140安装 在公共机关诸如警察局或消防队并且分析紧急通话的语音以检测虚假的报告。
如图5中所示，首先，打算对公共机关诸如警察局或消防队进行紧急通话 的主叫用户110将紧急通话键或紧急通话电话号码输入终端以进行紧急通话。 主叫用户110的紧急通话输入到分层语音分析服务器140中(S501)。
在主叫用户IIO接通用于紧急通话的分层语音分析服务器140时，分层语 音分析服务器140在话务员和主叫用户IIO之间建立通信信道(S503 )。
在话务员和主叫用户110之间建立了通信信道之后，分层语音分析服务器 140从主叫用户110和话务员之间的对话中分离主叫用户110的声音文件 (S505)。在这时，分层语音分析服务器140记录并存储主叫用户IIO和话务员 之间的对话，并且仅从对话中分离主叫用户110的声音文件。
其次，分层语音分析服务器140从分离的主叫用户IIO的声音文件析取预 定的语音参数(S507 )。该声音文件由6/8/1 lKHz， 8/16bit单声道/立体声非压缩 的脉沖编码调制(PCM)格式声音资源文件形成。
以及，分层语音分析服务器140基于析取的语音参数运行语音分析以提取 语音分析结果(S509)。换句话说，分层语音分析服务器140提取兴奋等级、信 服等级、着重等级、思考等级、S.O.S (说或停止)等级、专心等级、期待等级、 馗尬等级或爱的等级，并且将上述等级合成以计算谎言检测等级(换句话说， 可信赖性等级)。
分层语音分析服务器140基于通过分析主叫用户110的语音提取的语音分 析结果判断主叫用户IIO的报告是真实的还是虚假的(S511)。优选地，分层语 音分析服务器140在0到100的范围内提取主叫用户110的谎言检测等级，并 且在谎言检测等级超过50的情况，将报告判断为是虚假的。
在报告不是虛假的情况，分层语音分析服务器140析取主叫用户110的信 息，将析取的信息存储到存储装置270中，并且根据紧急状况将信息提供给主 叫用户110 (S513)。该根据紧急状况的信息可作为消息提供。主叫用户110接 收该根据紧急状况的信息并且在紧急工作人员或警员到达之前处理紧急状况。 在这里，优选分层语音分析服务器140保持主叫用户IIO和话务员之间的通话。
同时，在主叫用户110的报告是虚假的情况，分层语音分析服务器MO析 取主叫用户110的信息，将析取的信息存储到存储装置270中，并且基于主叫用户110的信息将反对虛假报告的警告消息传送给主叫用户110 (S515)。
在分层语音分析服务器140传送反对虛假报告的警告消息之后，分层语音 分析服务器140基于主叫用户IIO的信息判断主叫用户110是否是惯犯(S517)。 在主叫用户UO是惯犯的情况，分层语音分析服务器140进一步将包括虛假的 报告的发生次数和大概的法律措施的警告消息传送给主叫用户110 (S519)。这 可使虚假的报告者认识到虚假报告并且防止习惯性的虚假报告。
在下文中，参照图6介绍用于在视频通信过程中分析和显示对方情绪状态 的方法和装置的实施例。
图6是根据本发明实施例显示用于在视频通信过程中提供情绪状态分析服 务的移动通信服务器600的框图。
参照图6，用于在视频通信过程中提供情绪状态分析服务的移动通信服务器 600包括通信单元610、服务控制单元620、视频通信单元630、语音分析引擎 640以及图像集成单元650。
通信单元610从主叫终端接收请求具有特定特征的通话服务的通话连接请 求信号。在这时，通话连接请求信号包括具有特定特征的特征代码、接收的电 话号码以及用于识别视频通信和音频通信的标识符。在通信单元610从主叫终 端接收通话连接请求信号之后，通信单元610接通对被叫终端的通话以在主叫 终端和被叫终端之间建立通信信道。移动通信服务器600执行用于提供由主叫 用户请求的具有特定特征的通话服务的一系列操作，并且通过通信单元610将 结果传送给主叫终端。
具有特定特征的通话服务可包括各种服务，然而本实施例集中在用于在视 频通信过程中分析和显示对方情绪状态的通话服务。为了简单的和清楚地说明， 包括在通话连接请求信号中的视频通信标识符作为'*，表示，而用于分析对方 情绪状态并在主叫终端的屏幕上显示该情绪状态的特征代码表示为'001，。
服务控制单元620根据包括在从通信单元610接收的通话连接请求信号中 的视频通信标识符'*，将控制信号传送到视频通信单元630。并且，服务控制 单元620根据包括在通话连接请求信号中的特征代码'001，将控制信号传送到 语音分析引擎640。
视频通信单元630根据从服务控制单元620传送的控制信号请求接通被叫 终端的纟见频通信通话，并且在^L频通信通话响应该请求而4妄通时，启动主叫终
20端和被叫终端之间的^L频通信。在^L频通信由视频通信单元630启动时，语音 分析引擎640析取^皮叫用户的语音并且分析^皮叫用户的情绪状态。
语音分析引擎640包括分析对象分离单元641、语音析取单元643以及语音 分析单元645。
语音分析引擎640的分析对象分离单元641从主叫用户和被叫用户之间的 对话中分离净皮叫用户的语音。
语音析取单元643从由分析对象分离单元641分离的语音分析对象的声音 文件析取预定的语音参数。
语音分析单元645基于由语音析取单元643的析取语音参数利用最多八个 语音解析式提取语音分析结果。语音分析结果包括兴奋等级、信服等级、着重 等级、思考等级、S.O.S (说或停止)等级、专心等级、期待等级、馗尬等级或 者爱的等级。语音分析单元645根据服务类型选择性地提供上述等级的一部分 或者全部。并且，语音分析单元645可将上述等级合成以计算另一种类型的等 级，例如谎言检测等级。优选地，语音分析单元645用数字或者以图形或文本 提供上述等级。
以及，语音分析引擎640可进一步包括情绪分析控制单元(未示出)以4更 从视频通信单元周期性地检测情绪分析启动信号或情绪分析停止信号630以在 分析对象分离单元641操作之前控制情绪分析服务。
情绪分析控制单元可按主叫用户请求停止或者重新启动语音分^f引擎640 的操作。因此，主叫用户可在视频通信过程中选择性地请求或停止情绪分析服 务。换句话说，情绪分析控制单元从视频通信单元630周期性地检测语音分析 引擎640的启动信号才喿作或停止信号操作以控制语音分析引擎640的操作。
例如，主叫用户选择用于情绪分析的视频通信服务，以及然后按压'*，键 以停止对方的情绪分析而仅使用视频通信服务。以及，主叫用户在^L频通信过 程中按压'*，键以重新启动已经停止了的对方的情绪分析。在这里，'*，键与 上述视频通信标识符不同，而是在视频通信启动之后具有切换功能，在语音分 析引擎640操作过程中按压'*，键时，语音分析引擎640的操作停止，而在再 次按压'*，键时，停止了的语音分析引擎640操作重新启动。
或者，为了控制语音分析引擎640的操作，将语音分析引擎640启动操作 分配给'1，键，将语音分析引擎640操作的停止分配给'2，键，而将语音分析引擎640的内容增加分配给'3，键，从而实时接收来自主叫用户的各种服务 请求选择。
图像集成单元650将从视频通信单元630传送的视频与从语音分析单元645 传送的情绪状态分析结果(例如，指示各种等级的文本或图表)以预定的比例 集成并且传送集成图像。
进一步地，在没有图像集成单元650的情况下，从视频通信单元630传送 的视频和从语音分析单元645传送的情绪状态分析结果(例如，指示各种等级 的文本或图表)可各自传送到主叫终端并且显示在主叫终端分开的屏幕上。对 方的图像和情绪状态分区地显示在主叫终端分开的屏幕上。
图7是根据本发明另一实施例显示用于在视频通信过程中提供情绪状态分 析服务的移动通信服务器700的框图。在这里，与图6中的部件具有相同标号 的部件运行相同的功能，并且因此其省略详细说明。
参照图7，用于在视频通信过程中提供情绪状态分析服务的移动通信服务器 700进一步包括内容存储单元760、分析结果存储单元770以及消息生成单元 780。
内容存储单元760对应于其语音分析单元645的语音分析结果存储各种内 容。语音分析单元645 ^^人内容存储单元760对应语音分析结果选择内容。该内 容包括各种可视数据，使得主叫用户可容易地识别语音分析结果。
例如，内容存储单元760存储有对应于诸如爱的等级或着重等级的语音分 析结果的各种符号、各种表达的具体化(avatar )、由字符组成的图释(emoticons ), 闪烁或可动图像。
因此，语音分析单元645选为预先存储在内容存储单元760中的语音分析 结果符号、具体化或多媒体内容，并且根据环境适当地使用该符号、具体化或 多媒体内容。因此，主叫用户可利用从内容存储单元760选定的可视数据，诸 如图表、符号或具体化，检查对方的情绪状态。主叫用户可检查对方的情绪状 态并且对应于该情绪状态将可动图像或多々某体内容传送给对方。
消息生成单元780准备包括由语音分析单元6"分析的语音分析结果以及 由语音分析单元645从内^"储单元760选定的内容的多媒体消息(MMS )，并 且将该多媒体消息传送到主叫终端或被叫终端。
同时，分析结果存储单元770存储由语音分析单元645分析的语音分析结果。存储在分析结果存储单元770中的语音分析结果利用有线或无线互联网通 过网络服务提供。用户可通过网络服务看到语音分析结果。
图8是根据本发明实施例显示用于在视频通信过程中提供语音分析服务的 方法的流程图。
如图8中所示，首先，主叫用户对被叫用户传送用于视频通信的通话，并 且移动通信服务器接收从主叫用户传送的视频通信通话(S801)。在这时，从主 叫用户传送的通话包括视频通信标识符'*，以及用于语音分析服务的特征代码 聰，。
在接收从主叫用户传送的视频通信通话时，移动通信服务器根据包括在视 频通信通话中的标识符'*，启动主叫用户和被叫用户之间的视频通信(S803 )。
在视频通信启动时，移动通信服务器基于包括在视频通信通话中的特征代 码'100'从主叫用户和被叫用户之间的语音通信对话中分离被叫用户的语音 (S805 )。
其次，移动通信服务器分析经过分离的被叫用户的语音，提取被叫用户的 情绪状态，并且将提取的被叫用户情绪状态转换成可视数据(S807 )。换句话说， 移动通信服务器从被叫用户的语音析取语音参数，基于析取的语音参数运行语 音分析以提取被叫用户的情绪状态结果。以及，移动通信服务器将提取的情绪 状态结果转换成可视数据。情绪状态结果包括兴奋等级、信服等级、着重等级、 思考等级、S.O.S (说或停止)等级、专心等级、期待等级、馗抢等级或爱的等 级。情绪状态结果转换成可视Jt据，例如百分率图表。
或者，为了强调情绪状态结果的可视方面，移动通信服务器可选择多^ 某体 内容，例如可动图像、具体化或符号作为情绪状态结果的可视Jt据。
其次，移动通信服务器将被叫用户情绪状态的可视数据与被叫用户的视频 以预定的比例集成，并且将集成的图像传送给主叫用户(S809)。
在视频通信过程中将分析的被叫用户的情绪状态提供给了主叫用户时，主 叫用户可停止情绪状态分析。主叫用户将用于停止情绪状态分析的键:输入终端。 移动通信服务器读取从主叫用户终端接收的4建信号，并且在该4建信号表示情绪 状态分析停止的情况，停止正在进行的语音分析。以及，在主叫用户停止情绪 状态分析之后，主叫用户可再次请求情绪状态分析。以相同的方式，主叫用户 将用于请求情绪状态分析的键输入终端。移动通信服务器读取从主叫用户终端接收的键信号，并且在该键信号表示情绪状态分析请求的情况，再次执行停止 了的情绪状态分析并且将情绪状态分析结果提供给主叫用户。
以及，在主叫用户和被叫用户之间的视频通信结束之后，移动通信服务器
可将被叫用户情绪状态分析结果准备为MMS消息，并且将该MMS消息传送给 主叫用户。在这时，移动通信服务器对应于被叫用户的情绪状态分析结果对 MMS消息附上多媒体内容，例如具体化、符号或可动图像，并且将该MMS消 息传送给主叫用户。
图9是根据本发明实施例显示作为语音分析结果提供的MMS消息的视图。
如图9中所示，多々某体消息服务包括通话信息900、最后的爱的等级910, 其它检测等级920以及手互联网服务URL930。
通话信息900示意性地显示主叫用户和被叫用户之间语音分析通话的详细 信息，并且包括被叫用户的电话号码，通话日期和通话持续的时间和可进一步 包括爱的等级的图像。
最后的爱的等级910可以直方图并且通过百分率显示，如图9中所示。为 了优良的明显度，最后的爱的等级910的直方图类型可具有心形的闪烁效果或 图表可视效果，并且可通过预定的范围以不同的颜色表达。这个可^L效果可才艮 据移动通信服务供应者或提供语音分析服务的单独的服务供应者而不同。
其它检测等级920作为根据爱的检测的实时分析结果包括馗抢等级、专心 等级和期待等级。如中图9所示，这些等级各自表示为预定形状的表格，并且 具有根据设置范围显示的颜色或图像。
手机互联网服务URL930用作详细的查询以及提供最后结果的内容，以及 在用户输入通话按钮(未示出)时，包括在手机中的无线互联网浏览器接通对 应于URL的服务器以查出详细的检测结果。
图IO是根据本发明实施例显示作为爱的检测结果提供的SMS消息的视图。
作为SMS消息提供的爱的检测结果可以如图10(a)中所示的基本信息950a 的类型提供，或以如图10 (b)中所示的详细信息950b的类型提供。
如图10 (a)中所示，基本信息类型950a可包括作为语音分析对象的被叫 用户的电话号码、相应的被叫用户对主叫用户的愛的等级，以^^接通详细查询 的示意性的显示960。
同时，如图10 (b)中所示，详细信息类型950b包括由百分率表示的爱的等级，以及以文本表示的尴尬等级、专心等级和期待等级(970)。详细信息类 型950b提供比在图10(a)中显示的基本信息类型950a更详细的爱的检测结果。 在主叫用户需要以可作为基本信息类型950a或详细信息类型950b提供的 SMS消息的详细查询的情况，主叫用户输入终端的通话按钮或互联网按钮980。 于是，主叫用户接通包括在SMS消息中的回叫URL以接收更详细的爱的检测 结果。
视图，而用户可接通包括在在通话结束之后提供的SMS消息或MMS消息中的 回叫URL,或者直接接通无线互联网。
首先，在主叫用户将'他/她的电话号码+预定的特征密钥，输入移动终端时， 包括在手机中的无线互联网浏览器显示服务屏幕以便接通爱的检测选单。然后， 主叫用户选择用于在显示在浏览器上的预定服务中的爱的检测服务的 "007通 话"1000,并且移动到次级屏幕。
或者，在主叫用户选择在作为爱的4企测结果提供的SMS消息或MMS消息 中的通话连接1050时，主叫用户的移动终端接通服务器，下载次级屏幕并且对 主叫用户显示次级屏幕。
相应的次级选单屏幕包括最近的通话历史选单1010,爱的排序选单1060， 爱的通话选单或使用向导选单。次级选单可允许主叫用户冲企查主叫用户最近几 天对其通话的被叫用户的信息和爱的等级。
例如，在主叫用户选择最近通话历史选单1010的情况，最近通话历史1020 是以预定的方式设置和显示的。最近通话历史1020可包括被叫用户的电话号码 和爱的等级。同时，在主叫用户选择爱的排序选单1060的情况，-故叫用户1070 的信息是以爱的等级的降序排列设置和显示的。
以及，在主叫用户在最近通话历史1020中选择任意被叫用户或被叫用户的 信息1070时，主叫用户可检查该被叫用户详细的爱的检测结果1040。
图12是根据本发明实施例显示通过网络服务提供爱的检测结果的屏幕，并 且显示在主叫用户结束爱的检测通话之后主叫用户通过网络接收的结果屏幕的 视图。
通过有线或无线终端，主叫用户接通通过网络提供本发明爱的检测服务的 分析结果的网络服务器。在主叫用户接通网络服务器之后，主叫用户移动到用于检查分析结果的选单以检查详细的分析结果。这个接通步骤与通常的网络服
务一致，以及因此省略详细的说明。图12 (a)显示在主叫用户接通网络服务器 并且选择最近通话历史选单时显示的网页。
最近通话历史网页包括主叫用户最近几天对其通话的^皮叫用户的电话号石马 1100、通话日期1105、被叫用户的爱的等级1110、详细查询1115以及内容1120。 包括上述列表的最近通话历史网页可根据服务类型而不同。例如，在主叫用户 利用笔记本电脑通过互联网电话检测被叫用户的爱的情况，笔记本电脑的IP号 码和互联网电话号码可显示在电话号码1100中。
在通话日期1105中，显示了主叫用户和被叫用户之间通话的日期，并且主 叫用户总的通话持续时间可进一步显示。以及，在爱的等级1110中，对应于电 话号码1100的被叫用户的爱的等级可作为预定的图像或值显示。同时，在详细 查询1115中，显示了具有超链接的文本，并且根据主叫用户文本的选择，文本 的详细内容显示为弹出窗口。在内容1120中，链接了可根据服务类型提供的对 话文件，和音乐文件或文本文件。内容1120可根据内容的存在显示或不显示。
在主叫用户选择详细查询1115时，主叫用户可通过弹出窗口检查任意被叫 用户的爱的等级结果值1125、在通话过程中的情绪变化1130以及爱的等级的变 化1135。
如图12 (b)中所示显示详细查询屏幕，在爱的等级结果值1125中，爱的 等级、专心等级、期待等级和尴尬等级以图表或表格1140的类型显示，而最后 的结果1145以文本或图像的类型显示。以图表或表格1140显示的爱的等级结 果值1125以及以文本或图像显示的最后结果1145可根据移动通信服务供应者 或提供爱的检测服务的单独的服务供应者而以不同的方式显示，并且因此显示 方法不限制在这点上。内容1120、在通话过程中情绪的变化1130以及爱的等级 的变化1135参考图13介绍。
图13是根据本发明另一实施例显示通过网络服务提供爱的检测结果的屏幕 的视图，而显示在图12中的在通话过程中情绪的变化1130,爱的等级的变化 1135以及详细查询1115的内容1120参考图13介绍。
详细查询1115的在通话过程中情绪的变化1130根据时间显示在主叫用户和 被叫用户之间通话的过程中检测到的爱的等级、专心等级、期待等级和尴尬等 级，以及如图13 (a)中所示，爱的等级的变化1135根据周期显示在预定的周期期间测度到的爱的等级、专心等级、期待等级和尴抢等级。优选地，在通话
过程中情绪的变化1130和爱的等级的变化1135以虚线图表1150显示，然而本 发明不限制在这点上。
在通话过程中情绪的变化1130和爱的等级的变化1135根据时间和预定的 周期分别提供爱的检测结果，使得主叫用户可在任意时间或周期容易地检查爱 的检测结果。以及，如图13 (a)中所示，用户可分别在通话过程中情绪的变化 1130和爱的等级的变化1135中指定任意时间或周期，并且查出结果1155。
同时，在主叫用户选择具有超链接的内容1120的情况，相应的内容作为弹 出窗口显示如图13 (b)中所示。内容1120可包括语音记录文件1160,其中语 音分析对象的语音是记录的，或包括对应于分析结果的发生次数的检测1165。 存储主叫用户和被叫用户之间对话的语音记录文件1160可通过主叫用户的选择 清除。优选地，可在重放语音记录文件1160时显示的图表可以是作为语音分析 对象的被叫用户的爱的检测分析结果。
在被叫用户的分析结果中，最后的爱的等级可以文本类型显示，而专心等 级、期待等级、尴尬等级和着重等级可以图表类型显示。以及，对应于被叫用 户的分析结果的内容1120可在语音记录文件1160重放过程中显示。内容1120 可根据服务类型包括建议、气氛产生方法或者音乐，并且可以超链接类型提供。 同时，在检测的发生次数1165中，每个等级的检测的发生次数以及最后的爱的 等级可以直方图类型显示，而显示方法可根据服务类型而不同。
换句话说，当主叫用户听在对话中的被叫用户的言语时，主叫用户可查看 在该处相应的被叫用户的言语爱的等级是高或低的图表或检测的发生次数，并 且接收相应的内容120。
同时，参考图13介绍的通过网络服务提供的语音分析结果仅重》文被叫用户 的语音并且以图表类型提供^L叫用户的语音分析结果。然而，在本实施例中， 主叫用户可检查被叫用户情绪的变化，但是不能检查被叫用户的情绪在主叫用 户的哪句言语处怎样变化。因此，在另一实施例中，本发明当重放主叫用户和 被叫用户之间的全部对话时，以图表类型在被叫用户的语音开始的时间提供4皮 叫用户的语音分析结果。为此，需要使主叫用户和被叫用户之间的对话与被叫 用户的语音分析结果同步的技术。
图14是显示用于使主叫用户和被叫用户之间的全部对话与被叫用户的语音分析结果同步的方法实施例的视图。
分层语音分析服务器140记录在主叫用户和被叫用户之间的通话过程中的 全部对话，分离^皮叫用户的语音，以上述方法运行爱的检测分析，并且存储爱 的检测分析结果。图14 (a)随着时间轴显示主叫用户(A)和被叫用户(B) 之间的对话，而图14(b)显示分离的被叫用户的语音(B)。分层语音分析服务 器140分析分离的被叫用户的语音(B )。语音分析是对被叫用户的语音(B )单 元做出的。如图14中所示，被叫用户(B)的对话包括四个语音单元，爱的检 测分析是对每个语音单元做出的，而四个语音分析结果作为段分区地存储(1段、 2段、3段和4段)。
在分层语音分析服务器140在记录全部对话的同时分离被叫用户的语音并 且运行语音分析时，分层语音分析服务器140基于通话开始时间检查被叫用户 的每个语音的开始时间和结束时间，并且将语音开始时间(计时器指针)和语 音延续时间(段长)记录到每个语音分析结果段的时间戳字段(time stamp field) 中。例如，在通话开始时间之后一秒的时间被叫用户开始反应主叫用户的问题 以及在通话开始时间之后两秒的时间完成反应的情况，分层语音分析服务器140 将1作为语音开始时间(时间指针)而1作为语音延续时间(段长)记录进祐: 叫用户相应的语音分析结果段的时间戳字段。
如图14 (c)中所示，在被叫用户(B)的第一语音分析结果段的时间戳字 段中，3是作为语音开始时间(时间指针)记录的，而1是作为语音延续时间(段 长)记录的。在被叫用户(B)的第二语音分析结果段的时间戳字段中，7是作 为语音开始时间(时间指针)记录的而l是作为语音延续时间(段长)记录的。 在被叫用户(B)的第三语音分析结果段的时间戳字段中，ll是作为语音开始时 间(时间指针)记录的而3是作为语音延续时间(段长)记录的。在被叫用户 (B)的第四语音分析结果段的时间戳字段中，17是作为语音开始时间(时间指 针)记录的而2是作为语音延续时间(段长)记录的。
无论何时被叫用户的语音出现，分层语音分析服务器140基于通话开始时 间检查语音开始时间和语音延续时间，并且以上述方式将语音开始时间和语音 延续时间记录到相应的语音分析结果段的时间戳字段中。因此，分层语音分析 服务器140基于记录在被叫用户语音分析结果段的时间戳字段中的时间信息使 全部对话与被叫用户的语音分析结果同步，并且通过网络服务提供同步的结果。
28如果主叫用户在网络上重放全部对话，分层语音分析服务器140从重放开 始时间检查时间，并且在到达记录在被叫用户的每个语音分析结果段的时间戳 字段中的时间时，以图表类型提供相应语音分析结果段的爱的检测结果。因此， 主叫用户可检查被叫用户如何对主叫用户的某句言语做出反应。
同样，由于从这个详细说明对于本领域技术人员在本发明的精神和范围内 的各种改变和修改将变得显而易见，应当理解详细说明和特定示例，虽然指示 本发明的优选实施例，仅作为举例说明提供。
如上所述，在主叫用户和被叫用户之间的通话过程中，本发明分析被叫用 户的情绪状态并且将被叫用户的情绪状态实时提供给主叫用户，从而超出简单 的语音/视频通信激起主叫用户的好奇心。因此，本发明可显著地增加饱和语音 通话量，从而增加销售额。并且，本发明允许主叫用户在实际语音通信之前对 虚拟对方说话，使得主叫用户可实时检查是否他/她适当地表达他/她的情绪，从 而减少在对实际被叫用户通话的过程中可能出现的错误或误解。
以上所揭露的仅为本发明的较佳实施例而已，当然不能以此来限定本发明 之权利范围，因此依本发明权利要求所作的等同变化，仍属本发明所涵盖的范 围。
权利要求
1. 一种用于在通信网络中提供语音分析服务的方法，所述方法包括(a)根据主叫终端的通话连接在所述主叫终端和被叫终端之间建立通信信道；(b)对通过所述建立的通信信道从所述被叫终端传送到所述主叫终端的被叫用户的语音实时执行分层语音分析以提取所述被叫用户的情绪状态信息；并且(c)将所述提取的所述被叫用户的情绪状态信息实时传送到所述主叫终端。
2. 如权利要求1所述的用于提供语音分析服务的方法，其特征在于 所述步骤(a)包括从所述主叫终端接收包括用于所述语音分析服务的特征代码和所述被叫用 户的电话号码的通话发源；基于所述特征代码激活语音分析4莫式；并且利用所述被叫用户的电话号码在所述主叫终端和所述^皮叫终端之间建立所 述通信信道。
3. 如权利要求1或2所述的用于提供语音分析服务的方法，其特征在于 所述情绪状态信息是表现所述被叫用户对主叫用户爱的程度的爱的等级以及表现所述被叫用户对所述主叫用户信赖程度的可信赖性等级中的任何一个。
4. 如权利要求1所述的用于提供语音分析服务的方法，其特征在于所述方 法进一步包括在所述通话结束之后，将所述被叫用户的所述情绪状态信息准备为消息并 且将所述消息传送给所述主叫终端。
5. 如权利要求1所述的用于提供语音分析服务的方法，其特征在于所述步 骤(b)包括从通过所述通信信道传送和接收的语音分离所述被叫用户的语音；从所述被叫用户的所述分离的语音析取语音分析参数；利用所迷析取的参数提取所述被叫用户的所述情绪状态信息。
6. —种用于在视频通信网络中视频通信过程中提供语音分析服务的方法，所 述方法包括(a) 根据主叫终端的视频通信通话连接在所述主叫终端和被叫终端之间建 立视频通信信道；(b) 对通过所述视频通信信道从所述被叫终端传送到所述主叫终端的被叫 用户的语音实时执行分层语音分析以提取所述被叫用户的情绪状态信息；(c) 将所述被叫用户的所述提取的情绪状态信息转换成可视数据；并且(d) 通过所述视频通信信道将所述转换的可视数据以及要传送给所述主叫 终端的所述被叫用户的视频传送并且显示给所述主叫终端。
7. 如权利要求6所述的用于提供语音分析服务的方法，其特征在于 在所述步骤(d)中将所述转换的可视数据和所述被叫用户的视频集成为一个图像并且将所述集成的图像传送给所述主叫终端。
8. 如权利要求6所述的用于提供语音分析服务的方法，其特征在于 所述步骤(c)对应于所述被叫用户的所述提取的情绪状态信息选择多媒体内容。
9. 如权利要求6所述的用于提供语音分析服务的方法，其特征在于所述方 法进一步包括在接收来自所述主叫终端的用于停止所述语音分析的键信号时，停止所述 语音分析。
10. —种用于在通信网络中提供语音分析服务的方法，所述方法包括(a) 接收来自主叫终端的用于所述语音分析服务的通话连接；(b) 将所述语音分析服务的模式信息通知所述主叫终端并且接收响应所述通知的选择；(c) 在主叫用户选择练习模式的情况，将虚拟对方和练习方法通知所述主 叫终端并且接收响应所述通知的选择；(d) 根据由所述主叫用户选定的所述虚拟对方和练习方法接收来自所述主 叫终端的所述主叫用户的语音；并且(e) 对所述主叫用户的所述接收的语音执行分层语音分析以提取语音分析 结果，并且将所述提取的语音分析结果实时传送到所述主叫终端。
11. 如权利要求IO所述的用于提供语音分析服务的方法，其特征在于所述 方法进一步包括(f) 在所述练习模式结束之后，在所述主叫用户和对应于所述虚拟对方的 实际的被叫用户之间建立通信信道；(g) 对通过所述通信信道传送给所述主叫用户的所述被叫用户的语音执行 分层语音分析以提取语音分析结果；并且(h) 将所述提取的语音分析结果实时传送给所述主叫用户。
12. —种用于在通信网络中提供语音分析服务的系统，所述系统包括 交换中心，用于从主叫终端接收包括用于所述语音分析服务的特征代码以及被叫用户的电话号码的通话发源，并且基于所述特征代码发送所述通话发源； 以及分层语音分析服务器，用于接收所述发送的通话，对应于所述被叫用户的 电话号码在所述主叫终端和被叫终端之间建立通信信道，分析通过所述建立的 通信信道传送给所述主叫终端的所述被叫用户的语音以实时提取情绪状态信 息，并且将所述提取的情绪状态信息实时传送到所述主叫终端。
13. 如权利要求12所述的用于提供语音分析服务的系统，其特征在于'. 所述分层语音分析服务器将对应于所述情绪状态信息的多媒体内容传送给所述主叫终端和所述净皮叫终端的至少任何一个。
14. 一种用于在移动通信网络中视频通信过程中提供语音分析服务的移动通信装置，所述移动通信装置包括服务控制单元，用于根据来自主叫终端的视频通信通话连接信号控制服务操作模式；视频通信单元，用于在所述服务控制单元的控制下在所述主叫终端和被叫终端之间建立通信信道以支持视频通信；以及语音分析引擎，用于分析在所述服务控制单元的控制下通过所述通信信道 传送到所述主叫终端的被叫用户的语音以将所述被叫用户的情绪状态转换成可 视数据。
15.如权利要求14所述的用于在移动通信网络中视频通信过程中提供语音 分析服务的移动通信装置，进一步包括图像集成单元，用于将所述可视数据和所述被叫用户的^见频集成为一个图 像并且将所述集成的图像传送给所述主叫终端。
全文摘要
本发明实施例涉及用于提供语音分析服务的系统和方法，及其装置，以及根据本发明用于在通信网络中提供语音分析服务的方法包括根据主叫终端的通话连接在主叫终端和被叫终端之间建立通信信道；对通过建立的通信信道从被叫终端传送到主叫终端的被叫用户语音实时执行分层语音分析以提取被叫用户的情绪状态信息；并且将提取的被叫用户的情绪状态信息实时传送到主叫终端。
文档编号H04M3/42GK101485188SQ200780025409
公开日2009年7月15日 申请日期2007年7月6日 优先权日2006年7月6日
发明者安希中, 曹圭锡, 朴时佑 申请人:Ktf电信公司;艾格泰克有限公司