93]由于用户在短时间段内表情/动作可能多变，而且其中有些表情/动作为无意识的，因而为了防止视频画面上显示的图案/动画/特效变换过快或者与用户当前真实表情类型不符，本步骤增加了有效性判断，将周期T2内出现概率最高且超过预设门限值的表情/动作类型判定为当前有效表情/动作类型。
[0094]405、查找预设的映射关系表，将当前有效表情/动作对应的图案/动画/特效同步显示于传送于对方的视频画面中。
[0095]本步骤中，图案/动画/特效的显示位置和时间长短可以根据用户习惯自由设定。
[0096]至此，用户在与对方视频过程中，视频画面中可随时根据用户的表情/动作显示相应的图案/动画/特效，使得视频画面不再单调，同时大大增加了趣味性和个性化。
[0097]实施例二
[0098]在实施例一中，视频画面上实现了与用户表情/动作相应的图案/动画/特效的同步显示，大大提升了用户的使用体验效果。而未解决现有技术中需手动输入文字信息的问题。因而，本实施例二实现视频画面上同步显示与当前语音信息内容一致的文字信息。
[0099]参阅图5，本实施例中视频通信装置，增设了如下单元:
[0100]语音内容解析单元360，用于在视频过程中，实时解析本端用户的语音信息，得到相应的文字信息。通过该单元，可以对麦克风采集的音频信号进行实时解析，从而将语音转换为文字信息。
[0101]同时，显示执行单元350，还用于实时地将语音内容解析单元360解析得到的文字信息同步显示于视频画面中。
[0102]相应地，本实施例的视频通信方法增加如下步骤:
[0103]在用户与对方视频通信过程中，实时解析本端用户的语音信息，得到相应的文字信息；并实时地将解析得到的文字信息同步显示于视频画面中。
[0104]当然，文字信息的显示位置也可由用户自由设定。这样，大大方便了用户应用，尤其适用于对方虽然能够播放视频信号但是不能或者不方便播放音频信号的情况下。
[0105]在其他实施例中，用户可选择地应用同步显示文字信息和/或图案/动画/特效功能，最大程度地提升用户使用体验。
[0106]需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
[0107]上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
[0108]通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
[0109]以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
【主权项】
1.一种视频通信方法，其特征在于，所述方法包括步骤: 预先拍摄各种表情/动作类型对应的表情/动作模版； 建立表情/动作类型与预设的图案/动画/特效的映射关系表； 在视频通信过程中，按照预设的第一频率，以所述各种表情/动作模版为参考，实时检测分析以识别出当前拍摄单元拍摄的视频影像中所包含的表情/动作类型； 查找所述映射关系表，将当前识别出的表情/动作类型对应的图案/动画/特效同步显示于传送于对方的视频画面中。2.如权利要求1所述的视频通信方法，其特征在于，所述方法还包括步骤:在视频通信过程中，实时解析当前采集的语音信息，得到相应的文字信息，并实时地将解析得到的文字信息同步显示于视频画面中。3.如权利要求1或2所述的视频通信方法，其特征在于，所述步骤在视频通信过程中，按照预设的第一频率，以所述各种表情/动作模版为参考，实时检测分析以识别出当前拍摄单元拍摄的视频影像中所包含的表情/动作类型中还包括:对当前识别出的表情/动作类型的有效性进行判断； 在所述步骤查找所述映射关系表，将当前识别出的表情/动作类型对应的图案/动画/特效同步显示于传送于对方的视频画面中，仅对当前识别出的有效表情/动作类型对应的图案/动画/特效进行同步显示。4.如权利要求3所述的视频通信方法，其特征在于，所述步骤在视频通信过程中，按照预设的第一频率，以所述各种表情/动作模版为参考，实时检测分析以识别出当前拍摄单元拍摄的视频影像中所包含的表情/动作类型中，对表情/动作类型的有效性的判断方法具体为: 在视频通信过程中，按照预设的第二频率，统计本周期内识别出的所有表情/动作类型的出现频率，对于其中出现概率最高的表情/动作类型，判断其出现概率是否超过预设的门限值，若超过，则判定该表情/动作类型为本周期内的有效表情/动作，否则，判定本周期内无有效表情/动作。5.权利要求1或2所述的视频通信方法，其特征在于，所述步骤在视频通信过程中，按照预设的第一频率，以所述各种表情/动作模版为参考，实时检测分析以识别出当前拍摄单元拍摄的视频影像中所包含的表情/动作类型中，当前视频影像中所包含的表情/动作类型的识别方法为: 利用人脸识别及肢体识别技术确定出当前视频影像中人的面部和肢体的位置信息； 分析面部中五官及肢体的运动轨迹，将其与各种表情/动作模版中相应的运动轨迹进行对比分析，确定最相似的表情/动作类型。6.权利要求1或2所述的视频通信方法，其特征在于，所述方法还包括:预先设置同步显示于视频画面上的其他信息的显示位置。7.一种视频通信装置，其特征在于，所述装置包括:拍摄单元、映射关系设置单元、表情/动作识别单元、显示执行单元； 所述拍摄单元，用于在初始时刻拍摄各种表情/动作类型对应的表情/动作模版，在视频通信过程中实现视频拍摄； 所述映射关系设置单元，用于建立表情/动作类型与预设的图案/动画/特效的映射关系表； 所述表情/动作识别单元，用于在视频通信过程中，按照预设的第一频率，以所述各种表情/动作模版为依据，实时检测分析出所述拍摄单元当前拍摄的视频内容中所包含的表情/动作类型； 所述显示执行单元，用于在视频通信过程中，查找所述映射关系表，将当前识别出的表情/动作对应的图案/动画/特效实时同步显示于视频画面中。8.如权利要求7所述的视频通信装置，其特征在于，所述装置还包括语音内容解析单元; 所述语音内容解析单元，用于在视频通信过程中，实时解析当前采集的语音信息，得到相应的文字信息； 所述显示执行单元，用于实时地将解析得到的文字信息同步显示于视频画面中。9.如权利要求7或8所述的视频通信装置，其特征在于，所述装置还包括有效表情/动作判断单元； 所述有效表情/动作判断单元，用于对所述表情/动作识别单元当前识别出的表情/动作类型的有效性进行判断； 所述显示执行单元，用于将当前识别出的有效表情/动作对应的图案/动画/特效实时同步显示于视频画面中。10.如权利要求9所述的视频通信装置，其特征在于，所述有效表情/动作判断单元进一步包括: 统计模块，用于按照预设的第二频率，统计本周期内由所述表情/动作识别单元识别出的所有表情/动作类型； 判断模块，用于根据统计信息，判断其中出现概率最高的表情/动作类型的出现概率是否超过预设的门限值，若超过，则判定该表情/动作类型为本周期内的有效表情/动作，否则，判定本周期内无有效表情/动作。
【专利摘要】本发明公开了一种视频通信方法及装置，所述方法包括步骤：预先拍摄各种表情/动作类型对应的表情/动作模版；建立表情/动作类型与预设的图案/动画/特效的映射关系表；在视频通信过程中，按照第一频率，以各种表情/动作模版为参考，实时检测分析以识别出当前拍摄单元拍摄的视频影像中所包含的表情/动作类型；查找映射关系表，将当前识别出的表情/动作类型对应的图案/动画/特效同步显示于视频画面中。本发明提出的视频通信方案不仅满足了用户在视频通话的同时需同步传送文字信息的需求，而且还能自动识别用户的表情/动作并选取相应的图案/动画/特效同步显示于视频画面上，满足了用户的个性化需求，大大提升了用户使用体验。
【IPC分类】H04N21/4788, H04N7/14
【公开号】CN104902212
【申请号】CN201510216667
【发明人】刘卓曦
【申请人】努比亚技术有限公司
【公开日】2015年9月9日
【申请日】2015年4月30日