信息处理方法、信息处理系统和信息处理装置的制造方法
【技术领域】
[0001]本公开涉及信息处理的领域，更具体地，本公开涉及一种信息处理方法、信息处理系统和信息处理装置。
【背景技术】
[0002]严重听力障碍人士在社会生活中存在诸多不便。现有的基于放大声音的助听器只能帮助听力障碍不严重的情况，而且在嘈杂背景音的情况下，也不能有效的工作。另一方面，严重听力障碍人士可以通过手语与他人交流。但是对大部分人来说都不熟悉手语，因此通过这种方式只能和有限的专业人士交流。当然，严重听力障碍人士可以通过书写文字来与他人交流，然而这不仅需要额外的设备，如笔，纸张，而且交流的速度也存在较大限制。
【发明内容】
[0003]根据本公开一实施例，提供了一种信息处理方法，包括:采集包括被摄者的唇部动作的视频；识别所述视频，以生成与所述被摄者通过所述唇部动作所表达的含义对应的识别信息；以及显示所述识别信息。
[0004]根据本公开另一实施例，提供了一种信息处理系统，包括:视频采集单元，采集包括被摄者的唇部动作的视频；处理单元，识别所述视频，以生成与所述被摄者通过所述唇部动作所表达的含义对应的识别信息；以及显示单元，显示所述识别信息。
[0005]根据本公开另一实施例，提供了一种信息处理装置，包括:视频采集单元，采集包括被摄者的唇部动作的视频；发送单元，将所述视频发送至与所述信息处理装置可通信地连接的计算机；接收单元，从所述计算机接收与所述被摄者通过所述唇部动作所表达的含义对应的识别信息；以及显示单元，显示所述识别信息。
[0006]根据本公开另一实施例，提供了一种信息处理系统，包括:图像采集模块，采集包括被摄者的唇部动作的视频；处理器；存储器；显示器；和存储在所述存储器中的计算机程序指令，在所述计算机程序指令被所述处理器运行时执行以下步骤:识别所述视频，以生成与所述被摄者通过所述唇部动作所表达的含义对应的识别信息；所述显示器显示所述识别信息。
[0007]根据本公开另一实施例，提供了一种计算机程序产品，包括计算机可读存储介质，在所述计算机可读存储介质上存储了计算机程序指令，所述计算机程序指令在被计算机运行时执行以下步骤:采集包括被摄者的唇部动作的视频，识别所述视频，以生成与所述被摄者通过所述唇部动作所表达的含义对应的识别信息以用于显示。
[0008]在本公开实施例的信息处理方法、信息处理系统和信息处理装置中，能够不受背景噪音影响地、快捷准确地识别说话者所表达的含义，并将所述含义直观地显示，从而有利于背景噪音巨大的情况下的人际交流，也使得严重听力障碍人士能够流畅地与他人进行交流。
【附图说明】
[0009]通过结合附图对本公开示例性实施方式进行更详细的描述，本公开的上述以及其它目的、特征和优势将变得更加明显，在附图中，相同的参考标号通常指示相同的部件。
[0010]图1是示意性图示可用于实现根据本公开实施例的信息处理方法的系统的框图；
[0011]图2是示意性图示根据本公开实施例的信息处理方法的主要步骤的流程图；
[0012]图3是示意性图示根据本公开实施例的信息处理系统的主要配置的框图；以及
[0013]图4是示意性图示根据本公开实施例的信息处理装置的主要配置的框图。
【具体实施方式】
[0014]以下将参考附图详细描述本公开实施例。
[0015]为了使得本公开的目的、技术方案和优点更为明显，下面将参照附图详细描述根据本公开的示例实施例。显然，所描述的实施例仅仅是本公开的一部分实施例，而不是本公开的全部实施例，应理解，本公开不受这里描述的示例实施例的限制。基于本公开中描述的本公开实施例，本领域技术人员在没有付出创造性劳动的情况下所得到的所有其它实施例都应落入本公开的保护范围之内。
[0016]首先，参照图1来描述根据本公开实施例的信息处理系统的主要配置的框图。
[0017]如图1所示，本公开实施例的信息处理系统100主要包括:一个或多个处理器102、一个或多个存储器104、图像采集模块106以及显示器108。这些组件通过总线系统110和/或其它形式的连接机构(未示出)互连。
[0018]具体地，所述处理器102可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其它形式的处理单元，并且可以与所述系统100中的其它组件配合以执行期望的功能。
[0019]存储器104可以包括一个或多个计算机程序产品，所述计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令，处理器102可以运行所述程序指令，以实现下文所述的本公开的实施例的信息处理方法的相应功能以及/或者其它期望的功能。
[0020]所述图像采集模块106例如为基于可见光的彩色或灰度摄像机，诸如眼镜附属摄像头，网络摄像头、手机的前置摄像头等，用于采集包括被摄者的唇部动作的视频。
[0021]所述显示器108例如为LCD (Liquid Crystal Display，液晶显示器)、OLED (Organic Light Emitting D1de，有机发光二极管)等的任何种类的显示器，用于显示稍后所述的识别信息。
[0022]应当注意，图1所示的系统100的组件和结构只是示例性的，而非限制性的，根据需要，系统100也可以具有其他组件和结构。
[0023]例如，所述系统还可包括未示出的输入装置。输入装置可以是用户用来输入指令的装置，并且可以包括键盘、鼠标、麦克风和触摸屏等中的一个或多个。所述指令例如是使用所述图像采集模块106拍摄图像的指令等。
[0024]下面，将参照图2描述根据本公开实施例的信息处理方法。
[0025]图2是示意性图示根据本公开实施例的信息处理方法的主要步骤的流程图。如图2所示，首先，在步骤S210，所述信息处理方法采集包括被摄者的唇部动作的视频。具体地，所述信息处理方法可通过如上所述的图像采集模块来采集所述视频。
[0026]接下来，在步骤S220，所述信息处理方法识别所述视频，以生成与所述被摄者通过所述唇部动作所表达的含义对应的识别信息。
[0027]具体地，在一实施例中，当所述视频除了所述被摄者的唇部之外还包括其他视频元素时，所述信息处理方法可以首先确定所述视频中唇部的位置。更具体地，所述信息处理方法可以对所述视频逐帧进行分析，以定位每帧视频中唇部的位置，其具体处理为本领域技术人员所知，在此不再详述。
[0028]由此，所述信息处理方法对组成所述视频的帧序列中的唇部图像序列进行识别。在一示例中，所述信息处理方法可以首先对于所述视频的每一帧图像，提取所述图像中表示唇部的结构信息的关键点集。具体地，所述信息处理方法可以采用诸如基于级联回归的方法、基于神经网络的方法、基于支持向量机的方法等的方法中的任一个来提取所述关