标签数据生成系统和方法与流程

本申请涉及数据处理技术领域，特别是涉及一种标签数据生成系统和方法。

背景技术：

随着科技进步，市面上出现了许多搭配有运动传感器的智能运动配件，比如智能手环和智能手表等。这些智能运动配件通过无线传输技术将运动传感器感测到的数据发送到智能手机，智能手机的应用程序对这些数据进行分析生成分析结果。用户可以通过分析结果获得心律、运动步数等与生理状态和运动状态相关的信息。

然而，无线传输会大量消耗智能运动配件及智能手机的电量，且无线传输质量较差时会导致数据分析的延迟。另一方面，对与用户姿势相关的感测数据进行分析时需要使用识别模型，而识别模型的训练过程需要大量的标签数据。标签数据通常由人工对自身姿势进行判断，根据判断结果对感测数据添加标签生成。不同用户对姿势的判断标准并不相同，且长时间连续添加标签容易出错，使得人工添加标签的效率较低，很多错误的标签数据被用于识别模型的训练，导致识别模型的识别准确性较低。

技术实现要素：

基于此，有必要针对上述技术问题，提供一种能够提高识别准确性的标签数据生成系统和方法。此外，本申请提出一种耳机。

一种耳机，包括扬声器、运动传感器、收发器和处理器。其中，扬声器用于播放音频数据。运动传感器用于感测用户姿势以产生第一感测数据。收发器用于与外部装置进行数据传输。处理器耦接运动传感器和收发器，根据第一感测数据判断用户姿势是否正确并生成识别结果，并通过收发器发送识别结果。

一种耳机，包括扬声器、运动传感器和处理器。扬声器用于播放音频数据。运动传感器用于感测用户姿势以产生第一感测数据。处理器包含数据处理单元和音频处理单元，其中数据处理单元耦接于运动传感器与音频处理单元之间。数据处理单元根据第一感测数据判断用户姿势是否正确并生成识别结果，通过音频处理单元的扬声器播放识别结果。

综上所述，本申请的耳机不需要通过无线传输技术将传感器产生的原始数据发送至智能手机等外部装置。因此，可显著地降低耳机和/或外部装置消耗的电量。

为了提高标签数据的生成效率，并提高识别模型的识别准确率(accuracy)，本申请提出了一种标签数据生成系统和方法。

本申请提供一种标签数据生成系统，包括第一影像捕获设备、第二影像捕获设备、运动感测装置和第一处理器。第一影像捕获设备感测用户姿势以产生平面影像。第二影像捕获设备感测用户姿势以产生深度影像。运动感测装置感测用户姿势以产生运动数据。第一处理器耦接第一影像捕获设备、第二影像捕获设备和运动感测装置。第一处理器根据平面影像及深度影像生成用户姿势的识别结果，并根据识别结果对运动数据添加标签以生成标签数据。

本申请提供一种标签数据生成方法，包括：感测用户姿势以产生平面影像；感测用户姿势以产生深度影像；感测用户姿势以产生运动数据；根据平面影像及深度影像生成用户姿势的识别结果，并根据识别结果对运动数据添加标签以生成标签数据。

综上所述，本申请提供的标签数据生成系统可自动地对运动数据添加标签，使用户更快地获得标签数据，且提升了根据标签数据训练得到的识别模型的识别准确性。

附图说明

图1为一个实施例中耳机的示意图；

图2为一个实施例中耳机的功能框图；

图3为一个实施例中标签数据生成系统的功能框图；

图4为一个实施例中标签数据生成方法的流程示意图；

图5为一个实施例中生成标签数据的步骤的流程示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

图1为一个本申请一个实施例中耳机10的示意图，图2为本申请一个实施例中耳机10的功能框图。具体地，同时参照图1和图2，耳机10可以包括主板100、第一壳体110、第二壳体120、电源模块130以及麦克风与控制按键模块140。电源模块130用于给耳机10供电。麦克风与控制按键模块140为耳机10的输入装置，用户可以通过麦克风与控制按键模块140将声音或控制指令发送至耳机10的处理器101。

主板100可以包括陶瓷基板、印刷电路板(printedcircuitboard，pcb)、有机基板和中介基板中的至少一种。在一个实施例中，主板100可以包括处理器101和收发器103。

处理器101可以是中央处理单元(centralprocessingunit，cpu)、微处理器(microprocessor)、数字信号处理器(digitalsignalprocessor，dsp)、可程序化控制器、特殊应用集成电路(applicationspecificintegratedcircuit，asic)或其他类似组件中的至少一种。

具体地，处理器101包括至少一个处理单元。当处理单元的数量多于一个时，各处理单元可以具有不同的功能。如图2所示，处理器101可以包括数据处理单元p1和音频处理单元p2，其中数据处理单元p1耦接于运动传感器111和音频处理单元p2之间。数据处理单元p1用于识别用户相对于耳机10的用户姿势，音频处理单元p2用于执行音频处理并发送音频数据至扬声器113和/或扬声器123。

收发器103耦接于处理器101的数据处理单元p1，可以通过无线或有线的方式与处理器101或外部装置进行数据传输。收发器103还可以用于低噪声放大(lownoiseamplifying，lna)、阻抗匹配、混频、上下变频转换、滤波、放大以及类似的操作。

第一壳体110对应于耳机10的用户的第一耳，运动传感器111和扬声器113可以被设置。第二壳体120对应于耳机10的用户的第二耳，生理传感器121和扬声器123可以被设置。扬声器113与扬声器123分别耦接至处理器101的音频处理单元p2。音频处理单元p2可以发送信号b至扬声器113和/或扬声器123，以通过扬声器113和/或扬声器123播放音频数据。在一个实施例中，第一壳体110可以设置有运动传感器111和/或生理传感器121，第二壳体120可以设置有运动传感器111和/或生理传感器121。

运动传感器111耦接处理器101的数据处理单元p1，用于感测用户相对于耳机10的用户姿势以产生感测数据d1。运动传感器111可以是电子罗盘、地磁传感器、陀螺仪、角速度传感器、加速度传感器、六轴传感器和九轴传感器中的至少一种。感测数据d1是与人体的姿势相关的动作姿态参数，可以是位移、加速度、角速度和磁力变化中的至少一种。

生理传感器121耦接处理器101的数据处理单元p1，用于感测耳机10的用户的生理信息以产生感测数据d2。生理传感器121可以是心电传感器、声音传感器、温湿度传感器、汗液酸碱度传感器和肌电传感器中的至少一种。感测数据d2是与人体生理状态相关的生理参数，可以是心率值、呼吸率和过敏反应中的至少一种。

耳机10的使用包括一般模式和训练模式。在一般模式中，耳机10用于对用户姿势进行辨识并生成用于判断用户姿势是否正确的识别结果op。耳机10的收发器103可以仅发送识别结果op，以减少耳机10在一般模式中的耗电量。

在训练模式中，耳机10可以通过用户在运动时产生的感测数据训练识别模型im。具体地，在训练模式中，耳机10的数据处理单元p1通过收发器103将感测数据d1和/或感测数据d2发送至外部装置，比如智能手机。外部装置可根据感测数据d1和/或感测数据d2训练识别模型im。即耳机10的训练模式可以产生与用户姿势或生理信息相关的训练数据。

在一般模式中，处理器101的数据处理单元p1可接收来自运动传感器111的感测数据d1，并且根据感测数据d1判断用户使用耳机10时的用户姿势是否正确，以生成识别结果op。识别结果op可用于提示用户运动时的姿势是否正确。

具体地，处理器101的数据处理单元p1可储存或预存一个或多个识别模型im。数据处理单元p1可以根据识别模型im及感测数据d1判断用户姿势是否正确并生成识别结果op。在一个实施例中，数据处理单元p1还可以根据识别模型im、感测数据d1及感测数据d2判断用户姿势是否正确并生成识别结果op。

在生成识别结果op后，数据处理单元p1通过收发器103将识别结果op发送至外部装置，比如智能手机。另一方面，数据处理单元p1也可以将识别结果op发送至音频处理单元p2。音频处理单元p2可对识别结果op进行音频处理(audioprocessing)，得到与识别结果op对应的信号b，将信号b发送至扬声器113和扬声器123进行播放。信号b可以是以提示音的形式提示使用耳机10的用户的姿势是否正确。当需要播放识别结果op对应的信号b时，如果用户正在通过耳机10收听音乐或广播等其他音频数据，音频处理单元p2可以降低当前音频数据的音量，以使用户可以清楚地听到识别结果op对应的信号b。

在一个实施例中，处理器101的数据处理单元p1可以通过收发器103接收用户设置的锻炼菜单。比如，用户可以通过智能手机的应用设置锻炼菜单，并将锻炼菜单发送至耳机10。处理器101的数据处理单元p1可以根据感测数据d1、识别模型im和锻炼菜单判断用户姿势是否正确，以生成识别结果op。锻炼菜单可以包括锻炼种类、锻炼组数(set)和锻炼次数(rep)中的至少一种。

在一个实施例中，耳机10除了使用默认于数据处理单元p1的识别模型im进行用户姿势的识别，还可以从外部装置获取识别模型im。具体地，处理器101的数据处理单元p1可通过收发器103接收更新信息，更新信息用于提示耳机10进行韧体更新，更新信息可以包括识别模型im的相关信息。数据处理单元p1可以根据接收到的更新信息更新耳机10的韧体，以获得更新的识别模型im或新增的识别模型im。

图3为本申请一个实施例中标签数据生成系统30的功能框图。具体地，参照图3，标签数据生成系统30包括第一处理器310、第一影像捕获设备320、第二影像捕获设备330、运动感测装置340和云端处理单元350。标签数据生成系统30可以根据用户姿势自动生成与用户姿势对应的标签数据。云端处理单元350根据标签数据训练得到与用户姿势对应的自定义识别模型，以更准确地识别用户运动时的姿势是否正确。

第一处理器310耦接第一影像捕获设备320、第二影像捕获设备330、运动感测装置340和云端处理单元350。第一处理器310可以是中央处理单元、微处理器、数字信号处理器、可程序化控制器、特殊应用集成电路或其他类似组件中的至少一种。

第一影像捕获设备320可感测用户姿势以产生与用户姿势对应的平面影像i1。第二影像捕获设备330可感测用户姿势以产生与用户姿势对应的深度影像i2。第一影像捕获设备320及第二影像捕获设备330可以是相机和摄影机中的至少一种。在一个实施例中，第一影像捕获设备320可以是红绿蓝摄影机，第二影像捕获设备330可以是深度摄影机。

运动感测装置340可感测用户姿势以产生与用户姿势对应的运动数据d3。运动感测装置340可以是六轴传感器和九轴传感器中的至少一种。在一个实施例中，运动感测装置340可以是如图2所示的耳机10，运动数据d3可以是如图2所示的感测数据d1。

云端处理单元350耦接第一处理器310。云端处理单元350可以是中央处理单元、微处理器、数字信号处理器、可程序化控制器、特殊应用集成电路或其他类似组件中的至少一种。

本实施例中，当用户运动时，第一处理器310分别从第一影像捕获设备320和第二影像捕获设备330获取与用户姿势对应的平面影像i1和深度影像i2，从运动感测装置340获取与用户姿势对应的运动数据d3。第一处理器310可以根据平面影像i1和深度影像i2对用户姿势进行识别，比如，通过默认的或接收到的识别模型对用户姿势进行识别，从而生成与用户姿势对应的识别结果。在得到识别结果后，第一处理器310可以根据识别结果对运动数据d3添加标签生成对应的标签数据td。标签数据td是具有时间标签的运动数据d3。

具体地，第一处理器310先根据平面影像i1和深度影像i2侦测出运动中的用户的一个特定姿势和此特定姿势的开始时间，对运动数据d3添加标签，使得与开始时间对应的开始时间标签与运动数据d3相关联。然后，第一处理器310根据平面影像i1和深度影像i2侦测出该特定姿势的结束时间，并对运动数据d3添加标签，使得与结束时间对应的结束时间标签与运动数据d3相关联。在生成开始时间标签和结束时间标签后，第一处理器310可以根据开始时间标签和结束时间标签，对开始时间与结束时间对应的时间段内的运动数据d3添加标签，使该时间段内的运动数据d3对应于该用户姿势；即，将与该特定姿势对应的姿势标签与该时间中的运动数据d3相关联。上述步骤完成后，第一处理器310可以生成标签数据td，其中标签数据td即为已添加标签的运动数据d3。

生成标签数据td后，第一处理器310可以将标签数据td发送至云端处理单元350。举例说明，第一处理器310可以通过发送器将用户的标签数据td发送至云端处理单元350。云端处理单元350可以根据标签数据td训练对应的识别模型im，其中该识别模型im用于识别用户姿势是否正确。云端处理单元350可将其产生的新的或更新后的识别模型im发送至第一处理器310，使得第一处理器310可以根据新的识别模型im来生成新的标签数据。

另一方面，云端处理单元350也可以将产生的识别模型im发送至运动感测装置340。运动感测装置340可以根据接收到的识别模型im判断用户运动时的姿势是否正确。具体地，云端处理单元350可以根据产生的识别模型im，发送包括识别模型im信息的更新信息至运动感测装置340，其中更新信息用于提示运动感测装置340进行韧体的更新。运动感测装置340可以从云端处理单元350接收更新信息，并根据更新信息来更新运动感测装置340的韧体，以获得更新或新的识别模型im。

图4为一个实施例中标签数据生成方法40的流程示意图，该标签数据生成方法40可以应用于图3所示的标签数据生成系统30。步骤402，感测用户姿势以产生平面影像。步骤404，感测用户姿势以产生深度影像。步骤406，感测用户姿势以产生运动数据。步骤408，根据平面影像及深度影像生成用户姿势的识别结果，并根据识别结果对运动数据添加标签以生成标签数据。步骤410，根据标签数据生成识别模型。步骤412，根据生成的识别模型发送更新信息，以提示运动感测装置更新韧体。

如图5所示，在一个实施例中，步骤408具体还包括生成标签数据的步骤，该步骤具体包括如下步骤：步骤502，根据平面影像及深度影像侦测用户姿势的开始时间。步骤504，根据平面影像及深度影像侦测用户姿势的结束时间。步骤506，对开始时间与结束时间对应的时间段内的运动数据添加标签，以使该时间段内的运动数据与用户姿势相对应。

综上所述，本申请的耳机可以在本地进行用户姿势的识别并生成识别结果。耳机无需通过无线传输技术将传感器产生的原始数据发送至智能手机类的外部装置，可以显著降低耳机和/或外部装置耗用的电量。此外，耳机可配置不同类型的传感器以产生不同类型的感测数据，使得感测数据具有更多元的应用方式。另一方面，本申请的标签数据生成系统通过图像处理技术对用户姿势进行识别，并根据识别结果自动地对数据添加标签。标签数据生成系统不需要人工介入标签数据的生成过程。本申请提供的标签数据生成系统可以帮助用户更快速地生成标签数据，且根据标签数据训练得到的识别模型的识别准确率也获得提升。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。