一种终端设备及其自动控制方法与流程

文档序号:28262785发布日期:2021-12-31 16:53阅读:82来源:国知局
一种终端设备及其自动控制方法与流程

1.本文涉及终端应用技术,尤指一种终端设备及其自动控制方法。


背景技术:

2.目前在移动互联网应用活动中,存在很多需要用户确认操作的场景,尤其是根据摄像头采集到的图像信息的识别结果进行确认操作,比如:移动端购物支付时的刷脸确认支付;家庭智能门锁有人出入时的刷脸或指纹识别确认操作;智能家电通过图像识别食材种类进行自动烹饪菜品时的确认操作等等。
3.现有技术的缺陷在于,在包括“确认”和“取消”按钮的提示框或者确认页面中,用户需要通过点击或滑动按钮确认操作,但是用户可能会由于不经意的触屏或者其他的触摸事件导致误点击、误操作的发生,给用户带来不便,影响用户体验。


技术实现要素:

4.本技术提供了一种终端设备及其自动控制方法,能够准确地获取用户的确认意图,提升了图像识别算法等的准确率,减少用户介入的次数,减少误操作,减少用户误纠错的几率。
5.本技术实施例提供了一种终端设备的自动控制方法,所述终端设备可以包括用于采集目标信息的信息采集装置;所述方法可以包括:
6.获取所述目标信息的识别结果;
7.确定所述识别结果的置信度;
8.根据所述置信度确定相应的执行模式。
9.在本技术的示例性实施例中,所述执行模式可以包括:自动控制模式和一键确认模式。
10.在本技术的示例性实施例中,所述根据所述置信度确定相应的执行模式可以包括:
11.在所述置信度大于或等于第一置信度阈值时,按照所述识别结果进入所述自动控制模式。
12.在本技术的示例性实施例中,所述自动控制模式可以包括:直接进入所述识别结果对应功能的执行流程。
13.在本技术的示例性实施例中,所述根据所述置信度确定相应的执行模式可以包括:
14.在所述置信度小于第一置信度阈值,且大于或等于第二置信度阈值时,进入所述一键确认模式;其中,所述第一置信度阈值大于所述第二置信度阈值。
15.在本技术的示例性实施例中,所述一键确认模式可以包括:提供一个或多个选项控件,以通过所述选项控件进行一件确认;
16.其中,所述选项控件用于表征所述识别结果的正确性;或者,用于表征可能的正确
选项。
17.在本技术的示例性实施例中,所述执行模式还可以包括:一键撤销模式;
18.所述根据所述置信度确定相应的执行模式可以包括:在所述置信度小于第二置信度阈值时,进入所述一键撤销模式;和/或,
19.所述方法还可以包括:在执行所述自动控制模式后,提供进入所述一键撤销模式的选项控件,以在所述一键撤销模式的选项控件被触发后撤销所述自动控制模式对应的执行流程。
20.在本技术的示例性实施例中,所述方法还可以包括:
21.在获取所述目标信息的识别结果后,对所述识别结果进行信息校验;当所述识别结果校验正确时,确定所述识别结果的置信度;当所述识别结果校验错误时,进入一键返回模式。
22.在本技术的示例性实施例中,所述方法还可以包括:在获取所述目标信息的识别结果后,确定所述识别结果对应的偏好度,根据所述置信度和所述偏好度确定相应的执行模式。
23.本技术实施例还提供了一种终端设备,可以包括处理器和计算机可读存储介质,所述计算机可读存储介质中存储有指令,其特征在于,当所述指令被所述处理器执行时,实现上述任意一项所述的终端设备的自动控制方法。
24.本技术实施例的终端设备可以包括用于采集目标信息的信息采集装置;所述方法可以包括:获取所述目标信息的识别结果;确定所述识别结果的置信度;根据所述置信度确定相应的执行模式。通过该实施例方案,实现了准确地获取用户的确认意图,提升了图像识别算法等的准确率,提高了信息确认准确率,减少用户介入的次数,减少了误操作,减少用户误纠错的几率,提高了用户体验感。
25.本技术的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本技术而了解。本技术的其他优点可通过在说明书以及附图中所描述的方案来实现和获得。
附图说明
26.附图用来提供对本技术技术方案的理解,并且构成说明书的一部分,与本技术的实施例一起用于解释本技术的技术方案,并不构成对本技术技术方案的限制。
27.图1为本技术实施例的终端交互方法流程图;
28.图2为本技术实施例的一键返回的交互模式示意图;
29.图3为本技术实施例的对待确认信息进行置信度判断的方法流程图;
30.图4为本技术实施例的对待确认信息进行处理偏好度判断的方法流程图;
31.图5为本技术实施例的终端交互方法的第一示意图;
32.图6为本技术实施例的终端交互方法的第二示意图;
33.图7为本技术实施例的自动确认模式示意图;
34.图8为本技术实施例的一键确认模式示意图;
35.图9为本技术实施例的一键撤销模式示意图;
36.图10为本技术实施例的待确认信息为烤箱内食材图像时的示意图;
37.图11为本技术实施例的终端结构的示意图。
具体实施方式
38.本技术描述了多个实施例,但是该描述是示例性的,而不是限制性的,并且对于本领域的普通技术人员来说显而易见的是,在本技术所描述的实施例包含的范围内可以有更多的实施例和实现方案。尽管在附图中示出了许多可能的特征组合,并在具体实施方式中进行了讨论,但是所公开的特征的许多其它组合方式也是可能的。除非特意加以限制的情况以外,任何实施例的任何特征或元件可以与任何其它实施例中的任何其他特征或元件结合使用,或可以替代任何其它实施例中的任何其他特征或元件。
39.本技术包括并设想了与本领域普通技术人员已知的特征和元件的组合。本技术已经公开的实施例、特征和元件也可以与任何常规特征或元件组合,以形成由权利要求限定的独特的发明方案。任何实施例的任何特征或元件也可以与来自其它发明方案的特征或元件组合,以形成另一个由权利要求限定的独特的发明方案。因此,应当理解,在本技术中示出和/或讨论的任何特征可以单独地或以任何适当的组合来实现。因此,除了根据所附权利要求及其等同替换所做的限制以外,实施例不受其它限制。此外,可以在所附权利要求的保护范围内进行各种修改和改变。
40.此外,在描述具有代表性的实施例时,说明书可能已经将方法和/或过程呈现为特定的步骤序列。然而,在该方法或过程不依赖于本文所述步骤的特定顺序的程度上,该方法或过程不应限于所述的特定顺序的步骤。如本领域普通技术人员将理解的,其它的步骤顺序也是可能的。因此,说明书中阐述的步骤的特定顺序不应被解释为对权利要求的限制。此外,针对该方法和/或过程的权利要求不应限于按照所写顺序执行它们的步骤,本领域技术人员可以容易地理解,这些顺序可以变化,并且仍然保持在本技术实施例的精神和范围内。
41.本技术实施例提供了一种终端设备的自动控制方法,所述终端设备可以包括用于采集目标信息的信息采集装置;如图1所示,所述方法可以包括步骤s101-s103:
42.s101、获取所述目标信息的识别结果;
43.s102、确定所述识别结果的置信度;
44.s103、根据所述置信度确定相应的执行模式。
45.在本技术的示例性实施例中,可以接收关于控制指令的待确认信息,并将该待确认信息作为所述目标信息;所述待确认信息可以是针对所述控制指令的反馈信息。
46.在本技术的示例性实施例中,该控制指令可以包括但不限于语音控制指令、操作控制指令(例如,对显示装置进行触摸操作,对预设按键进行按键操作等)、手势指令、刷卡指令等。例如,对家电中功能的启动操作,门禁刷卡操作、门禁刷脸操作、支付操作等。
47.在本技术的示例性实施例中,所述目标信息可以包括以下任意一种或多种:状态描述信息、图像信息、生物信息、支付信息以及传感器测量数据;
48.所述生物信息可以包括以下任意一种:虹膜信息、指纹信息、声音信息、人脸信息以及手势信息。
49.在本技术的示例性实施例中,例如,当本技术实施例方案应用于家电领域中智能烤箱上时,终端设备接收到的目标信息可以为烤箱内食材图像、食材识别后的食材种类信息以及烤盘烤架位置信息等。当本技术实施例方案应用于安防领域中的门禁考勤等管理系
统时,终端设备接收到的目标信息可以为人脸图像信息、指纹图像信息、指静脉或掌静脉图像信息、虹膜信息等唯一性标识自然人的生物特征信息。
50.在本技术的示例性实施例中,所述目标信息可以为终端设备本身发出的待确认信息,也可以是由其他设备或终端发送过来的待确认信息。当目标信息为终端本身发出的待确认信息时,本技术实施例方案可以通过该终端设备独立实现,该终端设备可以包括:请求模块、显示模块、响应模块、感知模块,所述请求模块位于终端设备,可以负责向系统请求下发待确认信息,所述显示模块位于终端设备,可以作为提供几种确认交互方式(确认执行模式)的实现载体,所示响应模块位于终端设备,可以负责响应本机各种应用的请求指令并将生成的待确认信息发送给所对应的具体应用,所示感知模块位于终端设备,可以用于采集原始的信息数据,包括但不限于终端设备上的摄像头拍摄的图像和视频信息、摄像头扫描的条形码和二维码信息、各种传感器所采集到的数据信息等,经过本机处理器处理后生成识别结果。该实施例方案使得无需联网的应用环境下,实现基于多种确认交互方式的安全控制方法。
51.在本技术的示例性实施例中,该终端设备可以包括但不限于:家电设备、家庭主控单元、手机、掌上电脑、智能可穿戴设备等。
52.在本技术的示例性实施例中,所述终端设备采用的人机交互方式可以包括:显示交互和/或语音交互。
53.在本技术的示例性实施例中,显示交互可以通过显示模块(如显示屏、触摸显示屏等)进行交互,语音交互可以通过语音识别和播放模块进行交互。
54.在本技术的示例性实施例中,所述方法还可以包括:在获取所述目标信息的识别结果后,对所述识别结果进行信息校验;当所述识别结果校验正确时,确定所述识别结果的置信度;当所述识别结果校验错误时,进入一键返回模式。
55.在本技术的示例性实施例中,所述方法还可以包括:在接收所述目标信息后,对所述目标信息进行信息校验;当所述目标信息校验正确时,对所述目标信息进行识别;当所述目标信息校验错误时,进入一键返回模式。
56.在本技术的示例性实施例中,收到该目标信息后,可首先通过预设的安全控制模块对该目标信息进行校验,当所述目标信息校验错误时,说明该目标信息本身错误,因此,可以一键返回重新请求交互,如图2所示,在目标信息或识别结果校验错误时可以在当前终端上实现一键返回。所述终端可以包含显示模块(如触控显示模块),显示模块内主体部分区域可以显示但不限于请求失败信息或返回错误信息,可以通过检测用户对该请求失败信息或返回错误信息的触发操作实现一键返回,切换到初始页面;或者,在限定的时间到达后自动切换到初始页面,以便于对意愿功能重新请求(如点击按钮重新请求)。
57.在本技术的示例性实施例中,一键返回模式(如滑动撤销确认事件)实现了用户意图变更时的便捷操作,避免用户手动返回、多次操作的交互弊病。
58.在本技术的示例性实施例中,在目标信息和识别结果校验正确时可以确定所述识别结果的置信度;并根据所述置信度确定相应的执行模式。
59.在本技术的示例性实施例中,所述执行模式可以包括:自动控制模式和一键确认模式。
60.在本技术的示例性实施例中,所述自动控制模式可以包括:直接进入所述识别结
果对应功能的执行流程。
61.在本技术的示例性实施例中,所述自动控制模式又可以称为自动确认模式,该模式可以包括但不限于:通过人机交互方式(如显示或语音)直接提供对所述目标信息已确认的结果信息,并在预设时长内未检测到对所述结果的更改命令或撤销命令时,直接进入被确认信息对应功能的执行流程;
62.在本技术的示例性实施例中,所述一键确认模式可以包括:提供一个或多个选项控件,以通过所述选项控件进行一件确认;
63.其中,所述选项控件用于表征所述识别结果的正确性;或者,用于表征可能的正确选项。
64.在本技术的示例性实施例中,所述一键确认模式可以包括但不限于:通过所述人机交互方式提供一个或多个待确认选项(即上述的选项控件),其中,所述一个或多个待确认选项可以包括所述目标信息;所述待确认选项中除所述目标信息以外的选项可以依次为按照置信度和/或偏好度从高到低进行排序给出的备选项;所述一个或多个待确认选项中的任意一个被选择时实现一键确认,并直接进入被选择的选项对应功能的执行流程。
65.在本技术的示例性实施例中,所述根据所述置信度确定相应的执行模式可以包括:
66.在所述置信度大于或等于第一置信度阈值时,按照所述识别结果进入所述自动控制模式。
67.在本技术的示例性实施例中,所述根据所述置信度确定相应的执行模式还可以包括:
68.在所述置信度小于第一置信度阈值,且大于或等于第二置信度阈值时,进入所述一键确认模式;其中,所述第一置信度阈值大于所述第二置信度阈值。
69.在本技术的示例性实施例中,如图5所示,当终端接收到的目标信息通过安全控制模块时(即所述置信度大于或等于第一置信度阈值,确认识别结果可信),终端可以自动执行确认操作,并在显示模块中显示已确认的结果信息,当终端接收到的目标信息没有通过安全控制模块时(即所述置信度小于第一置信度阈值且大于或等于第二置信度阈值,识别结果不可信),终端可以在显示模块中显示识别结果并请求用户根据自己的意图选择目标选项并完成确认操作,随后在显示模块中显示已确认的结果信息,最后终端设备响应此次确认操作后的事件。
70.在本技术的示例性实施例中,安全控制模块内的逻辑控制方法可以如图6所示,可以为将目标信息置信度(或可靠度、安全性、得分分值等标识目标信息的可信程度的参数)和用户习惯偏好度降序排列,然后判断目标信息的综合置信度是否超过设定的阈值(如上述的第一置信度阈值),超过阈值则可以调用自动确认交互方式,未超过阈值则可以继续判断目标信息的综合用户习惯偏好度是否超过设定的阈值;如果超过阈值,则可以调用一键确认交互方式同时将偏好度最高的项目信息设置为默认的处于选中状态的选项,如果未超过阈值,则可以调用一键确认交互方式同时将置信度最高的项目信息设置为默认的处于选中状态的选项。
71.在本技术的示例性实施例中,自动确认模式,即自动控制模式或称自动确认交互方式,如图7所示,在识别结果通过安全控制模块后,可以根据置信度(例如,确认识别结果
可信)执行该种交互方式,并可以在终端设备上实现该种交互方式。该终端可以包含显示模块(如触控显示模块),显示模块内主体部分区域显示确认结果信息,该区域可以通过颜色、字体、闪烁、动态视觉效果等技术吸引用户注意力,如果用户意图与显示确认结果信息一致,则无需其他操作,限定的时间到达后可以自动完成确认事件。自动确认模式实现了高置信度信息自动确认,可以有效获取用户意图,避免确认交互时用户误点击、误操作的情况。
72.在本技术的示例性实施例中,一键确认模式,即一键确认交互方式,如图8所示,在目标信息通过没有通过安全控制模块(例如,识别结果不可信)后可以执行该种交互方式,并可以在终端设备上实现该种交互方式。该终端设备可以包含显示模块(如触控显示模块),显示模块内主体部分区域可以包含供用户点选的需确认的结果信息和确认按钮(即上述的一键确认模式中提供的一个或多个选项控件),可以默认高可靠性、高置信度、高得分、用户偏好度大的结果信息放置于区域顶部,并且处于选中状态,如果默认项信息与用户意图一致则点击确认按钮,如果默认项信息与用户意图不一致则手动点选目标选项后确认按钮自动执行无需再次点击,完成一键确认交互方式。一键确认模式实现了推送最可能的选项为默认选中项,可以推测用户意图,单按钮设置避免确认交互时用户误点击、误操作的情况。
73.在本技术的示例性实施例中,所述执行模式还可以包括:一键撤销模式;
74.所述根据所述置信度确定相应的执行模式可以包括:在所述置信度小于第二置信度阈值时,进入所述一键撤销模式;和/或,
75.所述方法还可以包括:在执行所述自动控制模式后,提供进入所述一键撤销模式的选项控件,以在所述一键撤销模式的选项控件被触发后撤销所述自动控制模式对应的执行流程。
76.在本技术的示例性实施例中,所述一键撤销模式可以通过人机交互方式提供所述目标信息对应选择项以及一键撤销选项;当所述一键撤销选项被选择时撤销所述自动控制模式对应的执行流程。
77.在本技术的示例性实施例中,该一键撤销模式可以采用滑动撤销确认事件交互方式,如图9所示,在显示模块内主体部分区域显示的确认结果信息与用户意图不一致时可以执行该种交互方式,并可以在终端上实现该种交互方式。该终端可以包含触控显示模块,显示模块内主体部分可以显示确认结果信息,如果用户意图与显示确认结果信息不一致,用户可以点选主体部分区域,此时可以激活撤销按钮从显示模块底部滑出,用户可以将选中的主体部分区域拖拽到撤销按钮处,即完成一键滑动撤销确认事件的操作。一键返回重新请求实现了信息自检错误后自动返回再次请求,避免用户手动返回、多次操作的交互弊病。
78.在本技术的示例性实施例中,该一键撤销模式还可以在发现所述自动控制模式对应的执行流程错误时,通过用户对当前的执行流程实施一键撤销。
79.在本技术的示例性实施例中,上述的显示模块的显示和触控功能也可以由语音交互模块的语音播报和语音控制功能替代。
80.在本技术的示例性实施例中,所述方法还可以包括:在获取所述目标信息的识别结果后,确定所述识别结果对应的偏好度,根据所述置信度和所述偏好度确定相应的执行模式。
81.在本技术的示例性实施例中,可以仅对识别结果进行置信度判断或仅进行偏好度
判断,也可以对目标信息同时进行置信度判断和处理偏好度判断,例如,首先进行置信度判断,再进行处理偏好度判断。
82.在本技术的示例性实施例中置信度判断和偏好度判断方案可以通过预设的安全控制模块实现。
83.在本技术的示例性实施例中,下面分别对置信度判断和偏好度判断进行详细介绍。
84.在本技术的示例性实施例中,如图3所示,对所述识别结果进行置信度判断可以包括步骤s201-s203:
85.s201、检测所述目标信息对应的控制指令所对应的执行功能与所述识别结果中所反馈的功能描述和/或功能展示的匹配程度;
86.s202、根据所述匹配程度给予相应的置信度评分;
87.s203、将所述置信度评分与预存的置信度阈值(如上述的第一置信度阈值)相比较,当所述置信度评分大于或等于所述置信度阈值时,判定所述识别结果可信;当所述置信度评分小于所述置信度阈值时,判定所述识别结果不可信。
88.在本技术的示例性实施例中,该置信度可以采用可靠度、安全性、匹配度、匹配得分等任意标识识别结果的可信程度的参数替换。
89.在本技术的示例性实施例中,上述的匹配程度可以通过对两者(控制指令所对应的执行功能与所述识别结果中所反馈的功能描述和/或功能展示)的一个或多个功能特征的符合程度来判断,例如,当该控制指令为烤披萨时,该执行功能对应的食材应该为披萨,对应的加热方式为上下同时加热,烤盘位置为中间层;如果关于烤披萨这一控制指令的识别结果是烤箱内的食材图像信息,则该食材图像中所包含的食材信息、加热方式信息、烤盘位置信息等应该与上述的执行功能对应的信息相同,至少食材信息应该相同,因此,根据两者中食材信息、加热方式信息、烤盘位置信息等这些功能特征中至少一个功能特征的符合程度,可以确认两者的匹配程度,当两者的匹配程度较高时,可以给予较高的置信度评分,当两者的匹配程度较低时,可以给予较低的置信度评分。
90.在本技术的示例性实施例中,可以对上述的多个功能特征进行比较,并根据不同的匹配程度给予不同的匹配程度分值,其中,匹配程度越高,该匹配程度分值可以越高,匹配程度越低,该匹配程度分值可以越低。在比较完成后可以将获得的多个匹配程度分值进行加权计算,最后得出该置信度评分,其中,进行加权计算时的权重系数可以根据不同的功能特征分别设置为不同的数值,功能特征重要性越大,权重系数可以越大,功能特征重要性越小,权重系数可以越小。
91.在本技术的示例性实施例中,设定的置信度阈值(如第一置信度阈值),在本技术实施例方案中可以并不固定,可以根据识别结果的使用场景不同而不同。例如,智能烹饪设备食材识别后确认食材信息并执行自动烹饪程序的场景,可以要求识别结果的置信度阈值不低于90%;人脸识别后确认信息并进行货币支付操作的场景中,可以要求识别结果的置信度阈值不低于95%;火情监控时检测到火情后确认信息并进行预警操作的场景中,可以要求识别结果的置信度阈值更高,例如98%。
92.在本技术的示例性实施例中,所述设定的置信度阈值,对于同样的识别结果可以产生不同的后续响应,则设定的置信度阈值也可以不同,例如人脸识别后产生的识别结果
经过确认操作后,一个响应可以是进行货币支付,另一个响应可以是进行门禁开启,则前者的设定置信度阈值须更高。
93.在本技术的示例性实施例中,如图4所示,对所述目标信息进行偏好度判断可以包括步骤s301-s304:
94.s301、获取与所述识别结果中所反馈的功能描述和/或功能展示所对应功能的偏好相关数据。
95.在本技术的示例性实施例中,所述获取与所述识别结果中所反馈的功能描述和/或功能展示所对应功能的偏好相关数据可以包括:
96.获取与所述识别结果中所反馈的功能描述和/或功能展示所对应功能的历史执行数据;
97.根据所述历史执行数据统计对所述功能的执行偏好;
98.将所述功能的多种执行参数按照所述执行偏好进行排序;其中,所述按照所述执行偏好进行排序包括:按照执行偏好度逐渐降低的顺序进行降序排列;
99.将排列好的所述多种执行参数作为所述偏好相关数据。
100.在本技术的示例性实施例中,用户习惯偏好度,根据用户在此类请求发出后的诸多历史数据(即历史执行数据)中获得,根据历史数据统计评估此类请求的用户操作意图,从而获取针对此类请求的执行偏好,从而获得偏好相关数据。
101.在本技术的示例性实施例中,例如,对于抽油烟机的控制方案,历史执行数据可以包括:7:10-7:25高速转动10分钟后低速运转5分钟、18:20-18:38高速转动15分钟后低速运转3分钟、7:11-7:29高速转动13分钟后低速运转5分钟、19:00-19:15高速转动11分钟后低速运转4分钟;7:15-7:25高速转动8分钟后低速运转2分钟、18:00-18:20高速转动17分钟后低速运转3分钟、通过这些历史执行数据可以统计出偏好相关数据包括:7:10-7:30启动抽油烟机,高速转动10-15分钟,低速转动2-5分钟,18:00-18:30启动抽油烟机。
102.在本技术的示例性实施例中,通过上述的历史执行数据可知:7:10-7:30启动抽油烟机,高速转动10-15分钟,低速转动2-5分钟,18:00-18:30启动抽油烟机这几个偏好执行数据中,7:10-7:30启动抽油烟机的执行偏好度最大,低速转动2-5分钟次之,高速转动10-15分钟再次之,18:00-18:30启动抽油烟机的执行偏好度最小。这一执行偏好度排序,可以作为抽油烟机控制方案中的偏好相关数据。
103.s302、将所述功能描述和/或功能展示中所涉及的执行参数与所述偏好相关数据进行比较。
104.在本技术的示例性实施例中,例如,当所述功能描述和/或功能展示中所涉及的执行参数为7:15-7:30高速转动8分钟后低速运转7分钟时,与上述的偏好相关数据相比可知,7:15-7:30符合7:10-7:30启动抽油烟机这一最大偏好度,但高速转动8分钟后低速运转7分钟不符合高速转动10-15分钟和低速转动2-5分钟这一偏好。
105.s303、根据比较结果计算所述识别结果的偏好度评分。
106.在本技术的示例性实施例中,所述根据比较结果计算所述识别结果的偏好度评分可以包括:
107.获取所述功能描述和/或功能展示中所涉及的执行参数中与所述偏好相关数据中相匹配的执行参数;
108.将所述相匹配的执行参数根据相应的加权数值进行加权计算,获取所述偏好度评分;
109.其中,所述加权数值根据相应的执行参数的偏好度设置;所述偏好度越高,所述加权数值越大,所述偏好度越低,所述加权数值越小。
110.在本技术的示例性实施例中,可以根据与不同的偏好相关数据的符合程度分别获取一个偏好符合程度分值,其中,符合程度越高,偏好符合程度分值可以越高,最后可以对获得的多个偏好符合程度分值进行加权计算,其中,加权系数可以根据不同的偏好相关数据的偏好度来确定,某一偏好相关数据的偏好度越高,则对应的加权系数可以越高,反之,某一偏好相关数据的偏好度越低,则对应的加权系数可以越低。
111.在本技术的示例性实施例中,根据上述实施例可知,7:15-7:30符合7:10-7:30启动抽油烟机这一最大偏好度,但高速转动8分钟后低速运转7分钟不符合高速转动10-15分钟和低速转动2-5分钟这一偏好。而且7:15-7:30这一时间点与7:10-7:30启动抽油烟机这一偏好的符合程度较高,因此可以获得较高的偏好符合程度分值,由于高速转动8分钟后低速运转7分钟不符合高速转动10-15分钟和低速转动2-5分钟这一偏好,因此,后两项的偏好符合程度分值可以较低,例如为0。另外,由于7:10-7:30启动抽油烟机的偏好度最大,因此,7:15-7:30对应的偏好符合程度分值的相应加权系数也比较高。
112.s304、将所述偏好度评分与预存的偏好度阈值相比较,当所述偏好度评分大于或等于所述偏好度阈值时,判定所述识别结果为偏好信息;当所述偏好度评分小于所述偏好度阈值时,判定所述识别结果为非偏好信息。
113.在本技术的示例性实施例中,设定的偏好度阈值(或称习惯偏好度阈值)可以根据终端中此类请求的确认操作频次和历史记录综合判断。
114.在本技术的示例性实施例中,通过将计算出的偏好度评分与偏好度阈值相比较可以确定出当前目标信息的识别结果是否为用户的习惯信息或偏好信息。
115.在本技术的示例性实施例中,对所述识别结果进行置信度判断和偏好度判断可以包括:
116.当对所述识别结果进行置信度判断的结果为所述置信度评分小于所述置信度阈值(如前述的第一置信度阈值)时,对所述识别结果进行偏好度判断,并将对所述识别结果的偏好度判断结果作为所述识别结果的判断结果;或者,
117.对所述识别结果分别进行置信度判断和偏好度判断,将置信度判断中获得的置信度评分以及偏好度判断中获得的偏好度评分进行加权计算,获得综合判断评分,并将所述综合判断评分与预设的综合判断阈值相比较,当所述综合判断评分大于或等于所述综合判断阈值时确认所述识别结果可信;当所述综合判断评分小于所述综合判断阈值时确认所述识别结果不可信。
118.在本技术的示例性实施例中,该实施例方案给出了对置信度判断和偏好度判断均执行时的两种处理实施例方案。
119.在本技术的示例性实施例中,根据判断结果(置信度判断和/或偏好度判断)提供相应的执行模式,实现了对所述识别结果进行初步自动处理。
120.在本技术的示例性实施例中,如图6所示,所述根据判断结果提供相应的执行模式,以对所述目标信息进行初步自动处理可以包括:
121.当判定所述目标信息可信和/或所述目标信息为偏好信息时,提供所述自动确认模式;
122.当判定所述目标信息不可信以及所述目标信息是偏好信息时,提供所述一键确认模式;
123.当判定所述目标信息不可信和/或所述目标信息不是偏好信息时,提供所述一键撤销模式。
124.在本技术的示例性实施例中,下面通过几个具体实施例说明本技术实施例方案。
125.在本技术的示例性实施例中,在智能烹饪设备的应用实施例中,例如,饭煲、烤箱等智能烹饪设备基于图像识别的交互类方案,当图像识别食材的置信度高于阈值,则进入自动烹饪控制流程而不与用户发生交互;当置信度低于阈值,则发生交互让用户确认;采用该方案一方面减少了用户介入的次数,另一方面也减少了用户误纠错的几率,提升了图像识别算法的准确率。
126.在本技术的示例性实施例中,在家电领域中智能烤箱上的应用实施例中,如图10所示,所述的终端接收到的目标信息为烤箱内食材图像、食材识别后的食材种类信息和烤盘烤架位置信息时,所述的安全控制模块内的阈值参数(例如置信度阈值)为食材识别结果的置信度得分数值,设定的置信度阈值可以为90分,所述的安全控制模块内存储的用户习惯偏好可以为烤箱进行食材烹饪的适中、焦脆、软嫩等口感偏好。
127.在本技术的示例性实施例中,当在烤箱中放入食材后,可以点击食材识别一键烹饪按钮后,如果食材识别结果的置信度分值高于设定阈值(即置信度阈值,如90分),则可以执行自动确认交互方式,例如,主显示区域显示烤箱内食材图像和食材识别后的确认结果信息,随后响应确认操作的事件,即自动调取对应的烹饪工艺烤制食材。
128.在本技术的示例性实施例中,如果食材识别结果的置信度分值低于设定阈值(如90分),则可以执行一键确认交互方式,主显示区域显示烤箱内食材图像和食材种类的选项(置信度得分最高的食材种类可以处于顶端,并可以默认处于选中状态),当默认选中食材种类与用户意图选项一致时可以点击一键烹饪按钮即可,当默认选中食材种类与用户意图选项不一致时点选目标选项后一键烹饪按钮可以自动使能确认。
129.在本技术的示例性实施例中,在家电领域中语音交互上的应用实施例中,如果终端接收到的目标信息为控制家电的语音指令信息,所述的安全控制模块内的阈值参数(置信度阈值,如第一置信度阈值)可以为衡量语音识别后语音指令信息的可靠度得分的数值,安全控制模块内的用户习惯偏好可以为用户语音表达某项控制指令的表达习惯偏好。以带有语音交互功能的吸油烟机为例,当用户通过语音发出启动、关闭或调节风量大小的指令后,如果语音指令识别结果的可靠度分值(置信度评分)高于设定阈值(置信度阈值,如第一置信度阈值),则可以执行自动确认交互方式(即提供自动确认模式),语音交互模块可以播报确认的指令结果信息,随后响应确认操作的事件,即自动控制油烟机的工作状态。如果语音指令识别结果的可靠度分值低于设定阈值,则可以执行一键确认交互方式(即提供一键确认模式),语音交互模块可以以询问方式播报识别的语音指令结果,当用户意图为询问的肯定答复时回答肯定词即可,当用户意图为询问的否定答复时回答否定词,重新交互。
130.在本技术的示例性实施例中,在安防领域中门禁考勤等管理系统的应用实施例中,终端接收到的目标信息可以为人脸图像信息、指纹图像信息、指静脉或掌静脉图像信息
等唯一性标识自然人的生物特征信息,安全控制模块内的阈值参数(置信度阈值,如第一置信度阈值)为唯一性标识自然人的生物特征信息的匹配度。当活体靠近数据采集设备时设备自动采图并识别,如果生物特征识别结果的匹配度分值(置信度评分)高于设定阈值(置信度阈值,如第一置信度阈值),则可以执行自动确认交互方式(即提供自动确认模式),主显示区域可以显示目标人的确认结果信息,随后响应确认操作的事件,即验证通过、打开闸门或考勤信息录入等。如果生物特征识别结果的匹配度分值低于设定阈值,则可以执行一键确认交互方式(即提供一键确认模式),主显示区域提醒重新验证,或输入密码验证,或请求管理人员帮助。
131.在本技术的示例性实施例中,本技术实施例的终端确认交互方式当终端接收到的识别结果通过安全控制模块的验证(即识别结果可信和/或识别结果为偏好信息)时,终端自动执行确认操作并在显示模块中显示已确认的结果信息,当终端接收到的识别结果没有通过安全控制模块的验证(即识别结果不可信和/或识别结果不是偏好信息)时,终端在显示模块中显示识别结果并请求用户根据自己的意图选择目标选项并完成确认操作,随后在显示模块中显示已确认的结果信息,最后终端响应此次确认操作后的事件。本技术实施例方案可较为准确地获取用户的确认意图,避免用户对于高可靠性的识别结果而进行的重复性确认操作,同时也避免用户误点击、误操作所造成的损失,提升用户交互体验。
132.本技术实施例还提供了一种终端设备1,如图11所示,可以包括处理器11和计算机可读存储介质12,所述计算机可读存储介质12中存储有指令,当所述指令被所述处理器11执行时,实现上述任意一项所述的终端设备的自动控制方法。
133.在本技术的示例性实施例中,终端设备1还可以包括人机交互模块13,当所述指令被所述处理器11和所述人机交互模块13执行时,实现上述一项所述的终端交互方法。
134.在本技术的示例性实施例中,上述方法实施例中的任意实施例均可以适用于该终端实施例中,在此不再一一赘述。
135.本领域普通技术人员可以理解,上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。在硬件实施方式中,在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分;例如,一个物理组件可以具有多个功能,或者一个功能或步骤可以由若干物理组件合作执行。某些组件或所有组件可以被实施为由处理器,如数字信号处理器或微处理器执行的软件,或者被实施为硬件,或者被实施为集成电路,如专用集成电路。这样的软件可以分布在计算机可读介质上,计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的,术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于ram、rom、eeprom、闪存或其他存储器技术、cd-rom、数字多功能盘(dvd)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据,并且可包括任何信息递送介质。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1