用于经由用户演示学习并启用命令的方法和系统与流程

文档序号:27406819发布日期:2021-11-16 00:06阅读:来源:国知局

技术特征:
1.一种用于学习任务的方法,所述方法包括:获得与由电子装置执行的至少一个应用程序相关联的第一信息;记录关于所述至少一个应用程序的用户界面交互的序列;从所述用户界面交互的序列中提取第二信息;基于所述第一信息而从所述第二信息过滤事件或动作中的至少一者;对所述第一信息中所包括的每个元素执行辨别以生成语义本体;以及基于所述语义本体和经过滤的第二信息而生成所述用户界面交互的序列的任务命令。2.如权利要求1所述的方法,其中:所述第一信息包括以下各项中的至少一者:语音命令话语、来自会话的信息或上下文信息;并且所述任务命令被配置为在所述至少一个应用程序上执行以执行任务。3.如权利要求1所述的方法,其中所述第二信息包括系统信息或服务信息中的至少一者,并且处理所述第二信息以理解上下文和状态。4.如权利要求1所述的方法,还包括:从所述用户界面交互中提取元数据;在任务事件队列中对所述元数据和任务信息进行排队;以及基于所述任务事件队列而从所述第二信息进一步过滤事件或动作中的至少一者。5.如权利要求4所述的方法,还包括:向所述用户界面交互的序列的每个元素添加额外的语音或文本数据以获得额外的元数据。6.如权利要求1所述的方法,还包括:基于系统、服务和用于所述任务的脱离上下文的数据通过对文本、图像和用户界面元素进行分类而对所述用户界面交互的序列进行预处理。7.如权利要求1所述的方法,其中所述任务命令被制定为基于用户语音命令而在所述至少一个应用程序上重复地执行,并且所述任务命令包括使用逻辑数据的语义事件序列,所述语义事件序列在执行时在所述至少一个应用程序上实施所述任务。8.一种电子装置,所述电子装置包括:存储器,所述存储器存储指令;以及至少一个处理器,所述至少一个处理器执行包括过程的所述指令,所述过程被配置为:获得与由所述电子装置执行的至少一个应用程序相关联的第一信息;记录关于所述至少一个应用程序的用户界面交互的序列;从所述用户界面交互的序列中提取第二信息;基于所述第一信息而从所述第二信息过滤事件或动作中的至少一者;对所述第一信息中所包括的每个元素执行辨别以生成语义本体;以及基于所述语义本体和经过滤的第二信息而生成所述用户界面交互的序列的任务命令。9.如权利要求8所述的电子装置,其中:所述第一信息包括以下各项中的至少一者:语音命令话语、来自会话的信息或上下文信息;并且所述任务命令被配置为在所述至少一个应用程序上执行以执行任务。
10.如权利要求8所述的电子装置,其中所述第二信息包括系统信息或服务信息中的至少一者,并且处理所述第二信息以理解上下文和状态。11.如权利要求8所述的电子装置,其中所述过程还被配置为:从所述用户界面交互中提取元数据;在任务事件队列中对所述元数据和任务信息进行排队;以及基于所述任务事件队列而从所述第二信息进一步过滤事件或动作中的至少一者。12.如权利要求11所述的电子装置,其中所述过程还被配置为:向所述用户界面交互的序列的每个元素添加额外的语音或文本数据以获得额外的元数据。13.如权利要求8所述的电子装置,其中所述过程还被配置为:基于系统、服务和用于所述任务的脱离上下文的数据通过对文本、图像和用户界面元素进行分类而对所述用户界面交互的所述序列进行预处理。14.如权利要求8所述的电子装置,其中所述任务命令被制定为基于用户语音命令而在所述至少一个应用程序上重复地执行,并且所述任务命令包括使用逻辑数据的语义事件序列,所述语义事件序列在执行时在所述至少一个应用程序上实施所述任务。15.一种非暂时性处理器可读介质,所述非暂时性处理器可读介质包括程序,所述程序在由处理器运行时执行如权利要求1至7中一项所述的方法。

技术总结
一种用于学习任务的方法包括获得与由电子装置执行的至少一个应用程序相关联的第一信息。针对所述至少一个应用程序记录用户界面交互的序列。从所述用户界面交互的所述序列中提取第二信息。基于所述第一信息而从所述第二信息过滤事件或动作中的至少一者。对所述第一信息中所包括的每个元素执行辨别以生成语义本体。基于所述语义本体和经过滤的第二信息而生成所述用户界面交互的所述序列的任务命令。生成所述用户界面交互的所述序列的任务命令。生成所述用户界面交互的所述序列的任务命令。


技术研发人员:金红霞 S.纳马
受保护的技术使用者:三星电子株式会社
技术研发日:2020.03.18
技术公布日:2021/11/15
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1