基于问诊的中医预诊机器人的人机交互方法及系统与流程

本发明涉及人工智能技术领域，尤其涉及一种基于问诊的中医预诊机器人的人机交互方法及系统。

背景技术：

随着医疗行业的发展以及人们生活水平的提高，人们对医疗资源的需求也更加旺盛。但是由于患者数量较多，医生的时间有限，往往导致患者排队时间过长，出现了看病难的现象。随着科技的发展，目前机器人已经可以代替人类在很多服务场合工作，其可以对大数据进行分析，提取特征得到相关规律。各种医疗机器人不断问世，中医预诊机器人便是其中的一种。

现有的中医预诊机器人大多功能比较单一，例如只能基于中医的预诊方式，对患者进行某一方面的信息采集，例如仅通过人脸识别或舌苔识别的方式采集患者的一些信息，或者仅通过对患者进行脉诊的方式来获取患者的一些信息，对与患者身体状况相关的信息的获取不全面。并且，由于市面上的中医预诊机器人大都未设置用户交互平台，中医预诊机器人采集患者信息后，并不会与患者进行信息的交互。例如当下医院使用频率很高的脉象手环，只是对患者进行脉象采集，与患者的交互性较差甚至无用户交互行为，用户无法及时得知诊断结果。

因此，如何使中医预诊机器人能够基于中医的预诊方式，更好地与患者进行信息的交互，使患者在预诊过程中可以看到自己的身体状况，是目前中医预诊机器人领域亟待解决的问题。

技术实现要素：

本发明提供一种基于问诊的中医预诊机器人的人机交互方法及系统，以解决现有中医预诊机器人与患者的交互性较差的问题。

第一方面，本发明提供一种基于问诊的中医预诊机器人的人机交互方法，所述方法包括：

获取患者咨询病症时发出的患者语音信息；

识别所述患者语音信息对应的语言种类；

根据中医预诊数据库，筛选出与所述病症对应的问诊问题；

将所述问诊问题转换为基于所述语言种类的问诊语音信息；

向患者播放所述问诊语音信息；

获取患者针对所述问诊语音信息作出的问诊回复信息；

根据所述回复语音信息，以及中医预诊数据库，得到基于患者问诊回复信息的预诊结果；

将所述基于患者问诊回复信息的预诊结果发送至中医预诊机器人的触控显示屏的显示界面。

结合第一方面，在第一方面的第一种可实现方式中，根据中医预诊数据库，筛选出与所述病症对应的问诊问题之后，所述方法还包括：

将所述问诊问题，以及回复选项显示到中医预诊机器人的触控显示屏的显示界面；

接收患者在触控显示屏的显示界面选择的回复选项；

根据所述回复选项，以及中医预诊数据库，得到基于患者问诊回复信息的预诊结果。

结合第一方面的第一种可实现方式，在第一方面的第二种可实现方式中，获取患者咨询病症时发出的患者语音信息之前，所述方法还包括：

获取患者的人脸图像和舌苔图像；

根据中医预诊数据库，对所述人脸图像和所述舌苔图像进行分析，得到基于患者面相的预诊结果；

将所述基于患者面相的预诊结果发送至中医预诊机器人的触控显示屏的显示界面。

结合第一方面的第二种可实现方式，在第一方面的第三种可实现方式中，获取患者咨询病症时发出的患者语音信息之前，所述方法还包括：

获取患者的声音信息；

根据中医预诊数据库，对所述声音信息进行分析，得到基于患者声音的预诊结果；

将所述基于患者声音的预诊结果发送至中医预诊机器人的触控显示屏的显示界面。

结合第一方面的第三种可实现方式，在第一方面的第四种可实现方式中，获取患者咨询病症时发出的患者语音信息之前，所述方法还包括：

获取患者的脉象信息；

根据中医预诊数据库，对所述患者的脉象信息进行分析，得到基于患者的脉象信息的预诊结果；

将所述基于患者的脉象信息的预诊结果发送至中医预诊机器人的触控显示屏的显示界面。

结合第一方面的第四种可实现方式，在第一方面的第五种可实现方式中，根据中医预诊数据库，筛选出与所述病症对应的问诊问题的步骤中，根据所述患者的人脸图像和舌苔图像、所述患者的声音信息以及所述患者的脉象信息以及所述病症，从所述中医预诊数据库中筛选出与所述病症对应的问诊问题。

结合第一方面的第五种可实现方式，在第一方面的第六种可实现方式中，所述方法还包括：

根据所述基于患者面相的预诊结果、所述基于患者声音的预诊结果、所述基于患者问诊回复信息的预诊结果，以及所述基于患者的脉象信息的预诊结果，生产最终预诊结果和推荐治疗方案；

将所述最终预诊结果和推荐治疗方案发送至中医预诊机器人的触控显示屏的显示界面。

结合第一方面的第六种可实现方式，在第一方面的第七种可实现方式中，所述方法还包括：

将所述最终预诊结果和推荐治疗方案发送至中医专家端设备，以及将所述最终预诊结果和推荐治疗方案保存至中医预诊机器人数据库。

第二方面，本发明还提供一种基于问诊的中医预诊机器人的人机交互系统，所述系统包括：语音采集装置、语音播放装置、处理器、中医预诊数据库服务器以及触控显示屏；

所述语音采集装置，用于采集患者咨询病症时发出的患者语音信息；

所述处理器，用于获取患者咨询病症时发出的患者语音信息，识别所述患者语音信息对应的语言种类，根据中医预诊数据库，筛选出与所述病症对应的问诊问题，将所述问诊问题转换为基于所述语言种类的问诊语音信息，向患者播放所述问诊语音信息，获取患者针对所述问诊语音信息作出的问诊回复信息，根据所述回复语音信息，以及中医预诊数据库，得到基于患者问诊回复信息的预诊结果，将所述基于患者问诊回复信息的预诊结果发送至中医预诊机器人的触控显示屏的显示界面；

所述语音播放装置，用于向患者播放所述问诊语音信息；

所述中医预诊数据库服务器，用于提供中医预诊大数据；

所述触控显示屏，用于显示预诊结果。

结合第二方面，在第二方面的第一种可实现方式中，所述处理器，还用于在根据中医预诊数据库，筛选出与所述病症对应的问诊问题之后，将所述问诊问题，以及回复选项显示到中医预诊机器人的触控显示屏的显示界面，接收患者在触控显示屏的显示界面选择的回复选项，根据所述回复选项，以及中医预诊数据库，得到基于患者问诊回复信息的预诊结果；

所述触控显示屏，还用于显示所述问诊问题和回复选项，以及接收患者在触控显示屏的显示界面选择的回复选项。

本发明的有益效果如下：本发明提供的一种基于问诊的中医预诊机器人的人机交互方法及系统，通过获取患者咨询病症时发出的患者语音信息，识别患者语音信息对应的语言种类，根据中医预诊数据库，筛选出与病症对应的问诊问题，将问诊问题转换为基于语言种类的问诊语音信息，向患者播放问诊语音信息，获取患者针对问诊语音信息作出的问诊回复信息，根据回复语音信息，以及中医预诊数据库，得到基于患者问诊回复信息的预诊结果，将基于患者问诊回复信息的预诊结果发送至中医预诊机器人的触控显示屏的显示界面，本发明基于中医的预诊方式，结合中医预诊大数据对患者进行预诊，并且能够实时地将预诊的结果显示在触控显示屏上，更好地与患者进行信息的交互，使患者在预诊过程中可以看到自己的身体状况，此外，本发明还可进一步通过基于患者面相、患者声音以及患者的脉象信息，结合中医预诊大数据对患者进行预诊，实现中医的“望”、“闻”、“问”、“切”的功能，得到更加全面的诊断结果。

附图说明

为了更清楚地说明本发明的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种基于问诊的中医预诊机器人的人机交互方法的流程图。

图2为本发明实施例提供的一种基于问诊的中医预诊机器人的人机交互方法的一种可选实施方式的流程图。

图3为本发明实施例提供的一种基于问诊的中医预诊机器人的人机交互方法的另一种可选实施方式的流程图。

图4为本发明实施例提供的一种基于问诊的中医预诊机器人的人机交互方法的又一种可选实施方式的流程图。

图5为本发明实施例提供的一种基于问诊的中医预诊机器人的人机交互方法的又一种可选实施方式的流程图。

图6为本发明实施例提供的一种基于问诊的中医预诊机器人的人机交互方法的又一种可选实施方式的流程图。

图7为本发明实施例提供的一种基于问诊的中医预诊机器人的人机交互系统的示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明具体实施例及相应的附图对本发明技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。以下结合附图，详细说明本发明各实施例提供的技术方案。

请参阅图1，本发明提供一种基于问诊的中医预诊机器人的人机交互方法，所述方法的执行主体可以是处理器，所述方法具体可以包括：

步骤s101，获取患者咨询病症时发出的患者语音信息。

在本实施例中，中医预诊机器人可以设置有语音播放装置，可以向患者发出语音提示，指引患者口述想要咨询的症状类型。或者，也可以通过中医预诊机器人上设置有触控显示屏，显示指引信息，指引患者口述想要咨询的症状类型或者直接在触控显示屏上输入想要咨询的症状类型。

步骤s102，识别所述患者语音信息对应的语言种类。

在本实施例中，可以采用语音合成技术，依据用户语言，自动识别用户语言种类，如中文普通话、英文或其他方言等。

步骤s103，根据中医预诊数据库，筛选出与所述病症对应的问诊问题。

步骤s104，将所述问诊问题转换为基于所述语言种类的问诊语音信息。

步骤s105，向患者播放所述问诊语音信息。

在本实施例中，可以通过语音播放装置播放问诊语音信息。

步骤s106，获取患者针对所述问诊语音信息作出的问诊回复信息。

语音播放装置播放问诊语音信息之后，患者针对问诊语音信息进行回答，中医预诊机器人可通过语音采集装置采集患者作出的问诊回复信息，并发送至处理器。

步骤s107，根据所述回复语音信息，以及中医预诊数据库，得到基于患者问诊回复信息的预诊结果。

步骤s108，将所述基于患者问诊回复信息的预诊结果发送至中医预诊机器人的触控显示屏的显示界面。

问诊，是通过询问患者或其陪诊者，以了解病情，有关疾病发生的时间、原因、经过、既往病史、患者的病痛所在，以及生活习惯、饮食爱好等与疾病有关的情况，均要通过问诊才能了解，故问诊是了解病情和病史的重要方法之一，在四诊中占有重要的位置。在本实施例中，中医预诊机器人的胸部位置可以设置android操作系统的触控显示屏，触控显示屏放在机器人胸部，是与用户进行交互的最佳高度，用户可以通过触控显示屏方便地获知上述基于患者面相的预诊结果，更好地与患者进行信息的交互，使患者在预诊过程中可以看到自己的身体状况。问诊结束将问诊结果进行分析，最后将分析结果告知用户，实现中医的“问”。

请参阅图2，在本发明一种可选的实施方式中，根据中医预诊数据库，筛选出与所述病症对应的问诊问题之后，所述方法还包括：

步骤s201，将所述问诊问题，以及回复选项显示到中医预诊机器人的触控显示屏的显示界面。

步骤s202，接收患者在触控显示屏的显示界面选择的回复选项。

步骤s203，根据所述回复选项，以及中医预诊数据库，得到基于患者问诊回复信息的预诊结果。

在通过语音采集装置和语音播放装置与患者进行交互的同时，本发明的中医预诊机器人也可以通过触控显示屏实时显示交流问题和选项，使用户也可以点击所述显示屏进行问诊，提升用户与中医预诊机器人的交互体验。

请参阅图3，在一种可选实施例中，所述方法还可以包括：

步骤s301，向获取患者的人脸图像和舌苔图像。

在本实施例中，中医预诊机器人可以设置有高清摄像头，高清摄像头与处理器连接，通过高清摄像头捕捉患者的人脸图像和舌苔图像，并将患者的人脸图像和舌苔图像发送至处理器。

步骤s302，根据中医预诊数据库，对所述人脸图像和所述舌苔图像进行分析，得到基于患者面相的预诊结果。

步骤s303，将所述基于患者面相的预诊结果发送至中医预诊机器人的显示屏的显示界面。

在传统中医中，望诊是对病人的神、色、形、态、舌象等进行有目的的观察，以测知内脏病变，中医通过大量的医疗实践，逐渐认识到机体外部，特别是面部、舌质，舌苔与脏腑的关系非常密切。如果脏腑阴阳气血有了变化，就必然反映到体表。本发明通过设置高清摄像头来捕捉患者的人脸图像和舌苔图像，并将患者的人脸图像和舌苔图像发送至处理器，使处理器基于中医预诊大数据，对所述人脸图像和所述舌苔图像进行分析，从而得出基于患者面相的预诊结果，并显示在显示屏上，实现“望闻问切”中的“望”，同时提升患者与中医预诊机器人的交互体验。

请参阅图4，在一种可选实施例中，所述方法还可以包括：

步骤s401，获取患者的声音信息。

在本实施例中，中医预诊机器人可以设置有声音采集装置，声音采集装置可以与处理器实现通信连接。具体可通过语音播放装置提示患者发声，并通过声音采集装置采集患者的声音信息后发送至处理器。

步骤s402，根据中医预诊数据库，对所述声音信息进行分析，得到基于患者声音的预诊结果。

步骤s403，将所述基于患者声音的预诊结果发送至中医预诊机器人的显示屏的显示界面。

闻诊，包括听声音和嗅气味两个方面。主要是听患者语言气息的高低、强弱、清浊、缓急等变化，以分辨病情的虚实寒热。本发明通过声音采集装置采集患者的声音信息，再通过处理器基于中医预诊大数据作出分析，得到基于患者声音的预诊结果，并将预诊结果显示在显示屏上，实现“望闻问切”中的“闻”，同时提升患者与中医预诊机器人的交互体验。

请参阅图5，在本发明一种可选的实施方式中，获取患者咨询病症时发出的患者语音信息之前，所述方法还包括：

骤s501，获取患者的脉象信息。

传统中医中采用指摸脉象的方式获得患者的脉象信息，即“望闻问切”中的“切诊”，是指用手触按病人身体，藉此了解病情的一种方法。不同脉象的形成，与心脏、脉络、气血津液有着密不可分的关系。脉象的不同变化反映了心力强弱、脉络弛张、气血津液虚滞三个方面的变化。由于气血津液都需五脏协同合作才能完成其生化输泄，所以气血津液的虚滞也就反映了五脏功能的盛衰，从而反映于脉，形成不同的脉象。在本实施例中，可以连接脉诊传感器，结合医疗大数据，对用户的脉象进行分析，并通过捕获到的信号以波形的形式展示脉的跳动，并实时将脉象分析结果显示在触控显示屏上，实现中医的“切”。

骤s502，根据中医预诊数据库，对所述患者的脉象信息进行分析，得到基于患者的脉象信息的预诊结果。

骤s503，将所述基于患者的脉象信息的预诊结果发送至中医预诊机器人的触控显示屏的显示界面。

在本发明一种可选的实施方式中，根据中医预诊数据库，筛选出与所述病症对应的问诊问题的步骤中，根据所述患者的人脸图像和舌苔图像、所述患者的声音信息以及所述患者的脉象信息以及所述病症，从所述中医预诊数据库中筛选出与所述病症对应的问诊问题。

请参阅图6，在本发明一种可选的实施方式中，所述方法还包括：

步骤s601，根据所述基于患者面相的预诊结果、所述基于患者声音的预诊结果、所述基于患者问诊回复信息的预诊结果，以及所述基于患者的脉象信息的预诊结果，生产最终预诊结果和推荐治疗方案。

步骤s602，将所述最终预诊结果和推荐治疗方案发送至中医预诊机器人的触控显示屏的显示界面。

步骤s603，将所述最终预诊结果和推荐治疗方案发送至中医专家端设备，以及将所述最终预诊结果和推荐治疗方案保存至中医预诊机器人数据库。

当本次预诊结束，处理器可以将完整预诊结果和推荐治疗方案展示给用户，并传给中医专家，并保存在机器人数据库中。中医预诊机器人可以根据每次的预诊结果，结合大数据，分析出用户日后注意事项，如过敏原、饮食等信息。用户可随时查看自己的预诊记录等相关信息，同时中医预诊机器人会鼓励用户完善康复信息，这样可以进一步的对用户的治疗方案进行调整，使得中医预诊机器人和用户身体健康问题紧密连接，最大限度的提升和用户的交互体验。

由以上实施例可知，本发明提供的基于问诊的中医预诊机器人的人机交互方法，使中医预诊机器人囊括了中医诊断中的“望”、“闻”、“问”、“切”功能，提供了基于android平台实现用户和人工智能中医预诊机器人的交互系统，还可以拥有相应的用户端app及小程序实现后续康复工作及健康管理，在医生或专家问诊之前，利用用户排队期间，由中医预诊机器人完成对用户病症等其他信息的采集工作，用户问诊时，由中医预诊机器人提前将用户信息和预诊结果发给专家，使得专家可以对患者状况了如指掌，节省了医生和患者问诊时间。

请参阅图7，本发明还提供一种基于问诊的中医预诊机器人的人机交互系统，所述系统包括：语音采集装置1、语音播放装置2、处理器3、中医预诊数据库服务器4以及触控显示屏5。

其中，语音采集装置1，用于采集患者咨询病症时发出的患者语音信息。处理器3，用于获取患者咨询病症时发出的患者语音信息，识别患者语音信息对应的语言种类，根据中医预诊数据库，筛选出与病症对应的问诊问题，将问诊问题转换为基于语言种类的问诊语音信息，向患者播放问诊语音信息，获取患者针对问诊语音信息作出的问诊回复信息，根据回复语音信息，以及中医预诊数据库，得到基于患者问诊回复信息的预诊结果，将基于患者问诊回复信息的预诊结果发送至中医预诊机器人的触控显示屏的显示界面。语音播放装置2，用于向患者播放问诊语音信息。中医预诊数据库服务器4，用于提供中医预诊大数据。触控显示屏5，用于显示预诊结果。

在一种可选的实施方式中，处理器3，还用于在根据中医预诊数据库，筛选出与病症对应的问诊问题之后，将问诊问题，以及回复选项显示到中医预诊机器人的触控显示屏的显示界面，接收患者在触控显示屏的显示界面选择的回复选项，根据回复选项，以及中医预诊数据库，得到基于患者问诊回复信息的预诊结果；

触控显示屏5，还用于显示所述问诊问题和回复选项，以及接收患者在触控显示屏的显示界面选择的回复选项。

本发明实施例还提供一种存储介质，本发明实施例还提供一种存储介质，所述存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现本发明提供的基于问诊的中医预诊机器人的人机交互方法的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文：read-onlymemory，简称：rom)或随机存储记忆体(英文：randomaccessmemory，简称：ram)等。

本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。

本说明书中各个实施例之间相同相似的部分互相参见即可。尤其，对于基于问诊的中医预诊机器人的人机交互系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例中的说明即可。

以上所述的本发明实施方式并不构成对本发明保护范围的限定。