一种智能化旅游综合服务系统和方法与流程

1.本发明涉及旅游管理领域，特别涉及一种智能化旅游综合服务系统和方法。


背景技术：

2.世界旅游组织预测，到2020年底，中国国际游客到达数将增至16亿，中国无疑会成为全世界最大的旅游目的地。随着旅游产业和信息技术的快速发展，民众对旅游公共服务的需求也迅速提高。如何解决并满足海量游客的个性化需求，日渐成为各级政府旅游主管部门共同关注的问题。而依靠传统旅游公共服务体系来满足目前不断提升的需求，已经变得越来越困难，因为传统旅游公共服务存在众多弊端，如游客无法及时的了解所游玩地点的实时实地情况以及周边信息，且经常会因为寻找景点、酒店、餐馆等而浪费大量时间，无法享受旅游假期应有的乐趣；导览图无法提供定位、无法判定方向让游客费神又费时；游客在旅游的过程中处于被动地位，而且缺乏互动、分享、咨询等手段，参观后也没有持续关注景区的渠道此外，在旅游的过程中，可能会出现各种突发状况，游客亦可能面临着各种各样的危险，而现存的旅游服务终端无法在游客遇到危险时第一时间发出报警信号请求帮助。
3.这些因素不但制约了旅游业的发展，还降低了游客的旅游体验。对于上述需求，现有的技术对本领域已经进行了一些改进，如cn200810058660一种旅游领域faq中文问答系统实现方法，cn201810691510.6一种旅游咨询管理平台及管理方法。但是，现有技术仍然存在以下缺陷，比如：旅行社提供的信息只能让游客被动地接受，有时候缺少客观性；旅游网站所推出的业务又大同小异，很大程度上游客在整个旅游过程当中需要反复的登录各大网站，整理自己需要的资料，用户体验度较差；目前市场上的旅游系统数据库规模较小，有的甚至没有专业的服务器系统，故不能支持大数据量访问，也不具备向市场大规模推广的条件；旅游相关产品服务较少，不能满足游客的使用需求；可以使用的终端较少；行业内缺少系统的、完善的、综合的、全面的且与旅游相关部门结合的系统平台；尚不存在将旅游者、政府监管部门、景区、旅游服务提供者进行资源整合的管理系统。
4.因此，依托快速发展的智能技术，以游客为中心，以各类旅游参与方为本的智慧旅游公共服务体系建设给旅游业的发展提供了一种全新的思路，开辟了一条更加科学高效、更加人性化的实践路径，而智能化旅游服务平台就是其建设的核心内容之一。


技术实现要素：

5.鉴于上述问题，本发明在上述现有技术的基础上进行改进，提出了一种克服上述问题或者至少部分地解决上述问题的一种智能化旅游综合服务系统及方法，实现快速、准确地为游客提供互动服务。
6.第一方面，本发明提供一种智能化旅游综合服务系统，所述系统包括客户端、服务器以及平台服务中心；所述客户端为游客侧终端；所述服务器为咨询客服侧终端；所述平台服务中心为客户端和服务器提供远程服务；客户端、服务器以及平台服务中心之间通过互联网相连。
7.进一步地，其中，所述客户端包含：
8.定位模块，用于接收gps信号，对客户端位置进行精确定位；规划模块，用于路线规划，给用户规划导航最佳游览；文字采集模块，用于采集所述客户端输入的用户文字数据；语音采集模块，用于采集所述客户端输入的用户语音数据；图像采集模块，用于采集所述客户端的用户实时面部图像数据；客户端通信模块，用于与所述服务器以及所述平台服务中心进行数据交换；求助模块，用于紧急呼救，将求助信息和客户端定位数据发送给服务器。
9.进一步地，其中，所述定位模块包括：
10.接收模块，用于从gps卫星接收gps信号，所述接收模块包括天线元件；检测模块，用于检测所述定位模块的倾斜角度；第一确定模块，用于判断所述接收模块是否接收到足够的gps信号以测量所述定位模块的位置；第一调整模块，用于当所述接收模块没有接收到足够的gps信号时，根据由所述检测模块检测到的倾斜角度来调整所述定位模块的倾斜角度。
11.进一步地，其中，所述检测模块为加速度传感器。
12.进一步地，其中，所述定位模块还包括：
13.计算模块，用于计算所述天线元件的方向范围内的角度范围；第二确定模块，用于判断所述角度范围中是否存在导致gps信号接收产生误差的角度；第二调整模块，用于当所述角度范围中存在导致gps信号接收误差的角度时，调整天线元件的方向范围，在方向范围中剔除导致误差的角度。
14.进一步地，其中，所述定位模块还包括：
15.感知模块，用于感知所述定位模块上的触摸；激活模块，用于感知到所述定位模块上的触摸后，激活天线元件；所述激活是基于由所述检测模块检测到的倾斜角度来选择待激活的天线元件。
16.进一步地，其中，所述服务器包含：
17.服务器通信模块，用于与所述客户端以及所述平台服务中心进行数据交换；存储模块，用于存储数据；数据库模块，用于为系统运行提供空间数据支持。第一处理模块，用于对数据进行处理分析。
18.进一步地，其中，所述平台服务中心包括：
19.平台通信模块，用于与所述客户端以及所述服务器进行数据交换；第二处理模块，用于对所述数据进行数据处理；监控模块，用于接收客户端gps定位数据，进行游客位置监控，以及景区实景的监控；分析模块，用于根据所述用户实时面部图像数据，进行游客的情绪分析；分配模块，用于根据所述文字输入和语音输入、以及游客的情绪分析结果，将游客需求进行匹配或推送给相应的服务器客服人员；推送模块，用于向客户端推送信息；知识库模块，用于根据获取的数据，建立知识库；所述知识库包括：风险识别，互动方案，互动问题和语言知识库信息；绩效管理模块，用于获取服务器的打卡数据，并根据所述打卡数据以及服务器回复互动问题的次数和评价，进行绩效管理；统计模块，用于对游客互动数据进行采集管理，并形成图表数据；展示模块，用于展示统计模块的图表数据。
20.进一步地，其中，所述分析模块，用于根据所述用户实时面部图像数据，进行游客的情绪分析，具体包括：
21.预处理模块，用于对采集的面部图像数据进行预处理，去除头发、背景区域，对面
部图像进行尺度归一化处理，获得人脸轮廓图像；特征提取模块，用于从获得的人脸轮廓图像中提取与情绪相关的特征点，生成人脸特征图像；词汇模块，用于获取情绪词汇，形成情绪词汇集；标注模块，用于对人脸特征图像进行情绪词汇标注，将标注后的人脸特征图像作为训练集；构建模块，用于构建人脸分割模型；训练模块，用于将所述人脸特征图像输入构建的人脸分割模型中进行训练处理，获得情绪分析模型；模型分析模块，用于将所述用户实时面部图像输入训练得到的所述情绪分析模型进行情绪分析。
22.第二方面，本发明提供一种智能化旅游综合服务方法，应用在本发明的智能化旅游综合服务系统中，方法至少包括：
23.步骤1，客户端向服务器发送数据，并传送客户端实时定位信息；所述数据包括文字、语音、图像数据中的一种或多种；
24.步骤2，服务器接收客户端发送的数据，并对收到的数据进行分析处理；
25.步骤3，服务器将分析处理后的数据传送给平台服务中心和客户端；
26.步骤4，平台服务中心接收到服务器传输过来的数据，经过数据处理后，将游客的数据和位置信息以及景区的其他信息显示在监控屏幕上；
27.步骤5，平台服务中心根据文字数据和语音数据、以及游客的实时面部图像数据，将游客需求进行匹配或推送给相应的服务器客服人员；
28.步骤6，平台服务中心将信息推送给客户端。
29.本发明提供的上述技术方案的有益效果至少包括：
30.首先，本发明为智能化旅游管理的实现提供了强有力的数据处理和分析工具。本发明基于文字、语音、图像数据的采集、分析、处理，逐步形成旅游行业的智能数据，支持分析模型的加载，将数据图形化、可视化，在此基础上提供综合服务管理平台，分别给个人游客及旅游客服部门提供服务。
31.其次，本发明以智能终端为载体，以互联网络、移动无线互联网络为传输工具，整合各项技术，实现主动位置感知、旅游信息主动引导、互动信息、智能分析服务以及数据支持服务。让每一个个体的旅游者能够体验到贴身的旅游服务，为游客自身及时安排和调整工作与旅游计划提供数据支持；此外，本发明将为旅游客服部门提供旅游管理的工具，建立应急处理平台，也可与内部信息化信息实现对接，为实现各景区景点及旅游服务监管、决策制定提供工具及数据支持。
32.再次，本发明的gps精确定位方法，通过对设备的调整，可以有效控制gps定位误差的产生或者降低误差对gps信号精度的不利影响，极大地提高了客户端的gps定位精度，为旅游景区综合服务的智能决策提供真实可靠的位置依据。
33.最后，本发明特别设计的游客情绪分析功能，更是快速、精准地实现了情绪识别功能，进而高效准确地匹配客服，极大地提高了顾客对旅游服务的满意度。这是由于本发明的所构建的人脸分割模型，其噪声抑制能力强。传统分割得到的二值图，右下角会出现严重噪声，而相比之下，本发明方法对噪声更鲁棒。同时，随着图像数据规模的增大，精度也会显著提高，而同样的数据量，采用本发明的人脸处理方法的速率明显加快。
34.本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
35.下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
36.附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。
37.图1为本发明智能化旅游综合服务方法流程图；
38.图2为本发明智能化旅游综合服务系统的概念图；
39.图3为本发明客户端的架构示意图；
40.图4为本发明服务器的架构示意图。
41.图5为本发明平台服务中心的架构示意图。
具体实施方式
42.下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
43.参照图2所示，本发明实施例提供一种智能化旅游综合服务系统，所述系统包括客户端、服务器以及平台服务中心；所述客户端为游客侧终端；所述服务器为咨询客服侧终端；所述平台服务中心为客户端和服务器提供远程服务；客户端、服务器以及平台服务中心之间通过互联网相连。
44.其中：客户端12和服务器10，可根据各自的权限登录平台服务中心。
45.比如客户端可以发送互动信息并获取反馈信息，还可以发布与旅游有关的资讯，如旅游攻略、旅游照片，注意事项等等；在一个实施例中，参照图3所示，具体地，客户端包括：定位模块，用于接收gps信号，对客户端位置进行精确定位；规划模块，用于路线规划，给用户规划导航最佳游览；文字采集模块，用于采集所述客户端输入的用户文字数据；语音采集模块，用于采集所述客户端输入的用户语音数据，所述用户语音数据为多声源下的混合音频流数据。；图像采集模块，用于采集所述客户端的用户实时面部图像数据；客户端通信模块，用于与所述服务器以及所述平台服务中心进行数据交换；求助模块，用于紧急呼救，将求助信息和客户端定位数据发送给服务器，通过无线网络与平台服务中心相连。
46.游客遇到险情时能通过系统一键式报警，第一时间完成报警与位置信息发送，快速提供救援；通过系统自动准确分析与信息发送，在短时间内与空间拓扑关系最邻近工作人员取得联系，工作人员利用平台自动智能导航信息迅速赶到事件地点；在有游客走失情况下，旅游区相关工作人员能通过服务器提取走失游客信息及走失游客定位位置附近监控视频及时找出走失人员，包括第一时间的报警/抓图/特殊声音提示，实现复杂游客场景中的目标游客准确定位。
47.在一个实施例中，客户端包括中央处理器通cpu，它是一个主控单元。cpu控制定位模块的每个模块的操作。定位模块的每个模块与中央处理器通过总线相连。rom存储设备以及闪存也与中央处理器相连。只读存储器预存由cpu执行的程序数据用于控制定位模块的操作。闪存存储各种数据，例如实时人脸图像数据、地图信息和语音数据。
48.在一个实施例中，客户端包括液晶显示器(lcd)，显示地图信息、文字信息、图像数据等。游客可通过触控触控面板进行操作。
49.在一个实施例中，客户端包括电池用作动力源，电池充电器与电池连接。此外，外部dc电源可连接到dc输入连接器，驱动动力通过直流输入连接器从外部供电或来自充电电池。电池充电器可内置于客户端，电池可从客户端上拆卸进行分开充电。
50.在一个实施例中，客户端包括耳机。耳机与fm天线集成在一起，耳机天线可以连接到插孔。
51.在一个实施例中，客户端包括卡槽，外部介质如sd卡可插入卡槽中。中央处理器可通过卡槽将数据存入sd卡，还可以读取和再现存储在sd卡中的数据。
52.系统可以获取客户端的定位数据或获取客户端在地图上指定的地位数据。可根据游客的定位数据结合游客的互动信息，推送给对该定位数据所对应景区熟悉的客服，做到精准互动，快速解决问题。进一步地，可以通过gps定位方式(主动获取客户端的gps定位数据，或由客户端指定的gps定位数据)，定位互动地点的周边环境及设施信息，与地图信息结合，反馈给游客所需的信息。
53.进一步地，所述定位模块包括：接收模块，用于从gps卫星接收gps信号，所述接收模块包括天线元件。天线元件可以被电激活并用于接收gps信号。电激活可以默认设置，也可以根据用户指令或触摸来选择和设置。天线元件的数量可以是三个或更多个。当天线元件从三个gps卫星接收信号时，可以测量客户端的二维位置(经纬度)；当接收来自四个gps卫星的信号时，可以测量客户端的三维位置(纬度，经度和高度)。检测模块，用于检测所述定位模块的倾斜角度；第一确定模块，用于判断所述接收模块是否接收到足够的gps信号以测量所述定位模块的位置；第一调整模块，用于当所述接收模块没有接收到足够的gps信号时，根据由所述检测模块检测到的倾斜角度来调整所述定位模块的倾斜角度。
54.在一个实施例中，cpu基于来自gps定位模块的位置测量数据检查天线元件的gps信号接收状态。具体地，检查例如接收数据中误差的发生率以及接收信号的信号强度是否足以用于gps信号检测。
55.在一个实施例中，cpu确定是否可以获取四个或更多个gps卫星的信号，并计算客户端的纬度，经度和高度三维数据。当天线元件仅获取三颗或更少的gps卫星而不能获得三维位置测量数据时，显示提示框，以提示游客调整客户端的倾斜角度使得天线元件可以指向天顶。提示框向游客显示客户端的当前倾斜角度和客户端的最佳倾斜角度。参照提示框的显示，用户纠正客户端的握持角度，使得客户端的倾斜角度可以改善接收状态。
56.优选地，所述检测模块为加速度传感器。加速度传感器用于检测客户端主体的倾斜度(倾斜角)，来确保gps信号的最佳接收状态。
57.客户端于由游客随身携带，因此，客户端容易在倾斜状态下使用。如果客户端由于天线元件倾斜且偏离天顶，就不容易获得足够的信号强度。而且，来自低空gps卫星的信号容易受到多径误差的影响。多径误差是由gps卫星接收的无线电波经地面附近的建筑物和树木或地面反射后引起的。因此，特别是当客户端在高层建筑多的城市中，gps信号的接收状态由于多径等而恶化。
58.为了解决该问题，进一步地，所述定位模块还包括：计算模块，用于计算所述天线元件的方向范围内的角度范围；第二确定模块，用于判断所述角度范围中是否存在导致gps
信号接收产生误差的角度；第二调整模块，用于当所述角度范围中存在导致gps信号接收误差的角度时，调整天线元件的方向范围，在方向范围中剔除导致误差的角度。
59.如此，根据方向范围调整处理，即使在客户端由于倾斜，可以设置调整天线的方向范围，从而可以仅接收来自有效gps卫星的信号，而不接收来自可能引起误差的gps卫星的信号。由加速度传感器检测到客户端的倾斜角度来可能引起误差的gps卫星的角度范围。因此，可以根据客户端的倾斜角度设置天线元件的最佳有效方向范围，稳定地提供高精度的测量。
60.进一步地，所述定位模块还包括：感知模块，用于感知所述定位模块上的触摸；激活模块，用于感知到所述定位模块上的触摸后，激活天线元件；所述激活是基于由所述检测模块检测到的倾斜角度来选择待激活的天线元件。
61.感知模块包括触摸传感器，也可使用光学传感器代替触摸传感器，实现类似的功能。光学传感器可以检测人手或手臂接触的设备上的位置的亮度(照度)和设备周围的亮度。另外，还可以使用能够检测人体温度的体温传感器，或者可以使用能够检测由抓握或按压该装置引起的压力的压力传感器。
62.参照图4所示，本发明旅游综合服务系统的服务器包含：服务器通信模块，用于与所述客户端以及所述平台服务中心进行数据交换；存储模块，用于存储数据；数据库模块，用于为系统运行提供空间数据支持。第一处理模块，用于对数据进行处理分析。
63.以服务器为例，登录后，可进行打卡操作(比如点击签到、面部签到)处于上班模式并记录工作绩效、及时回复游客的互动信息，获取平台服务中心发送的考培信息和管理信息等。
64.另外，参照图2所示，上述旅游综合服务系统还可以包括数据采集终端，比如景区内的监控探头，用于实时获取景区内的人流、密集情况；比如门票闸机，用于统计每天或者间隔时间段内通过的客流量；还可以获取web端采集的与旅游相关的互动数据。
65.本发明实施例提供的旅游综合服务系统，通过物联网及云计算等技术，结合平台服务中心软件，可将游客的互动问题及时解答反馈给游客，实现了电子交互化，同时也对景区的客服进行管理和监督；也提升了游客的使用体验。其中平台服务中心软件，可采用多种语言开发，比如采用java语言进行开发，结合h5对应用进行前端展现，在不同设备上将采取多种开发语言，c#，java，ios的objectc，支持各种移动端和平板电脑包括触摸屏设备的操作。比如客户端为智能手机或ipad时，也可支持移动端的ios系统和android系统。
66.数据库以主流数据库为主，mysql，oracle，informix，db2等，所有数据源都以统一的数据库为主。
67.在一个实施例中，参照图5所示，本发明旅游综合服务系统的平台服务中心包括：平台通信模块，用于与所述客户端以及所述服务器进行数据交换；第二处理模块，用于对所述数据进行数据处理；监控模块，用于接收客户端gps定位数据，进行游客位置监控，以及景区实景的监控；分析模块，用于根据所述用户实时面部图像数据，进行游客的情绪分析；分配模块，用于根据所述文字输入和语音输入、以及游客的情绪分析结果，将游客需求进行匹配或推送给相应的服务器客服人员；推送模块，用于向客户端推送信息；知识库模块，用于根据获取的数据，建立知识库；所述知识库包括：风险识别，互动方案，互动问题和语言知识库信息；绩效管理模块，用于获取服务器的打卡数据，并根据所述打卡数据以及服务器回复
互动问题的次数和评价，进行绩效管理；统计模块，用于对游客互动数据进行采集管理，并形成图表数据；展示模块，用于展示统计模块的图表数据，所述图表数据包括分析报告和互动报告。
68.平台服务中心11，可以是服务器集群，比如可以包括：前端网关服务器集群、连接服务器集群、核心业务服务器集群、数据库服务集群和文件服务器；其中：前端网关服务器集群，分别与客户端和服务器以及核心业务服务器集群连接；用于转发客户端的请求以及将服务器的响应返回给对应的客户端；连接服务器集群，用于处理客户端的服务请求的接受、连接会话的建立、维持和中断服务；核心业务服务器集群，用于对用户登录进行认证、对用户权限进行验证、执行互动信息、旅游相关资讯的发布、推送、回应以及实施的逻辑，并在必要时对数据库进行读写操作；数据库集群，用于持久化存储旅游综合服务系统的所有数据；文件服务器，用于存储旅游综合服务系统的所有文件。上述连接服务器集群还可以包括：pc连接服务器集群和移动终端连接服务器集群；上述pc连接服务器集群用于为运行于pc上的客户端提供服务；上述移动终端连接服务器集群用于为运行于移动终端上的客户端提供服务。
69.进一步地，所述处理模块，用于处理所述用户文字数据和用户语音数据，至少包括：语音分离模块，用于将所述混合音频流数据分离为各声源对应的单独音频流数据；语音提取模块，用于提取单独音频流数据中的语音片段的音频特征向量；语音识别模块，用于识别所述音频特征向量中的语音需求。
70.具体地，比如当获取的是游客的文字信息，可根据文字所述的语种类别，比如汉语、英语、法语等，在互动数据库中匹配相应的关键字进行查找，根据该关键词显示多个问题列表，供游客进一步选择；或者是一开始就选择在线互动，根据语种匹配相应的客服。可形成智能化的旅游互动解答，且可适应于多语言，做到支持关键字响应。
71.比如当获取的是游客的语音输入信息，可根据现有技术中的语音识别模式，识别其所属语种匹配相应语种的客服；或者根据语音识别将其转换为文字，再根据文字依据上述文字互动信息进行处理，此处不再赘述。进一步，在语音识别的同时，还可以通过识别其音色、语速和语调来识别游客的情绪状态，比如当语速大于12分钟，语调高于7，则认为游客情绪较激动，处于愤怒的状态。
72.再比如通过获取游客的实时面部图像数据，根据人脸识别技术，可以识别人脸表情是否为焦虑、愤怒、高兴、伤心等。
73.本实施例中，还可以通过利用摄像头的图像捕捉，采集动态实时人流数据以及对人脸进行情绪分析采集，对完整互动过程进行数据解析。进一步地，通过摄像头可进行远程监督互动站台，并可通过远程摄像头进行实时对话进行管理。
74.平台服务中心既能进行游客一键应急电话的接听及调控，也能进行预警信息等的发布。基于精确的客户端定位，系统能够提供救援路线与处置方案智能生成服务：系统紧急分析，实时得到重点景区实景状况及救援最优路线的生成；改变传统工作人员的工作状态由施救变为隐患预警，更便捷的提供给施救人员更多的事故地点环境信息以及被施救人员位置信息，同时智能化的播报由当前位置到施救地点的最短路线与三维实景地图，并预测到达的最短时间和可能障碍，实现安全导航；自动生成景区危机的救援处理方案；实时得到重点与隐患景区实景图像状况及游玩最优路线的生成，并实现部分智能决策知识库功能；
系统记录和回放模拟游客的不安全位置行为，为旅游景区建设提供自动化学习平台，归纳新的隐患点及分析已有防护措施不足的地方，为景区改进安全防护措施提供容易获得、真实可靠的依据，同时能完善建立更可靠的智库和决策库；在景区的服务监控中心中，能实时监控查看景区内所有普通视频监控视频、游客的定位信息以及景区工作人员在景区的分布；当服务器检测到某一景点游客容纳量达到该景点的容纳上限时，服务器自动向景区服务监控中心、景区工作人员客户端以及客户端发出预警信息；当客户端离开景区范围，服务器停止对其提供服务。
75.在一个实施例中，分析模块包括：预处理模块，用于对采集的面部图像数据进行预处理，去除头发、背景区域，对面部图像进行尺度归一化处理，获得人脸轮廓图像；特征提取模块，用于从获得的人脸轮廓图像中提取与情绪相关的特征点，生成人脸特征图像；词汇模块，用于获取情绪词汇，形成情绪词汇集；标注模块，用于对人脸特征图像进行情绪词汇标注，将标注后的人脸特征图像作为训练集；构建模块，用于构建人脸分割模型；训练模块，用于将所述人脸特征图像输入构建的人脸分割模型中进行训练处理，获得情绪分析模型；模型分析模块，用于将所述用户实时面部图像输入训练得到的所述情绪分析模型进行情绪分析。
76.其中，所述特征点包括眉毛、眼睛、鼻子、嘴唇、下巴。
77.本实施例中，识别游客的情绪目的，可以让客服了解客户的状态，实现人文关怀，对游客进行有针对性的安抚情绪和解决问题。
78.进一步地，所述构建模块，用于构建人脸分割模型，具体包括：
79.融合模块，用于基于所述人脸特征图像训练集，进行不同尺度的特征融合，形成特征图cf；获取模块，用于根据所述特征图cf，得到人脸情绪的概率图pf和阈值图tf；分割模型模块，用于结合所述概率图pf和阈值图tf，构建人脸分割模型：第一定义模块，用于定义正样本损失和负样本损失；第二定义模块，用于定义所述人脸分割模型总的损失函数。
80.进一步地，所述融合模块，用于基于所述人脸特征图像训练集，进行不同尺度的特征融合，形成特征图cf，具体包括：
81.缩放模块，用于进行多层卷积、填充、池化操作，将所述训练集中人脸特征图像分别放大比例至2、4、8、16倍；层次模块，用于提取训练集中人脸特征图像的不同层次特征；采样模块，用于进行图像下采样，将各层次特征调整至对应尺寸规模；多层次融合模块，用于进行各层次特征的特征融合；拼接模块，用于将各层次融合特征统一缩放比例至4倍，拼接形成特征图。
82.其中，分割模型模块，用于结合所述概率图pf和阈值图tf，构建人脸分割模型，具体包括：
83.结合概率图pf和阈值图tf，构建人脸分割模型，得到人脸图像的二值分割图：
[0084][0085]bi，j
表示二值图里第i行、第j列的像素取值；p
i，j
代表概率图里第i行、第j列的像素值；t
i，j
代表阈值图里第i行、第j列的像素值，k是调节系数。
[0086]
其中，第一定义模块，用于定义正样本损失和负样本损失，具体包括：
[0087][0088][0089]
其中，l+为正样本损失，l-为负样本损失，k为调节系数，x＝p
i，j-t
i，j
。
[0090]
其中，第二定义模块，用于定义所述人脸分割模型总的损失函数，具体包括：
[0091]
l＝l
p
+α*lb+β*l
t
[0092]
其中，l是总损失函数，它是由概率图损失l
p
、二值图损失lb及阈值图损失l
t
加权求和得出，α和β为缩放系数。
[0093]
上述本发明特别设计的游客情绪分析功能，更是快速、精准地实现了情绪识别功能，进而高效准确地匹配客服，极大地提高了顾客对旅游服务的满意度。发明所构建的人脸分割模型，其噪声抑制能力强。传统分割得到的二值图，右下角会出现严重噪声，而相比之下，本发明方法对噪声更鲁棒。发明利用深度卷积层监督学习不同层次的特征，将二值化的阈值可以随网络一起得到训练，增加预测的精度，贴合实际应用场景，提高了算法的鲁棒性。同时，随着图像数据规模的增大，精度也会显著提高，而同样的数据量，采用本发明的处理方法的速率明显加快。
[0094]
进一步的，为了更优的整理旅游攻略、注意事项，本平台服务中心的数据来源可以从各个互动站点获取，也可以通过各种设备采集互动数据，比如网络爬虫采集网上论坛中关于旅游话题的互动问题和答案、或通过其他方式获取社交网站、圈子社区等旅游相关的互动问题、答案，梳理后存储到互动数据库，再由后台进行逻辑处理，对信息进行分析，行成分析报告或各种对外互动数据。通过对游客相关的互动信息进行采集管理，并形成图表，图形的数据分析，包括互动量排名互动相关的各种统计。
[0095]
另外，采用语音识别技术，可以支持各国语言的识别及交互，通过语言识别，在互动数据库中检索答案进行反馈，反馈方式语音提示反馈和文字反馈。反馈的方式，甚至可以以机器人的交互方式或其他电子设备的方式实现。
[0096]
进一步地，如图2所示，可将上述客服终端集成到ai智能设备的机器人12上，并将该ai智能设备机器人投放到景区内，接受游客一对一、点对点的互动，实现人机交互互动。
[0097]
本发明实施例还提供了一种智能化旅游综合服务方法，应用在智能化旅游综合服务系统中，方法至少包括：
[0098]
步骤1，客户端向服务器发送数据，并传送客户端实时定位信息；所述数据包括文字、语音、图像数据中的一种或多种；
[0099]
步骤2，服务器接收客户端发送的数据，并对收到的数据进行分析处理；
[0100]
步骤3，服务器将分析处理后的数据传送给平台服务中心和客户端；
[0101]
步骤4，平台服务中心接收到服务器传输过来的数据，经过数据处理后，将游客的数据和位置信息以及景区的其他信息显示在监控屏幕上；
[0102]
步骤5，平台服务中心根据文字数据和语音数据、以及游客的实时面部图像数据，将游客需求进行匹配或推送给相应的服务器客服人员；
[0103]
步骤6，平台服务中心将信息推送给客户端。
[0104]
由于该方法所解决问题的原理与旅游综合服务系统相似，因此该方法的实施可以
参见前述旅游综合服务系统的实施，重复之处不再赘述。
[0105]
综上，本发明提供的上述技术方案的有益效果至少包括：
[0106]
首先，本发明为智能化旅游管理的实现提供了强有力的数据处理和分析工具。本发明基于文字、语音、图像数据的采集、分析、处理，逐步形成旅游行业的智能数据，支持分析模型的加载，将数据图形化、可视化，在此基础上提供综合服务管理平台，分别给个人游客及旅游客服部门提供服务。
[0107]
其次，本发明以智能终端为载体，以互联网络、移动无线互联网络为传输工具，整合各项技术，实现主动位置感知、旅游信息主动引导、互动信息、智能分析服务以及数据支持服务。让每一个个体的旅游者能够体验到贴身的旅游服务，为游客自身及时安排和调整工作与旅游计划提供数据支持；此外，本发明将为旅游客服部门提供旅游管理的工具，建立应急处理平台，也可与内部信息化信息实现对接，为实现各景区景点及旅游服务监管、决策制定提供工具及数据支持。
[0108]
再次，本发明的gps精确定位方法，通过对设备的调整，可以有效控制gps定位误差的产生或者降低误差对gps信号精度的不利影响，极大地提高了客户端的gps定位精度，为旅游景区综合服务的智能决策提供真实可靠的位置依据。
[0109]
最后，本发明特别设计的游客情绪分析功能，更是快速、精准地实现了情绪识别功能，进而高效准确地匹配客服，极大地提高了顾客对旅游服务的满意度。这是由于本发明的所构建的人脸分割模型，其噪声抑制能力强。传统分割得到的二值图，右下角会出现严重噪声，而相比之下，本发明方法对噪声更鲁棒。同时，随着图像数据规模的增大，精度也会显著提高，而同样的数据量，采用本发明的人脸处理方法的速率明显加快。
[0110]
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
[0111]
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
[0112]
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
[0113]
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
[0114]
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。