终端界面操作方法和装置与流程

1.本发明涉及人工智能技术领域，尤其涉及一种终端界面操作方法和装置。


背景技术：

2.目前智能手机的使用越来越普及，广泛应用于出行叫车、就医挂号和消费付款等日常生活的很多方面，给人们生活带来很大便利。
3.但年龄较大的人不会使用智能手机。盲人由于看不到手机界面，也不方便对手机界面进行操作。在没有人帮助的情况下，这些人群使用不了智能手机，无法享受到智能手机带来的便利。即使在远程指导下，可能仍然不会使用。


技术实现要素：

4.本发明提供一种终端界面操作方法和装置，用以解决现有技术中不会使用终端的人无法对终端界面进行操作的缺陷，实现自动对终端界面进行操作。
5.本发明提供一种终端界面操作方法，包括：
6.从终端的界面图像中提取文字，并将用户的语音转换为文字；
7.在所述界面图像中的文字中存在与所述语音对应的文字相匹配的文字的情况下，获取所述相匹配的文字在所述界面图像中的第一位置数据；
8.根据所述相匹配的文字在所述界面图像中的第一位置数据，确定所述相匹配的文字在所述终端的实际界面上的第二位置数据；
9.控制机械臂移动到所述实际界面上的第二位置数据的上方，并根据所述语音对应的文字控制所述机械臂在所述实际界面上的第二位置数据处进行操作。
10.根据本发明提供的一种终端界面操作方法，所述从终端的界面图像中提取文字，包括：
11.从所述界面图像中提取出所述终端的界面区域；
12.计算所述界面区域在所述界面图像中的第三位置数据；
13.根据所述第三位置数据调整拍摄所述界面图像的摄像头的位置；
14.使用调整后的摄像头重新拍摄所述界面图像，从重新拍摄的所述界面图像中提取文字。
15.根据本发明提供的一种终端界面操作方法，所述第三位置数据包括所述界面区域的中点坐标、宽度和长度。
16.根据本发明提供的一种终端界面操作方法，所述根据所述第三位置数据调整拍摄所述界面图像的摄像头的位置，包括：
17.计算所述界面区域的长度和宽度之间的第一比值，以及所述终端的实际界面的长度和宽度之间的第二比值；
18.在所述第一比值不等于所述第二比值的情况下，调整所述摄像头的位置，使得所述摄像头远离所述终端；
19.在所述第一比值等于所述第二比值的情况下，判断所述界面区域的中点坐标与所述界面图像的中点坐标是否相同，并计算所述界面区域的面积与所述界面图像的面积之间的第三比值；
20.在所述界面区域的中点坐标与所述界面图像的中点坐标不相同的情况下，调整所述摄像头的位置，使得调整后的摄像头拍摄的界面图像中界面区域的中点坐标与调整后的摄像头拍摄的界面图像的中点坐标相同；
21.在所述第三比值小于预设阈值的情况下，调整所述摄像头的位置，使得所述摄像头靠近所述终端。
22.根据本发明提供的一种终端界面操作方法，在所述从终端的界面图像中提取文字之前，还包括：
23.在所述界面图像中不存在所述终端的界面区域的情况下，通过语音方式播放所述终端不在所述摄像头的拍摄区域的提示信息。
24.根据本发明提供的一种终端界面操作方法，在所述从终端的界面图像中提取文字，并将用户的语音转换为文字之后，还包括：
25.在所述界面图像中的文字中不存在与所述语音对应的文字相匹配的文字的情况下，控制所述机械臂在所述实际界面上进行滑动操作；
26.重新拍摄所述终端的界面图像，并从重新拍摄的所述界面图像中提取文字；
27.将所述语音对应的文字与重新拍摄的所述界面图像中的文字进行匹配。
28.根据本发明提供的一种终端界面操作方法，在所述根据所述语音对应的文字控制所述机械臂在所述实际界面上的第二位置数据处进行操作之后，还包括：
29.将操作结果通过语音方式进行播放。
30.本发明还提供一种终端界面操作装置，包括摄像头、机械臂和控制模块；
31.所述控制模块包括获取模块、匹配模块、确定模块和控制模块；
32.其中，所述摄像头用于拍摄所述终端的界面图像；
33.所述获取模块，用于从终端的界面图像中提取文字，并将用户的语音转换为文字；
34.所述匹配模块，用于在从所述界面图像中的文字中匹配到所述语音对应的文字的情况下，获取所述语音对应的文字在所述界面图像中的第一位置数据；
35.所述确定模块，用于根据所述语音对应的文字在所述界面图像中的第一位置数据，确定所述相匹配的文字在所述终端的实际界面上的第二位置数据；
36.所述控制模块，用于控制所述机械臂移动到所述实际界面上的第二位置数据，并根据所述语音对应的文字控制所述机械臂在所述实际界面上的第二位置数据处进行操作。
37.本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述终端界面操作方法的步骤。
38.本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述终端界面操作方法的步骤。
39.本发明提供的终端界面操作方法和装置，通过根据终端的界面图像和用户的语音，确定终端的实际界面上需要操作的位置，根据用户的语音控制机械臂对终端的实际界面上需要操作的位置进行相应操作，从而实现根据用户的语音对终端界面进行自动操作，
操作准确，而且效率高。
附图说明
40.为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
41.图1是本发明提供的终端界面操作方法的流程示意图；
42.图2是本发明提供的终端界面操作装置的结构示意图；
43.图3是本发明提供的电子设备的结构示意图。
具体实施方式
44.为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
45.下面结合图1描述本发明的一种终端界面操作方法，该方法包括：步骤101，从终端的界面图像中提取文字，并将用户的语音转换为文字；
46.可选地，终端为具有触摸屏的界面交互设备，如手机和平板等。本实施例的执行主体为控制模块。
47.当用户不知道如何对终端上的当前界面进行操作时，将终端放在摄像头的可视范围内，其中终端的当前界面对着摄像头。
48.当终端为锁屏状态时，对终端进行解锁后，放置在摄像头的可视范围内。
49.摄像头在捕捉到终端的界面图像后，并将界面图像发送给控制模块。控制模块接收到摄像头上传的界面图像后对界面图像进行分析，得到界面图像中的文字。
50.可选地，将界面图像输入ocr(optical character recognition)识别模型中，输出界面图像中的文字。
51.同时接收用户发出的语音。在预设时长内未接收到用户的语音的情况下，提示用户发出语音。对用户的语音进行识别，将其解析为对应的文字。
52.步骤102，在所述界面图像中的文字中存在与所述语音对应的文字相匹配的文字的情况下，获取所述相匹配的文字在所述界面图像中的第一位置数据；
53.可选地，将用户的语音对应的文字划分成多个词。语音对应的文字与界面图像中的文字匹配是指在界面图像中的文字中查找语音对应的文字中的词，若查找到某个词、某个词的近义词或某个词对应的词，则匹配成功，否则匹配失败。
54.例如，当用户的语音对应的文字为“打开”加上某软件的名称时，从当前界面的界面图像中的文字中查找打开和某软件的名称。
55.当用户的语音对应的文字为“付款”，则从当前界面的界面图像中的文字中查找付款、付款的近义词，如支付，或者付款对应的支付软件的名称。其中，付款与支付软件的名称之间的对应关系预先关联。
56.在匹配成功的情况下，获取匹配到的词在界面图像中的位置，将该位置作为第一位置数据。
57.步骤103，根据所述相匹配的文字在所述界面图像中的第一位置数据，确定所述相匹配的文字在所述终端的实际界面上的第二位置数据；
58.根据相匹配的文字在界面图像中的第一位置数据和拍摄界面图像的摄像头的属性，如光圈和位置，确定相匹配的文字在终端的实际界面上的第二位置数据。
59.步骤104，控制机械臂移动到所述实际界面上的第二位置数据的上方，并根据所述语音对应的文字控制所述机械臂在所述实际界面上的第二位置数据处进行操作。
60.先控制机械臂移动到实际界面上第二位置数据的上方，然后根据语音对应的文字控制机械臂在实际界面上进行操作。
61.例如，当用户的语音对应的文字为“打开”加上某软件的名称时，根据文字“打开”，在实际界面上的第二位置数据处进行点击操作。其中，文字与操作之间的对应关系预先存储。
62.本实施例通过根据终端的界面图像和用户的语音，确定终端的实际界面上需要操作的位置，根据用户的语音控制机械臂对终端的实际界面上需要操作的位置进行相应操作，从而实现根据用户的语音对终端界面进行自动操作，操作准确，而且效率高。
63.在上述实施例的基础上，本实施例中所述从终端的界面图像中提取文字，包括：从所述界面图像中提取出所述终端的界面区域；
64.界面图像中包括背景和前景。根据终端的界面区域的特点，从界面图像中提取出界面区域前景。
65.计算所述界面区域在所述界面图像中的第三位置数据；
66.将界面区域在界面图像中的位置作为第三位置数据。本实施例不限于第三位置数据的具体内容。
67.根据所述第三位置数据调整拍摄所述界面图像的摄像头的位置；
68.在根据第三位置数据判断界面图像中的界面区域不全、太小或位于界面图像中的一侧的情况下，会影响界面图像中文字的识别效果，进而影响终端界面操作。因此，在这些情况下，需要对摄像头的位置进行调整。
69.例如，当根据界面区域的第三位置数据可知界面区域位于界面图像的左上角，则将摄像头在与终端平行的平面上进行平移，使得拍摄的界面图像中的界面区域位于界面图像的中心位置数据或接近中心位置。
70.使用调整后的摄像头重新拍摄所述界面图像，从重新拍摄的所述界面图像中提取文字。
71.本实施例通过根据界面区域在界面图像中的位置调整拍摄界面图像的摄像头的位置，从而提高界面图像中界面区域的拍摄效果，便于进行文字识别。
72.在上述实施例的基础上，本实施例中所述第三位置数据包括所述界面区域的中点坐标、宽度和长度。
73.其中，中点坐标包括中点的横坐标和纵坐标。根据界面区域的中点在界面图像中的横坐标、纵坐标，以及界面区域的宽度和长度，可以确定界面区域在界面图像中的分布情况，从而根据分布情况调整摄像头的位置。
74.在上述实施例的基础上，本实施例中所述根据所述第三位置数据调整拍摄所述界面图像的摄像头的位置，包括：计算所述界面区域的长度和宽度之间的第一比值，以及所述终端的实际界面的长度和宽度之间的第二比值；在所述第一比值不等于所述第二比值的情况下，调整所述摄像头的位置，使得所述摄像头远离所述终端；
75.假设界面区域的长度和宽度之间的第一比值为a，终端的实际界面的长度和宽度之间的第二比值为b，终端位于摄像头的正下方。当a不等于b时，说明实际界面拍摄不全。此时将摄像头向上移动，使得摄像头远离终端，直到拍摄的界面图像中界面区域对应的第一比值等于终端的实际界面对应的第二比值。
76.在所述第一比值等于所述第二比值的情况下，判断所述界面区域的中点坐标与所述界面图像的中点坐标是否相同，并计算所述界面区域的面积与所述界面图像的面积之间的第三比值；
77.第一比值等于第二比值的情况下，说明实际界面被完全拍摄。界面区域的中点坐标与界面图像的中点坐标相同，说明界面区域位于界面图像的中间。
78.在实际界面被完全拍摄的情况下，继续判断界面区域是否位于界面图像的中间，且界面区域在界面图像中所占比例是否较小。
79.在所述界面区域的中点坐标与所述界面图像的中点坐标不相同的情况下，调整所述摄像头的位置，使得调整后的摄像头拍摄的界面图像中界面区域的中点坐标与调整后的摄像头拍摄的界面图像的中点坐标相同；
80.在界面区域不位于界面图像的中间的情况下，如位于左上角，则将摄像头向终端的左上角方向移动。并根据界面区域的中点坐标与界面图像的中点坐标之间的距离，以及摄像头的属性，计算摄像头的移动距离。根据摄像头的移动距离和移动方向对摄像头进行移动。
81.在所述第三比值小于预设阈值的情况下，调整所述摄像头的位置，使得所述摄像头靠近所述终端。
82.在界面区域的面积与所述界面图像的面积之间的第三比值小于预设阈值的情况下，说明界面区域在界面图像中所占比例是否较小。根据第三比值和摄像头的属性，计算摄像头的移动距离。根据计算的移动距离将摄像头向下移动。
83.本实施例通过根据界面区域在界面图像中的位置，在界面图像中的界面区域不全、太小或位于界面图像中的一侧的情况下，调整拍摄界面图像的摄像头的位置，从而提高界面图像中界面区域的拍摄效果，便于进行文字识别。
84.在上述实施例的基础上，本实施例中在所述从终端的界面图像中提取文字之前，还包括：在所述界面图像中不存在所述终端的界面区域的情况下，通过语音方式播放所述终端不在所述摄像头的拍摄区域的提示信息。
85.具体地，当界面图像中提取出的前景不符合界面区域的特点时，获知界面图像中不存在终端的界面区域，说明终端没有放在摄像头的拍摄区域内。此时，发出语音提示消息，提示用户。
86.由于用户为盲人或不会使用终端的用户，通过语音方式进行播报，提高了提示消息接收的有效性。
87.在上述各实施例的基础上，本实施例中在所述从终端的界面图像中提取文字，并
将用户的语音转换为文字之后，还包括：在从所述界面图像中的文字中未匹配到所述语音对应的文字的情况下，控制所述机械臂在所述实际界面上进行滑动操作；
88.可选地，滑动操作包括上下滑动和左右滑动。
89.例如，由于实际界面可能存在多页，从界面图像中的文字中未匹配到语音对应的文字中的软件名称，则软件名称对应的软件可能存放在实际界面的另一页，则控制机械臂对实际界面进行左右滑动操作。
90.重新拍摄所述终端的界面图像，并从重新拍摄的所述界面图像中提取文字；
91.在每次滑动操作后，控制摄像头重新拍摄终端的界面图像，并进行文字提取。
92.将所述语音对应的文字与重新拍摄的所述界面图像中的文字进行匹配。
93.判断重新拍摄的界面图像中的文字中是否存在与语音对应的文字向匹配的文字。如果存在，则获取相匹配的文字在重新匹配的界面图像中的第一位置数据；如果不存在，则控制机械臂对实际界面继续进行左右滑动操作。
94.本实施例在界面图像中的文字中未匹配到语音对应的文字的情况下，控制机械臂在所述实际界面上进行滑动操作，对滑动操作后的新界面继续进行文字匹配，提高了终端界面操作的精准性，减少用户操作。
95.在上述各实施例的基础上，本实施例中在所述根据所述语音对应的文字控制所述机械臂在所述实际界面上的第二位置数据处进行操作之后，还包括：将操作结果通过语音方式进行播放。
96.具体地，在控制机械臂完成语音对应的操作后，播放操作结果，如“某软件已打开”。通过语音方向进行操作结果的反馈，提升用户体验。
97.下面对本发明提供的终端界面操作装置进行描述，下文描述的终端界面操作装置与上文描述的终端界面操作方法可相互对应参照。
98.如图2所示，该装置包括摄像头201、机械臂202和控制模块203；所述控制模块203包括获取模块2031、匹配模块2032、确定模块2033和控制模块2034；
99.其中，所述摄像头201用于拍摄所述终端的界面图像；
100.当用户不知道如何对终端上的当前界面进行操作时，将终端放在摄像头的可视范围内，其中终端的当前界面对着摄像头。
101.摄像头201在捕捉到终端的界面图像后，并将界面图像发送给控制模块203。
102.所述获取模块2031用于从终端的界面图像中提取文字，并将用户的语音转换为文字；
103.可选地，终端为具有触摸屏的界面交互设备，如手机和平板等。本实施例的执行主体为控制模块。
104.获取模块2031接收到摄像头上传的界面图像后对界面图像进行分析，得到界面图像中的文字。可选地，将界面图像输入ocr识别模型中，输出界面图像中的文字。
105.同时接收用户发出的语音。在预设时长内未接收到用户的语音的情况下，提示用户发出语音。对用户的语音进行识别，将其解析为对应的文字。
106.所述匹配模块2032用于在从所述界面图像中的文字中匹配到所述语音对应的文字的情况下，获取所述语音对应的文字在所述界面图像中的第一位置数据；
107.可选地，将用户的语音对应的文字划分成多个词。语音对应的文字与界面图像中
的文字匹配是指在界面图像中的文字中查找语音对应的文字中的词，若查找到某个词、某个词的近义词或某个词对应的词，则匹配成功，否则匹配失败。
108.在匹配成功的情况下，获取匹配到的词在界面图像中的位置，将该位置作为第一位置数据。
109.所述确定模块2033用于根据所述语音对应的文字在所述界面图像中的第一位置数据，确定所述相匹配的文字在所述终端的实际界面上的第二位置数据；
110.根据相匹配的文字在界面图像中的第一位置数据和拍摄界面图像的摄像头的属性，如光圈和位置，确定相匹配的文字在终端的实际界面上的第二位置数据。
111.所述控制模块2034用于控制所述机械臂移动到所述实际界面上的第二位置数据，并根据所述语音对应的文字控制所述机械臂202在所述实际界面上的第二位置数据处进行操作。
112.先控制机械臂202移动到实际界面上第二位置数据的上方，然后根据语音对应的文字控制机械臂202在实际界面上进行操作。
113.本实施例通过根据终端的界面图像和用户的语音，确定终端的实际界面上需要操作的位置，根据用户的语音控制机械臂对终端的实际界面上需要操作的位置进行相应操作，从而实现根据用户的语音对终端界面进行自动操作，操作准确，而且效率高。
114.在上述实施例的基础上，本实施例中获取模块用于：从所述界面图像中提取出所述终端的界面区域；计算所述界面区域在所述界面图像中的第三位置数据；根据所述第三位置数据调整拍摄所述界面图像的摄像头的位置；使用调整后的摄像头重新拍摄所述界面图像，从重新拍摄的所述界面图像中提取文字。
115.在上述实施例的基础上，本实施例中所述第三位置数据包括所述界面区域的中点坐标、宽度和长度。
116.在上述实施例的基础上，本实施例中获取模块用于：计算所述界面区域的长度和宽度之间的第一比值，以及所述终端的实际界面的长度和宽度之间的第二比值；在所述第一比值不等于所述第二比值的情况下，调整所述摄像头的位置，使得所述摄像头远离所述终端；在所述第一比值等于所述第二比值的情况下，判断所述界面区域的中点坐标与所述界面图像的中点坐标是否相同，并计算所述界面区域的面积与所述界面图像的面积之间的第三比值；在所述界面区域的中点坐标与所述界面图像的中点坐标不相同的情况下，调整所述摄像头的位置，使得调整后的摄像头拍摄的界面图像中界面区域的中点坐标与调整后的摄像头拍摄的界面图像的中点坐标相同；在所述第三比值小于预设阈值的情况下，调整所述摄像头的位置，使得所述摄像头靠近所述终端。
117.在上述实施例的基础上，本实施例中还包括第一提示模块，用于在所述界面图像中不存在所述终端的界面区域的情况下，通过语音方式播放所述终端不在所述摄像头的拍摄区域的提示信息。
118.在上述实施例的基础上，本实施例中还包括滑动模块，用于在所述界面图像中的文字中不存在与所述语音对应的文字相匹配的文字的情况下，控制所述机械臂在所述实际界面上进行滑动操作；重新拍摄所述终端的界面图像，并从重新拍摄的所述界面图像中提取文字；将所述语音对应的文字与重新拍摄的所述界面图像中的文字进行匹配。
119.在上述实施例的基础上，本实施例中还包括第二提示模块，用于将操作结果通过
语音方式进行播放。
120.图3示例了一种电子设备的实体结构示意图，如图3所示，该电子设备可以包括：处理器(processor)310、通信接口(communications interface)320、存储器(memory)330和通信总线340，其中，处理器310，通信接口320，存储器330通过通信总线340完成相互间的通信。处理器310可以调用存储器330中的逻辑指令，以执行终端界面操作方法，该方法包括：从终端的界面图像中提取文字，并将用户的语音转换为文字；在所述界面图像中的文字中存在与所述语音对应的文字相匹配的文字的情况下，获取所述相匹配的文字在所述界面图像中的第一位置数据；根据所述相匹配的文字在所述界面图像中的第一位置数据，确定所述相匹配的文字在所述终端的实际界面上的第二位置数据；控制机械臂移动到所述实际界面上的第二位置数据的上方，并根据所述语音对应的文字控制所述机械臂在所述实际界面上的第二位置数据处进行操作。
121.此外，上述的存储器330中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read
‑
only memory)、随机存取存储器(ram，random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。
122.另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法所提供的终端界面操作方法，该方法包括：从终端的界面图像中提取文字，并将用户的语音转换为文字；在所述界面图像中的文字中存在与所述语音对应的文字相匹配的文字的情况下，获取所述相匹配的文字在所述界面图像中的第一位置数据；根据所述相匹配的文字在所述界面图像中的第一位置数据，确定所述相匹配的文字在所述终端的实际界面上的第二位置数据；控制机械臂移动到所述实际界面上的第二位置数据的上方，并根据所述语音对应的文字控制所述机械臂在所述实际界面上的第二位置数据处进行操作。
123.又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各提供的终端界面操作方法，该方法包括：从终端的界面图像中提取文字，并将用户的语音转换为文字；在所述界面图像中的文字中存在与所述语音对应的文字相匹配的文字的情况下，获取所述相匹配的文字在所述界面图像中的第一位置数据；根据所述相匹配的文字在所述界面图像中的第一位置数据，确定所述相匹配的文字在所述终端的实际界面上的第二位置数据；控制机械臂移动到所述实际界面上的第二位置数据的上方，并根据所述语音对应的文字控制所述机械臂在所述实际界面上的第二位置数据处进行操作。
124.以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其
中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
125.通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
126.最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。