居家智慧养老实现方法和系统与流程

文档序号:29743364发布日期:2022-04-21 20:08阅读:443来源:国知局
居家智慧养老实现方法和系统与流程

1.本公开涉及互联网应用技术领域,具体涉及一种居家智慧养老实现方法和系统。


背景技术:

2.随着我国社会将大规模进入人口老龄化,使得人口老龄化成为我们当前和今后很长一段时间的基本国情。由此也催生着养老配套产品和服务的不断完善。
3.目前,养老配套产品大都集中在智能语音机器人的实现,该智能语音机器人用于实现与老人的互动聊天、多媒体播放等老人日常生活娱乐休闲多方面的需求。
4.在养老产业上,以智能语音机器人为载体,在所相应配备的平台支持下实现老人所需要的多媒体播放、通话以及互动聊天等功能。但由于老人所进行的交互,都是面向于智能语音机器人进行的,因此存在着无法与现实环境相贴合进而难以在养老产业所相关的场景得到广泛应用。


技术实现要素:

5.本公开的一个目的在于解决养老所相关的配套实现脱离现实环境,无法与现实环境相贴合的技术问题。
6.根据本公开实施例的一方面,公开了一种居家智慧养老实现方法,所述方法包括:
7.响应于来自老人所携带智能眼镜传送的物品选择操作,识别对所在现实环境选择的物品;
8.获取所选择物品关联的虚拟控件;
9.适配所述现实环境在所述智能眼镜进行所述虚拟控件的覆盖显示;
10.对显示的所述虚拟控件呼出所关联的交互控制界面;
11.响应于所述交互控制界面的功能选择,通过所述智能眼镜对选择的所述物品执行所述功能。
12.根据本公开实施例的一方面,所述响应于来自老人所携带智能眼镜传送的物品选择操作,识别对所在现实环境选择的物品,包括:
13.通过老人所携带智能眼镜感知来自老人凝视动作所相关的物品选择操作,在所述现实环境定位所述老人选择的物品。
14.根据本公开实施例的一方面,所述通过老人所携带智能眼镜感知来自老人凝视动作所相关的物品选择操作,在所述现实环境定位所述老人选择的物品,包括:
15.通过老人所携带智能眼镜执行眼球追踪所调节的焦点,对所处现实环境获取景深分布图像;
16.进行所存储物品素材与景深分布图像之间的比对,识别所述老人选择的物品。
17.根据本公开实施例的一方面,所述获取所选择物品关联的虚拟控件,包括:
18.对所存储物品素材,确定所选择物品关联的物品素材;
19.根据关联的所述物品素材向虚拟控件的映射,获取所映射虚拟控件为所选择物品
关联的虚拟控件。
20.根据本公开实施例的一方面,适配所述现实环境在所述智能眼镜进行所述虚拟控件的覆盖显示,包括:
21.在所述老人的视域中确定所选择物品在现实环境的相对位置;
22.根据所述相对位置为所述虚拟控件计算所述老人视域中的覆盖点,并得到所述覆盖点到眼球的相对距离;
23.按照所述相对距离将所述虚拟控件覆盖到所述老人视域的覆盖点上显示。
24.根据本公开实施例的一方面,所述适配所述现实环境在所述智能眼镜进行虚拟控件的覆盖显示之前,所述方法还包括:
25.适配所选择物品在现实环境中的尺寸,对所述虚拟控件修整尺寸,通过所述尺寸修整使所述虚拟控件在所述老人视域内大小适配。
26.根据本公开实施例的一方面,所述对显示的所述虚拟控件呼出所关联的交互控制界面,包括:
27.通过所述智能眼镜发起所述虚拟控件对应的连接请求,通过所述连接请求控制所述交互控制界面开启;
28.通过交互控制界面的开启,在所述智能眼镜进行所述交互控制界面的显示。
29.根据本公开实施例的一方面,选择的所述功能包括所选择物品下的讲解功能、留言备忘功能以及寻物功能。
30.根据本公开实施例的一方面,所述响应于所述交互控制界面的功能选择,通过所述智能眼镜对选择的所述物品执行所述功能,包括:
31.通过所述智能眼镜以及所连接的外部设备,对所选择物品执行所述交互控制界面上选择的功能;
32.将所述功能的执行结果通过所述智能眼镜进行突出显示。
33.一种居家智能养老实现系统,所述系统包括:
34.物品识别模块,用于响应于来自老人所携带智能眼镜传送的物品选择操作,识别对所在现实环境选择的物品;
35.控件获取模块,用于获取所选择物品关联的虚拟控件;
36.显示模块,用于适配所述现实环境在所述智能眼镜进行所述虚拟控件的覆盖显示;
37.界面呼出模块,用于对显示的所述虚拟控件呼出所关联的交互控制界面;
38.功能实现模块,用于响应于所述交互控制界面的功能选择,通过所述智能眼镜对选择的所述物品执行所述功能。
39.根据本公开实施例的一方面,公开了一种计算机程序介质,其上存储有计算机可读指令,当所述计算机可读指令被计算机的处理器执行时,使计算机执行如上所述的方法。
40.本公开实施例中,对于一给定现实环境,将在此现实环境响应于来自老人所携带智能眼镜传送的物品选择操作,识别对所在现实环境选择的物品,对此物品获取其关联的虚拟控件,然后适配现实环境在智能眼镜进行虚拟控件的覆盖显示,对显示的虚拟控件呼出所关联的交互控制界面,以最终响应于交互控制界面的功能选择,通过智能眼镜对选择的物品执行该功能,至此,便得以贴合所在的现实环境来实现居家养老所需要的智慧服务,
由于全过程均融合在现实环境来实现养老服务功能,将极大增强了智慧养老服务的广泛应用,推动养老产业的智能化发展。
41.本公开的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本公开的实践而习得。
42.应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本公开。
附图说明
43.通过参照附图详细描述其示例实施例,本公开的上述和其它目标、特征及优点将变得更加显而易见。
44.图1示出了根据本公开一个实施例的上行链路信道调度方法应用于的体系构架图。
45.图2是根据一示例性实施例示出的一种装置的框图。
46.图3示出了根据本公开一个实施例的居家智慧养老实现方法的流程图。
47.图4示出了根据本公开一个实施例的通过老人所携带智能眼镜感知来自老人凝视动作所相关的物品选择操作,在现实环境定位老人选择的物品的步骤的流程图。
48.图5示出了根据图3对应实施例的获取所选择物品关联的虚拟控件的步骤的流程图。
49.图6示出了根据图3对应实施例的适配现实环境在智能眼镜进行虚拟控件的覆盖显示步骤的流程图。
50.图7示出了图3对应实施例的对显示的虚拟控件呼出所关联的交互控制界面的步骤的流程图。
51.图8示出了图3对应实施例的响应于交互控制界面的功能选择,通过智能眼镜对选择的物品执行该功能的步骤的流程图。
52.图9提供了一种居家智能养老实现系统的结构框图。
具体实施方式
53.现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些示例实施方式使得本公开的描述将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。
54.此外,所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多示例实施方式中。在下面的描述中,提供许多具体细节从而给出对本公开的示例实施方式的充分理解。然而,本领域技术人员将意识到,可以实践本公开的技术方案而省略所述特定细节中的一个或更多,或者可以采用其它的方法、组元、步骤等。在其它情况下,不详细示出或描述公知结构、方法、实现或者操作以避免喧宾夺主而使得本公开的各方面变得模糊。
55.附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实
现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
56.请参阅图1,图1是本公开实施例所应用的一种体系架构。该体系构架可以包括智能眼镜11、支持智能眼镜11实现居家智能养老功能的服务器12以及连接智能眼镜11的外部设备13。
57.智能眼镜11和所连接的外部设备13,作为居家智慧养老功能实现的控制端,为所服务的老人控制入口。换而言之,本公开所实现居家智慧养老的用户,即老人将在此控制端进行所相关的各种操作,并随之获得相应的反馈。
58.服务器12用于为控制端,即智能眼镜11以及其所连接的外部设备13提供计算能力,进而配合实现响应。
59.具体而言,图1所示出的体系架构,智能眼镜11是ar眼镜,其所连接的外部设备13可以是各种传感器、蓝牙芯片等,在此不进行限定。
60.智能眼镜11将作为控制中心,与服务器12进行数据交互,并在服务器12的支持下控制居家智慧养老系统中视觉效果的实现。
61.图2是根据一示例性实施例示出的一种装置的框图。例如,装置200是图1所示体系架构中的智能眼镜11。
62.参照图2,装置200包括至少一个组件:处理组件202,存储器204,电源组件206,多媒体组件208,音频组件210,传感器组件214以及通信组件216。
63.处理组件202通常控制装置200的整体操作,诸如与显示,电话呼叫,数据通信,相机操作以及记录操作相关联的操作等。处理组件202包括至少一个处理器218来执行指令,以完成下述的方法的全部或部分步骤。此外,处理组件202包括至少一个模块,便于处理组件202和其他组件之间的交互。例如,处理组件202至少包括多媒体模块,以方便多媒体组件208和处理组件202之间的交互。
64.存储器204被配置为存储各种类型的数据以支持在装置200的操作。这些数据的示例包括用于在装置200上操作的任何应用程序或方法的指令。存储器204可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(static random access memory,简称sram),电可擦除可编程只读存储器(electrically erasable programmable read-only memory,简称eeprom),可擦除可编程只读存储器(erasable programmable read only memory,简称eprom),可编程只读存储器(programmable red-only memory,简称prom),只读存储器(read-only memory,简称rom),磁存储器,快闪存储器,磁盘或光盘。存储器204中还存储有一个或多个模块,该一个或多个模块被配置成由该一个或多个处理器218执行,以完成下述任一所示方法中的全部或者部分步骤。
65.电源组件206为装置200的各种组件提供电力。电源组件206包括电源管理系统,至少一个电源,及其他与为装置200生成、管理和分配电力相关联的组件。
66.多媒体组件208包括在所述装置200和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(liquid crystal display,简称lcd)和触摸面板。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括至少一个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压
力。屏幕还包括有机电致发光显示器(organic light emitting display,简称oled)。
67.音频组件210被配置为输出和/或输入音频信号。例如,音频组件210包括一个麦克风(microphone,简称mic),当装置200处于操作模式,如呼叫模式、记录模式和语音识别模式等时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器204或经由通信组件216发送。在一些实施例中,音频组件210还包括一个扬声器,用于输出音频信号。
68.传感器组件214包括至少一个传感器,用于为装置200提供各个方面的状态评估。例如,传感器组件214可以检测到装置200的打开/关闭状态,组件的相对定位,传感器组件214还可以检测装置200或装置200一个组件的位置改变以及装置200的温度变化。在一些实施例中,该传感器组件214还包括磁传感器,压力传感器或温度传感器。
69.通信组件216被配置为便于装置200和其他设备之间有线或无线方式的通信。装置200可以接入基于通信标准的无线网络,如wifi(wireless-fidelity,无线保真)。在一个示例性实施例中,通信组件216经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件216还包括近场通信(near field communication,简称nfc)模块,以促进短程通信。例如,在nfc模块可基于射频识别(radio frequency identification,简称rfid)技术,红外数据协会(infrared data association,简称irda)技术,超宽带(ultra wideband,简称uwb)技术,蓝牙技术和其他技术来实现。
70.在示例性实施例中,装置200被至少一个应用专用集成电路(application specific integrated circuit,简称asic)、数字信号处理器、数字信号处理设备、可编程逻辑器件、现场可编程门阵列、控制器、微控制器、微处理器或其他电子元件实现,用于执行下述方法。
71.参阅图3,图3示出了根据本公开一个实施例的居家智慧养老实现方法的流程图,本公开实施例提供了一种智能眼镜侧的居家智慧养老实现方法。
72.对此,智能眼镜侧的居家智慧养老实现方法包括:
73.步骤s210,响应于来自老人所携带智能眼镜传送的物品选择操作,识别对所在现实环境选择的物品。
74.步骤s220,获取所选择物品关联的虚拟控件。
75.步骤s230,适配现实环境在智能眼镜进行虚拟控件的覆盖显示。
76.步骤s240,对显示的虚拟控件呼出所关联的交互控制界面。
77.步骤s250,响应于交互控制界面的功能选择,通过智能眼镜对选择的物品执行该功能。
78.下面对这5个步骤进行详细描述。
79.在步骤s210中,首先应当说明的是,对于居家智慧养老的实现,其用户为老人,即为在老人所生活的现实场景下通过智能眼镜对物品达成各种便利功能。
80.智能眼镜,即ar眼镜作为便携设备,被老人所携带。对于现实环境中的任意一物品,老人都能够通过智能眼镜发起物品选择操作,对该物品选择操作发起识别即可确定现实环境中老人所选择的物品。
81.物品选择操作,可以是通过智能眼镜所捕捉凝视动作而感知得到的,也可以是通
过智能眼镜所外接的外部设备,例如,传感器,来捕捉老人进行物品选择的动作所得到的,并传送至智能眼镜。
82.应当理解的,现实环境可以是老人所在的居家环境,现实环境中散落的各种物品,都承载了老人的需求,因此基于现实环境中的物品而对老人达成的功能,即为老人居家养老所需,进而便使得相应功能的实现是贴近于老人生活日常的,相对于目前所提供的具备养老属性的智能语音机器人而言,性能得到提升,且能够主动且快速响应于老人的居家需求。
83.随着老人对物品所发起的物品选择操作,老人所携带的智能眼镜将感知得到该物品选择操作,从而识别老人所选择的物品。
84.在本公开的一个实施例中,响应于来自老人所携带智能眼镜传送的物品选择操作,识别对所在现实环境选择的物品的步骤s210,包括:
85.通过老人所携带智能眼镜感知来自老人凝视动作所相关的物品选择操作,在现实环境定位老人选择的物品。
86.其中,老人的凝视动作由智能眼镜捕捉得到,凝视动作所作用的对象,即现实环境中的物品便成为现实环境中老人所选择的物品。
87.具体的,来自于老人凝视动作所相关的物品选择操作,是通过智能眼镜捕捉的凝视动作、凝视时长等发起的,除此之外,还可结合老人或者物品所携带的传感器实现。
88.参阅图4,图4示出了根据本公开一个实施例的通过老人所携带智能眼镜感知来自老人凝视动作所相关的物品选择操作,在现实环境定位老人选择的物品的步骤,包括:
89.步骤s211,通过老人所携带智能眼镜执行眼球追踪所调节的焦点,对所处现实环境获取景深分布图。
90.步骤s212,进行所存储物品素材与景深分布图像之间的比对,识别老人选择的物品。
91.下面对这些步骤进行详细描述。
92.在步骤s211中,通过智能眼镜所设置的摄像头获取老人所处现实环境的景深分布图。该景深分布图是适配于老人所看到的现实环境的,进而以此来保证对老人所选择物品识别的准确性和可靠性。
93.对于景深分布图的获得,是面向于摄像头所捕获老人所处现实环境图像以及所携带的位置信息,通过眼球追踪的进行调节摄像头焦点,来获得景深分布图像。
94.具体的,对于步骤s211获取景深分布图的过程包括:
95.(1)通过智能眼镜内侧朝向老人眼球的红外组件捕捉老人的瞳孔缩放程度;
96.(2)通过眼球追踪的进行确定老人眼球的真实注视点;
97.(3)根据真实注视点调节摄像头的焦点,进而拍摄得到景深分布图像。
98.至此,即可通过智能眼镜,特别是智能眼镜所配置的红外组件和摄像头,来为佩戴了智能眼镜的老人获取景深分布图像。
99.在步骤s212中,预存储了物品素材,该物品素材涵盖了现实环境中存在的物品。换而言之,现实环境中的每一物品,都能够存在着所预存储的相关物品素材。
100.该物品素材的预存储是通过与智能眼镜交互的服务器实现的。服务器被配置了系统素材库,物品素材以素材图片的形式存储于服务器的系统素材库中。与此相对应的,智能
眼镜被配置了存储空间,以供临时存储之用,由此智能眼镜连接到服务器中的系统素材库,以将所相关的物品素材导入到智能眼镜的临时存储空间。
101.在获取得到景深分布图之后,即可进行景深分布图中物品所相关图像内容与物品素材之间的比对,以此来确认与景深分布图所捕获物品匹配的物品素材,该物品即为老人所选择的物品。
102.在步骤s220中,通过将智能眼镜所捕获的物品相关的图像内容,与预存储的物品素材比对,由比对得到的二者相匹配的物品素材来确认老人在现实环境所选择的物品。
103.每一物品素材,都被关联到虚拟控件。换而言之,每一物品素材都与虚拟控件相关联。在比对得到物品素材之后,即可由物品素材和虚拟控件之间的关联关系获取得到虚拟控件。
104.参阅图5,图5示出了根据图3对应实施例的获取所选择物品关联的虚拟控件的步骤的流程图。本公开实施例示出的获取所选择物品关联的虚拟控件的步骤s220包括:
105.步骤s221,对所存储物品素材,确定所选择物品关联的物品素材。
106.步骤s222,根据关联的物品素材向虚拟控件的映射,获取所映射虚拟控件为所选择物品关联的虚拟控件。
107.至此,便实现了所选择物品向虚拟控制的映射。从而获得所选择物品关联的虚拟控件。
108.虚拟控件,是配合所居家智慧养老的功能实现而配置生成的具有动态效果的富文本信息,其附带了所关联物品物物品特征,并通过卡通动画效果等方式来表现。
109.虚拟控件用于表征现实环境中的物品,并且也将基于所表征的物品来实现所相关的交互控制,进而融合于现实环境实现所映射的诸多功能。
110.在步骤s230中,适配现实环境,老人所选择物品关联的虚拟控件在智能眼镜进行覆盖显示。换而言之,通过老人所佩戴的智能眼镜,将虚拟控件与现实环境进行虚实融合,虚拟控件覆盖于现实图像中,进而在现实环境中通过虚拟控件来实现老人与物品之间的交互。
111.参阅图6,图6示出了根据图3对应实施例的适配现实环境在智能眼镜进行虚拟控件的覆盖显示步骤的流程图。本公开实施例示出的适配现实环境在智能眼镜进行虚拟控件的覆盖显示的步骤s230,包括:
112.步骤s231,在老人的视域中确定所选择物品在现实环境的相对位置。
113.步骤s232,根据相对位置为虚拟控件计算老人视域中的覆盖点,并得到覆盖点到眼球的相对距离。
114.步骤s233,按照相对距离将虚拟控件覆盖到老人视域的覆盖点上显示。
115.其中,通过智能眼镜,对老人的视域确定现实环境中物品的相对位置,以相对位置为基准选取具有代表性的一系列预覆盖点;然后计算各预覆盖点与到眼球的相对距离。
116.至此,将计算虚拟控件与一系列预覆盖点中最为相邻的预覆盖点,以此预覆盖点作为虚拟控件的覆盖点,通过覆盖点来保证虚拟控制与现实环境的精准融合。
117.最后,为虚拟控件计算覆盖点到眼球的相对距离,以此相对距离将虚拟控件覆盖到老人视域的覆盖点上。
118.本公开的另一个实施例中,步骤s230之前,该居家智慧养老实现方法还包括:
119.适配所选择物品在现实环境中的尺寸,对虚拟控件修整尺寸,通过尺寸修整使虚拟控件在老人视域内大小适配。
120.通过虚拟控件而执行的尺寸修整,进一步保证了虚拟控件与现实环境二者之间的融合,虚拟控件在所进行的显示中大小适配,将增大的增强了用户体验。
121.在步骤s240中,为所显示的虚拟控件随之呼出所关联的交互控制界面。交互控制界面将为老人提供功能选择的操控性能。具体而言,将在智能眼镜以及所连接的多种外部设备作用下捕捉老人动作,实现交互控制界面上的功能选择。
122.示例性的,交互控制界面可供进行选择的功能包括所选择物品下的讲解功能、留言备忘功能以及寻物功能等,在此不进行限定。
123.还请继续参阅图7,图7示出了图3对应实施例的对显示的虚拟控件呼出所关联的交互控制界面的步骤的流程图。本公开实施例提供了对显示的虚拟控件呼出所关联的交互控制界面的步骤s240包括:
124.步骤s241,通过智能眼镜发起虚拟控件对应的连接请求,通过连接请求控制交互控制界面开启。
125.步骤s242,通过交互控制界面的开启,在智能眼镜进行交互控制界面的显示。
126.下面对这些步骤进行详细描述。
127.在步骤s241中,正如前述所描述的,智能眼镜作为控制中心,在得到老人所选择物品关联的虚拟控件之后,虚拟控件作为虚实结合显示的交互入口,将请求服务器获取与之关联的交互控制界面。
128.智能眼镜将向服务器发起虚拟控制所对应的连接请求,对于用户侧,即智能眼镜中的实现而言,该连接请求用于开启虚拟控件关联的交互控制界面。
129.在步骤s242中,通过虚拟控件所对应的连接请求,使得服务器向智能眼镜加载所对应的交互控制界面,并在智能眼镜进行交互控制界面的显示,进而供老人进行功能的选择。
130.在步骤s250中,对于虚拟控件所呼出显示的交互控制界面,智能眼镜以及连接的外部设备通过捕捉和追踪老人动作来感知老人对交互控制界面的功能选择。
131.还请继续参阅图8,图8示出了图3对应实施例的响应于交互控制界面的功能选择,通过智能眼镜对选择的物品执行该功能的步骤的流程图。本公开实施例示出的响应于交互控制界面的功能选择,通过智能眼镜对选择的物品执行该功能的步骤s250,包括:
132.步骤s251,通过智能眼镜以及所连接的外部设备,对所选择物品执行交互控制界面上选择的功能。
133.步骤s252,将该功能的执行结果通过智能眼镜进行突出显示。
134.下面对这些步骤进行详细描述。
135.在步骤s251中,正如前述所指出的,交互控制界面上可供选择的功能包括了讲解功能、留言备忘功能以及寻物功能等,任意一面向于所选择物品实现的功能都可配置于交互控制界面之上。
136.对于所选择的功能,根据功能实现的需要,将通过智能眼镜和/或外部设备来执行。
137.具体的,对于讲解功能,其过程包括:通过智能眼镜进行所选择物品的演示操作展
示,进而展示操作步骤;在感知到老人完成每一步骤之时,都通过捕捉到的点头动作下确认,并跳转进入下一步;
138.与之相对应的,通过捕捉到的抬头的动作返回上一步,以此来一步步完成操作指引。
139.对于留言备忘功能,是将老人为所选择物品即时录音并上传存储的功能实现。至此将使得老人再次选择该物品这时,能够使用该功能,对于所存储的录音条目进行高亮显示,待确认后播放该录音。
140.每个物品,都有其所对应的语音文件夹,以此来保障留意备忘功能的实现以及后续所进行的录音播放。
141.对于寻物功能,是在所选择物品遗失之时,老人通过所佩戴的智能眼镜启动该功能,进而通过蓝牙搜索到物品并于显示屏幕中高亮显示,引导老人召回遗失物。
142.具体的,将蓝牙低功耗芯片封装为贴片形状,并粘贴在易丢失的物品上。相应的,在开启寻物功能之时,将通过智能眼镜中的蓝牙连接功能感应并识别设定范围内的蓝牙芯片,进而通过所进行的蓝牙搜索而搜索到所对应的物品,从而突出显示给老人。
143.以此类推,在所进行的虚实融合场景下,实现居家智慧养老服务,在扩展了智慧服务场景的同时,也向老人提供了一种更为便捷智能的使用模式,帮助老人实现交互决策。
144.参阅图9,根据本公开的一个实施例,如图9提供了一种居家智能养老实现系统,其中该系统包括:
145.物品识别模块310,用于响应于来自老人所携带智能眼镜传送的物品选择操作,识别对所在现实环境选择的物品;
146.控件获取模块320,用于获取所选择物品关联的虚拟控件;
147.显示模块330,用于适配所述现实环境在所述智能眼镜进行所述虚拟控件的覆盖显示;
148.界面呼出模块340,用于对显示的所述虚拟控件呼出所关联的交互控制界面;
149.功能实现模块350,用于响应于所述交互控制界面的功能选择,通过所述智能眼镜对选择的所述物品执行所述功能。
150.在一个实施例中,物品识别模块310响应于来自老人所携带智能眼镜传送的物品选择操作,识别对所在现实环境选择的物品,包括:
151.通过老人所携带智能眼镜感知来自老人凝视动作所相关的物品选择操作,在所述现实环境定位所述老人选择的物品。
152.在一个实施例中,物品识别模块310通过老人所携带智能眼镜感知来自老人凝视动作所相关的物品选择操作,在所述现实环境定位所述老人选择的物品,包括:
153.通过老人所携带智能眼镜执行眼球追踪所调节的焦点,对所处现实环境获取景深分布图像;
154.进行所存储物品素材与景深分布图像之间的比对,识别所述老人选择的物品。
155.在一个实施例中,控件获取模块320获取所选择物品关联的虚拟控件,包括:
156.对所存储物品素材,确定所选择物品关联的物品素材;
157.根据关联的所述物品素材向虚拟控件的映射,获取所映射虚拟控件为所选择物品关联的虚拟控件。
158.在一个实施例中,显示模块330适配所述现实环境在所述智能眼镜进行所述虚拟控件的覆盖显示,包括:
159.在所述老人的视域中确定所选择物品在现实环境的相对位置;
160.根据所述相对位置为所述虚拟控件计算所述老人视域中的覆盖点,并得到所述覆盖点到眼球的相对距离;
161.按照所述相对距离将所述虚拟控件覆盖到所述老人视域的覆盖点上显示。
162.在一个实施例中,所述适配所述现实环境在所述智能眼镜进行虚拟控件的覆盖显示之前,所述系统还用于:
163.适配所选择物品在现实环境中的尺寸,对所述虚拟控件修整尺寸,通过所述尺寸修整使所述虚拟控件在所述老人视域内大小适配。
164.在一个实施例中,界面呼出模块340对显示的所述虚拟控件呼出所关联的交互控制界面,包括:
165.通过所述智能眼镜发起所述虚拟控件对应的连接请求,通过所述连接请求控制所述交互控制界面开启;
166.通过交互控制界面的开启,在所述智能眼镜进行所述交互控制界面的显示。
167.在一个实施例中,选择的所述功能包括所选择物品下的讲解功能、留言备忘功能以及寻物功能。
168.在一个实施例中,功能实现模块350应于所述交互控制界面的功能选择,通过所述智能眼镜对选择的所述物品执行所述功能,包括:
169.通过所述智能眼镜以及所连接的外部设备,对所选择物品执行所述交互控制界面上选择的功能;
170.将所述功能的执行结果通过所述智能眼镜进行突出显示。
171.通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是cd-rom,u盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施方式的方法。
172.在本公开的示例性实施例中,还提供了一种计算机程序介质,其上存储有计算机可读指令,当所述计算机可读指令被计算机的处理器执行时,使计算机执行上述方法实施例部分描述的方法。
173.根据本公开的一个实施例,还提供了一种用于实现上述方法实施例中的方法的程序产品,其可以采用便携式紧凑盘只读存储器(cd-rom)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本发明的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
174.所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举
的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。
175.计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
176.可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、rf等等,或者上述的任意合适的组合。
177.可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如java、c++等,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(lan)或广域网(wan),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
178.应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
179.此外,尽管在附图中以特定顺序描述了本公开中方法的各个步骤,但是,这并非要求或者暗示必须按照该特定顺序来执行这些步骤,或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选的,可以省略某些步骤,将多个步骤合并为一个步骤执行,以及/或者将一个步骤分解为多个步骤执行等。
180.通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是cd-rom,u盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、移动终端、或者网络设备等)执行根据本公开实施方式的方法。
181.本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本技术旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由所附的权利要求指出。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1