控制方法、装置、显示设备及存储介质与流程

1.本技术涉及显示设备控制技术领域，具体而言，涉及一种控制方法、装置、显示设备及存储介质。


背景技术：

2.在802.11系统中，接入设备ap sta和终端设备non-ap sta在内部都部署有mac层和phy层，其中mac层的主要功能有信道管理、连接管理、服务质量管理、功率控制和时间同步等，phy层的主要功能有调制、编码和传输等。
3.mac层和phy层在概念上都包括分别称为mac层管理单元mlme(mac sublayer management entity)和物理层管理单元plme(phy sublayer management entity)的管理实体。这些单元提供了低层管理服务接口，通过这些接口可以调用低层管理功能。
4.为了提供正确的mac操作，每个sta包括non-ap sta和ap sta，每个sta中都有一个高层管理单元，如sme(station management entity，设备管理单元)，sme表示在mac层之上的高层管理实体，是一个独立于层的实体，它位于单独的管理平面中。sme的作用：该单元负责诸如从各种层管理单元(mlme和plme)收集与层相关的状态之类的功能，类似地，其还会设置特定层的参数值。sme通常代表一般的系统管理实体执行此类功能。各个层之间通过定义的原语进行交互。
5.802.11be网络，也称为extremely high throughput(eht)网络，通过一系列系统特性和多种机制增强功能以实现极高的吞吐量。随着无线局域网(wlan)的使用持续增长，对于在许多环境(例如家庭，企业和热点)中提供无线数据服务越来越重要。802.11be网络旨在通过进一步提高总吞吐量和降低延迟来确保wlan的竞争力，同时确保与旧版技术标准向后兼容和共存。在2.4ghz，5ghz和6ghz频段运行的802.11兼容设备。


技术实现要素：

6.本技术实施例的目的在于，提供一种控制方法、装置、显示设备及存储介质以解决上述问题。
7.第一方面，本技术实施例提供的控制方法，应用于显示设备，包括：
8.检测网络参数和无线感知功能参数后，发送无线感知测量请求；
9.根据无线感知测量请求判断无线感知测量是否仅由显示设备的无线模块进行感知测量，若是，则所述显示设备的无线模块进行感知测量和反馈感知测量结果；若否，则所述显示设备的无线模块和响应设备协商感知测量并获取感知测量结果，所述响应设备为支持无线感知的显示设备；
10.根据感知测量结果指示所述显示设备的控制模块执行操作：
11.若感知测量结果result_code为failed，则不作处理；若感知测量结果result_code为success，则所述显示设备控制模块关闭显示设备，或者关闭显示设备的光机，或者调低显示设备的音量，或者关闭显示设备的音量，或者显示预设的图像，或者播放预设的声
item。
26.优选地，所述report item包括以下的一种或者多种：距离、角度、位置、心率、呼吸速率、、有人和无人。
27.优选地，所述threshold包括以下的一种或者多种：测量距离，视场角范围和目标状态。
28.优选地，所述sensing request帧、sensing response帧均包括表示帧类型的参数action和表示参与感知进程的设备的角色的参数role configuration，所述sensing request帧还包括表示测量配置的参数measurement configuration。
29.优选地，所述参数role configuration的值包括感知发起者的地址或标识、感知响应者的地址或标识、感知发送者的地址或标识和感知接收者的的地址或标识的一项或者多项。
30.优选地，所述mlme-sensmearurement.confirm原语包括参与感知测量的设备的地址参数peerstaaddress和表示是否支持感知进程发起者的请求的参数status code。
31.优选地，所述sensing report帧包括表示帧类型的参数action和表示测量报告的参数sens-report。
32.优选地，所述参数sens-report包括表示测量控制的参数measurement control，所述参数measurement control包括表示用于标识当前无线感知测量进程的参数measurement id和表示测量类型的参数measurement type。
33.优选地，所述参数sens-report还包括周期性测量报告periodical report，所述周期性测量报告periodical report包括表示测量项结果的参数result item和表示已报告次数的参数report number。
34.优选地，所述sens-report还包括事件测量报告event report，所述事件测量报告event report包括表示事件标识的参数event id和表示检测到该事件的时间的参数detect time。
35.优选地，所述mlme-sensreport.indication原语包括表示参与感知测量的设备的地址参数peerstaaddress和表示测量报告的参数sens-report。
36.优选地，所述显示设备的无线模块根据mlme-sensmearurement.request原语中的感知测量参数进行感知测量包括如下步骤：
37.无线感知测量请求包括表示事件标识的参数event id；
38.若peerstaaddress的值为所述显示设备的无线模块地址，则根据event id查找本地设置，根据事件设置的参数，发送感知信号并接收回波信号进行测量。
39.优选地，所述根据感知测量结果指示所述显示设备的控制模块执行操作包括步骤：
40.预处理所述感知测量结果获取呼吸频域数据与心跳频域数据；
41.将呼吸频域数据与心跳频域数据输入预设的学习模型获取目标人物的第一状态；若第一状态为睡眠状态，则所述显示设备控制模块关闭显示设备，或者关闭显示设备的光机，或者调低显示设备的音量，或者关闭显示设备的音量，或者显示预设的图像，或者播放预设的声音文件。
42.优选地，所述无线感知测量请求包括表示事件标识的参数event id和表示检测时
长的参数period。
43.第二方面，本技术实施例中提供的装置，包括：
44.应用模块，用于检测网络参数和无线感知功能参数，发送无线感知测量请求；
45.感知模块，用于根据无线感知测量请求判断无线感知测量是否仅由显示设备的无线模块进行感知测量，若是，则所述显示设备的无线模块进行感知测量和反馈感知测量结果；若否，则所述显示设备的无线模块和响应设备协商感知测量并获取感知测量结果，所述响应设备为支持无线感知的显示设备；
46.控制模块，用于根据感知测量结果控制所述显示设备执行预设的操作。
47.本技术实施例提供的装置具有与上述第一方面，或第一方面的任意一种可选的实施方式所提供的控制方法相同的有益效果，此处不作赘述。
48.第三方面，本技术实施例提供的显示设备，包括处理器和存储器，存储器上存储有计算机程序，处理器用于执行计算机程序，以实现上述第一方面，或第一方面的任意一种可选的实施方式所提供的控制方法。
49.本技术实施例提供的显示设备具有与上述第一方面，或第一方面的任意一种可选的实施方式所提供的控制方法相同的有益效果，此处不作赘述。
50.第四方面，本技术实施例还提供了一种存储介质，存储介质上存储有计算机程序，计算机程序被执行时，实现上述第一方面，或第一方面的任意一种可选的实施方式所提供的控制方法。
51.本技术实施例提供的存储介质具有与上述第一方面，或第一方面的任意一种可选的实施方式所提供的控制方法相同的有益效果，此处不作赘述。
52.有益效果：本技术通过无线感知测量目标对象的状态，从而控制显示设备，具备无辐射、精度高等优点，基于现有的无线设备，丰富显示设备功能。同时通过判断显示设备进行感知测量还是显示设备和响应设备协商感知测量，便于无线感知测量的稳定性、兼容性等，优化无线感知测量功能。
附图说明
53.为了更清楚地说明本技术实施例的技术方案，下面将对本技术实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
54.图1为本技术方法流程示意图；
55.图2为本技术显示设备无线感知功能结构示意图；
56.图3为本技术显示设备界面示意图。
具体实施方式
57.为使本技术实施例的目的、技术方案和优点更加清楚，下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行描述。此外，应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
58.经发明人研究发现，大多数家庭都有安装投影设备。由于一些不定性因素的影响，使得观影人在观影时会进入睡眠状态，这时投影设备还在正常工作。现有检测观影人状态方式包括采用摄像头方式或者雷达毫米波方式，采用摄像头方式需要光线充足等条件，存在隐私隐患；采用雷达毫米波方式成本高、体积大，且具有辐射；无线感知技术是一种新的技术，它可以基于现有的无线网络及设备，使用现有无线信号实现运动检测、手势识别以及生物特征测量。在无线感知中，通过使用基于信道状态信息csi或基于radar的方式检测环境中由物体、宠物和人的运动引起的变化，而不需要被检测的对象佩戴任何设备，且设备现有，无需光线条件和无隐私隐患。因此发明人基于现有家庭显示设备，提出一种控制方法。
59.如图1所示，一种控制方法，应用于显示设备，包括：
60.检测网络参数和无线感知功能参数后，发送无线感知测量请求；
61.根据无线感知测量请求判断无线感知测量是否仅由显示设备的无线模块进行感知测量，若是，则所述显示设备的无线模块进行感知测量和反馈感知测量结果；若否，则所述显示设备的无线模块和响应设备协商感知测量并获取感知测量结果，所述响应设备为支持无线感知的显示设备；
62.根据感知测量结果指示所述显示设备的控制模块执行操作。
63.如图2所示，所述显示设备的无线模块包括媒体接入层管理单元mlme和设备管理单元sme，所述显示设备包括应用单元；mlme负责执行无线感知测量过程，sme负责根据应用单元的无线感知测量请求设置测量参数，发起感知测量进程。
64.mlme接收sme发送的mlme-sensmearurement.request原语，mlme-sensmearurement.request原语包括参与感知测量的设备的地址参数peerstaaddress和感知测量参数；
65.判断peerstaaddress的值是否为所述显示设备的无线模块地址，若是，则所述显示设备的无线模块根据mlme-sensmearurement.request原语中的感知测量参数进行感知测量；若否，则所述显示设备的无线模块发送sensing request帧至peerstaaddress对应的设备协商感知测量和报告。
66.具体地，显示设备以智能投影仪为例进行说明：
67.智能投影仪使用android系统，应用单元application可以使用java编写的带ui界面控制的程序。实现如下功能：
68.判断是否连接网络。如果联网，application上的按钮可以正常点击，若没有连接网络，则application上的所有按钮都呈现灰色，并且无法点击。
69.如果已连接网络，则可选选择是否开启人体检测模式开关，此开关默认关闭。当首次点击睡眠检测时，application会向网关发送ping服务命令，并计算ping的使用时间，当每帧ping之间的时间超过1s时，application会提示“网络信号弱，无法检测”的提示，此提示意味着当前网络无法用作感知检测。检测网络情况确保无线感知测量的前提，同时检测网络具体情况，确保无线感知测量的速率。
70.当application判断投影设备已连接网络，设置开关为打开时，application发送sensing_start(eventid，period)命令给终端管理实体sme；其中eventid设置为“sleepdetection”，表示需要进行睡眠检测，period设置为t1，表示需要检测的时长，当t1＝0时表示一直检测，sme根据sensing_start(eventid，period)命令，执行无线感知进程，
其中sme执行无线感知进程具体为：
71.①
发送mlme-sensmearurement.request原语给mlme，原语中包含参数如表1：
72.表1
73.参数说明peerstaaddress设置为参与感知测量的设备的地址；measurement configuration测量配置
74.其中measurement configuration设置如表2：
75.表2
[0076][0077]
其中measurement control设置如表3：
[0078]
表3
[0079][0080]
其中periodical profile设置如表4：
[0081]
表4
request帧设置如表8：
[0098]
表8
[0099]
参数说明action帧类型，设置为sensing requestrole configuration参与感知进程的设备的角色measurement configuration测量配置
[0100]
其中role configuration设置如表9，下述四个参数可以都包含，没有对应值的设置为空，或者仅包含有明确值的参数：
[0101]
表9
[0102][0103]
感知进程响应者(ap)接收到sensing request帧后，根据sensing sid判断是否支持请求的感知业务，如果支持，则设置参数status code的值为success，如果不支持，则设置参数status code的值为refused，发送sensing response帧给感知进程的发起者(sta)，sensing response帧设置如表10：
[0104]
表10
[0105]
参数说明action帧类型，设置为sensing responsestatus code是否支持sta的请求role configuration参与感知进程的设备的角色
[0106]
感知进程发起者(sta)的mlme接收到sensing response帧后，发送mlme-sensmearurement.confirm原语给sme，原语设置如表11：
[0107]
表11
[0108]
参数说明peerstaaddressap的地址；status code是否支持sta的请求
[0109]
感知进程发起者(sta)发送感知数据包给感知进程响应者(ap)；感知进程响应者(ap)接收感知数据包，测量信道状态信息csi，并根据measurement configuration执行上报；如果measurement type中包含“event-based”，根据event profile中设置的事件，对列出的event id，根据事件的定义和threshold参数对测量结果进行判断，当满足条件时，发
送测量报告；
[0110]
感知进程响应者(ap)发送sensing report帧给sta，sensing report帧设置如表12：
[0111]
表12
[0112]
参数说明action帧类型，设置为sensing reportsens-report测量报告
[0113]
其中sens-report设置如表13：
[0114]
表13
[0115][0116]
其中measurement control设置如表14：
[0117]
表14
[0118][0119]
其中periodical report设置如表15：
[0120]
表15
[0121]
result itemreport number(可选)测量项的结果已报告的次数
[0122]
其中event report设置如表16：
[0123]
表16
[0124][0125]
感知进程发起者(sta)的mlme接收到sensing report后，发送mlme-sensreport.indication原语给sme，原语设置如表17：
[0126]
表17
[0127][0128]
③
sme如果接收到成功检测到事件的报告，则设置该事件对应的result_code为success，如果在指定时间t1内，没有接收到检测到事件的报告，则设置该事件对应的result_code为failed；
[0129]
④
application间隔时间循环发送sensing_result(eventid,result_code)获取事件检测结果。
[0130]
若application接收到的result_code为failed，则不作任何的处理，若为success，则接收测量报告数据。
[0131]
显示设备的控制模块将获取的报告先做归一化处理，除去环境噪声，然后使用傅里叶变换，提取报告数据的时域信息与频域信息。对提取出来的频域数据通过低通滤波器(ilpf)与高斯低通滤波器(glpf)，筛选出呼吸频域数据与心跳频域数据。正常人安静时候的心率是60-100次/分之间。成年男性大约是60-80/分；女性约为70-90次/分。入睡时心率都要减慢，男性大约是50-70次/分，女性为60-70次/分。正常人的呼吸频率在16-18次/分钟之间，睡眠时呼吸频率稳定，清醒时呼吸频率或根据人体的不同动作而有所波动。通过上述方式，采集大量睡眠状态下的心跳与呼吸频率数据和清醒状态下的心跳与呼吸频率的数据，采用机器学习的方法训练数据集。
[0132]
将得到的呼吸频域数据与心跳频域数据与训练的人体睡眠时的频域数据进行特征匹配，若匹配结果为睡眠状态，则调用投影设备android manager的powermanager服务，向其发送powerdown关键字，powermanager收到powerdown关键字后切断系统供电，关闭投影设备。否则不作任何处理。
[0133]
如图3所示，application的ui界面有设备检测按钮，打开以及关闭设备等按钮以及一些参数配置的窗口。界面包括设备检测、感知开关、人数检测、肢体检测、睡眠检测以及环境检测等功能。application安装时会提示调用android manager的powermanager服务，需要获取相关权限，点击确定后application才可以正常安装，安装后首次打开界面如图3
所示。点击检测设备，如果检测装置已与投影设备连接并正常上电，然后点击睡眠检测按钮，软件界面会弹出睡眠检测功能界面相应的参数输出。点击设备开关按钮，设备会关闭运行或启动运行。如果是关闭运行，application参数栏会变灰，相应参数不在显示。此开关默认关闭，下次启动默认之前设置的启动状态。
[0134]
本技术借助无线感知使用无接触式检测观影人是否进入睡眠状态，判断状态采用无线感知，无线感知采用投影设备进行无线感知测量或者采用投影设备和响应设备协商无线感知测量；如果进入睡眠状态，则使投影设备暂停并且息屏或者直接关闭投影设备；或者关闭显示设备的光机，或者调低显示设备的音量，或者关闭显示设备的音量，或者显示预设的图像，或者播放预设的声音文件。
[0135]
请参阅图2，本技术实施例提供一种显示设备示意性结构框图，其可以是智能手机、平板电脑显示设备等。显示设备包括智能电视或者智能投影仪。
[0136]
应当理解，图2所示的结构仅为示意，本技术实施例提供的显示设备还可以具有比图2更少或更多的组件，或是具有与图2所示不同的配置，本技术实施例对此不作具体限制。
[0137]
基于与上述控制方法同样的发明构思，本技术实施例还提供了一种装置；所述装置包括：
[0138]
应用模块，用于检测网络参数和无线感知功能参数，发送无线感知测量请求；
[0139]
感知模块，用于根据无线感知测量请求判断无线感知测量是否仅由显示设备的无线模块进行感知测量，若是，则所述显示设备的无线模块进行感知测量和反馈感知测量结果；若否，则所述显示设备的无线模块和响应设备协商感知测量并获取感知测量结果，所述响应设备为支持无线感知的显示设备；
[0140]
控制模块，用于根据感知测量结果控制所述显示设备执行预设的操作。
[0141]
所述应用模块包括网络检测单元、感知功能检测单元和通信单元；所述网络检测单元用于检测网络连接情况，连接情况包括是否联网以及网络质量等；所述感知功能检测单元用于检测感知功能开关状态；所述通信单元用于发送无线感知测量请求至感知模块。
[0142]
所述感知模块包括无线模块，所述无线模块包括媒体接入层管理单元mlme和设备管理单元sme，其中mlme负责执行无线感知测量过程，sme负责根据应用单元的无线感知测量请求设置测量参数，发起感知测量进程。
[0143]
所述控制模块包括处理单元，用于根据感知测量结果控制所述显示设备执行预设的操作。或者包括处理单元、预处理单元和学习单元；所述预处理单元用于预处理所述感知测量结果获取呼吸频域数据与心跳频域数据；所述学习单元用于将呼吸频域数据与心跳频域数据输入预设的学习模型获取目标人物的第一状态；所述处理单元用于根据第一状态控制所述显示设备执行预设的操作，包括关闭显示设备，或者关闭显示设备的光机，或者调低显示设备的音量、或者关闭显示设备的音量，或者显示预设的图像，或者播放预设的声音文件。
[0144]
综上，本技术通过无线感知测量获取观影人状态，从而控制投影仪，基于现有的无线设备，丰富投影仪功能。通过判断投影设备进行感知测量还是投影设备和响应设备协商感知测量，便于无线感知测量的稳定性、兼容性等，优化无线感知测量功能。
[0145]
此外，本技术实施例还提供了一种显示设备，包括处理器和存储器，所述存储器上存储有计算机程序，所述处理器用于执行所述计算机程序，以实现上述方法实施例所提供
的控制方法，具体可参见上述方法实施例，本技术实施例中对此不作赘述。
[0146]
此外，本技术实施例还提供了一种存储介质，存储介质上存储有计算机程序，计算机程序被执行时，实现上述方法实施例所提供的控制方法，具体可参见上述方法实施例，本技术实施例中对此不作赘述。
[0147]
在本技术所提供的几个实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本技术的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
[0148]
另外，在本技术每个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是每个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。
[0149]
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本技术每个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、随机存取存储器(random access memory，ram)、只读存储器(read only memory，rom)、磁碟或者光盘等各种可以存储程序代码的介质。
[0150]
以上所述仅为本技术的实施例而已，并不用于限制本技术的保护范围，对于本领域的技术人员来说，本技术可以有各种更改和变化。凡在本技术的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本技术的保护范围之内。
[0151]
此外，需要说明的是，在本文中，诸如“第一”、“第二”、“第三”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。