根据实时视频画面可视化控制的智能家居系统及控制方法
【专利摘要】根据实时视频画面可视化控制的智能家居系统及控制方法，涉及到智能家居技术领域。解决现有被控智能产品操作繁琐的技术不足，包括有云服务平台，与云服务平台连接的网络摄像机、被控智能产品和客户端；所述的云服务平台包含有视频物体分析服务器；视频物体分析服务器的数据库中预存有被控智能产品的物体形态数据；视频物体分析服务器用于根据客户端从实时视频画面中捕捉到的被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，以供客户端远程向对应被控智能产品发送控制指令用。快捷方便，达到所见即所得，让用户身临其境。从操作体验来说，给用户虚实结合的操作感受及体验。
【专利说明】
根据实时视频画面可视化控制的智能家居系统及控制方法
技术领域
[0001 ]本发明涉及到智能家居技术领域。【背景技术】
[0002]当前市面上控制智能设备操作的，有以下几种方式:第一种，通过被控智能产品配对的遥控器进行操作:有些被控智能产品为了方便用户控制会配置室内的遥控器，用户使用遥控器可以直接操作被控智能产品的基本操作。
[0003]缺点:不能远程控制。被控智能产品多了，遥控器就多了，很容易混乱，不能实现真正意义上的智能生活。
[0004]第二种，通过网络连接，获取被控智能产品状态并控制:为能够连入外网的被控智能产品研发一个应用APP，应用App可以与这些被控智能产品之间连接，连接后用户即可实现远程控制。
[0005]缺点:操作太繁琐，用户还需要一个个找到被控智能产品进行设置，不能可视化操作。
【发明内容】
[0006]综上所述，本发明的目的在于解决现有被控智能产品在远程控制时，不能实现可视化智能识别需操作的被控智能产品，操作繁琐的技术不足，而提出根据实时视频画面可视化控制的智能家居系统及控制方法。
[0007]为解决本发明所提出的技术问题，采用的技术方案为:根据实时视频画面可视化控制的智能家居系统，包括有云服务平台，与云服务平台连接的网络摄像机、被控智能产品和客户端;其特征在于:所述的云服务平台包含有视频物体分析服务器;视频物体分析服务器的数据库中预存有被控智能产品的物体形态数据;视频物体分析服务器用于根据客户端从实时视频画面中捕捉到的被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，以供客户端远程向对应被控智能产品发送控制指令用。
[0008]所述智能家居系统的控制方法，所述方法包括如下步骤:a、首先客户端登陆云服务平台，通过云服务平台建立与网络摄像机建立通讯连接；b、客户端请求网络摄像机发送视频流；c、客户端展示包含有被控智能产品图像内容的实时视频画面；d、在客户端的实时视频画面上，点击需操作的被控智能产品图像区域，由客户端或云服务平台捕捉生成被检画面，并将被检画面和点击坐标信息提供给视频物体分析服务器；e、视频物体分析服务器根据被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，并由云服务平台返回给客户端；f、客户端上展示该被控智能产品可操作按键界面，以按用户对被控智能产品可视化远程操作控制。[00〇9 ] 所述的云服务平台通过WIFI智能主机与被控智能产品间WIFI无线连接控制。
[0010]所述的WIFI智能主机还连接有与被控智能产品对应的遥控模块，WIFI智能主机通过遥控模块遥控被控智能产品。
[0011]本发明的有益效果为:在客户端上查看网络摄像机输出的实时视频画面时，需要对某个被控智能产品控制的话，直接点击实时视频画面上该被控智能产品图像区域，由视频物体分析服务器进行形态匹配，获取被控智能产品对应的智能硬件类别信息，之后在客户端上展示该被控智能产品可操作按键界面，快捷方便。视觉是人的主要感知系统，通过本发明，可以可视化管理被控智能产品，达到所见即所得，让用户身临其境。从操作体验来说， 给用户虚实结合的操作感受及体验。【附图说明】
[0012]图1为本发明根据实时视频画面可视化控制的智能家居系统的结构示意图；图2为本发明的智能家居系统的控制方法的工作流程图。【具体实施方式】
[0013]以下结合附图和本发明具体实施例对本发明作进一步地说明。
[0014]参照图1中所示，根据实时视频画面可视化控制的智能家居系统，包括有云服务平台，与云服务平台连接的网络摄像机、被控智能产品和客户端;所述的云服务平台包含有视频物体分析服务器;视频物体分析服务器的数据库中预存有被控智能产品的物体形态数据;视频物体分析服务器用于根据客户端从实时视频画面中捕捉到的被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，以供客户端远程向对应被控智能产品发送控制指令用。
[0015]参照图2中所示，采用上述根据实时视频画面可视化控制的智能家居系统的控制方法，包括如下步骤:a、首先客户端登陆云服务平台，通过云服务平台建立与网络摄像机建立通讯连接；b、客户端请求网络摄像机发送视频流；c、客户端展示包含有被控智能产品图像内容的实时视频画面；d、在客户端的实时视频画面上，点击需操作的被控智能产品图像区域，由客户端或云服务平台捕捉生成被检画面，并将被检画面和点击坐标信息提供给视频物体分析服务器；e、视频物体分析服务器根据被检画面与物体形态数据进行形态匹配，获取被控智能产品对应的智能硬件类别信息，并由云服务平台返回给客户端；f、客户端上展示该被控智能产品可操作按键界面，以按用户对被控智能产品可视化远程操作控制。实现远程可视化控制物体的基本操作。识别出实时画面中的基本物体，包含电视，灯，窗帘，温控，空调，智能插座等等(能够有控制能力的物体)，并在实时画面中直接进行基础的控制操作。实现用户的可视化操作。[〇〇16]其中e、步骤，对于已经接入云服务平台的各种被控智能产品(泛指网络摄像机、智能窗帘、温控等，一切可以通过某种方式被外界控制的智能设备)，通过通讯协议，将获取网络摄像机的画面信息，送至视频物体分析服务器，即可获取画面中的智能灯，智能电视等常见的家居智能产品信息，获取到对应的被控智能产品信息即可到视频物体分析服务器的数据库中查询产品对应的操作属性，例如:电视对应基本开关和换台操作。
[0017]对于没有接入云服务平台的各种被控智能产品，将采用一种物体识别技术，来做基础匹配。首先任何一种物体都会有一个相对的形态，包含人在内。这项识别技术也是从人脸识别技术衍生过来的。提前在视频物体分析服务器的数据库中存储最常用而且形状尽可能多的物体形态，例如:智能电视，智能灯，智能窗帘等。这些被控智能产品都有自己的标准的API(也即是标准的功能)和对外公开的标准形态。
[0018]当网络摄像机捕捉到画面后(这里特指家居场景)，送至物体识别服务器，物体识别服务器将采用从人脸识别技术升级的采集方式，捕捉到独立个体的外观信息，同时匹配是对应放置在墙上还是天花板上还是家居场景的其他位置。将综合信息放置到数据库里匹配，即可获取到对应的被控智能产品类别设置到型号。(当然也会有匹配不到情况，如果没有提前录入该电视信息，那么将识别失败。物体识别服务器将失败信息反馈给云服务平台的中心服务器，云服务平台的中心服务器将会把数据统计发给服务人员，服务人员将会逐个录入，也就是信息量也会越来越大，匹配度也会越来越高)。
[0019]当物体识别服务器识别到时某个类型被控智能产品后，将会到其数据库里再度匹配该被控智能产品匹配的API。并将调用指令的方式下发给客户端上展示。这样也就可以进行第二阶段的操作。[0〇2〇] 所述的云服务平台通过WIFI智能主机与被控智能产品间WIFI无线连接控制。
[0021]或者所述的WIFI智能主机还连接有与被控智能产品对应的遥控模块，WIFI智能主机通过遥控模块遥控被控智能产品。
【主权项】
1.根据实时视频画面可视化控制的智能家居系统，包括有云服务平台，与云服务平台 连接的网络摄像机、被控智能产品和客户端;其特征在于:所述的云服务平台包含有视频物 体分析服务器;视频物体分析服务器的数据库中预存有被控智能产品的物体形态数据;视 频物体分析服务器用于根据客户端从实时视频画面中捕捉到的被检画面与物体形态数据 进行形态匹配，获取被控智能产品对应的智能硬件类别信息，以供客户端远程向对应被控 智能产品发送控制指令用。2.如权利要求1所述智能家居系统的控制方法，其特征在于所述方法包括如下步骤: a、首先客户端登陆云服务平台，通过云服务平台建立与网络摄像机建立通讯连接；b、客户 端请求网络摄像机发送视频流；c、客户端展示包含有被控智能产品图像内容的实时视频 画面；d、在客户端的实时视频画面上，点击需操作的被控智能产品图像区域，由客户端或 云服务平台捕捉生成被检画面，并将被检画面和点击坐标信息提供给视频物体分析服务 器；e、视频物体分析服务器根据被检画面与物体形态数据进行形态匹配，获取被控智能产 品对应的智能硬件类别信息，并由云服务平台返回给客户端；f、客户端上展示该被控智能 产品可操作按键界面，以按用户对被控智能产品可视化远程操作控制。3.根据权利要求2所述的智能家居系统的控制方法，其特征在于:所述的云服务平台通 过WIFI智能主机与被控智能产品间WIFI无线连接控制。4.根据权利要求3所述的智能家居系统的控制方法，其特征在于:所述的WIFI智能主机 还连接有与被控智能产品对应的遥控模块，WIFI智能主机通过遥控模块遥控被控智能产 品。
【文档编号】G05B15/02GK105955040SQ201610336921
【公开日】2016年9月21日
【申请日】2016年5月20日
【发明人】余承富
【申请人】深圳市大拿科技有限公司