不适用。
联邦赞助的研究或开发
不适用。
缩微胶片/版权引用
不适用。
技术领域
本公开涉及建筑物/家庭监视/安全系统，其具有遍及建筑物/家庭定位的由该系统监视和/或控制的多个电子设备。
背景技术：
建筑物/家庭安全/监视系统在日复一日（day-to-day）的基础上捕捉在建筑物/家庭中发生的事件/活动中的许多，并且数据通常被存储在本地的安全/监视系统中或“云”中的电子存储器中。例如，这样的系统通常捕捉事件/活动，该事件/活动指示建筑物/家庭中什么灯打开或关闭、建筑物/家庭中的温度、多个已连接的电子设备的状态（开/关、工作/禁用、活动/非活动等）、传感器触发的警报以及到和从建筑物/家庭的入口和出口。此外，现在常见的是许多个人携带移动电子设备（通常是手机或智能电话），其允许追踪个人的位置，并且还允许个人进行数字记录，诸如数字照片、数字视频和数字录音。此外，个人在任何给定日期间在规则的基础上通过如下与电子社交媒体进行交互现在正变得越来越常见：上传照片/视频、给朋友/家庭成员加标签、与朋友/家庭成员交互、“点赞（liking）”或“分享”他人的社交媒体帖子以及与社交媒体的其他交互，其全部常常作为交互的“历史”而被存储在电子存储器中。当个人利用诸如移动手机或智能电话之类的移动设备时，这些交互通常将发生，但也可以在平板电脑、膝上型电脑和台式电脑上发生。
尽管所有此数据通常作为日志或历史以一种电子的形式或其他形式被记录或保持，但是用户、研究者或其他经授权的人目前缺乏以统一的方式（尤其是以任何种类的直观方式）来对此数据进行查看/可视化的能力。因此，在目前可用的系统中存在改进的空间。
技术实现要素：
根据本发明的一个特征，提供了一种电子处理器实现的方法，以用于使用具有多个监视的电子设备的建筑物监视系统来虚拟地重新创建（virtually recreate）与建筑物相关联的基于时间的事件并且提供针对每个设备的带时间戳的事件数据到电子存储器。该方法包括以下步骤：将与每个被监视的电子设备相关联的事件的带时间戳的事件数据存储在电子存储器中，并且将所述建筑物的视觉表示存储在所述电子存储器中，所述视觉表示包括具有被监视的电子设备的所述建筑物的每个部分的视觉表示。响应于来自用户输入设备的指示所述建筑物的所选部分和所选时间戳的信号，该方法还包括如下步骤：访问所述建筑物的所述视觉表示和所述带时间戳的事件数据，并向电子视觉显示器提供信号，该电子视觉显示器通过显示在所述建筑物的所选部分的视觉表示中的事件来提供在所选时间戳上与所述建筑物的所选部分中的每个被监视的电子设备相关联的事件的基于时间的虚拟的重新创建。
作为一个特征，该方法还包括以下步骤：存储针对利用所述建筑物的至少一个所选个人的电子可记录活动的带时间戳的数据，并且访问电子可记录活动的所述带时间戳的数据并向所述电子视觉显示器提供信号，所述电子视觉显示器提供在所选时间戳期间针对所选个人的电子可记录活动的所述带时间戳的数据中的至少一些的视觉指示。所述电子可记录活动包括以下中的至少一个：在所选个人的人上携带的电子设备的位置信息、所选个人与电子通信系统的交互、所选个人与电子社交媒体的交互、所选个人拍摄的数字照片、所选个人拍摄的数字视频以及所选个人制作的数字音频记录。
在一个特征中，电子活动的所述带时间戳的数据的所述视觉指示包括用户可读文本。
根据一个特征，该方法还包括以下步骤：响应于来自用户输入设备的指示在所述虚拟重新创建中应当暂停时间流逝的信号，暂停所述虚拟重新创建中的时间流逝。
作为一个特征，该方法进一步包括以下步骤：在所述虚拟重新创建中显示时间条，所述时间条图示所选时间戳的至少一部分并且包括用户可选择图标，所述用户可选择图标允许用户调整在虚拟重新创建中当前要被显示的时间点。
在一个特征中，该方法还包括访问所述带时间戳的数据和所述视觉表示，并向所述电子视觉显示器提供信号以响应于来自用户输入设备的指示显示从所述建筑物的所述所选部分到建筑物的另一所选部分的移动的用户请求的信号来模拟在所述虚拟重新创建中从所述建筑物的所选部分到所述建筑物的另一所选部分的移动。
根据一个特征，存储所述建筑物的视觉表示的步骤包括在所述电子存储器中存储位于具有被监视的电子设备的所述建筑物的每个部分中的家具和其他对象的视觉表示。
作为一个特征，存储所述建筑物的视觉表示的步骤包括在所述电子存储器中存储识别被监视的电子设备的类型的针对被监视的电子设备的每个类型的用户可读文本标签。
在一个特征中，在所述建筑物的所述视觉表示中显示所述事件包括显示针对所述建筑物的所选部分中的每个被监视的电子设备的可读文本标签，每个可读文本标签描述在正被显示的时间点处与每个被监视的设备相关联的事件。
作为一个特征，所述建筑物的所述视觉表示是具有被监视的电子设备的所述建筑物的每个部分的三维视觉表示。
在一个特征中，所述建筑物的所述视觉表示还包括位于具有被监视的电子设备的所述建筑物的每个部分中的家具和其他对象的三维视觉表示。
根据一个特征，所述建筑物的所述视觉表示还包括在所述建筑物中的至少一个被监视的电子设备的位置处的至少一个被监视的电子设备的三维视觉表示。
作为一个特征，所述建筑物的视觉表示是具有被监视的电子设备的所述建筑物的每个部分的二维视觉表示。
在一个特征中，所述建筑物的所述视觉表示还包括位于具有被监视的电子设备的所述建筑物的每个部分中的家具和其他对象的二维视觉表示。
根据一个特征，所述建筑物的所述视觉表示还包括在所述建筑物中的所述至少一个被监视的电子设备的位置处的至少一个被监视的电子设备的二维视觉表示。
作为一个特征，所述虚拟重新创建包括表示所述被监视的电子设备中的一个的用户可选择图标，并且还包括响应于用户选择所述用户所选图标而在所述虚拟重新创建中显示与所述被监视的电子设备中的所述一个相关联的数据。
在一个特征中，所述被监视的电子设备中的至少一个是摄像机，并且所述虚拟重新创建包括表示所述摄像机的用户可选择图标，并且该方法还包括响应于用户选择所述用户所选图标而在所述虚拟重新创建中播放视频，所述视频是在所选时间戳期间由所述摄像机拍摄的视频。
根据一个特征，一种非临时计算机可读储存介质包括用于在执行所述指令的电子处理器中实现包括以上特征中的任一个的方法的指令。
作为一个特征，提供了一种用于创建与建筑物相关联的基于时间的事件的虚拟重新创建的系统。该系统包括被配置成实施包括上面特征中的任一个的方法的电子处理器、多个被监视的电子设备、电子存储器和视觉显示器。
根据包括所附权利要求和附图的整个说明书的回顾，其他特征和优点将变得显而易见。
附图说明
图1是图示出用于虚拟地重新创建与具有多个被监视的电子设备的建筑物相关联的基于时间的事件的方法和系统的框图；
图2是图示出用于在图1的系统和方法中使用的建筑物的视觉表示的视图；
图3是以不同的细节示出图1的方法和系统的另一个框图；
图4是图示出根据图1和图3的系统和方法的虚拟重新创建的稍微示意性的视图；
图5是图示出根据图1和图3的系统和方法的另一虚拟重新创建的视图；和
图6是图示出由图1-图5的系统所实现的用于虚拟地重新创建与建筑物相关联的基于时间的事件的方法的实施例的流程图。
具体实施方式
参考图1和图2，图示出了一种用于通过利用建筑物监视系统13来虚拟地重新创建与诸如家庭12之类的建筑物12相关联的基于时间的事件的方法和系统10，该建筑物监视系统13具有电子处理器14和经由硬连线或无线信号而操作地连接到处理器14的多个被监视的电子设备16。方法和系统10允许用户通过重新访问虚拟重新创建中的事件来分析建筑物/家庭12中的过去的事件。如本文所使用的，术语“监视系统”13可以是诸如例如建筑物控制系统或安全系统之类的其中将电子设备16连接到监视和/或控制电子设备16的中央系统的任何系统——其中许多是已知的，并且术语“被监视的电子设备”16可以是在这样的系统中使用的任何被监视、连接和/或控制的电子设备，其中的许多类型是已知的，包括但不限于相机16A、运动传感器16B、烟雾/热量/气体传感器/检测器16C、电视16D、加热、通风和空调系统和/或用于此类系统的部件，诸如恒温器16E、门/窗锁或传感器16F、音乐系统或扬声器16G、百叶窗/窗帘控制器16H、照明16I、诸如电插座、立体声音响、电视机、其他家用电器的其他电子设备16J以及其他类型的前面没有提及的安全或安保传感器16K。系统10还可以包括室内定位系统17，其包括位置检测器16J形式的被监视/连接的电子设备，其可以检测和确定具有诸如蓝牙低能量（BLE）标签的位置设备的被监视/连接的电子设备16的位置数据，其中许多类型是已知，并且还可以定位家庭12内携带再次诸如是BLE标签的位置设备的居住者/用户并且为这样的居住者/用户提供位置数据。
本公开的系统10被配置成存储针对与电子存储器20中的被监视的电子设备16中的每个相关联的事件的带时间戳的事件数据18。与被监视的电子设备16中的每个相关联的事件可以是与被监视的电子设备16中的每个相关联的任何事件或状态，诸如例如由相机16A拍摄的照片或视频、由运动传感器16B对运动的检测、由烟雾检测器16C对烟雾的检测、当前显示在电视机16D上的频道、恒温器16E的温度设置、门锁16F的锁定或解锁、音乐系统16G播放的音乐、由百叶窗/窗帘控制16H所控制的百叶窗或窗帘的操作位置、灯16I的照明水平或任何电子设备16的操作状态（开/关、低功率、操作错误等）。带时间戳的事件数据18还可以是在家庭12内携带诸如BLE标签之类的位置设备的居住者/用户的带时间戳的位置数据19。应该理解，如本文所使用的，术语“时间戳”包括时钟时间（小时、分、秒等）和日历日期（日、月、年）两者。
另外，系统10在电子存储器20中存储家庭12的视觉表示22，其中视觉表示22包括具有被监视的电子设备16的建筑物12的每个部分24的视觉表示，诸如图2中示出的家庭12的每个房间24。视觉表示22可以是2-D或3-D模型的形式，诸如包括家庭12内的家具和其他对象的3-D表示和关于家庭12中的被监视的电子设备16中的每个的位置19的信息以及设备16的视觉表示25的“建筑信息模型（BIM）”。应当理解，用户可以基于用户对位置的了解来输入被监视的电子设备16中的每个在家庭中的位置19，或者如果系统10采用室内定位系统17，则可以由室内定位系统17以位置数据19的形式生成位置信息中的至少一些。此外，应该理解，针对设备16中的至少一些的位置19信息可以存储在可以与用于视觉表示22的位置数据相关的单独数据库中。系统10被配置成访问电子存储器20以检索家庭12的任何所选部分24的视觉表示22，包括家庭12的所选部分24中的任何电子设备16的位置。就此而言，应该理解，家庭12的所选部分24可以是房间24、多个房间24、家庭12的外部部分24或者甚至整个家庭12。
响应于来自用户输入设备30的指示家庭12的用户所选部分24的信号28和用户所选时间戳，电子处理器14运行虚拟家庭存储器重新创建算法29，该算法29访问电子存储器20中的家庭12的视觉表示22和带时间戳的事件数据18，并将信号31提供到电子显示器34，该电子显示器34通过响应于信号31来显示在家庭12的所选部分的视觉表示中的事件而提供在所选时间戳上与家庭12中的所选部分中的每个被监视的电子设备16相关联的事件的基于时间的虚拟重新创建。就此而言，可以以位于设备16中的每个附近的文本块32的形式或者用于说明针对特定设备的事件的任何合适的方式来示出针对每个电子设备的事件。虚拟重新创建还可以包括指示虚拟重新创建内的当前时间和日期的文本和数字。如在33处所示，可以经由直接有线连接、通过面板、网关、无线网络或云来发射信号28和31。用户输入设备30可以是任何合适的类型，其中许多是已知的，并且用户输入可以采用任何合适的形式，其中许多再次是已知的，包括键区输入、可选择图标和使用任何合适的语音识别技术到扩音器中的语音命令。
参考图3-5，电子显示器34可以包括任何合适的电子视觉显示器，诸如例如虚拟现实眼镜34A或平板屏幕34B，诸如在移动智能电话、台式监视器或膝上型电脑监视器中。虚拟重新创建可以是诸如图4中所示的虚拟现实眼镜34A中显示的三维虚拟现实视图（VRV）35A的形式、诸如图5中所示的平板屏幕34B中显示的三维增强现实视图（AR）35B、或者诸如图2中所示的平面屏幕34B中所示的建筑物的二维视觉表示35C。另外，系统10具有经由显示器34中携带的扬声器或用户佩戴的头戴式耳机重放虚拟重新创建中的声音的能力。例如，声音可以是在所选时间戳期间可能已经在家庭的所选部分中的立体声音响16G上播放过的音乐。另外，通过为诸如例如相机16A之类的特定类型的电子设备16提供行动图标36，用户可以作为用户可选择图标或者经由语音命令来选择相机16A，并且系统10将发送信号31以使得显示器34能够发起在所选时间戳期间由相机捕捉的图像中的任何图像的重放。
所图示的实施例系统10还被配置成使得用户可以请求现实世界环境重新创建（RWER）35C，其中响应于来自用户输入设备30的指示家庭12的所选部分和所选时间戳的信号28，系统10访问家庭12的视觉表示22和电子存储器20中的带时间戳的事件数据18，并将信号36提供到家庭12的所选部分中的电子设备16，其引起电子设备16重新创建在所选时间戳期间针对家庭12的所选部分中的电子设备16中的每个所发生的事件。这允许用户在现实世界中重新创建针对由用户选择的任何所选时间戳的由用户选择的家庭12的任何部分24内的存在于家庭12中的环境，使得用户可以在用户位于家庭12的该所选部分24中的同时体验该环境。
此外，本文所示的方法和系统10的实施例具有如下能力：为使用家庭12的一个或多个所选个人存储电子可记录活动38的带时间戳的数据37，访问来自保持在由所选个人携带或操作的电子设备40（通常是由家庭或建筑物的居住者使用的移动智能电话或平板电脑）中的其他电子数据库或在由诸如例如社交媒体实体之类的其他实体所保持的电子数据库（该数据库可以经由“云”可访问）中的这样的带时间戳的数据37。就此而言，如图1中所示，系统10可以包括用于联系所选个人的所选社交媒体站点以提取数据37的社交媒体活动提取器42，以及用于从所选个人的所选移动电子设备提取数据37的移动设备提取器44。
电子可记录活动38可以包括：在所选个人的人上携带的电子设备40的位置信息38A；由所选个人与电子通信系统的交互38B，诸如例如文本消息发送、电话呼叫和视频消息发送；由所选个人与电子社交媒体的交互38C，诸如例如社交媒体发布、社交媒体分享、“推文”、其他社交媒体帖子的“点赞”等；在所选用户的移动设备上被访问或收听的音乐或视频38D；和诸如由所选个人创建的照片、视频或音频记录之类的数字记录38E。如上所指出，此类电子可记录活动38的带时间戳的数据37可以存储在系统10的电子存储器20中，或者可以存储在由所选个人携带或操作的并且使用提取器44访问的电子设备40的电子存储器中，或者可以存储在由另一实体（诸如由社交媒体实体）保持的并且经由提取器42访问的可访问电子数据库中。
响应于来自用户输入设备30的信号28，系统10访问电子存储器20中的活动38的带时间戳的数据37，并将信号31提供到电子显示器34，所述电子显示器34提供在所选时间戳期间针对所选个人的电子可记录活动38的带时间戳的数据37中的至少一些的视觉指示48。就此而言，视觉指示48可以是任何合适的形式，诸如例如图5中所图示的电子可记录活动38的用户可选择文本列表48。响应于用户诸如经由可选择文本图标或经由语音命令而选择了视觉指示48中的特定活动38，系统10可以将信号31提供到显示器34，其将重新创建在虚拟重新创建中的活动38，诸如例如重放由所选个人携带或操作的电子设备所记录的视频和音频。
参考图6，在流程图中图示出了方法10的实施例，其中方法10使用虚拟家庭存储器重新创建算法29来不断地提取和存储带时间戳的数据18和37，如在52处所示，并检查来查看是否已经接收到来自用户输入设备30的任何信号28，如在54处所示。如果已经接收到信号28，则算法29注意到家庭12的部分24和用户所选时间戳，如在56处所示，提取来自视觉表示22的针对所选部分24的数据和来自相关数据库的相关带时间戳的事件数据18、37，如在58处所示，并将信号31提供到电子显示器34以引起电子显示器34提供虚拟重新创建，如在60处所示。此外，如在62处所示，系统10能够更新所请求的时间戳和家庭12中的位置24。另外，如在64处所示，系统10可以提取来自本地存储器20或来自包括例如创建电子可记录活动38的用户的电子设备（诸如用户的移动电话40）的其他电子数据库的带时间戳的数据37，并且还可以检查可存储在云中或由特定社交媒体网站保持在电子数据库中的用户的社交媒体活动。还应该理解，系统10可以被配置来在本地电子处理器14中运行或者经由云在远程电子处理器14中运行虚拟家庭存储器重新创建算法。
作为操作中的系统10的示例，用户将登录到系统10中并使用任何合适的用户输入设备或装置（诸如键区、用户可选择的显示器30上的图标或经由语音命令）来输入家庭12的所选部分24和所选时间戳。用户还可以输入针对所选个人的电子可记录活动38的请求，或者系统10可以被配置为自动假定用户是由用户的登录信息所识别的所选个人。作为示例，用户可以选择2016年2月17日晚上9点以及家庭12的起居室，并且方法和系统10可以自动选择用户作为针对带时间戳的数据37的所选个人。然后系统10访问电子存储器20和任何其他适当的电子数据库以检索在晚上9点适合于家庭12的起居室的带时间戳的数据18、37。然后，用户可以输入开始命令，选择开始图标，或者给予语音命令，其然后将开始从2016年2月17日晚上9点的虚拟重新创建，在时间方面向前移动。系统10可以提供时间条，诸如图4中看到的具有用户可选择图标72的时间条70，该图标72将允许用户从晚上9点发起时间起在时间上向前和向后移动虚拟重新创建或者暂停虚拟重新创建。此外，经由进一步的用户输入，用户可以导航虚拟重新创建，以便从家庭12的一个部分24虚拟地移动到家庭12的另一部分12，其中每个部分12示出在虚拟重新创建中被重新创建的当前时间期间针对家庭12的那个部分24中的每个电子设备16正在发生的事件。此外，就已经请求所选个人的活动38而言，那些活动38可以通过文本列表来示出，诸如图5中的文本列表48，其为用户提供在所选时间期间针对所选个人的活动38中的每个的可选择文本标识符74，其诸如例如是用户的社交媒体、移动电话活动和/或在所选时间段期间被查看或拍摄的照片或视频中的任何一个。例如，用户可以选择所选个人在所选时间戳期间正在他们的移动电子设备上收听音乐的文本指示74，并且通过选择文本指示符74，系统10将访问适当的数据37并发送信号31以引起虚拟重新创建将音乐播放到显示器上携带的扬声器或用户佩戴的头戴式耳机中。就已经请求所选个人的位置而言，系统10还可以访问针对那个所选个人的位置的带时间戳的数据37，并在虚拟重新创建当前时间提供所选个人在虚拟重新创建中的位置的指示。
应该认识到，在本文中所公开的方法和系统10允许用户在家庭12中可能已经发生关键的某事时重新创建在家庭12中的事件。例如，系统10允许用户重新创建在可能已经发生盗窃的时间期间或在某人可能在家庭12内已经有事故期间在用户的家庭12中正在发生什么。作为另一示例，系统10允许用户确定当传感器检测到诸如建筑物12内的高二氧化碳水平或非预期运动之类的特定事件时在建筑物12内发生了什么。作为另一示例，系统10允许用户重新创建与先前事件期间的家庭12中的环境相类似的家庭12中的环境，诸如例如与聚会期间存在的环境相类似的环境。
应该认识到，尽管本文公开了方法和系统10的具体实施例，但是本公开预期并非所有实施例将并入所公开实施例的所有特征，并且另外，一些实施例可以包括没有公开的附加特征或未在本文明确描述的替代结构或设备。