基于观众之间的关联信息播放广告的方法、装置和设备的制造方法
【技术领域】
[0001]本发明涉及多媒体技术领域，具体而言，本发明涉及基于观众之间的关联信息播放广告的方法、装置和设备。
【背景技术】
[0002]数字标牌(Digital Signage)是一种全新的媒体概念,指的是在大型商场、超市、饭店、影院等人流汇聚的公共场所，通过具有大屏幕的终端显示设备，发布商业、财经和娱乐等信息的多媒体专业视听系统。其旨在特定的物理场所、特定的时间段对特定的人群进行信息的投放，从而取得广告效应。近些年来，随着新型人机交互技术的发展，使得计算机视觉、人工智能在信息获取、采集及监控、人机交互界面设计等方面开始发挥越来越重要的作用。将人脸特征识别技术与数字标牌媒体相结合，就可以根据不同的用户播放不同的广告内容，让投放的广告更有针对性，同时还可以统计观看广告的观众的人脸特征信息，并对其进行分析，根据统计分析结果调整播放广告，让播放的内容更有特色及针对性。
[0003]现有技术中，智能广告系统主要表现形态为根据观看者的个人信息，如年龄、性另|J、表情等，进行个性化的广告定制及投放，因此，广告信息是基于观看者的个人信息进行投放。现有技术的主要问题包括:
[0004]1)现有的智能广告投放系统主要侧重于针对单个观看者进行信息的提取与识别，忽略了对多个观看者之间的关联关系及共性的识别与分析，及根据识别分析结果推送与多个观看者相适应的广告。仅仅根据单个观看者的个性信息推送广告，广告形式及内容无法做到全方位个性化定制，因而广告的推送效果具有局限性。
[0005]2)现有的智能广告投放系统仅针对单个观看者进行简单的信息提取，并未能深度挖掘观看者信息，如视点停留时间、所属社会阶层、口音等，与商品信息，如商品内容、价格、销量，之间存在的内在关联，导致选取投放至观看者的广告信息与观看者匹配度较低，从而影响广告推送效果。同时，现有的智能广告投放系统仅侧重于对观看者进行广告的推送，而忽视获取观看者的反馈信息，从而无法做到广告推送的有的放矢。
[0006]3)现有的智能广告投放系统仅将观看者与广告信息进行简单的融合，如试衣魔镜等，广告的展现形式具有较大局限性，观看者对广告的兴趣度与接受度较低，进一步影响广告推送效果。
【发明内容】
[0007]本发明的目的旨在至少解决上述技术缺陷之一，特别是现有的智能广告投放系统只针对单人进行信息的提取与识别，从而仅能够选取与单人相匹配的广告信息。
[0008]本发明提供了一种基于关联信息在显示屏上播放广告的方法，包括:
[0009]采集至少两位人体的数据，根据数据提取人体之间的关联信息；
[0010]根据关联信息，自动选定与关联信息对应的广告信息；
[0011]在显示屏上播放对应的广告信息。
[0012]本发明还提供了一种基于关联信息在显示屏上播放广告的装置，包括第一提取模块、选定模块和播放模块:
[0013]第一提取模块，用于采集至少两位人体的数据，根据数据提取人体之间的关联信息；
[0014]选定模块，用于根据关联信息，自动选定与关联信息对应的广告信息；
[0015]播放模块，用于在显示屏上播放对应的广告信息。
[0016]本实施例的方案中，通过采集显示屏前方存在的至少两位人体的数据，从数据提取人体之间的关联信息；随后可以根据关联信息自动选定与关联信息对应的广告信息；最终在显示屏上播放对应的广告信息。由于提取到的关联信息是显示屏前方存在的至少两位人体之间的共有关联特性，使得选取的广告信息与至少两位人体均具有较高的匹配度，广告信息与多人相适应，从而更加有针对性的基于关联信息向至少两位人体推送广告信息，实现了有的放矢的向多人推送广告信息，提高了广告推送效果；同时，也提升了观看者观看广告信息的观影体验。本发明提出的上述方案，对现有系统的改动很小，不会影响系统的兼容性，而且实现简单、高效。
[0017]本发明附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本发明的实践了解到。
【附图说明】
[0018]本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中:
[0019]图1为本发明实施例的基于观众之间的关联信息播放广告的方法流程图；
[0020]图2为语音检测示例图；
[0021]图3为人脸窗口检测示例图；
[0022]图4为脸部器官特征信息定位示例图；
[0023]图5为脸部表情信息、年龄信息、性别信息及肤色信息的识别示例图；
[0024]图6为眼睛视点定位计算示例图；
[0025]图7为脸部穿戴物检测示例图；
[0026]图8为人体窗口检测示例图；
[0027]图9为身体部件位置识别示例图；
[0028]图10为人体的动作行为信息示例图；
[0029]图11为发型信息、服饰信息及体型信息识别示例图；
[0030]图12为人体携带物信息识别示例图；
[0031 ]图13为体温信息识别示例图；
[0032]图14为语音信息识别示例图；
[0033]图15为语音来源定位示例图；
[0034]图16为本发明一个具体实施例的示例图；
[0035]图17为本发明又一具体实施例的示例图；
[0036]图18为身份标识信息识别示例图；
[0037]图19为根据本发明实施例的基于观众之间的关联信息播放广告的设备功能示意图。
【具体实施方式】
[0038]下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能解释为对本发明的限制。
[0039]本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
[0040]本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样被特定定义，否则不会用理想化或过于正式的含义来解释。
[0041]本技术领域技术人员可以理解，这里所使用的“终端”、“终端设备”既包括无线信号接收器的设备，其仅具备无发射能力的无线信号接收器的设备，又包括接收和发射硬件的设备，其具有能够在双向通信链路上，进行双向通信的接收和发射硬件的设备。这种设备可以包括:蜂窝或其他通信设备，其具有单线路显示器或多线路显示器或没有多线路显示器的蜂窝或其他通信设备；PCS (Personal Communicat1ns Service,个人通信系统)，其可以组合语音、数据处理、传真和/或数据通信能力；PDA (Personal Digital Assistant,个人数字助理)，其可以包括射频接收器、寻呼机、互联网/内联网访问、网络浏览器、记事本、日历和/或GPS (Global Posit1ning System,全球定位系统)接收器；常规膝上型和/或掌上型计算机或其他设备，其具有和/或包括射频接收器的常规膝上型和/或掌上型计算机或其他设备。这里所使用的“终端”、“终端设备”可以是便携式、可运输、安装在交通工具(航空、海运和/或陆地)中的，或者适合于和/或配置为在本地运行，和/或以分布形式，运行在地球和/或空间的任何其他位置运行。这里所使用的“终端”、“终端设备”还可以是通信终端、上网终端、音乐/视频播放终端，例如可以是PDA、MID(Mobile Internet Device,移动互联网设备)和/或具有音乐/视频播放功能的移动电话，也可以是智能电视、机顶盒等设备。
[0042]本发明中，“终端设备”可包括多个，多个“终端设备”可作为整体，或由其中部分“终端设备”，甚至装置于一个或多个“终端设备”中的特定装置，如基于观众之间的关联信息播放广告的装置，来基于观众之间的关联信息播放广告。如无特别说明，本文中“终端设备”与基于观众之间的关联信息播放广告的装置等同使用。
[0043]图1为本发明基于观众之间的关联信息播放广告的方法第一实施例的流程图。如图1所示，本实施例基于观众之间的关联信息播放广告的方法的工作流程具体包括如下工作步骤:
[0044]在步骤110中，终端设备采集至少两位人体的数据，根据数据提取人体之间的关联息。
[0045]步骤S110包括步骤S111 (未示出)，在步骤S111中，终端设备通过摄像头或麦克风采集显示屏前方存在的至少两位人体的数据；其中，摄像头包括以下任意一种或多种设备:可见光摄像头，深度摄像头和红外摄像头。
[0046]在本发明的实施例中，上述数据包括:图像信息和/或语音信息。
[0047]具体地，在步骤S111中，终端设备中通过摄像头来采集显示屏前方存在的至少两人的图像信息，包括以下至少一种情形:
[0048]通过可见光摄像头来采集至少两人的可见光图像信息；
[0049]通过深度摄像头来采集至少两人的图像深度信息；
[0050]通过红外摄像头来采集至少两人的红外图像信息。
[0051]具体地，步骤S111包括步骤Sllll(未示出)、步骤S1112(未示出)和步骤31113(未示出)。在步骤S1111中，终端设备通过麦克风采集显示屏前方的声音信息；在步骤S1112中，对声音信息进行语音检测，来判断声音信息是否包括语音信息；在步骤S1113中，当判断包括语音信息时，通过滤除背景噪声来提取声音信息包括的语音信息。
[0052]在一示例中，具体处理过程如图2所示，终端设备通过麦克风采集显示屏前方的声音信息后，例如，对获取的声音信号进行分巾贞平滑处理，例如，首先按照每隔10ms对声音信息进行分帧提取，接着对提取出的声音信号每帧间进行平滑处理，利用领域差分计算N邻域内的绝对最大差值；基于固定的背景噪声模型对声音信息进行噪声滤除，例如利用预定噪声系数N对声音信号做FFT变换，获得计算变换的功率谱信号；通过最小二乘得到自适应的判决阈值，大于该阈值则确定该声音信息为语音信息，反之，则确定为噪声信号。当判断包括语音信息时，通过滤除背景噪声来提取声音信息包括的语音信息。
[0053]步骤S110包括步骤S112(未示出)和步骤S113(未示出)；在步骤S112中，终端设备从数据中提取至少两人的特征信息；在步骤S113中，终端设备根据特征信息，确定人体之间的关联信息；其中，特征信息包括以下一项或多项:人体特征信息；语音特征信息；生理特征信息。
[0054]具体地，在步骤S112中，终端设备从图像信息中提取至少两人的人体特征信息。
[0055]其中，至少两人的人体特征信息包括:至少两人的距离信息；至少两人的人脸相关信息；至少两人的人体相关信息。
[0056]步骤S112包括步骤S1121(未示出)；在步骤S1121中，终端设备根据图像信息，通过距离计算来确定至少两人的距离信息。
[0057]其中，距离信息包括前后距离和/或左右距离。
[0058]具体地，根据图像深度信息，通过计算至少两人到显示屏之间距离的差值，来确定至少两人的前后距离。
[0059]具体地，根据可见光图像信息和图像深度信息，通过如图8所示的方式进行人体窗口检测处理，以获取人体检测窗口信息；通过计算至少两人之间的人体检测窗口的间隔距离，确定至少两人的左右距离。具体计算过程为:基于预定的图像像素和实际距离度量单位的比例关系，根据可见光图像信息示出的该两人的人体检测框的像素间隔，计算确定该两人的实际左右距离。
[0060]步骤S112包括步骤S1122(未示出)；在步骤S1122中，终端设备根据图像信息，通过人脸检测处理来提取至少两人的人脸相关信息。
[006