一种虚拟社交系统及其控制方法_2

文档序号:8472590阅读:来源:国知局
连接模块31通信连接于所述第一通信模块22及第二通信模块42;用于依据预设的分析规则分析所述佩戴者信息以得出佩戴者的心理变化并反馈至所述第二数据处理装置4的分析单元32,所述分析单元32通信连接于所述接收模块;
[0067]所述第二数据处理装置4包括:
[0068]用于在虚拟社交场所中将所述佩戴者生成一虚拟人以对其社交对象显示其心理变化的应用系统41 ;用于接收所反馈的所述佩戴者的心理变化的所述第二通信模块42,所述第二通信模块42通信连接与所述应用系统41。
[0069]以上虚拟社交系统的工作流程参见图2,图2提供一种虚拟社交系统的控制方法,该控制方法采用上述虚拟社交系统,包括以下步骤:
[0070]S1、传感交互设备I采集佩戴者的瞳孔、语音、心率以及脑电信号,对其进行数字化处理,并发送至第一数据处理装置2 ;
[0071]S2、所述第一数据处理装置2对信号数字化处理后的信息发送给所述服务器3 ;
[0072]S3、所述服务器3依据预设的分析规则分析所述佩戴者信息以得出佩戴者的心理变化并反馈至第二数据处理装置4 ;所述步骤S3包括以下子步骤:
[0073]S31、所述服务器3从多个预设的终端收集瞳孔、语音、心率以及脑电信号;即可以收集过往使用者的瞳孔、语音、心率以及脑电信号的历史数据。
[0074]S32、依据所收集的瞳孔、语音、心率以及脑电信号设置所述分析规则;
[0075]其中,心率分析是一种量测连续心跳速率变化程度的方法。其计算方式主要是分析借由心电图或脉搏量测所得到的心跳与心跳间隔的时间序列。心脏除了本身的节律性放电引发的跳动之外,也受到自律神经系统(Autonomic Nervous System, ANS)所调控。
[0076]语音分析是指通过语音识别等核心技术将非结构化的语音信息转换为结构化的索引,实现对海量录音文件、音频文件的的知识挖掘和快速检索。
[0077]瞳孔分析主要为虹膜识别,即通过对比虹膜图像特征之间的相似性来确定人们的身份。虹膜识别技术的过程一般来说包含如下四个步骤:
[0078]I)虹膜图像获取
[0079]使用特定的摄像器材对人的整个眼部进行拍摄,并将拍摄到的图像传输给虹膜识别系统的图像预处理软件。
[0080]2)图像预处理
[0081]对获取到的虹膜图像进行如下处理,使其满足提取虹膜特征的需求。
[0082]虹膜定位:确定内圆、外圆和二次曲线在图像中的位置。其中,内圆为虹膜与瞳孔的边界,外圆为虹膜与巩膜的边界,二次曲线为虹膜与上下眼皮的边界。
[0083]虹膜图像归一化:将图像中的虹膜大小,调整到识别系统设置的固定尺寸。
[0084]图像增强:针对归一化后的图像,进行亮度、对比度和平滑度等处理,提高图像中虹膜信息的识别率。
[0085]3)特征提取
[0086]采用特定的算法从虹膜图像中提取出虹膜识别所需的特征点,并对其进行编码。
[0087]4)特征匹配
[0088]将特征提取得到的特征编码与数据库中的虹膜图像特征编码逐一匹配,判断是否为相同虹膜,从而达到身份识别的目的。
[0089]而脑电分析规则可采用以下方法:
[0090]1、频域分析
[0091]功率谱分析是EEG信号处理最常用工具,源于傅氏变换,它的前提是平稳随机信号,对非平衡随机信号而言,不同时刻的谱分析结果是不同的。目前常用的方法之一是以短时间断数据的傅氏变换为基础的周期法,具体做法是把实际淮信号在时域上分段,并看作是准平稳的,每段取傅氏变换后的幅频特性平方再乘以适当的窗函数,作为该信号的功率谱估计,但此法频率分辨率差,存在边瓣泄漏,谱估计方差大等问题。
[0092]脑电信号(EEG)是非平稳随机信号,它的频域特性的正确表达及精度,相位信息的提取,瞬态波形分析是当前EEG信号处理研宄中的热点问题。然而由于谱分析方法存在的共同问题是估计的方差特性不好,而且估计值沿频率轴的起伏比较剧烈,数据越长,这种现象越严重。所以提出了参数模型谱估计方法,该方法对数据处理能得到高分辨率的谱分析结果,从而为EEG信号频域特征的提取提供新的有效手段,特别是在动态特性分析中显示优越性。
[0093]2、时域分析
[0094]直接从时域提取特征是最早发展起来的方法,因为它直观性强,物理意义比较明确,因此仍有不少脑电图医生或技师使用。过去的EEG分析主要靠肉眼观察,这可以看作是人工时域分析。时域分析主要用来直接提取波形特征,如过零截点分析、直方图分析、方差分析、相关分析、峰值检测及波形参数分析、相干平均、波形识别等等。
[0095]时频分析脑电信号是一种时变的、非平稳信号,不同时刻有不同的频率成分,而单纯的时、频分析方法通过傅氏变换联系起来,它们的截然分开是以信号的频率时不变特性或统计特性平稳为前提的。但由于时域和频域分辨率的“不确定性原理”,不可能在时域和频域同时获得较高的分辨率。而且在EEG中有许多病变都是以瞬态形式表现的,只有把时间和频率结合起来进行处理,才能取得更好的结果。可以说信号的时-频表示法为脑电信号处理提供了非常好的前景。目前应用的较为广泛的方法有维格纳-费利分布(ffigner-Ville Distribut1n,WD)和小波变换,匹配跟踪方法目前也已用于睡眠纺锤波的分析。
[0096]3、人工神经网络(ANN)分析
[0097]神经网络是由大量处理单元广泛互连而成的网络。它反映了人脑功能的基本特性,是人脑的某种抽象、简化与模拟。网络的信息处理由神经元之间的相互作用来实现;知识与信息的存储表现为网络元件互连间分布式的物理联系;网络的学习和识别决定于各神经元连接权系数的动态演化过程。神经网络可用作自发脑电(EEG)分析,分析的目的是为了检测EEG尖波和癫痫发作,输入方式可以使用原始信号模型和特征参数模型。目前有利用小波变换和人工神经网络相结合的方法来检测EEG信号中的棘波和尖波成分。利用小波变换(WT)对基于ANN的EEG棘波检测系统的输入进行预处理,从而在不减少信号的信息内容和降低检测性能的前提下减少ANN的输入规模。
[0098]S33、依据预设的分析规则分析所述佩戴者信息以得出佩戴者的心理变化;
[0099]S34、所述服务器3将所述心理变化反馈回所述第二数据处理装置4。
[0100]S4、所述第二数据处理装置4于虚拟社交场所中将所述佩戴者生成一虚拟人以对其社交对象显示其心理变化。所述步骤S4包括以下子步骤:
[0101]S41、所述第二数据处理装置4设置虚拟社交场所;
[0102]S42、于虚拟社交场所中依据所反馈的信息对所述佩戴者的社交对象显示其心理变化。
[0103]例如,在虚拟社交中,在虚拟空间,通过虚拟现实视觉终端,S卩眼睛看到的是一个个真实感觉的虚拟人,传感交互设备I将采集的各项生理数据同步实时整合到这个虚拟人身上,在虚拟空间的虚拟“朋友”,或者对方看到的虚拟“我”,心跳加快、瞳孔放大、大脑活动频繁、音调变化异常等,即“我”或“朋友(对方)”直观的看到的变化,实时展现真实的自我。
[0104]其中,所述传感器组件11包括:
[0105]用于采集所述佩戴者的瞳孔信息的瞳孔感应器111 ;传统的瞳孔感应算法通常需在头部稳定或光线明亮的情况下进行,较难在自然条件下对多姿态头部运动时的人眼进行跟踪。针对该问题,采用基于Kinect传感器的瞳孔定位算法,使用三维主动表观模型(AAM)对眼轮廓匹配得到眼部特征点,粗定位分割出眼睛,再对瞳孔进行精确定位。
[0106]用于采集所述佩戴者的语音的声音传感器112 ;声音传感器112的作用相当于一个话筒(麦克风)。它用来接收声波,显示声音的振动图象。
[0107]用于采集所述佩戴者的心率信号的心率传感器113 ;心率传感器113可采用脉搏传感器,脉搏传感器主要应用在医疗设备下,用来检测类似心率的,一般常见的类型主要是以光电为主,有分立式和一体式两种,发射部份有米用可见光或红外的。
[0108]用于采集所述佩戴者的脑电信号的脑电传感器114。脑电传感器114为能感受大脑皮质电位波形并转换成可用输出信号的传感器。
[0109]优选地,所述瞳孔感应器111为双路传感器或单路传感器,双路分为两路感应器以感测使用者左眼及右眼的瞳孔信号,单路传感器
当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1