基于事件检测的单光子成像设备的制作方法

文档序号:29544591发布日期:2022-04-07 07:21阅读:104来源:国知局
基于事件检测的单光子成像设备的制作方法

1.本技术涉及单光子成像设备,尤其涉及一种基于事件检测的单光子成像设备。


背景技术:

2.传统单光子成像设备是以恒定的频率拍摄获取图像,将获取到的图像数据传输到人工智能处理器(aip)进行分析处理,存在一定的延迟问题,在例如自动驾驶场景下,对于aip处理的实时性具有较高要求,传输的图像中含有大量无效信息,也要通过aip实时处理,造成了传统单光子成像传感器与aip结合功耗非常大的问题,大量无效信息需要实时处理,还加大对数据传输和存储的容量的要求,需要大的传输带宽和高计算处理量,消耗了大量资源,降低了实时处理的效果和准确性。


技术实现要素:

3.有鉴于此,本技术提供了一种基于事件检测的单光子成像设备。
4.为了解决上述技术问题,本技术采用了如下技术方案:
5.本技术提供一种基于事件检测的单光子成像设备,设备包括:
6.单光子感光阵列,包括多个像元,被配置为可接收入射光子,用于确定是否发生事件,并生成电信号;
7.事件检测模块,被配置为检测所述多个像元是否发生事件,生成与所述多个像元中确定发生事件的一个或多个像元所对应的一个或多个事件信号;
8.事件控制模块,被配置为从一个或多个事件信号中选择感兴趣区域内的一个或多个事件信号输出至接口模块或电源管理模块;
9.接口模块,被配置为输出一个或多个事件信号至人工智能处理器;
10.人工智能处理器,被配置为接收并处理一个或多个事件信号;
11.电源管理模块,被配置为根据一个或多个事件信号判断人工智能处理器功耗变化趋势,控制电源模块调整功率输出;
12.电源模块,被配置为向人工智能处理器供电。
13.优选地,所述像元包括:
14.感光阴极,被配置为捕获入射光子并产生光电子;
15.采集阳极,被配置为捕获光电子并产生光敏电平;
16.事件判断单元,被配置为将采集阳极当前光敏电平与参考电平作差,将差值分别与开启阈值和关闭阈值比较,输出开启信号或关闭信号;
17.保持单元,被配置为保持并输出开启信号或关闭信号;
18.复位单元,被配置为在保持单元输出信号前,将所述参考电平复位至所述采集阳极当前光敏电平。
19.优选地,所述感光阴极材料包括si、ge、gaas、ingaasp、ingaas或inas/gaassb ii类超晶格。
20.优选地,所述采集阳极包括光电倍增管、雪崩光电二极管、单光子雪崩二极管、硅光电倍增管、增强型光电极管、电子倍增ccd或科学级scmos。
21.优选地,所述事件判断单元包括:
22.减法器电路,被配置为将采集阳极当前光敏电平与参考电平作差;
23.比较器电路,被配置为将差值分别与开启阈值和关闭阈值比较,输出开启信号或关闭信号。
24.优选地,所述事件检测模块包括:
25.行地址生成单元,被配置为根据开启信号或关闭信号生成对应像元的行地址、极性信息和时间戳;
26.列地址生成单元,被配置为根据开启信号或关闭信号生成对应像元的列地址;
27.事件生成单元,被配置为根据行地址、列地址、极性信息和时间戳生成事件信号。
28.优选地,所述电源管理模块包括:
29.接收单元,被配置为接收一个或多个事件信号;
30.判断单元,被配置为根据一个或多个事件信号判断人工智能处理器功耗变化趋势;
31.执行单元,被配置为根据人工智能处理器功耗变化趋势,控制电源模块调整功率输出。
32.优选地,所述执行单元具体被配置为:当判定人工智能处理器功耗变高时,调高电源模块的输入母线电压,以增加电源模块的输出功率;当判定人工智能处理器功耗变低时,调低电源模块的输入母线电压,以减小电源模块的输出功率。
33.相较于现有技术,本技术具有以下有益效果:
34.基于以上技术方案可知,本技术提供的基于事件检测的单光子成像设备被配置为通过进行事件判断、事件检测和事件控制,输出动态帧率和分辨率的事件信号,大幅降低传输流量、储存容量和后端处理器的计算量,有效提高整体的应用效率。电源管理模块根据事件信号数量预测处理器功耗变化趋势,控制电源模块调整功率输出,以起到节能效果,满足超低功耗的应用。
附图说明
35.为了更清楚地说明本技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本技术中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
36.图1是本技术实施例提供的一种基于事件检测的单光子成像设备框图。
37.图2是本技术实施例提供的一种像元框图。
38.图3是本技术实施例提供的一种事件检测模块结构框图。
39.图4是本技术实施例提供的一种电源管理模块结构框图。
具体实施方式
40.为使本实用新型的上述目的、特征和优点能够更加明显易懂,下面结合附图对本
实用新型的具体实施方式做详细的说明。
41.在下面的描述中阐述了很多具体细节以便于充分理解本实用新型,但是本实用新型还可以采用其他不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本实用新型内涵的情况下做类似推广,因此本实用新型不受下面公开的具体实施例的限制。
42.应当说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语
“ꢀ
包括”、
“ꢀ
包含”或者任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素。在没有更多限制的情况下,由语句“包括一个
……”
限定的要素,并不排除在包括所述要素的物品或者设备中还存在另外的相同要素。
43.图1是本技术实施例提供的一种基于事件检测的单光子成像设备的框图。
44.参考图1,单光子成像设备可以包括单光子感光阵列、事件检测模块、事件控制模块、接口模块、人工智能处理器、电源管理模块和电源模块。
45.单光子感光阵列,包括多个像元,被配置为接收入射光子,用于确定是否发生事件,并生成电信号。
46.具体地,单光子感光阵列可以经过光学系统接收来自物体反射的单个或少量光子激发的光电子信号放大,通过脉冲甄别和累计等技术识别提取极弱光电子信号,达到光电探测的超灵敏极限,产生光敏电平,通过将先前的光敏电平与当前的光敏电平对比,可以判断得出当前像元接收到的入射光强度与先前比是否发生了改变,根据光敏电平变化值和预先设定的阈值电平对比,可以确定出对于该像元是否发生了事件,生成电信号。
47.事件检测模块,被配置为检测所述多个像元是否发生事件,生成与所述多个像元中确定发生事件的一个或多个像元所对应的一个或多个事件信号。
48.具体地,事件检测模块可以按照逐行或逐列方式扫描像元阵列,在事件检测模块从含有确定发生事件的像元的行或列上接到请求后,事件检测模块可以将相应信号传送给该行或列,发生事件的像元可以向事件检测模块传输事件的极性信息,同时生成与事件发生时间的相关信息时间戳,以及记录发生事件的像元所处阵列中的位置信息。
49.事件信号包括极性信息、时间戳和位置信息。
50.极性信息对应根据对比光敏电平变化值和预先设定的阈值电平所生成的电信号(开启事件或关闭事件的信号)。
51.事件控制模块,被配置为从一个或多个事件信号中选择感兴趣区域内的一个或多个事件信号输出至接口模块或电源管理模块。
52.具体地,事件控制模块可以控制输出事件信号的数量,事件控制模块可以选择仅输出对应预先设置的感兴趣区域内发生事件的像元的事件信号,因此,输出的事件信号数量小于全部发生的事件信号数量。感兴趣区域内的事件信号被输出至接口模块或电源管理模块,输出至接口模块的事件信号被用作后续传输到人工智能处理器进行分析处理,输出至电源管理模块的事件信号被用作后续调整电源功率,进行节能管理操作。
53.接口模块,被配置为输出一个或多个事件信号至人工智能处理器。
54.具体地,接口模块可以根据特定的协议将输出事件信号的集合分配到在单独的信号单元、分组单元或帧单元中生成事件数据,再将事件数据输出至人工智能处理器。
55.接口模块可以包括但不限于aer接口、移动工业处理器接口(mipi)或并行接口等。
56.人工智能处理器,被配置为接收并处理一个或多个事件信号。
57.人工智能处理器可以更具体地包括但不限于图形处理器(gpu)、中央处理单元(cpu)、算术逻辑单元(alu)、数字信号处理器(dsp)、微型计算机、现场可编程门阵列(fpga)、片上系统(soc)、可编程逻辑单元、微处理器、专用集成电路(asic)等。
58.电源管理模块,被配置为根据一个或多个事件信号判断人工智能处理器功耗变化趋势,控制电源模块调整功率输出。
59.具体地,电源管理模块可以根据特定时间间隔划分出多个时间段,对连续时间段内接收到的事件信号进行计数,根据多个连续时间段事件信号数量的变化量得到事件信号数量变化趋势,还可以预测将来的输出至人工智能处理器的事件信号的数量变化趋势,根据事件信号数量变化趋势判断人工智能处理器功耗变化趋势,控制电源模块调整功率输出。
60.当判断人工智能处理器功耗提高时,控制电源模块提高功率,以满足人工智能处理器工作需求;当判断人工智能处理器功耗减小时,控制电源模块减小功率,以起到节能的作用。
61.电源模块,被配置为向人工智能处理器供电。
62.由于本技术提供的基于事件检测的单光子成像设备仅当事件发生是会生成事件信号进行输出,则在没有事件发生时,无输出数据,因此,输出的事件信号是动态帧率和动态的分辨率,大幅降低传输流量、储存容量和后端处理器的计算量,有效提高整体的应用效率。
63.在无事件信号输出或事件信号较少的时间段,可以通过电源管理模块降低电源输出功率,进行智能供电管理起到节能的作用,使成像设备满足在极微功耗运行,满足超低功耗的应用。
64.图2是本技术实施例提供的一种基于事件检测的单光子成像像元结构的框图。
65.参考图2,单光子成像像元可以包括感光阴极、采集阳极、事件判断单元、保持单元和复位单元。
66.感光阴极,被配置为捕获入射光子并产生光电子。
67.采集阳极,被配置为捕获光电子并产生光敏电平。
68.感光阴极和采集阳极间施加加速电压,用作加速电子,单个或多个光子通过光学系统的透明面板进入感光阴极后,触发光电效应产生光电子,光电子在加速电压的作用下被加速飞至即采集阳极,在高能电子轰击下内部产生大量电子-空穴对从而将光电子信号实现高倍数放大产生光敏电平。
69.感光阴极释放的光电子在外加高压的作用下移动到采集阳极。感光阴极采用si、ge、gaas、ingaasp、ingaas或inas/gaassb ii类超晶格中的一种或多种材料并以mems工艺制备而成。通过更换不同的材料,感光阴极可实现300nm-14um波段电磁波的接收,因此本实用新型的光谱响应范围很宽。感光阴极与采集阳极的垂直距离大于1mm,根据偏置电压的不同,感光阴极与采集阳极的设置距离也不同。
70.采集阳极可包括但不限于光电倍增管(pmt)、雪崩光电二极管(apd)、单光子雪崩二极管(spad)、硅光电倍增管(sipm)、增强型光电极管(ipd)、电子倍增ccd(emccd)和科学
级scmos等,可以采用标准cmos工艺制备。
71.事件判断单元,被配置为将采集阳极当前光敏电平与参考电平作差,将差值分别与开启阈值和关闭阈值比较,输出开启信号或关闭信号。
72.事件判断单元可以包括减法器电路和比较器电路,减法器电路被配置为将采集阳极当前光敏电平与参考电平作差,比较器电路被配置为将差值分别与开启阈值和关闭阈值比较,当像元接收的入射光强度大于特定的变化程度时,比较器电路可以生成开启信号或关闭信号。
73.保持单元,被配置为从事件判断单元接收表示事件发生判断结果的电信号,并保持该电信号,即开启信号或关闭信号。
74.复位单元,被配置为在保持单元输出信号前,将所述参考电平复位至所述采集阳极当前光敏电平。将参考电平复位为当前光敏电平允许从该时刻开始基于光敏电平的变化来判断是否产生新事件,即参考电平的复位用作事件判断单元能够判断新事件的处理。
75.图3是本技术实施例提供的事件检测模块结构框图。
76.参考图3,事件检测模块包括行地址生成单元、列地址生成单元和事件生成单元。
77.行地址生成单元,被配置为根据开启信号或关闭信号生成对应像元的行地址、极性信息和时间戳。
78.行地址生成单元可以在像元阵列的一个或多个像素之中,从发生事件的像素之处接收对应发生事件的电信号,并且产生对应该发生事件的像素的行地址。
79.发生事件的像元可以向行地址生成单元传输极性信息,极性信息对应根据对比光敏电平变化值和预先设定的阈值电平所生成的电信号,即开启事件或关闭事件的信号。例如,极性信息可以包括:包含与是否事件发生开启有关的信息的一位;和包含与是否事件发生关闭有关的信息的一位。
80.行地址生成单元可以生成与事件发生的时间有关的信息,即时间戳。时间戳可以包括关于事件发生的时间的信息。例如,时间戳位宽可以为32位。
81.列地址生成单元,被配置为根据开启信号或关闭信号生成对应像元的列地址。
82.列地址生成单元可以在像元阵列的一个或多个像素之中,从发生事件的像素之处接收对应发生事件的电信号,并且产生对应该发生事件的像素的列地址。
83.事件生成单元,被配置为根据行地址、列地址、极性信息和时间戳生成事件信号。
84.具体地,事件生成单元可以基于从行地址生成单元和列地址生成单元接收的行地址、列地址、极性信号和时间戳来生成事件信号,并将事件信号输出至事件控制模块。
85.图4是本技术实施例提供的电源管理模块结构框图。
86.参考图4,电源管理模块包括接收单元、判断单元和执行单元。
87.接收单元,被配置为接收来自事件控制模块的一个或多个事件信号。
88.判断单元,被配置为根据一个或多个事件信号判断人工智能处理器功耗变化趋势。
89.电源管理模块可以根据特定时间间隔划分出多个时间段,对连续时间段内接收到的事件信号进行计数,根据多个连续时间段事件信号数量的变化量得到事件信号数量变化趋势,还可以预测将来的输出至人工智能处理器的事件信号的数量变化趋势。
90.执行单元,被配置为根据人工智能处理器功耗变化趋势,控制电源模块调整功率
输出。
91.根据事件信号数量变化趋势判断人工智能处理器功耗变化趋势,控制电源模块调整功率输出。例如,当判断人工智能处理器功耗提高时,控制电源模块提高功率,以满足人工智能处理器工作需求;当判断人工智能处理器功耗减小时,控制电源模块减小功率,以起到节能的作用。
92.其中,控制电源模块调整功率输出具体为:当判定人工智能处理器功耗变高时,调高电源模块的输入母线电压,以增加电源模块的输出功率;当判定人工智能处理器功耗变低时,调低电源模块的输入母线电压,以减小电源模块的输出功率。
93.本技术提供的基于事件检测的单光子成像设备可以安装在具有图像感测功能和/或光感测功能的电子设备中。例如,该单光子成像设备可以安装在例如智能手机、相机、物联网(iot)设备、平板个人计算机(pc)、个人数字助理(pda)、便携式多媒体播放器(pmp)、导航设备、无人机和高级驾驶员辅助系统(adas)等的电子设备中。另外,该单光子成像设备可以提供作为交通工具、家具、制造设备、各种测量设备等中的元件。
94.以上所述仅是本实用新型的优选实施方式,虽然本实用新型已以较佳实施例披露如上,然而并非用以限定本实用新型。任何熟悉本领域的技术人员,在不脱离本实用新型技术方案范围情况下,都可利用上述揭示的技术内容对本实用新型技术方案做出许多可能的变动和修饰,或修改为等同变化的等效实施例。因此,凡是未脱离本实用新型技术方案的内容,依据本实用新型的技术实质对以上实施例所做的任何的简单修改、等同变化及修饰,均仍属于本实用新型技术方案保护的范围内。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1