用于车辆的数字镜系统及其操作方法与流程

文档序号:21277319发布日期:2020-06-26 23:21阅读:197来源:国知局
用于车辆的数字镜系统及其操作方法与流程

本发明通常涉及车辆,且更特定来说,涉及用于车辆的数字镜系统及其操作方法。



背景技术:

用于车辆的数字镜系统(例如,相机监视系统)是取代及/或扩增车辆的(若干)光学镜的系统。实例数字镜系统包含在车辆外部的相机,所述相机将图像流式传输到安装在车辆内部的一或多个显示器。



技术实现要素:

一种实例车辆控制系统包含:驾驶员监视系统,其包含用于确定头部的位置、所述头部的定向或所述头部的眼睛注视点中的至少一者的头部位置确定器;数字镜系统,其包含用于基于所述头部的所述位置、所述头部的所述定向或所述头部的所述眼睛注视点中的所述至少一者来识别感兴趣区(roi)的roi检测器及用于提取第一图像中对应于所述roi的部分以形成第二图像的裁剪器,所述第一图像表示车辆外部的区域;及在所述车辆的内部区域内的显示器,其用以呈现所述第二图像。

附图说明

图1说明根据本说明书的教示构建且在实例使用环境中展示的实例车辆控制系统。

图2是说明图1的实例数字镜系统及实例驾驶员监视系统的实例实施方案的框图。

图3a、3b、3c、3c、3d及3e是一起说明图1及2的实例数字镜系统的实例操作的实例绘图。

图4是表示可经执行以实施图1及2的实例数字镜系统的实例机器可读指令的流程图。

图5说明经结构化以执行图4的实例机器可读指令以实施图1及/或2的实例数字镜系统的实例处理器平台。

具体实施方式

在有益的情况下,贯穿附图及本说明书使用相同参考数字来指相同或类似部件。附图中所展示的连接线或连接器表示各种元件之间的实例功能关系、物理及/或逻辑连接及/或通信。

数字镜系统由于与常规光学镜相比更符合空气动力学、提供更好可见性等而在现代车辆(例如汽车)中变得流行。然而,此类数字镜系统存在缺点。例如,在使用光学镜的情况下,车辆的乘员可通过移动其头部及/或眼睛来改变其所看到的内容。然而,利用已知数字镜系统,视图是固定的,这是因为外部相机的安装是固定的且不适应乘员的移动。这阻止已知数字镜系统提供由光学镜所提供的自然外观及感觉。

为了克服至少这些缺陷,本文中所描述的一些实例数字镜系统监视例如乘员的头部的位置、头部的定向、头部的眼睛注视点(例如,乘员的眼睛所指向的方向)等,且使用这个位置信息来控制由车辆的数字相机系统所呈现的(若干)视图。在一些实例中,内部相机(即,在内部部分、内部区域、内部空间等中)用于监视例如乘员的头部的位置、头部的定向、头部的眼睛注视点等。可数字地及/或机械地改变(若干)视图。在一些实例中,由数字镜系统所呈现的视图经调适以与乘员的头部及/或眼睛移动一致。在一些实例中,车辆中存在多于一个数字镜,且调适与正被观察的(若干)数字镜相关联的(若干)相机。在一些此类实例中,视图仅针对乘员所注视的数字镜而变化。然而,当存在两个数字镜(例如,车辆的广角镜正下方的普通镜)时,其可同时被改变。在一些实例中,乘员的头部的位置、头部的定向、头部的眼睛注视点(例如,乘员的眼睛所指向的方向)等用于识别乘员且自动地使数字镜系统120适应在不同时间共享同一辆车的不同驾驶员。在一些实例中,微小的无意识移动(其由于车辆移动(例如,撞到隆起物等)而可能是无意的)不会致使视图变化。可从本文中所描述的一或多个数字镜受益的实例车辆包含自行车、摩托车、汽车、公共汽车、火车、轮船、飞机等。此类车辆的实例乘员包含操作员、非操作员、驾驶员、骑手、乘客、工程师、飞行员等。本文中结合车辆描述实例,但是本说明书的教示也适用于非车辆环境,例如建筑物等。

图1说明实例环境100,其中在实例车辆104中实施根据本描述的教示构建的实例车辆控制系统102。在这个实例中,车辆104是汽车。为了捕获汽车104外部的实例区域106的图像,实例车辆控制系统102包含实例外部相机108。实例外部相机108可由任何类型的相机实施,且可以任何方式安装以捕获车辆外部的实例区域106的图像。例如,相机108可经安装到汽车104外部,可部分地安装在汽车104内,可经安装在汽车104的内部表面上等。所描述的实例外部相机108具有为20米(m)的范围112、每行1920个像素的分辨率,且包含可提供80度的视场(fov)110的镜头202(参见图2)。已知数字镜系统相机具有20m的范围、每行1280个像素的分辨率,且包含提供60度fov的镜头(未展示)。由镜头202所提供的增加的fov及所描述相机108的增加的分辨率为平移/倾斜/旋转操作(例如,允许乘员设置其镜位置)及盲点算法提供额外像素。另外及/或替代地,所描述相机108的增加的fov及增加的分辨率使能够呈现区域106的不同部分(其中一者在参考数字110处指定),同时在部分110内维持足够像素以达到及/或超出例如由行业标准、政府法规等设置的数字镜系统的像素密度要求。

为了显示由实例外部相机108所捕获的图像,实例车辆控制系统102包含任何数目及/或类型的实例显示器,其中一者在参考数字116处指定。实例显示器116可在汽车104内的任何地方实施。例如,在与车辆控制系统102交互时乘员可容易地观看显示器116的位置处(例如,在通常将安装侧视光学镜的位置附近)。

在所说明实例中,外部相机108捕获整个区域106的图像。为了确定区域106中待在显示器116处呈现的部分114,实例车辆控制系统102包含驾驶员监视系统118。实例驾驶员监视系统118处理表示乘员的头部的头部位置、头部的定向、头部的眼睛注视点等的数据以确定乘员意图观看的部分114。在一些实例中,部分114可基于例如乘员的头部的头部位置、头部的定向、头部的眼睛注视点在区域106内左右及上下移动。因此,尽管图1说明区域114相对于由外部相机108所成像的区域106的特定位置,但是区域114可相对于区域106移动。基于由驾驶员监视系统118所确定的区域106的感兴趣部分114,实例数字镜系统120将由外部相机108所捕获的图像裁剪到仅感兴趣部分114。下文结合图2描述实例驾驶员监视系统118及实例数字镜系统120的实例实施方案。

为了确定乘员的头部122的位置、角度、眼睛注视等,实例车辆控制系统102包含任何数目及/或类型的实例内部相机,其中一者在参考数字124处指定。实例内部相机124可由照明式近红外相机、可见光相机、彩色相机、黑白相机等中的一或多者来实施。内部相机124可经安装在汽车104内的任何位置。例如,内部相机124可经定位在当驾驶车辆时乘员的头部将自然地定位在其处的位置(例如,在通常将安装侧视光学镜的位置附近)。

虽然图1中说明实例车辆控制系统102,但是可以任何其它方式组合、划分、重新布置、省略、消除及/或实施图1中所说明的元件、过程及/或装置中的一或多者。此外,图1的实例外部相机108、实例显示器116、实例驾驶员监视系统118、实例数字镜系统120、实例内部相机124及/或更一般来说实例车辆控制系统102可由硬件、软件、固件及/或硬件、软件及/或固件的任何组合来实施。因此,例如,实例外部相机108、实例显示器116、实例驾驶员监视系统118、实例数字镜系统120、实例内部相机124及/或更一般来说实例车辆控制系统102中的任一者可由一或多个模拟或数字电路、逻辑电路、(若干)可编程处理器、(若干)可编程控制器、(若干)图形处理单元(gpu)、(若干)数字信号处理器(dsp)、(若干)专用集成电路(asic)、(若干)可编程逻辑装置(pld)、(若干)现场可编程门阵列(fpga)及/或(若干)现场可编程逻辑装置(fpld)来实施。当阅读本专利的设备或系统权利要求中的任一者以涵盖纯软件及/或固件实施方案时,实例外部相机108、实例显示器116、实例驾驶员监视系统118、实例数字镜系统120、实例内部相机124及/或更一般来说实例车辆控制系统102中的至少一者由此明确地被定义为包含非暂时性计算机可读存储装置或存储盘,例如存储器、数字多功能盘(dvd)、光盘(cd)、蓝光盘等,其包含软件及/或固件。更进一步,图1的实例车辆控制系统102可包含除图1中所说明的元件、过程及/或装置之外或代替图1中所说明的元件、过程及/或装置的一或多个元件、过程及/或装置,及/或可包含任何或所有所说明元件、过程及装置中的多于一者。

图2是说明图1的实例驾驶员监视系统118及实例数字镜系统120的实例实施方案的框图。为了预处理由实例外部相机108所捕获的图像204,图2的实例数字镜系统120包含实例图像信号处理器206。使用任何数目及/或类型的方法、算法等,图2的实例图像信号处理器206处理图像204以例如减少噪声、调整色彩平衡等。

为了重调由图像信号处理器206所输出的图像208的大小,图2的实例数字镜系统120包含实例大小重调器210。使用任何数目及/或类型的方法、算法等,图2的实例大小重调器210重调图像208的大小以具有与由已知数字镜系统相机所捕获的图像相同的像素密度(例如,每像素0.018米(m))。例如,已知数字镜系统相机捕获跨近似23m(=2*20*tan(30度))的宽度含1280个像素的图像,其对应于每像素0.018m(=23/1280)。本文中所描述的一些实例数字镜系统相机108捕获跨近似33.5m(=2*20*tan(40度))的宽度含1920个像素的图像,其对应于每像素0.0174m(=33.5/1920)。为了获得相同像素密度,图2的实例大小重调器210将由图像信号处理器206所输出的图像208的大小重调为跨1860个像素,这产生每像素近似0.018m的像素密度(=33.5/1860)。在一些实例中,使用其它像素密度。然而,使用所指出像素密度避免物体在显示器116中显得太小。通过使用所描述的实例相机108提供的额外像素(580=1860-1280)使图1的实例部分114能够定位在区域106中的580个不同水平位置处。随着乘员移动其头部122,不同水平位置使部分114能够跨区域106平移。在一些实例中,这个平移实时发生。

为了获得大小重调器210的输出图像212的部分,图1的实例数字镜系统120包含实例裁剪器214。基于区域106的部分(例如,部分114)的裁剪坐标216,实例裁剪器214裁剪图像212,从而保留图像212中对应于裁剪坐标216的部分。

在一些实例中,与传统光学镜不同,相机108无法旋转(例如,左右移动)及/或倾斜(例如,上下移动)。为了为相机108提供虚拟倾斜及/或虚拟旋转,实例数字镜系统120包含实例视角变换器218。使用任何数目及/或类型的方法、算法等,图2的实例视角图变换器218根据用户控制输入222变换由裁剪器214所输出的图像220。可使用任何数目及/或类型的用户控制界面元件提供用户控制输入222(例如,使用四向拨动开关来输入向上倾斜、向下倾斜、向左倾斜及向右倾斜)。在一些实例中,视角变换器218执行其它变换或图像处理,例如镜头畸变校正等。在一些实例中,使用专用硬件加速器(例如可从德州仪器(texasinstruments)商购的网格变形硬件加速器)实施视角变换器218。网格变形硬件加速器是专用像素重映射引擎(其是由德州仪器公司所制造的若干tda3x及其它tdax装置上的成像子系统的部件),且可用于执行多种功能,包含镜头畸变校正、鱼眼畸变校正、视角变换、(若干)多相机环视应用等。在显示器116处呈现视角变换器218的输出224。2017年6月发布—2017年10月修订的文献编号为spruie7a的“用于高级驾驶员辅助系统(adas)的tda3xsoc、硅版本2.0、1.0a、1.0,德州仪器adas产品族,技术参考手册(tda3xsocforadvanceddriverassistancesystems(adas),siliconrevision2.0,1.0a,1.0,texasinstrumentsadasfamilyofproducts,technicalreferencemanual)”中描述可用于实施实例视角变换器218的实例网格变形硬件加速器,所述文献的全部内容以引用方式并入本文中。

为了确定裁剪坐标216,图2的实例数字镜系统120包含实例驾驶员监视系统118。使用任何数目及/或类型的方法、算法等,实例驾驶员监视系统118的实例头部位置确定器228处理由内部相机124所捕获的图像230以确定表示虹膜辨识、面部辨识、面部检测及跟踪、乘员的头部位置、头部定向、眼睛注视点等的数据232。用于实施驾驶员监视系统118的实例技术包含由在www.fotonation.com上所描述的技术。

图2的实例数字镜系统120的实例roi检测器234处理表示乘员的头部的头部位置、头部的定向、头部的眼睛注视点等的数据232以确定乘员正在观察的位置,例如其注视方向。在一些实例中,roi检测器234执行射线跟踪以确定注视方向,且将围绕(例如,绕、环绕、包围等)注视方向的区(例如,视场)识别为roi216。例如,可将围绕注视方向的区确定为1280个像素宽(其是由传统数字镜系统所输出的像素数),且以注视方向为中心。用于实施roi检测器234的实例技术包含由在www.fotonation.com上所描述的技术。

在一些实例中,为了执行额外及/或替代分析,实例数字镜系统120包含实例分析学分析器236。可由图2的实例分析学分析器236所执行的实例分析包含盲点分析。因为所描述的外部相机108的fov比传统数字镜系统所使用的相机宽,所以实例分析学分析器236可检测且呈现更多信息以由此减少(例如,消除)较宽fov上的盲点,这可改善车辆安全性。

现将结合分别在图3a、3b、3c及3d中所展示的实例绘图302、304、306及308论述图2的数字镜系统120的实例操作。图3a的实例图像302对应于当车辆中的数字镜系统120静止时由图2的外部(external或exterior)相机108所捕获的完整fov图像204。相应图3b到3d的实例图像304、306及308对应于实例图像302的不同相应裁剪314、316及318。裁剪314、316及318对应于图3e的不同相应roi324、326及328。随着乘员朝向例如虚拟侧视光学镜的虚拟位置移动其头部及/或注视,在显示器116处连续地呈现图3b到3d的图像304、306及308。如图3b到3d中可看到,乘员所看到的内容已从车辆的侧面向外平移。

虽然图2中说明实施图1的数字镜系统120的实例方式,但是可以任何其它方式组合、划分、重新布置、省略、消除及/或实施图2中所说明的元件、过程及/或装置中的一或多者。此外,实例图像信号处理器206、实例大小重调器210、实例裁剪器214、实例视角变换器218、实例驾驶员监视系统118、实例头部位置确定器228、实例roi检测器234、实例分析学分析器236及/或更一般来说图2的实例数字镜系统120可由硬件、软件、固件及/或硬件、软件及/或固件的任何组合来实施。因此,例如,实例图像信号处理器206、实例大小重调器210、实例裁剪器214、实例视角变换器218、实例驾驶员监视系统118、实例头部位置确定器228、实例roi检测器234、实例分析学分析器236及/或更一般来说图2的实例数字镜系统120可由一或多个模拟或数字电路、逻辑电路、(若干)可编程处理器、(若干)可编程控制器、(若干)gpu、(若干)dsp、(若干)asic、(若干)pld、(若干)fpga及/或(若干)fpld来实施。当阅读本专利的设备或系统权利要求中的任一者以涵盖纯软件及/或固件实施方案时,实例图像信号处理器206、实例大小重调器210、实例裁剪器214、实例视角变换器218、实例驾驶员监视系统118、实例头部位置确定器228、实例roi检测器234、实例分析学分析器236及/或更一般来说实例数字镜系统120中的至少一者由此明确地被定义为包含非暂时性计算机可读存储装置或存储盘,例如存储器、dvd、cd、蓝光盘等,包含软件及/或固件。更进一步,图2的实例数字镜系统120包含除图2中所说明的元件、过程及/或装置之外或代替图2中所说明的元件、过程及/或装置的一或多个元件、过程及/或装置,及/或可包含任何或所有所说明元件、过程及装置中的多于一者。

图4中展示表示用于实施图1及/或2的数字镜系统120的实例机器可读指令的流程图。在这个实例中,机器可读指令包括由处理器(下文结合图5所论述的实例处理器平台500中展示的处理器512)所执行的程序。程序可经体现在存储在非暂时性计算机可读存储媒体(例如cd、软盘、硬盘驱动器、dvd、蓝光盘或与处理器512相关联的存储器)上的软件中,但是整个程序及/或其部件可替代地由除处理器512之外的装置执行及/或体现在固件或专用硬件中。此外,尽管参考图4中所说明的流程图描述实例程序,但是可替代地使用实施实例数字镜系统120的许多其它方法。例如,可改变框的执行顺序,及/或可改变、消除或组合一些所描述框。另外及/或替代地,任何或所有框可由经结构化以执行对应操作而无需执行软件或固件的一或多个硬件电路(例如,离散及/或集成模拟及/或数字电路、fpga、asic、比较器、运算放大器(op-amp)、逻辑电路等)来实施。

如上文所描述,可使用存储在非暂时性计算机及/或机器可读媒体(例如,硬盘驱动器、快闪存储器、只读存储器、cd、dvd、高速缓冲存储器、随机存取存储器及/或任何其它存储装置或存储盘(其中存储信息达任何持续时间(例如,达延长的时间段、永久地、达短暂瞬间、用于临时缓冲及/或用于信息的高速缓冲存储)))上的编码指令(例如,计算机及/或机器可读指令)实施图4的实例过程。如本文中所使用,术语非暂时性计算机可读媒体明确地被定义为包含任何类型的计算机可读存储装置及/或存储盘且排除传播信号并排除传输媒体。

图4的程序从框402开始,其中数字镜系统120初始化外部相机108,利用默认起始roi(例如,区域106的中心区域或由用户偏好所指定的106的部分)初始化裁剪器214,基于默认起始roi来将图像从外部相机108流式传输到显示器116,且起始驾驶员监视系统118以向裁剪器214提供周期性及/或非周期性更新(框402)。

头部位置确定器228周期性地及/或非周期性地获得关于乘员的状态(例如,驾驶员的状态)的信息(框404)。例如,可从由内部相机124所采集的图像230收集乘员的头部的头部位置、头部的定向、头部的眼睛注视点等信息。如果驾驶员正注视数字镜系统(例如,朝向内部相机124的位置)(框406),那么头部位置确定器228确定驾驶员的状态(例如,位置及/或定向)是否已改变(框408)。如果状态变化超过阈值(框410),那么将驾驶员的状态设置为“运动中”(框412),且roi检测器234开始确定由裁剪器214用来裁剪来自外部相机108的图像的roi,且在显示器116处呈现经裁剪图像(框414)。

如果状态变化不超过阈值(框410),且驾驶员已处于“运动中”状态(框416),那么驾驶员保持“运动中”状态(框412)。检测器234继续确定由裁剪器214用来裁剪来自外部相机108的图像的roi,且在显示器116处呈现经裁剪图像(框414)。

返回到框416,如果驾驶员尚未处于“运动中”状态(框416),那么将驾驶员的状态设置为“静止”(框418),不确定或不再确定新roi(框420)。

返回到框408,如果驾驶员的状态(例如,位置及/或定向)尚未改变(框408),那么将驾驶员的状态设置为“静止”(框418),不确定或不再确定新roi(框420)。

返回到框406,如果驾驶员并未注视数字镜系统(例如,朝向相机124的位置)(框406),那么不对roi及驾驶员状态进行任何改变。

图5是能够执行图4的指令以实施图1及2的数字镜系统120的实例处理器平台500的框图。处理器平台500可为例如计算机、微型计算机、嵌入式控制器或任何其它类型的计算装置。

所说明实例的处理器平台500包含处理器512。所说明实例的处理器512是硬件。例如,处理器512可由来自任何期望家族或制造商的一或多个集成电路、逻辑电路、微处理器、gpu、dsp或控制器来实施。硬件处理器可为基于半导体(例如,基于硅)的装置。在这个实例中,处理器实施实例图像信号处理器206、实例大小重调器210、实例裁剪器214、实例视角变换器218、实例驾驶员监视系统118、实例头部位置确定器228、实例roi检测器234、实例分析学分析器236。

所说明实例的处理器512包含本地存储器512(例如,高速缓冲存储器)。所说明实例的处理器512经由总线518与包含易失性存储器514及非易失性存储器516的主存储器通信。易失性存储器514可由同步动态随机存取存储器(sdram)、动态随机存取存储器(dram)、动态随机存取存储器及/或任何其它类型的随机存取存储器装置来实施。非易失性存储器516可由快闪存储器及/或任何其它期望类型的存储器装置来实施。对主存储器514、516的存取由存储器控制器(未展示)来控制。

所说明实例的处理器平台500还包含接口电路520。接口电路520可由任何类型的接口标准来实施,例如控制器局域网(can总线)、以太网接口、通用串行接口总线(usb)接口等。

在所说明实例中,一或多个输入装置522经连接到接口电路520。(若干)输入装置522允许用户将数据及/或命令输入到处理器512中。(若干)输入装置可由例如音频传感器、麦克风、相机(静止或视频)(例如相机108及124)、键盘、按钮、鼠标、触摸屏、触摸板、轨迹球、等点(isopoint)及/或语音辨识系统来实施。

一或多个输出装置524也连接到所说明实例的接口电路520。输出装置524可例如由例如显示器116的显示装置(例如,发光二极管(led)、有机发光二极管(oled)、液晶显示器(lcd)、阴极射线管显示器(crt)、面内开关(ips)显示器、触摸屏等)、触觉输出装置、打印机及/或扬声器来实施。因此,所说明实例的接口电路520通常包含图形驱动器卡、图形驱动器芯片及/或图形驱动器处理器。

所说明实例的处理器平台500还可包含用于存储软件及/或数据的一或多个大容量存储装置528。此类大容量存储装置528的实例包含软盘驱动器、硬盘驱动器、cd驱动器、蓝光盘驱动器、独立磁盘冗余阵列(raid)系统及dvd驱动器。

包含图4的编码指令的编码指令532可经存储在大容量存储装置528中、易失性存储器514中、非易失性存储器516中及/或可抽换有形计算机可读存储媒体上,例如cd或dvd。

本文中所描述用于车辆的数字镜系统及其操作方法。其它实例及其组合至少包含以下内容。

实例1是一种车辆控制系统,其包含:

驾驶员监视系统,其包含用于确定头部的位置、所述头部的定向或所述头部的眼睛注视点中的至少一者的头部位置确定器;

数字镜系统,其包含

感兴趣区(roi)检测器,其用于基于所述头部的所述位置、所述头部的所述定向

或所述头部的所述眼睛注视点中的所述至少一者来识别roi,及

裁剪器,其用于提取第一图像中对应于所述roi的部分以形成第二图像,所述第

一图像表示车辆外部的区域;及

在所述车辆的内部区域内的显示器,其用以呈现所述第二图像。

实例2是实例1的车辆控制系统,其中所述驾驶员监视系统包含用于捕获所述头部的第三图像的内部相机,所述头部位置确定器用于基于所述第三图像来确定所述头部的所述位置、所述头部的所述定向、所述头部的所述眼睛注视点中的至少一者,且所述数字镜系统包含用于捕获所述第一图像的外部相机。

实例3是实例2的车辆控制系统,其进一步包含:

用户控件,其用于使用户能够配置所述外部相机的虚拟倾斜或所述外部相机的虚拟旋转中的至少一者;及

视角变换器,其用于修改所述第二图像以模仿所述外部相机的所述虚拟倾斜或所述外部相机的所述虚拟旋转中的所述至少一者。

实例4是实例1的车辆控制系统,其中

所述头部位置确定器用于基于所述头部的所述位置、所述头部的所述定向或所述头部的所述眼睛注视点中的所述至少一者来确定注视方向,且

所述roi检测器用于基于所述注视方向及围绕所述注视方向的视场来识别所述roi。

实例5是实例4的车辆控制系统,其中所述注视方向与车辆的操作员或所述车辆的乘客中的至少一者相关联。

实例6是实例4的车辆控制系统,其进一步包含用于基于所述第一图像来检测盲点中的对象的分析学分析器。

实例7是实例1的车辆控制系统,其中所述roi是所述车辆的外部、所述车辆的内部或所述车辆的部分外部中的至少一者。

实例8是实例1的车辆控制系统,其中所述数字镜系统响应于所述头部朝向所述显示器注视而更新所述显示器上呈现的内容。

实例9是实例1的车辆控制系统,其进一步包含:

确定所述乘员注视哪个数字镜;

响应于所述头部位置、所述头部角度或所述眼睛注视中的至少一者的经检测变化而更新所述显示器上呈现的与所述经确定数字镜相关联的内容;及

响应于所述经检测变化而不更新第二显示器上呈现的与第二数字镜相关联的内容。

实例10是一种车辆控制系统,其包含:

外部相机,其用于捕获车辆外部的区域的第一图像;

内部相机,其用于捕获所述车辆的乘员的第二图像;

头部位置确定器,其用于基于所述第二图像来确定头部的位置、所述头部的定向、所述头部的眼睛注视点或虚拟光学镜的定向中的至少一者;

感兴趣区(roi)检测器,其用于基于所述头部的所述位置、所述头部的所述定向、所述头部的所述眼睛注视点或所述虚拟光学镜的所述定向中的所述至少一者来确定所述车辆中的所述乘员的注视方向,且选择围绕所述注视方向的视场作为roi;

裁剪器,其用于使用所述第一图像中对应于所述roi的部分来形成第三图像;

用户控件,其用于使所述乘员能够配置所述外部相机的虚拟倾斜或所述外部相机的虚拟旋转中的至少一者;

视角变换器,其用于修改所述第三图像以模仿所述外部相机的所述虚拟倾斜或所述外部相机的所述虚拟旋转中的所述至少一者以形成第四图像;及

显示器,其用于将所述第四图像呈现给所述车辆的内部区域。

实例11是实例10的车辆控制系统,其进一步包含用于基于所述第一图像来检测盲点中的对象的分析学分析器。

实例12是一种方法,其包含:

通过利用处理器执行指令,确定车辆的乘员的注视方向;

通过利用处理器执行指令,基于所述注视方向来识别感兴趣区(roi);

通过利用处理器执行指令,提取外部图像的部分以形成经裁剪图像,所述部分对应于所述roi;及

将所述经裁剪图像呈现给所述车辆的内部。

实例13是实例12的方法,其进一步包含:

接收用户输入,所述用户输入表示用于捕获所述外部图像的相机的虚拟倾斜或所述相机的虚拟旋转中的至少一者;及

通过利用处理器执行指令,修改所述外部图像以模仿所述相机的所述虚拟倾斜或所述相机的所述虚拟旋转中的所述至少一者。

实例14是实例12的方法,其进一步包含:

通过利用处理器执行指令,基于从所述车辆内的所述乘员所拍摄的图像来确定头部的位置、所述头部的定向或所述头部的眼睛注视点中的至少一者;

通过利用处理器执行指令,基于所述头部的所述位置、所述头部的所述定向或所述头部的所述眼睛注视点中的所述至少一者来确定注视方向;及

通过利用处理器执行指令,基于所述注视方向及围绕所述注视方向的视场来识别所述roi。

实例15是实例14的方法,其进一步包含:

通过利用处理器执行指令,基于所述注视方向、所述头部的所述位置、所述头部的所述定向或所述头部的所述眼睛注视点中的所述至少一者来识别所述乘员的身份;及

基于所述身份来调适所述经裁剪图像的呈现方式。

实例16是一种非暂时性计算机可读存储媒体,其存储指令,所述指令在被执行时致使机器进行以下操作:

确定车辆的乘员的注视方向;

基于所述注视方向来识别感兴趣区(roi);

提取从所述车辆外部的区域所拍摄的第一图像的部分以形成第二图像,所述第二图像对应于所述roi;及

将所述第二图像呈现给所述车辆的内部。

实例17是实例16的非暂时性计算机可读存储媒体,其中所述指令在被执行时致使所述机器进行以下操作:

接收用户输入,所述用户输入表示用于捕获所述第一图像的相机的虚拟倾斜或所述相机的虚拟旋转中的至少一者;及

修改所述第一图像以模仿所述相机的所述虚拟倾斜或所述相机的所述虚拟旋转中的所述至少一者。

实例18是实例16的非暂时性计算机可读存储媒体,其中所述指令在被执行时致使所述机器进行以下操作:

通过利用处理器执行指令,基于从所述车辆内的所述乘员所拍摄的图像来确定头部的位置、所述头部的定向或所述头部的眼睛注视点中的至少一者;及

通过利用处理器执行指令,基于所述头部的所述位置、所述头部的所述定向或所述头部的所述眼睛注视点中的所述至少一者来确定注视方向;及

通过利用处理器执行指令,基于所述注视方向及围绕所述注视方向的视场来识别所述roi。

在本说明书中,例如“及”、“或”及“及/或”的连词是包含性的,除非上下文另有明确指出。例如,“a及/或b”包含仅a、仅b及a与b。

在权利要求书的范围内,在所描述实施例中修改是可能的,且其它实施例是可能的。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1