信息处理装置、信息处理系统、信息处理方法及存储介质与流程

本发明涉及信息处理装置、信息处理系统、信息处理方法及信息处理程序。

背景技术：

1、在日本特开2020-047086中，提出了一种车辆用监视装置，具备：拍摄部，拍摄车辆的驾驶员；驾驶状态测定部，解析拍摄部拍摄到的图像来测定包括驾驶员的睁眼度的多个驾驶状态；行驶状态判定部，判定车辆的行驶状态；及警报判定部，基于驾驶状态和行驶状态来判定是否使警报装置工作，警报判定部在根据从驾驶状态测定部取得的睁眼度的时序数据而算出的统计量从规定的正常判定基准范围偏离了的情况下，在判定为除了睁眼度之外的其他的驾驶状态正常且行驶状态也正常的情况下，使驾驶状态测定部再次执行睁眼度的检测处理。

技术实现思路

1、在从对驾驶员进行拍摄而得到的拍摄图像检测驾驶员的打盹而提取打盹场景的图像的情况下，若以睁眼度来提取打盹场景，则会因面部的朝向而误判定为闭着眼睛，因此存在改善的余地。

2、本发明考虑上述事实而完成，其目的在于，提供与以睁眼度来提取闭着眼睛的拍摄图像的情况相比能够可靠地提取闭着眼睛的拍摄图像的信息处理装置、信息处理系统、信息处理方法及信息处理程序。

3、第一方案涉及的信息处理装置包括：取得部，取得对乘客的面部进行拍摄而得到的动态图像的拍摄图像；及提取部，从所述取得部取得的所述拍摄图像中提取眼睛处于闭着的状态且面部的朝向朝着预先确定的范围的正面的拍摄图像。

4、根据第一方案，由于提取不仅是眼睛闭着的状态、面部的朝向也为正面的拍摄图像，所以与以睁眼度来提取闭着眼睛的拍摄图像的情况相比，能够可靠地提取闭着眼睛的拍摄图像。

5、第二方案涉及的信息处理装置根据第一方案涉及的信息处理装置，其中，还包括识别部，该识别部在所述取得部取得的所述拍摄图像中通过图像识别来识别乘客的面部的朝向及乘客的眼睛的开闭状态。

6、根据第二方案，由于通过图像识别来识别乘客的面部的朝向及乘客的眼睛的开闭状态，所以能够识别乘客的面部的朝向和眼睛的开闭状态。

7、第三方案涉及的信息处理装置根据第一方案或第二方案涉及的信息处理装置，其中，所述取得部还取得车速信息，所述提取部提取预先确定的阈值以上的车速的情况下的拍摄图像。

8、根据第三方案，通过提取预先确定的阈值以上的车速的情况下的拍摄图像，能够排除在休息等驻车时闭着眼睛的拍摄图像的提取。

9、第四方案涉及的信息处理装置根据第三方案涉及的信息处理装置，其中，在低于所述阈值的车速或闭着眼睛的状态的持续时间低于预先确定的时间的情况下，所述提取部结束拍摄图像的提取。

10、根据第四方案，通过在低于阈值的车速或闭着眼睛的状态的持续时间低于预先确定的时间的情况下结束拍摄图像的提取，能够仅提取在行驶时闭着眼睛的拍摄图像。

11、第五方案涉及的信息处理装置根据第二方案涉及的信息处理装置，其中，所述识别部通过图像识别来进一步识别乘客的注视点，对于由所述识别部预先确定的范围外的注视点的拍摄图像，所述提取部使所述开闭状态的识别结果无效。

12、根据第五方案，通过对于预先确定的范围外的注视点的拍摄图像使乘客的眼睛的开闭状态的识别结果无效，能够抑制闭着眼睛的状态的拍摄图像的提取时的误判定。

13、第六方案涉及的信息处理装置根据第一方案～第五方案的任一方案涉及的信息处理装置，其中，相比在上下方向上朝着正面的拍摄图像，所述提取部优先提取在左右方向上朝着正面的拍摄图像。

14、根据第六方案，通过相比在上下方向上朝着正面的拍摄图像而优先提取在左右方向上朝着正面的拍摄图像，与使上下方向优先相比能够抑制闭着眼睛的状态的拍摄图像的提取时的误判定。

15、第七方案涉及的信息处理系统包括：

16、车辆，具备拍摄部，该拍摄部对乘客的面部进行拍摄而生成动态图像的拍摄图像；及

17、信息处理装置，包括取得部和提取部，所述取得部从所述车辆取得所述拍摄图像，所述提取部从所述取得部取得的所述拍摄图像中提取眼睛处于闭着的状态且面部的朝向朝着预先确定的范围的正面的拍摄图像。

18、根据第七方案，由于提取不仅是眼睛闭着的状态、面部的朝向也为正面的拍摄图像，所以能够提供与以睁眼度来提取闭着眼睛的拍摄图像的情况相比能够可靠地提取闭着眼睛的拍摄图像的信息处理系统。

19、在第八方案涉及的信息处理方法中，计算机进行以下处理：取得对乘客的面部进行拍摄而得到的动态图像的拍摄图像，从取得的所述拍摄图像中提取眼睛处于闭着的状态且面部的朝向朝着预先确定的范围的正面的拍摄图像。

20、根据第八方案，由于提取不仅是眼睛闭着的状态、面部的朝向也为正面的拍摄图像，所以能够提供与以睁眼度来提取闭着眼睛的拍摄图像的情况相比能够可靠地提取闭着眼睛的拍摄图像的信息处理方法。

21、第九方案涉及的信息处理程序使计算机执行以下处理：取得对乘客的面部进行拍摄而得到的动态图像的拍摄图像，从取得的所述拍摄图像中提取眼睛处于闭着的状态且面部的朝向朝着预先确定的范围的正面的拍摄图像。

22、根据第九方案，由于提取不仅是眼睛闭着的状态、面部的朝向也为正面的拍摄图像，所以能够提供与以睁眼度来提取闭着眼睛的拍摄图像的情况相比能够可靠地提取闭着眼睛的拍摄图像的信息处理程序。

23、如以上说明那样，根据本发明，能够提供与以睁眼度来提取闭着眼睛的拍摄图像的情况相比能够可靠地提取闭着眼睛的拍摄图像的信息处理装置、信息处理系统、信息处理方法及信息处理程序。

技术特征：

1.一种信息处理装置，包括：

2.根据权利要求1所述的信息处理装置，其中，

3.根据权利要求1所述的信息处理装置，其中，

4.根据权利要求3所述的信息处理装置，其中，

5.根据权利要求2所述的信息处理装置，其中，

6.根据权利要求1所述的信息处理装置，其中，

7.一种信息处理系统，包括：

8.一种信息处理方法，其中，

9.一种存储介质，存储有信息处理程序，该信息处理程序用于使计算机执行以下处理：

技术总结
本发明提供一种信息处理装置、信息处理系统、信息处理方法及存储介质。取得部从DB取得车辆信息及作为由拍摄部拍摄到的图像信息的动态图像帧，识别部识别驾驶员的眼睛的开闭、面部的朝向及注视点，提取部从取得部取得的拍摄图像中提取眼睛处于闭着的状态且面部的朝向朝着预先确定的范围的正面的拍摄图像。

技术研发人员：鹫尾宏太
受保护的技术使用者：丰田自动车株式会社
技术研发日：
技术公布日：2024/1/16