图像生成方法和装置与流程

本申请涉及图像处理，尤其涉及一种图像生成方法和装置。

背景技术：

1、在车辆行驶过程中，驾驶员或者乘客可能会希望拍摄行驶路段前方或者两侧的图像。

2、但是，驾驶员驾驶车辆的过程中，使用手机等电子设备拍摄图像的复杂度较高，会存在较大的安全性风险，还会由于单手操作手机不稳定等原因而导致拍摄的图像效果较差。而乘客可能会由于车辆结构等遮挡手机等电子设备或者是由于安全带限制等原因，导致无法拍摄到完整且清晰的图像，使得车内拍摄车辆周围图像的复杂度较高。基于此，如何能够提高车辆内人员获取车辆周围环境图像的便捷性是本领域技术人员需要解决的技术问题。

技术实现思路

1、一方面，本申请提供了一种图像生成方法，包括：

2、获得车辆车厢内的内部图像传感器采集的用户图像信息以及车辆车厢内的音频传感器感应到的用户音频信息，所述用户图像信息包括用户手部图像和用户眼部图像；

3、通过车辆车厢外的外部图像传感器感应车辆车厢外的图像；

4、基于所述用户音频信息、用户手部图像和用户眼部图像中至少一个，确定用户指示出的图像采集方向；

5、从车辆车厢外的外部图像传感器中，确定感应范围包括所述图像采集方向的第一外部图像传感器，获得所述第一外部图像传感器采集到的至少一帧车厢外部图像；

6、基于所述至少一帧车厢外部图像和用户眼部图像，生成与用户视角匹配的至少一帧目标图像。

7、在一种可能的实现方式中，所述基于所述用户音频信息、用户手部图像和用户眼部图像中至少一个，确定用户指示出的图像采集方向，包括：

8、如果基于所述用户音频信息和所述用户手部图像中至少一个确认满足图像采集条件，基于所述用户音频信息、用户手部图像和用户眼部图像中至少一个，确定用户指示出的图像采集方向。

9、在又一种可能的实现方式中，所述通过车辆车厢外的外部图像传感器感应车辆车厢外的图像，包括：

10、如果基于所述用户音频信息和所述用户手部图像中至少一个确认满足图像采集条件，通过车辆车厢外的外部图像传感器感应车辆车厢外的图像。

11、在又一种可能的实现方式中，所述基于所述用户音频信息和所述用户手部图像中至少一个确认满足图像采集条件，包括如下任意一种：

12、如果所述用户音频信息中包括用于指示采集图像的至少一个关键词，确认满足图像采集条件；

13、如果所述用户音频信息中包括用于指示采集图像的至少一个关键词，且所述用户手部图像中包括用于指示采集图像的采集指示手势或者用于指示图像采集方向的方向指示手势，确认满足图像采集条件；

14、如果所述用户手部图像中包括用于指示采集图像的采集指示手势，确认满足图像采集条件。

15、在又一种可能的实现方式中，所述基于所述用户音频信息、用户手部图像和用户眼部图像中至少一个，确定用户指示出的图像采集方向，包括如下任意一项：

16、如果所述用户手部图像中包括用于指示图像采集方向的方向指示手势，确定所述方向指示手势所指示出的图像采集方向；

17、如果所述用户手部图像中包括用于指示采集图像的采集指示手势，确定所述采集指示手势所指示出的图像采集方向；

18、如果所述用户手部图像中不包括所述方向指示手势或者采集指示手势，确定所述用户音频信息指示出的图像采集方向；

19、如果用户手部图像中不包括所述方向指示手势或者采集指示手势，且所述用户音频信息不包括方向指示信息，基于所述用户眼部图像指示出的用户视线方向，确定图像采集方向；

20、如果所述用户手部图像中包括采集指示手势，基于所述采集指示手势以及所述用户眼部图像中指示出的用户视线方向或者眼部空间位置，确定图像采集方向。

21、在又一种可能的实现方式中，所述基于所述至少一帧车厢外部图像和用户眼部图像，生成与用户视角匹配的至少一帧目标图像，包括：

22、基于所述用户眼部图像确定用户视线方向；

23、按照所述用户视线方向，分别从各帧车厢外部图像中确定处于用户视角内的外部图像区；

24、将所述外部图像区确定为目标图像，得到至少一帧目标图像。

25、在又一种可能的实现方式中，所述按照所述用户视线方向，分别从各帧车厢外部图像中确定处于用户视角内的外部图像区，包括：

26、如果所述用户视线方向与所述图像采集方向的方向差小于设定阈值，按照所述用户视线方向，分别从各帧车厢外部图像中确定处于用户视角内的外部图像区；

27、如果所述用户视线方向与所述图像采集方向的方向差不小于设定阈值，将所述图像采集方向确定为基准视线方向，分别从各帧车厢外部图像中确定处于所述基准视线方向对应的视角范围内的外部图像区。

28、在又一种可能的实现方式中，所述基于所述至少一帧车厢外部图像和用户眼部图像，生成与用户视角匹配的至少一帧目标图像，包括：

29、如果所述用户手部图像包括用于指示采集图像的采集指示手势，确定所述采集指示手势指示出的空间采集范围；

30、基于所述用户眼部图像，确定用户眼部的空间位置；

31、基于所述用户眼部的空间位置以及所述空间采集范围，分别从各车厢外部图像中确定处于用户期望的目标视角内的图像区，将各图像区确定为目标图像。

32、在又一种可能的实现方式中，还包括：从车辆车厢外的外部图像传感器中，确定与所述第一外部图像传感器的感应范围相邻或者存在交集的至少一个第二外部图像传感器；

33、获得所述第二外部图像传感器采集到的至少一帧参考外部图像；

34、所述基于所述至少一帧车厢外部图像和用户眼部图像，生成与用户视角匹配的至少一帧目标图像，包括：

35、基于所述至少一帧车厢外部图像和各参考外部图像，结合所述用户眼部图像，合成出与用户视角匹配的至少一帧目标图像。

36、又一方面，本申请还提供了一种图像生成装置，包括：

37、信息获得单元，用于获得车辆车厢内的内部图像传感器采集的用户图像信息以及车辆车厢内的音频传感器感应到的用户音频信息，所述用户图像信息包括用户手部图像和用户眼部图像；

38、图像感应单元，用于通过车辆车厢外的外部图像传感器感应车辆车厢外的图像；

39、方向确定单元，用于基于所述用户音频信息、用户手部图像和用户眼部图像中至少一个，确定用户指示出的图像采集方向；

40、图像获得单元，用于从车辆车厢外的外部图像传感器中，确定感应范围包括所述图像采集方向的第一外部图像传感器，获得所述第一外部图像传感器采集到的至少一帧车厢外部图像；

41、图像生成单元，用于基于所述至少一帧车厢外部图像和用户眼部图像，生成与用户视角匹配的至少一帧目标图像。

技术特征：

1.一种图像生成方法，包括：

2.根据权利要求1所述的图像生成方法，所述基于所述用户音频信息、用户手部图像和用户眼部图像中至少一个，确定用户指示出的图像采集方向，包括：

3.根据权利要求1所述的图像生成方法，所述通过车辆车厢外的外部图像传感器感应车辆车厢外的图像，包括：

4.根据权利要求2或3所述的图像生成方法，所述基于所述用户音频信息和所述用户手部图像中至少一个确认满足图像采集条件，包括如下任意一种：

5.根据权利要求1至3任意一项所述的图像生成方法，所述基于所述用户音频信息、用户手部图像和用户眼部图像中至少一个，确定用户指示出的图像采集方向，包括如下任意一项：

6.根据权利要求1所述的图像生成方法，所述基于所述至少一帧车厢外部图像和用户眼部图像，生成与用户视角匹配的至少一帧目标图像，包括：

7.根据权利要求6所述的图像生成方法，所述按照所述用户视线方向，分别从各帧车厢外部图像中确定处于用户视角内的外部图像区，包括：

8.根据权利要求1所述的图像生成方法，所述基于所述至少一帧车厢外部图像和用户眼部图像，生成与用户视角匹配的至少一帧目标图像，包括：

9.根据权利要求1所述的图像生成方法，还包括：从车辆车厢外的外部图像传感器中，确定与所述第一外部图像传感器的感应范围相邻或者存在交集的至少一个第二外部图像传感器；

10.一种图像生成装置，包括：

技术总结
本申请提供了一种图像生成方法和装置，该方法包括：获得车辆车厢内的内部图像传感器采集的用户图像信息以及车辆车厢内的音频传感器感应到的用户音频信息，用户图像信息包括用户手部图像和用户眼部图像；通过车辆车厢外的外部图像传感器感应车辆车厢外的图像；基于用户音频信息、用户手部图像和用户眼部图像中至少一个，确定用户指示出的图像采集方向；从车辆车厢外的外部图像传感器中，确定感应范围包括图像采集方向的第一外部图像传感器，获得第一外部图像传感器采集到的至少一帧车厢外部图像；基于至少一帧车厢外部图像和用户眼部图像，生成与用户视角匹配的至少一帧目标图像。

技术研发人员：邓袁圆,杨伟,王鸷翔
受保护的技术使用者：联想（北京）有限公司
技术研发日：
技术公布日：2024/2/8