基于图像分析和语言描述的AI图像生成方法及系统与流程

本技术涉及图像生成，尤其是涉及基于图像分析和语言描述的ai图像生成方法及系统。

背景技术：

1、图像生成是指使用计算机算法生成图像的过程。在图像生成领域，根据语言描述对场景中的图像进行合理化的摆放具有广泛应用。

2、相关技术中，通过对图像分析或语言描述而进行图像生成的过程中，无法同时根据图像分析和语言描述进行图像的生产，进而有效的降低生成图像的精准性，存在待改进之处。

技术实现思路

1、为了减少因无法同时根据图像分析和语言描述进行图像生成而降低生成图像精准性的情况发生，本技术提供基于图像分析和语言描述的ai图像生成方法及系统。

2、第一方面，本技术提供基于图像分析和语言描述的ai图像生成方法，包括以下步骤：

3、识别并获取待检测图像中的各物体轮廓，并基于所述各物体轮廓确认各物体轮廓对应的第一基本图像信息；

4、识别并获取待检测语言中的各关键语句，并基于所述各关键语句确认各关键语句对应的第一要素信息；

5、确认所述各物体轮廓对应的第一基本图像信息与各关键语句对应的第一要素信息之间的第一关联度，进而基于所述各关键语句对应的第一要素信息确认各关键语句对应的第二要素信息；

6、进而基于所述第一关联度和各关键语句对应的第二要素信息确认各物体轮廓与各关键语句的布局关系，进而生成目标图像。

7、优选的，所述识别并获取待检测图像中的各物体轮廓，并基于所述各物体轮廓确认各物体轮廓对应的第一基本图像信息，具体包括：

8、将待检测图像关联至图像提取模型中，进而提取出待检测图像中的各物体并识别出各物体对应的物体轮廓；

9、基于各物体对应的物体轮廓分别对各物体按预设划分方式进行分组划分为第一基本图像信息，所述第一基本图像信息包括第一人物图像信息、第一动物图像信息、第一植物图像信息和其他图像信息，其中，所述预设划分方式设置为按照物体轮廓基本属性进行划分。

10、优选的，所述识别并获取待检测语言中的各关键语句，并基于所述各关键语句确认各关键语句对应的第一要素信息，具体包括：

11、将待检测语言关联至语言提取模型中进行识别，确认所述待检测语言中的断句信息，进而基于所述断句信息确认所述待检测语言中的各关键语句，进而确认所述各关键语句中的主语信息，并将所述各关键语句中的主语信息设为第一要素信息，其中，所述第一要素信息包括第一人物要素信息、第一动物要素信息、第一植物要素信息和其他要素信息。

12、优选的，所述确认各物体轮廓对应的第一基本图像信息与各关键语句对应的第一要素信息之间的第一关联度，具体包括:

13、优先将各物体轮廓对应的第一基本图像信息与各关键语句对应的第一要素信息进行对比，进而确认各物体轮廓对应的相关基本图像信息与各关键语句对应的相关要素信息；

14、获取各物体轮廓对应的相关基本图像信息，并从所述各关键语句中提取出各物体轮廓对应的相关基本图像信息对应的相关要素信息，进而确认出各物体轮廓对应的相关基本图像信息与相关基本图像信息对应的相关要素信息的第一关联度；

15、将各物体轮廓对应的相关基本图像信息与相关基本图像信息对应的相关要素信息的第一关联度与预设关联度阈值进行对比，当各物体轮廓对应的相关基本图像信息与相关基本图像信息对应的相关要素信息的第一关联度超出预设关联度阈值时，将所述相关基本图像信息和所述相关要素信息标记为目标基本图像信息和目标要素信息。

16、优选的，所述基于各关键语句对应的第一要素信息确认各关键语句对应的第二要素信息，具体包括：

17、确认所述第一要素信息对应的各关键语句，对所述各关键语句进行循环筛选，进而基于各关键语句提取出与所述第一要素信息相关联的各描述信息集，并通过将所述各描述信息集进行对比确认各描述信息集中各描述信息的第一重合度，将所述第一重合度高于预设重合度阈值的描述信息进行剔除，将剩余各描述信息集中的描述信息进行整合，并标记为第二要素信息。

18、优选的，所述基于第一关联度和各关键语句对应的第二要素信息确认各物体轮廓与各关键语句的布局关系，具体包括：

19、基于所述第一关联度确认出目标基本图像信息和目标要素信息，所述目标基本图像信息根据所述第二要素信息确认目标基本图像信息与目标要素信息之间的第一布局信息。

20、优选的，所述确认各物体轮廓与各关键语句的布局关系，进而生成目标图像，具体还包括：

21、获取各关键语句中的位置关系语句信息，并将所述各关键语句中的位置关系语句信息设置为第三要素信息，并确认各关键语句中第三要素信息的位置信息，进而基于各关键语句中第三要素信息对应的位置信息确认所述位置信息预设范围内的标记物体集，进而将所述关键语句中的第三要素信息与其对应的标记物体集设置为键值对，并对所述各关键语句进行循环筛选，确认键值对集合，进而基于所述键值对集合确认第二布局信息；

22、基于所述第一布局信息和所述第二布局信息生成目标图像。

23、第二方面，本技术提供基于图像分析和语言描述的ai图像生成系统，包括：

24、图像识别分析模块，用于识别并获取待检测图像中的各物体轮廓，并基于所述各物体轮廓确认各物体轮廓对应的第一基本图像信息；

25、语言识别分析模块，用于识别并获取待检测语言中的各关键语句，并基于所述各关键语句确认各关键语句对应的第一要素信息；

26、图像和语言关联分析模块，用于确认所述各物体轮廓对应的第一基本图像信息与各关键语句对应的第一要素信息之间的第一关联度，进而基于所述各关键语句对应的第一要素信息确认各关键语句对应的第二要素信息；

27、目标图像生成模块，用于基于所述第一关联度和各关键语句对应的第二要素信息确认各物体轮廓与各关键语句的布局关系，进而生成目标图像。

28、第三方面，本技术提供一种计算机可读存储介质，储存有指令，当所述指令在计算机上运行时，使得计算机执行上述任意一项所述的基于图像分析和语言描述的ai图像生成方法。

29、综上所述，本技术包括以下至少一种有益技术效果：

30、1.本发明提供了基于图像分析和语言描述的ai图像生成方法，通过对待检测图像进行分析确认第一基本图像信息和对待检测语言进行分析确认第一要素信息，进而基于第一基本图像信息和第一要素信息确认第一关联度，并通过对各关键语句对应的第二要素信息进行获取，进而基于第一关联度和各关键语句对应的第二要素信息确认各物体轮廓与各关键语句的布局关系从而生成目标图像，从而有效的减少了因无法同时根据图像分析和语言描述进行图像生成而降低生成图像精准性的情况发生；

31、2.通过将各物体轮廓对应的第一基本图像信息与各关键语句对应的第一要素信息进行对比确认各物体轮廓对应的相关基本图像信息与各关键语句对应的相关要素信息，并基于各物体轮廓对应的相关基本图像信息与相关基本图像信息对应的相关要素信息的第一关联度确认目标基本图像信息和目标要素信息，进而精准的获取到待检测图像和待检测语言中的信息，从而有效的提高了目标图像生成的精准性；

32、3.通过第一布局信息和第二布局信息的相互配合，进一步确认出各关键语句中对各物体的位置描述，进而有效的确认出目标基本图像信息中各物体的位置关系，从而有效的提高了目标图像生成的精准性。