[]本发明属于图像处理，具体地说是一种商品照片自动化替换背景的方法及装置。
背景技术：
：：0、[
背景技术：
：]1、随着互联网技术的发展，电子商务在全球范围内快速增长。而商品展示的重要性在电子商务中尤为突出，能够吸引消费者注意传达产品信息。通常一个商品会有多个不同展示场景，高效的商品背景替换方法能够提高电商卖家的工作效率，以及更好地向消费者传达产品信息。2、目前，商品背景替换多以利用photoshop等图像编辑软件手动抠图操作，该过程较为复杂耗时，且依赖相关专业技术。尽管已有一些自动化商品背景替换方案，但却存在生成背景与目标商品风格不搭，光影、亮度匹配的问题。3、因此，若能提供一种能让生成背景与目标商品高度贴合的自动化替换背景方法及装置，将具有非常重要的意义。技术实现思路0、[技术实现要素：]1、本发明的目的就是要解决上述的不足而提供一种商品照片自动化替换背景的方法，无需过多的手动操作，实现高度自动化，且生成背景与商品贴合度高，解决了传统的背景替换方法所存在的操作过程复杂耗时，以及生成背景与目标商品风格不搭，光影、亮度匹配等问题。2、为实现上述目的，本发明提供以下技术方案：3、一方面，本发明提供一种商品照片自动化替换背景的方法，所述方法包括以下步骤：4、输入带有目标商品的图像和目标商品描述，自动检测出商品位置，根据目标检测的锚框信息，分割目标商品，扣除原有背景；5、对扣除原始背景后的目标商品进行边缘提取，生成目标商品的边缘检测图，将边缘检测图作为图像生成的条件；6、用户选择生成风格并输入生成描述，图像生成模型生成一个与输入图像中目标商品具有相同位置和相同轮廓的物品图像，最后将目标商品在原始位置上贴于生成图像上方。7、在一些实施例中，商品位置检测时，通过目标检测算法算出目标在图像中的位置，根据文字描述定位图像中的目标，实现通过输入商品的描述来检测商品在图像中的位置。8、在一些实施例中，目标商品分割时，通过语义分割将图像中的每个像素分配到特定的语义类别中，实现对图像的像素级别理解和分割，通过语义分割算法保留目标商品在图像中的像素点，并剔除背景。9、在一些实施例中，图像生成时，采用stable diffusion生成符合要求的图像，stable diffusion为基于潜空间扩散模型的图像生成模型，可根据提示词生成相应的图像；并采用controlnet通讯协议进行条件控制，使stable diffusion图像生成模型生成据有相同姿势或边缘的图像。10、在一些实施例中，采用canny边缘提取算法进行边缘检测，并使用lora低秩适应模型进行图像生成风格控制，lora低秩适应模型是一种模型参数微调技术。11、在一些实施例中，通过直方图匹配算法，使生成的背景与目标商品在光影、亮暗程度上保持一致，直方图匹配是通过比较图像的直方图分布来进行匹配和调整，从而实现图像之间的颜色和亮度的一致性。12、另一方面，本发明提供一种商品照片自动化替换背景的装置，所述装置包括：13、目标检测模块，用于算出目标在图像中的位置，根据文字描述定位图像中的目标，通过输入商品的描述来检测商品在图像中的位置；14、语义分割模块，用于将图像中的每个像素分配到特定的语义类别中，对图像的像素级别理解和分割，保留目标商品在图像中的像素点，并剔除背景；15、图像生成模块，用于根据提示词生成相应的图像，是一种基于潜空间扩散模型的图像生成模型，并采用controlnet通讯协议进行条件控制；16、边缘检测模块，采用canny边缘提取算法，将目标边缘检测图作为条件，让图像生成模型生成一个带有与目标商品具有相同位置相同轮廓物品的图像。17、在一些实施例中，所述图像生成模块使用lora低秩适应模型进行图像生成风格控制，并通过直方图匹配算法使生成的背景与目标商品在光影、亮暗程度上保持一致。18、第三方面，本发明提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有程序，所述程序被处理器执行时，能够实现如上所述的商品照片自动化替换背景的方法。19、第四方面，本发明还提供了一种终端设备，所述终端设备包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的程序，当所述程序被所述处理器执行时，使得所述终端设备能够实现如上所述的商品照片自动化替换背景的方法。20、本发明同现有技术相比，具有如下优点：21、(1)本发明能够实现高度自动化：基于本发明方法，用户只需要输入商品图像、目标商品描述、选择风格、背景描述，即可得到替换背景后的图像输入，无需过多的手动操作。22、(2)本发明能够生成风格自定义：用户可自定义生成背景风格，如中国风、北欧风、田园风。23、(3)本发明生成背景与商品贴合度高：本发明得益于controlnet的条件控制方法和直方图匹配算法，能够让生成的图像与目标商品有很好的贴合，并且在光影上有较好的一致性。24、(4)本发明解决了传统的背景替换方法所存在的操作过程复杂耗时，须依赖相关专业技术，以及生成背景与目标商品风格不搭，光影、亮度匹配等问题。技术特征：1.一种商品照片自动化替换背景的方法，其特征在于，包括以下步骤：2.如权利要求1所述的方法，其特征在于：商品位置检测时，通过目标检测算法算出目标在图像中的位置，根据文字描述定位图像中的目标，实现通过输入商品的描述来检测商品在图像中的位置。3.如权利要求1所述的方法，其特征在于：目标商品分割时，通过语义分割将图像中的每个像素分配到特定的语义类别中，实现对图像的像素级别理解和分割，通过语义分割算法保留目标商品在图像中的像素点，并剔除背景。4.如权利要求1所述的方法，其特征在于：图像生成时，采用stable diffusion生成符合要求的图像，stable diffusion为基于潜空间扩散模型的图像生成模型，可根据提示词生成相应的图像；并采用controlnet通讯协议进行条件控制，使stable diffusion图像生成模型生成据有相同姿势或边缘的图像。5.如权利要求1所述的方法，其特征在于：采用canny边缘提取算法进行边缘检测，并使用lora低秩适应模型进行图像生成风格控制，lora低秩适应模型是一种模型参数微调技术。6.如权利要求1所述的方法，其特征在于：通过直方图匹配算法，使生成的背景与目标商品在光影、亮暗程度上保持一致，直方图匹配是通过比较图像的直方图分布来进行匹配和调整，从而实现图像之间的颜色和亮度的一致性。7.一种商品照片自动化替换背景的装置，其特征在于，包括：8.如权利要求7所述的装置，其特征在于：所述图像生成模块使用lora低秩适应模型进行图像生成风格控制，并通过直方图匹配算法使生成的背景与目标商品在光影、亮暗程度上保持一致。9.一种计算机可读存储介质，所述计算机可读存储介质内存储有程序，其特征在于：所述程序被处理器执行时，实现如权利要求1至6中任一项所述的方法。10.一种终端设备，其特征在于，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的程序，当所述程序被所述处理器执行时，使得所述终端设备实现如权利要求1至6中任一项所述的方法。技术总结本发明属于图像处理
技术领域：
：，具体地说是一种商品照片自动化替换背景的方法及装置，所述包括以下步骤：输入带有目标商品的图像和目标商品描述，自动检测出商品位置，根据目标检测的锚框信息，分割目标商品，扣除原有背景；对扣除原始背景后的目标商品进行边缘提取，生成目标商品的边缘检测图，将边缘检测图作为图像生成的条件；用户选择生成风格并输入生成描述，图像生成模型生成一个与输入图像中目标商品具有相同位置和相同轮廓的物品图像，最后将目标商品在原始位置上贴于生成图像上方；本发明无需过多的手动操作，实现高度自动化，且生成背景与商品贴合度高，解决了操作过程复杂耗时，以及生成背景与目标商品风格不搭，光影、亮度匹配等问题。技术研发人员：施哲彬受保护的技术使用者：上海焕泽信息技术有限公司技术研发日：技术公布日：2024/1/15