本公開實施例涉及人工智能,尤其涉及一種圖像處理方法、裝置、電子設(shè)備及存儲介質(zhì)。
背景技術(shù):
1、當(dāng)前,通過各類應(yīng)用程序和平臺所提供的特效功能,可以實現(xiàn)對圖片或視頻中的背景進(jìn)行替換的視覺效果,增加了圖片或視頻的趣味性和視覺表現(xiàn)力。
2、然而,現(xiàn)有技術(shù)中對圖片進(jìn)行背景替換的方案,通常是基于簡單的圖像分割實現(xiàn)的,導(dǎo)致所生成的合成圖像存在分割痕跡明顯、背景一致性差的問題,影響圖像質(zhì)量。
技術(shù)實現(xiàn)思路
1、本公開實施例提供一種圖像處理方法、裝置、電子設(shè)備及存儲介質(zhì),以克服分割痕跡明顯、背景一致性差的問題。
2、第一方面,本公開實施例提供一種圖像處理方法,包括:
3、獲取初始圖像,并針對所述初始圖像進(jìn)行處理,得到分割圖像,所述分割圖像用于指示所述初始圖像中的目標(biāo)對象;通過預(yù)訓(xùn)練的圖像處理模型和所述分割圖像,得到合成圖像,其中,所述圖像處理模型用于為所述目標(biāo)對象生成相匹配的圖像背景,以使輸出的所述合成圖像中的所述目標(biāo)對象與所述圖像背景不發(fā)生視覺上的物理干涉。
4、第二方面,本公開實施例提供一種圖像處理裝置,包括:
5、獲取模塊,用于獲取初始圖像,并針對所述初始圖像進(jìn)行處理,得到分割圖像,所述分割圖像用于指示所述初始圖像中的目標(biāo)對象;
6、處理模塊,用于通過預(yù)訓(xùn)練的圖像處理模型和所述分割圖像,得到合成圖像,其中,所述圖像處理模型用于為所述目標(biāo)對象生成相匹配的圖像背景,以使輸出的所述合成圖像中的所述目標(biāo)對象與所述圖像背景不發(fā)生視覺上的物理干涉。
7、第三方面,本公開實施例提供一種電子設(shè)備,包括:處理器和存儲器;
8、所述存儲器存儲計算機執(zhí)行指令;
9、所述處理器執(zhí)行所述存儲器存儲的計算機執(zhí)行指令,使得所述至少一個處理器執(zhí)行如上第一方面以及第一方面各種可能的設(shè)計所述的圖像處理方法。
10、第四方面,本公開實施例提供一種計算機可讀存儲介質(zhì),所述計算機可讀存儲介質(zhì)中存儲有計算機執(zhí)行指令,當(dāng)處理器執(zhí)行所述計算機執(zhí)行指令時,實現(xiàn)如上第一方面以及第一方面各種可能的設(shè)計所述的圖像處理方法。
11、第五方面,本公開實施例提供一種計算機程序產(chǎn)品,包括計算機程序,所述計算機程序被處理器執(zhí)行時實現(xiàn)如上第一方面以及第一方面各種可能的設(shè)計所述的圖像處理方法。
12、本實施例提供的圖像處理方法、裝置、電子設(shè)備及存儲介質(zhì),通過獲取初始圖像,并針對所述初始圖像進(jìn)行處理,得到分割圖像,所述分割圖像用于指示所述初始圖像中的目標(biāo)對象;通過預(yù)訓(xùn)練的圖像處理模型和所述分割圖像,得到合成圖像,其中,所述圖像處理模型用于為所述目標(biāo)對象生成相匹配的圖像背景,以使輸出的所述合成圖像中的所述目標(biāo)對象與所述圖像背景不發(fā)生視覺上的物理干涉。通過分割初始圖像,得到指示初始圖像中的目標(biāo)對象的分割圖像,再利用圖像處理模型,基于該分割圖像生成對應(yīng)的圖像背景,從而得到包含目標(biāo)對象和圖像背景的合成圖像,利用圖像處理模型的圖像生成能力,使合成圖像中的目標(biāo)對象和圖像背景之間不發(fā)生視覺上的物理干涉,從而提高合成圖像的真實性,減少背景和目標(biāo)對象間的分割痕跡,提高背景和目標(biāo)對象之間的一致性。
1.一種圖像處理方法,其特征在于,包括:
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述圖像處理模型包括編碼器單元、解碼器單元和擴(kuò)散單元;通過預(yù)訓(xùn)練的圖像處理模型和所述分割圖像,得到合成圖像,包括:
3.根據(jù)權(quán)利要求2所述的方法,其特征在于,所述擴(kuò)散單元包括至少一個有序排列的解噪單元,所述通過所述擴(kuò)散單元對所述加噪特征圖進(jìn)行定向解噪,并在所述定向解噪過程中,加權(quán)疊加所述第一特征圖的目標(biāo)區(qū)域,得到解噪特征圖,包括:
4.根據(jù)權(quán)利要求3所述的方法,其特征在于,所述方法還包括:
5.根據(jù)權(quán)利要求1所述的方法,其特征在于,通過預(yù)訓(xùn)練的圖像處理模型和所述分割圖像,得到合成圖像,包括:
6.根據(jù)權(quán)利要求5所述的方法,其特征在于,所述獲取提示詞信息,包括:
7.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述方法還包括:
8.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述分割圖像包括第一分割圖像或第二分割圖像,其中,
9.根據(jù)權(quán)利要求1所述的方法,其特征在于,在所述得到合成圖像之后,還包括以下至少一項:
10.一種圖像處理裝置,其特征在于,包括:
11.一種電子設(shè)備,其特征在于,包括:處理器和存儲器;
12.一種計算機可讀存儲介質(zhì),其特征在于,所述計算機可讀存儲介質(zhì)中存儲有計算機執(zhí)行指令,當(dāng)處理器執(zhí)行所述計算機執(zhí)行指令時,實現(xiàn)如權(quán)利要求1至9任一項所述的圖像處理方法。
13.一種計算機程序產(chǎn)品,包括計算機程序,其特征在于,所述計算機程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1至9任一項所述的圖像處理方法。