本申請涉及圖像傳輸處理，尤其涉及一種極低比特率下的圖像傳輸方法、裝置、設(shè)備及存儲介質(zhì)。

背景技術(shù)：

1、在4k、8k等高分辨率圖像格式的普及的情況下，許多實(shí)時(shí)應(yīng)用，如視頻會議應(yīng)用、遠(yuǎn)程醫(yī)療應(yīng)用以及無人機(jī)視頻監(jiān)控應(yīng)用等，需要在帶寬受限的情況下傳輸高質(zhì)量的視頻，帶寬受限導(dǎo)致視頻往往需要在極低比特率的情況下進(jìn)行實(shí)時(shí)傳輸。

2、目前，視頻在極低比特率的情況下進(jìn)行實(shí)時(shí)傳輸?shù)姆绞綖椋翰杉瘋鹘y(tǒng)的視頻編碼標(biāo)準(zhǔn)h.264和hevc等，對視頻中的視頻幀圖像進(jìn)行壓縮編碼以得到編碼數(shù)據(jù)，或者，采用深度學(xué)習(xí)模型捕捉視頻中視頻幀圖像的復(fù)雜相關(guān)性，然后根據(jù)該復(fù)雜相關(guān)性對視頻幀圖像進(jìn)行壓縮編碼以得到編碼數(shù)據(jù)；之后，再將該編碼數(shù)據(jù)傳輸至相應(yīng)的接收設(shè)備進(jìn)行解碼，從而實(shí)現(xiàn)在極低比特率下的圖像傳輸。

3、但是，從實(shí)際傳輸結(jié)果上看，在帶寬受限所導(dǎo)致的極低比特率傳輸情況下，解碼后圖像仍會出現(xiàn)圖像細(xì)節(jié)丟失嚴(yán)重與圖像重建質(zhì)量顯著下降的問題。

技術(shù)實(shí)現(xiàn)思路

1、為了便于改善在帶寬受限所導(dǎo)致的極低比特率傳輸情況下，解碼后圖像出現(xiàn)的圖像細(xì)節(jié)丟失嚴(yán)重與圖像重建質(zhì)量顯著下降的問題，本申請?zhí)峁┮环N極低比特率下的圖像傳輸方法、裝置、設(shè)備及存儲介質(zhì)。

2、第一方面，本申請?zhí)峁┮环N極低比特率下的圖像傳輸方法，包括：

3、對獲取的待壓縮圖像進(jìn)行量化編碼得到初始索引集合；

4、對所述待壓縮圖像進(jìn)行壓縮編碼得到連續(xù)特征；

5、基于所述初始索引集合與所述連續(xù)特征，得到目標(biāo)重構(gòu)索引；

6、基于所述目標(biāo)重構(gòu)索引與所述連續(xù)特征，得到重構(gòu)圖像。

7、第二方面，本申請?zhí)峁┮环N極低比特率下的圖像傳輸裝置，包括：

8、量化編碼模塊，用于對獲取的待壓縮圖像進(jìn)行量化編碼得到初始索引集合；

9、壓縮編碼模塊，用于對所述待壓縮圖像進(jìn)行壓縮編碼得到連續(xù)特征；

10、索引恢復(fù)模塊，用于基于所述初始索引集合與所述連續(xù)特征，得到目標(biāo)重構(gòu)索引；

11、圖像重構(gòu)模塊，用于基于所述目標(biāo)重構(gòu)索引與所述連續(xù)特征，得到重構(gòu)圖像。

12、第三方面，本申請?zhí)峁┝艘环N計(jì)算機(jī)設(shè)備，計(jì)算機(jī)設(shè)備包括存儲器和處理器，所述存儲器存儲有計(jì)算機(jī)程序，處理器執(zhí)行該計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)上述的方法中的步驟。

13、第四方面，本申請?zhí)峁┝艘环N計(jì)算機(jī)可讀存儲介質(zhì)，其上存儲有計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)上述的方法中的步驟。

14、第五方面，本申請還提供了一種計(jì)算機(jī)程序產(chǎn)品。所述計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)上述任一方法實(shí)施例中的步驟。

15、上述極低比特率下的圖像傳輸方法、裝置、設(shè)備及存儲介質(zhì)，通過對獲取的待壓縮圖像進(jìn)行量化編碼得到初始索引集合，可以將高維圖像數(shù)據(jù)轉(zhuǎn)換為較低維的離散索引，通過矢量量化減少數(shù)據(jù)量，為后續(xù)的壓縮和傳輸?shù)於ɑA(chǔ)；對所述待壓縮圖像進(jìn)行壓縮編碼得到連續(xù)特征，可以保留圖像的詳細(xì)紋理和結(jié)構(gòu)信息，這些連續(xù)特征為圖像的高保真度重建提供必要的補(bǔ)充信息，尤其是在極低比特率下，連續(xù)特征能幫助恢復(fù)那些在離散流中可能丟失的細(xì)節(jié)和紋理信息；基于所述初始索引集合與所述連續(xù)特征，得到目標(biāo)重構(gòu)索引，可以利用連續(xù)特征流中的信息來預(yù)測和重建未傳輸?shù)乃饕糠?，這一步是提升壓縮和傳輸效率的關(guān)鍵，因?yàn)樗试S系統(tǒng)在傳輸極少量數(shù)據(jù)的同時(shí)，還能保持圖像重建的完整性和準(zhǔn)確性，基于所述目標(biāo)重構(gòu)索引與所述連續(xù)特征，得到重構(gòu)圖像，可以優(yōu)化和調(diào)整基于碼本的解碼結(jié)果，提高解碼圖像的質(zhì)量；上述方案便于改善在帶寬受限所導(dǎo)致的極低比特率傳輸情況下，解碼后圖像出現(xiàn)的圖像細(xì)節(jié)丟失嚴(yán)重與圖像重建質(zhì)量顯著下降的問題。

16、應(yīng)當(dāng)理解，本部分所描述的內(nèi)容并非旨在標(biāo)識本申請的實(shí)施例的關(guān)鍵或重要特征，也不用于限制本申請的范圍。本申請的其它特征將通過以下的說明書而變得容易理解。

技術(shù)特征：

1.一種極低比特率下的圖像傳輸方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對獲取的待壓縮圖像進(jìn)行量化編碼得到初始索引集合，包括：

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對所述待壓縮圖像進(jìn)行壓縮編碼得到連續(xù)特征，包括：

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述初始索引集合與所述連續(xù)特征，得到目標(biāo)重構(gòu)索引，包括：

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述目標(biāo)重構(gòu)索引與所述連續(xù)特征，得到重構(gòu)圖像，包括：

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述基于所述解碼結(jié)果與所述連續(xù)特征，得到重構(gòu)圖像，包括：

7.一種極低比特率下的圖像傳輸裝置，其特征在于，所述裝置包括：

8.一種計(jì)算機(jī)設(shè)備，包括存儲器和處理器，所述存儲器存儲有計(jì)算機(jī)程序，其特征在于，所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)權(quán)利要求1至6中任一項(xiàng)所述的方法的步驟。

9.一種計(jì)算機(jī)可讀存儲介質(zhì)，其上存儲有計(jì)算機(jī)程序，其特征在于，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至6中任一項(xiàng)所述的方法的步驟。

10.一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序，其特征在于，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至6中任一項(xiàng)所述的方法的步驟。

技術(shù)總結(jié)
本申請涉及圖像傳輸處理技術(shù)領(lǐng)域，尤其涉及一種極低比特率下的圖像傳輸方法、裝置、設(shè)備及存儲介質(zhì)，其中方法包括：對獲取的待壓縮圖像進(jìn)行量化編碼得到初始索引集合；對所述待壓縮圖像進(jìn)行壓縮編碼得到連續(xù)特征；基于所述初始索引集合與所述連續(xù)特征，得到目標(biāo)重構(gòu)索引；基于所述目標(biāo)重構(gòu)索引與所述連續(xù)特征，得到重構(gòu)圖像。本申請便于改善在帶寬受限所導(dǎo)致的極低比特率傳輸情況下，解碼后圖像出現(xiàn)的圖像細(xì)節(jié)丟失嚴(yán)重與圖像重建質(zhì)量顯著下降的問題。

技術(shù)研發(fā)人員：白雷,馬博超,張華剛,龔化宇,李瀅,王躍林,孫奕玄,孟兆健,丁江偉
受保護(hù)的技術(shù)使用者：北京鐵力山科技股份有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2025/5/15