本申請(qǐng)公開(kāi)涉及一組高級(jí)視頻編碼技術(shù)，其包括網(wǎng)格運(yùn)動(dòng)矢量編碼中的頂點(diǎn)分組。

背景技術(shù)：

1、三維(three-dimensional，3d)拍攝、3d建模和3d渲染技術(shù)的進(jìn)步促進(jìn)了3d內(nèi)容在多個(gè)平臺(tái)和裝置上的廣泛使用。如今，可以在一個(gè)大洲拍攝到嬰兒邁出的第一步，并讓在另一個(gè)大洲的祖父母看到(可能還會(huì)互動(dòng))并與孩子享受完全沉浸式體驗(yàn)。然而，為了實(shí)現(xiàn)這種真實(shí)感，模型變得越來(lái)越復(fù)雜，并且這些模型的創(chuàng)建和消耗與大量數(shù)據(jù)相關(guān)聯(lián)。3d網(wǎng)格被廣泛用于表示這種沉浸式內(nèi)容。

2、動(dòng)態(tài)網(wǎng)格序列可能需要大量數(shù)據(jù)，因?yàn)樗赡苡纱罅康碾S時(shí)間變化的信息組成。因此，需要有效的壓縮技術(shù)來(lái)存儲(chǔ)和傳輸此類(lèi)內(nèi)容。在以前，動(dòng)態(tài)圖像專(zhuān)家組(movingpicture?experts?group，mpeg)開(kāi)發(fā)了網(wǎng)格壓縮標(biāo)準(zhǔn)ic、meshgrid、famc，以用于處理具有恒定連接性、時(shí)變幾何和頂點(diǎn)屬性的動(dòng)態(tài)網(wǎng)格。然而，這些標(biāo)準(zhǔn)沒(méi)有考慮時(shí)變屬性映射和連接信息。數(shù)字內(nèi)容創(chuàng)建(digital?content?creation，dcc)工具通常會(huì)生成這樣的動(dòng)態(tài)網(wǎng)格。相比之下，體積采集技術(shù)特別是在實(shí)時(shí)限制下生成具有恒定連接的動(dòng)態(tài)網(wǎng)格頗具挑戰(zhàn)性?，F(xiàn)有標(biāo)準(zhǔn)不支持這種類(lèi)型的內(nèi)容。mpeg計(jì)劃開(kāi)發(fā)一種新的網(wǎng)格壓縮標(biāo)準(zhǔn)，以直接處理具有時(shí)變連接信息和可選的時(shí)變屬性映射的動(dòng)態(tài)網(wǎng)格。該標(biāo)準(zhǔn)面向各種應(yīng)用的有損壓縮和無(wú)損壓縮，如實(shí)時(shí)通信、存儲(chǔ)、自由視角視頻、增強(qiáng)現(xiàn)實(shí)(augmented?reality，ar)和虛擬現(xiàn)實(shí)(virtual?reality，vr)。還考慮了隨機(jī)訪問(wèn)、可伸縮/漸進(jìn)編碼等功能。因此，由于上述原因，業(yè)界亟需技術(shù)解決方案來(lái)解決視頻編碼技術(shù)中出現(xiàn)的這些問(wèn)題。

技術(shù)實(shí)現(xiàn)思路

1、本文包括一種方法和裝置，裝置包括存儲(chǔ)器和一個(gè)或多個(gè)處理器，存儲(chǔ)器配置為存儲(chǔ)計(jì)算機(jī)程序代碼，一個(gè)或多個(gè)處理器配置為訪問(wèn)計(jì)算機(jī)程序代碼并按照計(jì)算機(jī)程序代碼的指示操作。所述計(jì)算機(jī)程序被配置為使得所述處理器實(shí)現(xiàn)獲得代碼，所述獲得代碼被配置為使所述至少一個(gè)處理器從碼流獲得網(wǎng)格，該網(wǎng)格表示至少一個(gè)三維(three-dimensional，3d)視覺(jué)內(nèi)容的已編碼體數(shù)據(jù)，并且所述計(jì)算機(jī)程序被配置為使得所述處理器基于所述網(wǎng)格的基網(wǎng)格量化來(lái)解碼所述已編碼體數(shù)據(jù)，其中，所述基網(wǎng)格量化包括：通過(guò)多平行四邊形預(yù)測(cè)通過(guò)利用已編碼的頂點(diǎn)位置來(lái)預(yù)測(cè)當(dāng)前頂點(diǎn)，通過(guò)量化步長(zhǎng)值來(lái)量化預(yù)測(cè)殘差，以及通過(guò)將所述已量化的預(yù)測(cè)殘差的反量化預(yù)測(cè)殘差與所述多平行四邊形預(yù)測(cè)相加來(lái)壓縮已量化的預(yù)測(cè)殘差并重建當(dāng)前頂點(diǎn)的位置，以作為其他頂點(diǎn)的參考。

2、根據(jù)本申請(qǐng)公開(kāi)的方面，基網(wǎng)格量化可以包括：在量化所述預(yù)測(cè)殘差之后、重建所述當(dāng)前頂點(diǎn)的所述位置之前，對(duì)已量化的預(yù)測(cè)殘差進(jìn)行反量化。

3、根據(jù)本申請(qǐng)公開(kāi)的方面，基網(wǎng)格量化可以包括：基于網(wǎng)格的一頂點(diǎn)被確定為所述網(wǎng)格的在時(shí)序上的第一個(gè)待編碼的頂點(diǎn)，通過(guò)以正整數(shù)對(duì)頂點(diǎn)的位置進(jìn)行量化并對(duì)已量化的位置進(jìn)行熵編碼，來(lái)確定直接編碼所述網(wǎng)格的頂點(diǎn)的位置。

4、根據(jù)本申請(qǐng)公開(kāi)的方面，所述量化步長(zhǎng)值是一個(gè)二元有理數(shù)，包括分子m和分母，所述分母是2的n次冪，所述分子m和所述值n都是整數(shù)。

5、根據(jù)本申請(qǐng)公開(kāi)的方面，所述分子m可以是大于零的第一整數(shù)，并且所述值n可以是大于或等于零的第二整數(shù)。

6、根據(jù)本申請(qǐng)公開(kāi)的方面，可以通過(guò)至少在所述碼流中用信號(hào)通知所述分子m和所述值n來(lái)對(duì)所述量化步長(zhǎng)值進(jìn)行信號(hào)指示。

7、根據(jù)本申請(qǐng)公開(kāi)的各方面，可以在所述碼流中通過(guò)“mesh_position_quantization_step_size_log2_denominator”語(yǔ)法及“mesh_position_quantization_step_size_numerator_minus1”語(yǔ)法用信號(hào)通知所述量化步長(zhǎng)值。

技術(shù)特征：

1.一種視頻解碼的方法，所述方法由至少一個(gè)處理器執(zhí)行，所述方法包括：

2.根據(jù)權(quán)利要求1所述的視頻解碼的方法，其中，所述基網(wǎng)格量化還包括：在量化所述預(yù)測(cè)殘差之后、重建所述當(dāng)前頂點(diǎn)的位置之前，對(duì)已量化的所述預(yù)測(cè)殘差進(jìn)行反量化。

3.根據(jù)權(quán)利要求1所述的視頻解碼的方法，其中，所述基網(wǎng)格量化包括：基于所述網(wǎng)格的一頂點(diǎn)被確定為所述網(wǎng)格的在時(shí)序上第一個(gè)待編碼的頂點(diǎn)，通過(guò)以正整數(shù)對(duì)所述頂點(diǎn)的位置進(jìn)行量化并對(duì)已量化的所述位置進(jìn)行熵編碼，來(lái)確定直接對(duì)所述網(wǎng)格的所述頂點(diǎn)的位置進(jìn)行編碼。

4.根據(jù)權(quán)利要求1所述的視頻解碼的方法，其中，所述量化步長(zhǎng)值是一個(gè)二元有理數(shù)，包括分子m和分母，所述分母是2的n次冪，所述分子m和值n都是整數(shù)。

5.根據(jù)權(quán)利要求4所述的視頻解碼的方法，

6.根據(jù)權(quán)利要求5所述的視頻解碼的方法，

7.根據(jù)權(quán)利要求4所述的視頻解碼的方法，

8.一種視頻解碼的裝置，所述裝置包括：

9.根據(jù)權(quán)利要求8所述的視頻解碼的裝置，其中，所述基網(wǎng)格量化還包括：在量化所述預(yù)測(cè)殘差之后、重建所述當(dāng)前頂點(diǎn)的位置之前，對(duì)已量化的所述預(yù)測(cè)殘差進(jìn)行反量化。

10.根據(jù)權(quán)利要求8所述的視頻解碼的裝置，其中，所述基網(wǎng)格量化包括：基于所述網(wǎng)格的一頂點(diǎn)被確定為所述網(wǎng)格的在時(shí)序上第一個(gè)待編碼的頂點(diǎn)，通過(guò)以正整數(shù)對(duì)所述頂點(diǎn)的位置進(jìn)行量化并對(duì)已量化的所述位置進(jìn)行熵編碼，來(lái)確定直接對(duì)所述網(wǎng)格的所述頂點(diǎn)的位置進(jìn)行編碼。

11.根據(jù)權(quán)利要求8所述的視頻解碼的裝置，其中，所述量化步長(zhǎng)值是一個(gè)二元有理數(shù)，包括分子m和分母，所述分母是2的n次冪，所述分子m和所述值n都是整數(shù)。

12.根據(jù)權(quán)利要求11所述的視頻解碼的裝置，

13.根據(jù)權(quán)利要求12所述的視頻解碼的裝置，

14.根據(jù)權(quán)利要求12所述的視頻解碼的裝置，

15.一種存儲(chǔ)程序的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，所述程序使得計(jì)算機(jī)：

16.根據(jù)權(quán)利要求15所述的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，其中，所述基網(wǎng)格量化還包括：在量化所述預(yù)測(cè)殘差之后、重建所述當(dāng)前頂點(diǎn)的所述位置之前，對(duì)已量化的所述預(yù)測(cè)殘差進(jìn)行反量化。

17.根據(jù)權(quán)利要求15所述的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，其中，所述基網(wǎng)格量化包括：基于將所述網(wǎng)格的一頂點(diǎn)確定為所述網(wǎng)格的在時(shí)序上第一個(gè)待編碼的頂點(diǎn)，通過(guò)以正整數(shù)對(duì)所述頂點(diǎn)的位置進(jìn)行量化并對(duì)已量化的所述位置進(jìn)行熵編碼，來(lái)確定直接對(duì)所述網(wǎng)格的所述頂點(diǎn)的位置進(jìn)行編碼。

18.根據(jù)權(quán)利要求15所述的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，其中，所述量化步長(zhǎng)值是一個(gè)二元有理數(shù)，包括分子m和分母，所述分母是2的n次冪，所述分子m和所述值n都是整數(shù)。

19.根據(jù)權(quán)利要求18所述的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，

20.根據(jù)權(quán)利要求19所述的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，

技術(shù)總結(jié)
一種方法和裝置，裝置包括計(jì)算機(jī)代碼，所述計(jì)算機(jī)代碼被配置為使一個(gè)或多個(gè)處理器從碼流獲得網(wǎng)格，網(wǎng)格表示至少一個(gè)三維(Three?Dimensional，3D)視覺(jué)內(nèi)容的已編碼體數(shù)據(jù)，并且計(jì)算機(jī)代碼被配置為基于所述網(wǎng)格的基網(wǎng)格量化來(lái)解碼所述已編碼體數(shù)據(jù)，其中，所述基網(wǎng)格量化包括：通過(guò)多平行四邊形預(yù)測(cè)利用已編碼的頂點(diǎn)位置來(lái)預(yù)測(cè)當(dāng)前頂點(diǎn)，通過(guò)量化步長(zhǎng)值來(lái)量化當(dāng)前頂點(diǎn)的預(yù)測(cè)殘差，以及通過(guò)將已量化的預(yù)測(cè)殘差的反量化預(yù)測(cè)殘差與多平行四邊形預(yù)測(cè)相加，來(lái)壓縮已量化的預(yù)測(cè)殘差并重建當(dāng)前頂點(diǎn)的位置，以作為其他頂點(diǎn)的參考。

技術(shù)研發(fā)人員：田軍,許曉中,劉杉
受保護(hù)的技術(shù)使用者：騰訊美國(guó)有限責(zé)任公司
技術(shù)研發(fā)日：
技術(shù)公布日：2025/5/15