本發(fā)明的實(shí)施方式涉及3d數(shù)據(jù)編碼裝置和3d數(shù)據(jù)解碼裝置。
背景技術(shù):
1、為了高效地傳輸或記錄3d數(shù)據(jù),存在將3d數(shù)據(jù)轉(zhuǎn)換成二維圖像,通過運(yùn)動圖像編碼方式進(jìn)行編碼來生成編碼數(shù)據(jù)的3d數(shù)據(jù)編碼裝置;以及從該編碼數(shù)據(jù)解碼二維圖像,進(jìn)行重構(gòu)來生成3d數(shù)據(jù)的3d數(shù)據(jù)解碼裝置。此外,存在一種使用深層學(xué)習(xí)后濾波的輔助增強(qiáng)信息來對二維圖像進(jìn)行濾波處理的技術(shù)。
2、作為具體的3d數(shù)據(jù)編碼方式,例如可以列舉出mpeg-i的iso/iec23090-5v3c(visual?volumetric?video-based?coding:基于體積視頻的編碼)和v-pcc(video-basedpoint?cloud?compression:基于視頻的點(diǎn)云壓縮)。v3c能用于由點(diǎn)的位置和屬性(attribute)信息構(gòu)成的點(diǎn)云的編碼、解碼。而且,還能通過iso/iec?23090-12(mpeg沉浸式視頻(mpegimmersive?video:miv))和正在標(biāo)準(zhǔn)化的iso/iec?23090-29(基于視頻的動態(tài)網(wǎng)格編碼(video-based?dynamic?mesh?coding:v-dmc)),用于多視點(diǎn)影像、網(wǎng)格影像的編碼、解碼。此外,在非專利文獻(xiàn)1的神經(jīng)網(wǎng)絡(luò)后濾波的輔助增強(qiáng)信息中,通過特性sei傳輸神經(jīng)網(wǎng)絡(luò)的模型信息,對由應(yīng)用sei指定的幀進(jìn)行尋呼,由此能對點(diǎn)群數(shù)據(jù)進(jìn)行適當(dāng)?shù)臑V波處理。
3、現(xiàn)有技術(shù)文獻(xiàn)
4、非專利文獻(xiàn)
5、非專利文獻(xiàn)1
6、k.takada,y.tokumo,t.chujoh.t.ikai,“[v-pcc][ee2.8]v3cneural-networkpost-filter?sei?messages,”iso/iec?jtc?1/sc?29/wg7,m61805,jan.2023
技術(shù)實(shí)現(xiàn)思路
1、發(fā)明要解決的問題
2、在非專利文獻(xiàn)1中,僅對屬性進(jìn)行濾波處理,因此存在無法進(jìn)行利用占用圖、幾何以及屬性的關(guān)系的濾波處理的問題。換言之,在使用多個圖像/影像來對3d數(shù)據(jù)進(jìn)行解碼的方法中,無法進(jìn)行使用圖像間的信息的細(xì)化。
3、本發(fā)明的目的在于,在使用運(yùn)動圖像編碼/解碼方式的3d數(shù)據(jù)的編碼/解碼中,解決上述問題,使用細(xì)化的輔助信息進(jìn)一步降低編碼失真,高質(zhì)量地對3d數(shù)據(jù)進(jìn)行編碼/解碼。
4、技術(shù)方案
5、為了解決上述的問題,本發(fā)明的一個方案的3d數(shù)據(jù)解碼裝置對編碼數(shù)據(jù)進(jìn)行解碼,并對包括幾何和屬性的3d數(shù)據(jù)進(jìn)行解碼,所述3d數(shù)據(jù)解碼裝置的特征在于,具備:細(xì)化信息解碼部,從上述編碼數(shù)據(jù)對細(xì)化的特性信息和細(xì)化的激活信息進(jìn)行解碼;幾何解碼部,從上述編碼數(shù)據(jù)對幾何幀進(jìn)行解碼;屬性解碼部,從上述編碼數(shù)據(jù)對屬性幀進(jìn)行解碼;以及細(xì)化部,進(jìn)行上述屬性幀或幾何幀的細(xì)化處理,上述細(xì)化信息解碼部從上述特性信息的編碼數(shù)據(jù)對表示使用占用圖、幾何、屬性中的哪一個的細(xì)化對象信息進(jìn)行解碼,使用根據(jù)細(xì)化對象信息而指定的圖像來進(jìn)行細(xì)化。
6、有益效果
7、根據(jù)本發(fā)明的一個方案,能降低由彩色圖像的編碼引起的失真,高質(zhì)量地對3d數(shù)據(jù)進(jìn)行編碼/解碼。
1.一種3d數(shù)據(jù)解碼裝置,對編碼數(shù)據(jù)進(jìn)行解碼,并對包括幾何和屬性的3d數(shù)據(jù)進(jìn)行解碼,所述3d數(shù)據(jù)解碼裝置的特征在于,具備:
2.根據(jù)權(quán)利要求1所述的3d數(shù)據(jù)解碼裝置,其特征在于,
3.根據(jù)權(quán)利要求1所述的3d數(shù)據(jù)解碼裝置,其特征在于,
4.根據(jù)權(quán)利要求1所述的3d數(shù)據(jù)解碼裝置,其特征在于,
5.根據(jù)權(quán)利要求4所述的3d數(shù)據(jù)解碼裝置,其特征在于,
6.根據(jù)權(quán)利要求4所述的3d數(shù)據(jù)解碼裝置,其特征在于,
7.根據(jù)權(quán)利要求1所述的3d數(shù)據(jù)解碼裝置,其特征在于,
8.根據(jù)權(quán)利要求1所述的3d數(shù)據(jù)解碼裝置,其特征在于,
9.根據(jù)權(quán)利要求1所述的3d數(shù)據(jù)解碼裝置,其特征在于,
10.一種3d數(shù)據(jù)編碼裝置,對編碼數(shù)據(jù)進(jìn)行編碼,對包括幾何和屬性的3d數(shù)據(jù)進(jìn)行編碼,其特征在于,所述3d數(shù)據(jù)編碼裝置具備: