用于視頻傳輸系統(tǒng)的錯(cuò)誤隱藏模式信令的制作方法
【專利摘要】公開了用于用于視頻傳輸系統(tǒng)的錯(cuò)誤隱藏模式信令的系統(tǒng)、方法和手段。視頻譯碼設(shè)備可以接收包括多個(gè)圖片的視頻輸入。視頻編碼設(shè)備可以從視頻輸入中的多個(gè)圖片中選擇第一圖片。視頻譯碼設(shè)備可以針對第一圖片評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式。錯(cuò)誤隱藏模式可以包括圖片復(fù)制(PC)、時(shí)間直接(TD)、運(yùn)動(dòng)復(fù)制(MC)、基礎(chǔ)層跳過(BLSkip；運(yùn)動(dòng)和殘差上采樣)、重構(gòu)的BL上采樣(RU)、E?ILR模式1和/或E?ILR模式2中的兩者或更多。視頻譯碼設(shè)備可以針對第一圖片從這兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可以在視頻比特流中用信號發(fā)送針對該第一圖片的所選的錯(cuò)誤隱藏模式。
【專利說明】用于視頻傳輸系統(tǒng)的錯(cuò)誤隱藏模式信令
[0001 ]交叉引用
[0002] 本申請要求2013年10月22日申請的美國臨時(shí)申請No.61/894,286的權(quán)益，其全部 內(nèi)容通過引用結(jié)合于此。
【背景技術(shù)】
[0003] 所有形式的視頻的總和(例如，電視、視頻點(diǎn)播(VoD )、因特網(wǎng)和P2P)到2017年可W 位于全球消費(fèi)者業(yè)務(wù)量(traf f iC)的80 %至90 %的范圍。來自無線和移動(dòng)設(shè)備的業(yè)務(wù)量到 2016年可W超過來自有線設(shè)備的業(yè)務(wù)量。視頻點(diǎn)播業(yè)務(wù)量到2017年可能接近=倍。2017年 的VoD業(yè)務(wù)量等同于每個(gè)月60億個(gè)DVD。內(nèi)容交付網(wǎng)絡(luò)(CDN)業(yè)務(wù)量到2017年可能分發(fā)所有 視頻業(yè)務(wù)量的近S分之二。到2017年，所有因特網(wǎng)視頻業(yè)務(wù)量的65%可能會在2017年通過 內(nèi)容交付網(wǎng)絡(luò)，運(yùn)在2012年是53%。
[0004] 可W提供高效視頻譯碼化EVC)和可縮放肥VC(SHVC)。肥VC和甜VC可能沒有用于錯(cuò) 誤隱藏化C)的語法和語義。MPEG媒體傳輸(MMT)可能沒有用于EC的任何語法和語義。

【發(fā)明內(nèi)容】

[0005] 公開了用于針對視頻傳輸系統(tǒng)的錯(cuò)誤隱藏模式信令的系統(tǒng)、方法和手段。視頻譯 碼設(shè)備可接收包括多個(gè)圖片的視頻輸入。視頻譯碼設(shè)備可W從視頻輸入中的多個(gè)圖片中選 擇第一圖片。視頻譯碼設(shè)備可W針對第一圖片評價(jià)兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式。視頻譯碼 設(shè)備可W針對第一圖片從運(yùn)兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式。該視 頻譯碼設(shè)備可W在視頻比特流中用信號發(fā)送針對第一圖片的所選的錯(cuò)誤隱藏模式。該視頻 譯碼設(shè)備可W針對第二圖片來評估運(yùn)多個(gè)錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W針對第二圖片 從運(yùn)多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式。該視頻譯碼設(shè)備可W在視頻比特流中用信號 發(fā)送針對第二圖片的所選的錯(cuò)誤隱藏模式和針對第一圖片的所選的錯(cuò)誤隱藏模式，其中， 針對所述第一圖片的所選的錯(cuò)誤隱藏模式不同于針對第二圖片的所選的錯(cuò)誤隱藏模式。
[0006] 視頻譯碼設(shè)備可W針對第二圖片評估運(yùn)多個(gè)錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W針 對第二圖片從運(yùn)多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式。該視頻譯碼設(shè)備可W在視頻比特 流中用信號發(fā)送針對第二圖片的所選的錯(cuò)誤隱藏模式和針對第一圖片的所選的錯(cuò)誤隱藏 模式。針對第一圖片的所選的錯(cuò)誤隱藏模式可W與針對第二圖片的所選的錯(cuò)誤隱藏模式是 相同的。
[0007] 視頻譯碼設(shè)備可基于第一圖片和第一圖片的錯(cuò)誤隱藏版本之間的差異選擇錯(cuò)誤 隱藏模式。視頻譯碼設(shè)備可W選擇具有最小計(jì)算的差異的錯(cuò)誤隱藏模式。該差異可根據(jù)第 一圖片和使用所選EC模式確定的第一圖片的錯(cuò)誤隱藏版本之間的絕對差和(SAD)和結(jié)構(gòu)相 似性(SSIM)中的一者或多者來測量。該差異可W使用第一圖片的一個(gè)或多個(gè)顏色分量來測 量。
[000引多個(gè)錯(cuò)誤隱藏模式可W包括圖片復(fù)制(PC)、時(shí)間直接(TD)、運(yùn)動(dòng)復(fù)制(MC)、基礎(chǔ)層 跳過(BLSkip;運(yùn)動(dòng)與殘差上采樣）、重構(gòu)化上采樣(抓KE-ILR模式1和E-ILR模式2中的至少 兩者。
[0009] 該視頻譯碼設(shè)備可W在視頻比特流中用信號發(fā)送針對第一圖片的所選的錯(cuò)誤隱 藏模式。該視頻譯碼設(shè)備可W在視頻比特流的補(bǔ)充增強(qiáng)信息（SEI)消息中、MPEG媒體傳輸 (MMT)傳輸分組中或MMT錯(cuò)誤隱藏模式化CM)消息中用信號發(fā)送該錯(cuò)誤隱藏模式。
[0010] 視頻譯碼設(shè)備可接收包括多個(gè)圖片的視頻比特流。該視頻譯碼設(shè)備可W在視頻比 特流中接收針對第一圖片的錯(cuò)誤隱藏模式。該視頻譯碼設(shè)備可確定第一圖片丟失。視頻譯 碼設(shè)備可W執(zhí)行針對第一圖片的錯(cuò)誤隱藏。錯(cuò)誤隱藏可使用接收到的針對第一圖片的錯(cuò)誤 隱藏模式進(jìn)行。視頻譯碼設(shè)備可W在視頻比特流中接收針對第二圖片的錯(cuò)誤隱藏模式。該 視頻譯碼設(shè)備可確定第二圖片丟失。視頻譯碼設(shè)備可執(zhí)行針對第二圖片的錯(cuò)誤隱藏。錯(cuò)誤 隱藏可W使用接收到的針對第二圖片的錯(cuò)誤隱藏模式被執(zhí)行。針對第二圖片的錯(cuò)誤隱藏模 式可W與針對第一圖片的錯(cuò)誤隱藏模式相同。針對第二圖片的錯(cuò)誤隱藏模式可W與針對第 一圖片的錯(cuò)誤隱藏模式不同。
[0011] 視頻譯碼設(shè)備可W接收包括多個(gè)圖片的視頻輸入。視頻譯碼設(shè)備可W從視頻輸入 中的多個(gè)圖片中選擇第一圖片。視頻譯碼設(shè)備可W針對第一圖片來評估兩個(gè)或更多個(gè)錯(cuò)誤 隱藏模式。視頻譯碼設(shè)備可W針對第一圖片從運(yùn)兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇 錯(cuò)誤隱藏模式。該視頻譯碼設(shè)備可W在視頻比特流中用信號發(fā)送針對第一圖片的所選的錯(cuò) 誤隱藏模式。視頻譯碼設(shè)備可W從視頻輸入中的多個(gè)圖片中選擇第二圖片。視頻譯碼設(shè)備 可W針對第二圖片評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W針對第二圖片從運(yùn) 兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式。該視頻譯碼設(shè)備可W在視頻比特 流中用信號發(fā)送針對第二圖片的所選的錯(cuò)誤隱藏模式。針對第一圖片的所選的錯(cuò)誤隱藏模 式可W不同于針對第二圖片的所選的錯(cuò)誤隱藏模式。針對第一圖片的所選的錯(cuò)誤隱藏模式 可W與針對第二圖片的所選的錯(cuò)誤隱藏模式相同。
[0012] 視頻譯碼設(shè)備可W針對多個(gè)圖片中的每個(gè)圖片評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式。 視頻譯碼設(shè)備可W將多個(gè)圖片分成第一圖片子集和第二圖片子集。視頻譯碼設(shè)備可W針對 多個(gè)圖片中的每個(gè)圖片從運(yùn)兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式。針對 第一圖片子集的所選的錯(cuò)誤隱藏模式可W是相同的，且針對第二圖片子集的所選的錯(cuò)誤隱 藏模式可W是相同的。該視頻譯碼設(shè)備可W在視頻比特流中用信號發(fā)送針對第一圖片子集 的所選的錯(cuò)誤隱藏模式和針對第二圖片子集的所選的錯(cuò)誤隱藏模式。該視頻譯碼設(shè)備確定 該視頻輸入的較高層存在。較高層可W比包括第一圖片的層高。視頻譯碼設(shè)備可W從視頻 輸入的較高層中的多個(gè)圖片中選擇圖片。視頻譯碼設(shè)備可W針對較高層的所選的圖片來評 估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W針對來自較高層的所選的圖片而從運(yùn)兩 個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式。該視頻譯碼設(shè)備可W在具有針對第 一圖片的錯(cuò)誤隱藏模式的視頻比特流中用信號發(fā)送針對較高層的所選的圖片的所選的錯(cuò) 誤隱藏模式。
[0013] 視頻譯碼設(shè)備可W針對一個(gè)層來評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式。視頻譯碼設(shè)備 可W從運(yùn)兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W在針對該層 的視頻比特流中用信號發(fā)送所選的錯(cuò)誤隱藏模式。
【附圖說明】
[0014] 圖I描繪了示例多層可縮放視頻譯碼系統(tǒng)；
[0015] 圖2是視頻流系統(tǒng)架構(gòu)的示例的圖；
[0016] 圖3是示出可被配置成執(zhí)行皿到UHD縮放性的示例兩層可縮放視頻編碼器的簡化 框圖；
[0017] 圖4是示出可被配置成執(zhí)行皿到UHD縮放性的示例兩層可縮放視頻解碼器的簡化 框圖；
[0018] 圖5描繪了用于立體視頻譯碼的時(shí)間和層間預(yù)測的示例；
[0019] 圖6是與層級B圖片的圖片參考關(guān)系的示例的圖；
[0020] 圖7A-E是可縮放視頻譯碼的基礎(chǔ)層(BL)和/或增強(qiáng)層化L)中的圖片丟失的示例情 況的圖；
[0021 ]圖8是圖片復(fù)制的示例的圖；
[0022] 圖9是用于B圖片的時(shí)間直接的示例的圖；
[0023] 圖IOA是現(xiàn)有的EC的示例的圖；
[0024] 圖IOB是E對莫式信令的示例的圖；
[0025] 圖11是從視頻譯碼設(shè)備的角度的示例E對莫式信令的圖；
[0026] 圖12是從視頻解碼設(shè)備的角度的示例E對莫式信令的圖；
[0027] 圖13是丟失的兩個(gè)連續(xù)圖片的示例的圖；
[0028] 圖14是E對莫式信令的示例的圖；
[0029] 圖15是示例E對莫式信令環(huán)境的圖；
[0030] 圖16是錯(cuò)誤模式文件生成的示例的圖；
[0031] 圖17是EC模式2和EC模式4之間的示例PSNR比較的圖；
[0032] 圖18A是具有可支持E對莫式的組播群組的示例的圖；
[0033] 圖18B是可支持E對莫式的示例會話發(fā)起的圖；
[0034] 圖19A是可W實(shí)施一個(gè)或多個(gè)公開的實(shí)施方式的示例通信系統(tǒng)的系統(tǒng)圖；
[0035] 圖19B是可W在圖19A中示出的通信系統(tǒng)中使用的示例無線發(fā)射/接收單元(WTRU) 的系統(tǒng)圖；
[0036] 圖19C是可W在圖19A中示出的通信系統(tǒng)中使用的示例無線電接入網(wǎng)和示例核屯、 網(wǎng)的系統(tǒng)圖；
[0037] 圖19D是可W在圖19A中示出的通信系統(tǒng)中使用的示例無線電接入網(wǎng)和另一示例 核屯、網(wǎng)的系統(tǒng)圖；
[0038] 圖19E是可W在圖19A中示出的通信系統(tǒng)中使用的示例無線電接入網(wǎng)和另一示例 核屯、網(wǎng)的系統(tǒng)圖；
[0039] 圖20是示例E對莫式信令的圖；W及
[0040] 圖21是示例E對莫式信令的圖。
【具體實(shí)施方式】
[0041] 現(xiàn)在將參考附圖描述示例性實(shí)施方式的詳細(xì)描述。雖然該描述提供了可能實(shí)施的 詳細(xì)示例，但是應(yīng)該指出的是，細(xì)節(jié)旨在是示例性的，決不限制本申請的范圍。
[0042] 圖1是描繪了示例的基于塊的混合可縮放視頻譯碼(SVC)系統(tǒng)的簡化框圖。將由層 1(基礎(chǔ)層)表示的空間和/或時(shí)間信號分辨率可W通過輸入視頻信號的下采樣來生成。在隨 后的編碼階段，諸如Ql的量化器的設(shè)置可W決定基礎(chǔ)信息的質(zhì)量水平。一個(gè)或多個(gè)隨后的 較高層可W使用基礎(chǔ)層重構(gòu)Yl被編碼和/或解碼，Yl可W表示較高層分辨率水平的近似。上 采樣單元可W執(zhí)行基礎(chǔ)層重構(gòu)信號上采樣到層2的分辨率。下采樣和/或上采樣可貫穿多個(gè) 層被執(zhí)行(例如，對于N個(gè)層而言，層1,2...N)。下采樣和/或上采樣比率可W例如依據(jù)兩個(gè) 層之間的縮放性尺寸而可W是不同的。
[0043] 在圖1的示例可縮放視頻譯碼系統(tǒng)中，針對給定的較高層n(例如，2 ^ n<N，N是總層 數(shù)），可W通過從當(dāng)前層n信號中減去上采樣的較低層信號(例如，層n-1信號)來生成差分信 號?？蒞對該差分信號進(jìn)行編碼。如果兩個(gè)層(nl和n2)表示的各自的視頻信號具有相同的 空間分辨率，則可W繞過相應(yīng)的下采樣和/或上采樣操作。給定層n(例如，1含n含N)或多個(gè) 層可W在不使用來自較高層的解碼信息的情況下被解碼。
[0044] 依靠基礎(chǔ)層W外的層的殘差信號（兩個(gè)層之間的差分信號）的譯碼，例如使用圖1 的示例SVC系統(tǒng)可能導(dǎo)致視覺偽影。運(yùn)樣的視覺偽影可能是由于例如限制其動(dòng)態(tài)范圍的殘 差信號的量化和/或歸一化，和/或由于在殘差的譯碼期間執(zhí)行的量化。一個(gè)或更多個(gè)較高 層編碼器可W選用運(yùn)動(dòng)估計(jì)和/或運(yùn)動(dòng)補(bǔ)償預(yù)測作為各自的編碼模式。在殘差信號中的運(yùn) 動(dòng)估計(jì)和/或補(bǔ)償可W不同于常規(guī)運(yùn)動(dòng)估計(jì)，并可能容易產(chǎn)生視覺偽影。為了降低(例如，最 小化)視覺偽影的發(fā)生，更復(fù)雜的殘差量化可W例如與聯(lián)合量化過程一起被實(shí)現(xiàn)，該聯(lián)合量 化過程可包括用于限制其動(dòng)態(tài)范圍的殘差信號的量化和/或歸一化和在殘差的譯碼期間執(zhí) 行的量化。運(yùn)樣的量化過程可能增加 SVC系統(tǒng)的復(fù)雜性。
[0045] 可縮放視頻譯碼可W實(shí)現(xiàn)部分比特流的傳輸和解碼。運(yùn)可W使得SVC能夠提供具 有較低時(shí)間和/或空間分辨率或降低的保真度的視頻服務(wù)，同時(shí)保持相對高的重構(gòu)質(zhì)量(例 如部分比特流的給定的各自的速率）dSVC可W用單環(huán)路解碼來實(shí)現(xiàn)，由此SVC解碼器可W在 被解碼的層處設(shè)置一個(gè)運(yùn)動(dòng)補(bǔ)償環(huán)路，并且在一個(gè)或多個(gè)其它較低層處可W不設(shè)置運(yùn)動(dòng)補(bǔ) 償環(huán)路。例如，比特流可W包括兩個(gè)層，包括可W是基礎(chǔ)層的第一層(層1)和可W是增強(qiáng)層 的第二層(層2)。當(dāng)運(yùn)樣的SVC解碼器重構(gòu)層2視頻時(shí)，解碼圖片緩沖器和運(yùn)動(dòng)補(bǔ)償預(yù)測的設(shè) 置可W被限制在層2。在運(yùn)樣的SVC實(shí)施中，來自較低層的各個(gè)參考圖片可W不完全被重構(gòu)， 運(yùn)可W降低在解碼器處的計(jì)算復(fù)雜性和/或存儲器消耗。
[0046] 單環(huán)路解碼可W通過約束的層間紋理預(yù)測來實(shí)現(xiàn)，其中針對給定層中的當(dāng)前塊， 如果相應(yīng)的較低層塊是在內(nèi)模式中被譯碼的，則從較低層的空間紋理預(yù)測可W被允許。運(yùn) 可W被稱為受限的內(nèi)預(yù)測。當(dāng)較低層塊在內(nèi)模式中被譯碼時(shí)，其可W被重構(gòu)而不需要運(yùn)動(dòng) 補(bǔ)償操作和/或解碼的圖片緩沖。
[0047] SVC可W實(shí)施從一個(gè)或多個(gè)較低層的一個(gè)或多個(gè)另外的層間預(yù)測技術(shù)，例如但不 限于，運(yùn)動(dòng)向量預(yù)測、殘差預(yù)測、模式預(yù)測等。運(yùn)可W改善增強(qiáng)層的速率-失真效率。采用單 環(huán)路解碼的SVC實(shí)施可W表現(xiàn)出在解碼器處的降低的計(jì)算復(fù)雜性和/或降低的存儲器消耗， 并且可W表現(xiàn)出增加的實(shí)現(xiàn)復(fù)雜性，例如，由于對塊級層間預(yù)測的依賴。為了補(bǔ)償可能通過 施加單環(huán)路解碼約束導(dǎo)致的性能下降，編碼器設(shè)計(jì)和計(jì)算復(fù)雜度可W被增加 W達(dá)到期望的 性能。交織內(nèi)容(interlaced content)的譯碼可能不被SVC支持。
[0048] 多視圖視頻譯碼(MVC)可W提供視圖可縮放性。在視圖縮放性的示例中，基礎(chǔ)層比 特流可W被解碼W重構(gòu)常規(guī)的二維(2D)視頻，且一個(gè)或多個(gè)附加增強(qiáng)層可W被解碼W重構(gòu) 相同視頻信號的其他視圖表示。當(dāng)運(yùn)樣的視圖被組合在一起并通過=維（3D)顯示器顯示 時(shí)，具有適當(dāng)?shù)纳疃雀兄?D視頻可W被產(chǎn)生。
[0049] 視頻譯碼設(shè)備可W將錯(cuò)誤隱藏化C)用于視頻傳輸服務(wù)，例如通過容易出錯(cuò)的網(wǎng) 絡(luò)。視頻譯碼設(shè)備(諸如視頻解碼設(shè)備)在該視頻譯碼設(shè)備不能訪問原始圖片的情況下可能 難W在許多EC模式中選擇EC模式。在視頻解碼器側(cè)(例如僅在解碼器側(cè))可行的E對莫式可能 是受限的。
[0050] 視頻譯碼設(shè)備可W被配置為發(fā)送和/或接收EC模式信令。例如，視頻譯碼設(shè)備（如 視頻編碼設(shè)備)可W在損壞的圖片上模擬各種EC模式。視頻編碼設(shè)備可確定在原始圖像和 重構(gòu)圖像之間提供期望差異(例如最小差異)的EC模式。視頻編碼設(shè)備可W將所計(jì)算的EC模 式用信號發(fā)送到客戶端中的視頻解碼器。例如，客戶端可W是無線發(fā)射/接收單元(WTRU)。
[0051] 圖2是視頻流系統(tǒng)架構(gòu)的示例的圖。視頻服務(wù)器可包括多個(gè)模塊，例如，諸如視頻 編碼器201、錯(cuò)誤保護(hù)202、選擇性調(diào)度器203、用于流傳輸?shù)姆?wù)質(zhì)量(QoS)控制器204和/或 信道預(yù)測205。視頻譯碼設(shè)備可W包括所述QoS控制器204的功能。視頻客戶端209可W包括 E對莫塊。從網(wǎng)絡(luò)的角度，可能通過容易出錯(cuò)的網(wǎng)絡(luò)傳送視頻分組。該傳輸可W考慮在無線連 接中可能發(fā)生的分組丟失。分組丟失可W由于信號干擾和/或?yàn)榱藫砣刂苼G棄分組而發(fā) 生。網(wǎng)絡(luò)206可使用自動(dòng)重復(fù)請求(ARQ)和/或前向糾錯(cuò)(FEC)，W從網(wǎng)絡(luò)錯(cuò)誤中恢復(fù)分組。當(dāng) 網(wǎng)絡(luò)使用ARQ和/或FE別寸，可能未預(yù)料到地發(fā)生傳輸延遲和/或抖動(dòng)?？鐚觾?yōu)化可避免(例如 由于不期望的延遲和抖動(dòng)）在鏈路和物理層中使用重傳（例如，ARQ)和/或錯(cuò)誤保護(hù)（例如， 陽C)。視頻內(nèi)容知曉錯(cuò)誤保護(hù)（例如，不等錯(cuò)誤保護(hù)(unequal error protection，肥P))和/ 或E對莫式可W在應(yīng)用層中被使用。
[0052] 視頻服務(wù)器207和/或客戶端209可W提供錯(cuò)誤恢復(fù)流傳輸和/或EC模式，例如，與 流控制和/或擁塞控制一起。在圖2中，服務(wù)器207和客戶端209可W交換控制信息（例如，信 號）W控制QoS度量。信令努力可W提高整體視頻質(zhì)量。網(wǎng)關(guān)208和/或路由器可W使用用于 資源預(yù)留的控制消息來在應(yīng)用層保持QoS質(zhì)量。在應(yīng)用層的QoS質(zhì)量可W是針對MPEG媒體傳 輸(MMT)的特征。
[0053] MPEG帖兼容(MFC)視頻譯碼可W提供可縮放的擴(kuò)展到3D視頻譯碼。例如，MFC可提 供可縮放的擴(kuò)展到帖兼容基礎(chǔ)層視頻(例如，打包到同一帖的兩個(gè)視圖），并且可W提供一 個(gè)或多個(gè)增強(qiáng)層來恢復(fù)全分辨率視圖。立體3D視頻可W有兩個(gè)視圖，包括左視圖和右視圖。 立體3D內(nèi)容可W通過將兩個(gè)視圖打包和/或復(fù)用到一個(gè)帖，并通過壓縮并傳送該打包的視 頻來傳送。在接收機(jī)側(cè)，在解碼之后，運(yùn)些帖可W被解包并被顯示為兩個(gè)視圖。運(yùn)種視圖的 復(fù)用可W在時(shí)間域或空間域中被執(zhí)行。當(dāng)在空間域中執(zhí)行時(shí)，為了保持相同的圖片尺寸，可 W根據(jù)一個(gè)或多個(gè)排列在空間上下采樣(例如使用因子2)并打包運(yùn)兩個(gè)視圖。例如，并排排 列可W將下采樣的左視圖放在圖片的左半邊并將下采樣的右視圖放在圖片的右半邊。其他 排列可W包括上下、逐行、棋盤等。用于實(shí)現(xiàn)帖兼容性3D視頻的排列可W例如通過一個(gè)或多 個(gè)帖打包排列SEI消息來傳達(dá)。雖然運(yùn)樣的排列可W在增加最小帶寬消耗的情況下實(shí)現(xiàn)3D 傳輸，但是空間下采樣會導(dǎo)致視圖的混疊和/或會降低3D視頻的視覺質(zhì)量和用戶體驗(yàn)。
[0054] 視頻譯碼系統(tǒng)(例如，根據(jù)高效率視頻譯碼(SHVC)的可縮放擴(kuò)展的視頻譯碼系統(tǒng)） 可W包括被配置為執(zhí)行視頻譯碼的一個(gè)或多個(gè)設(shè)備。被配置為執(zhí)行視頻譯碼（例如，編碼 和/或解碼視頻信號）的設(shè)備可W稱為視頻譯碼設(shè)備。運(yùn)種視頻譯碼設(shè)備可W包括具備視頻 能力的設(shè)備，例如電視、數(shù)字媒體播放器、DVD播放器、藍(lán)光?播放器、聯(lián)網(wǎng)媒體播放器設(shè)備、 臺式計(jì)算機(jī)、膝上型個(gè)人計(jì)算機(jī)、平板設(shè)備、移動(dòng)電話、視頻會議系統(tǒng)、基于硬件和/或軟件 的視頻編碼系統(tǒng)，等等。運(yùn)種視頻譯碼設(shè)備可W包括無線通信網(wǎng)絡(luò)元件，例如無線發(fā)射/接 收單元(WTRU)、基站、網(wǎng)關(guān)或其他網(wǎng)絡(luò)元件。
[0055] 圖3是示出示例編碼器(例如，SHVC編碼器)的簡化框圖。示出的示例編碼器可用于 生成兩層皿到UHD的可縮放比特流。如圖3所示，基礎(chǔ)層(BL)視頻輸入330可W是皿視頻信 號，且增強(qiáng)層巧U視頻輸入302可W是U皿視頻信號。皿視頻信號330和IfflD視頻信號302可W 例如通過W下的一者或多者來彼此對應(yīng):一個(gè)或多個(gè)下采樣參數(shù)(例如，空間可縮放性）；一 個(gè)或多個(gè)顏色分級參數(shù)(例如，色域可縮放性）；W及一個(gè)或多個(gè)色調(diào)映射參數(shù)(例如，位深 可縮放性)328。
[0056] 化編碼器318可W包括例如高效率視頻譯碼化EVC)視頻編碼器或H.264/AVC視頻 編碼器?；幋a器318可被配置成使用用于預(yù)測的一個(gè)或多個(gè)化重構(gòu)圖片（例如存儲在化 DPB 320中）來生成化比特流332。化編碼器304可W包括例如肥VC編碼器?；幋a器304可W 包括一個(gè)或多個(gè)高級語法修飾，例如W通過添加層間參考圖片到化DPB來支持層間預(yù)測。 化編碼器304可被配置成使用用于預(yù)測的一個(gè)或多個(gè)化重構(gòu)圖片（例如存儲在化DPB 306 中）來生成化比特流808。
[0057] BL DPB 320中的一個(gè)或多個(gè)重構(gòu)的化圖片可W使用一個(gè)或多個(gè)圖片級層間處理 技術(shù)在層間處理（ILP)單元322被處理，該圖片級層間處理技術(shù)包括上采樣(例如，針對空間 可縮放性）、色域轉(zhuǎn)換(例如，針對色域可縮放性)和逆色調(diào)映射(例如，針對位深可縮放性） 中的一者或多者。一個(gè)或多個(gè)處理后的重構(gòu)的化圖片可W被用作用于化譯碼的參考圖片。 可基于從化編碼器304接收的增強(qiáng)視頻信息314和/或從化編碼器318接收的基礎(chǔ)視頻信息 816來執(zhí)行層間處理。運(yùn)可W改善化譯碼效率。
[0化引在326,化比特流308、化比特流332和在層間處理中使用的參數(shù)(例如ILP信息324) 可W-起被復(fù)用到可縮放比特流312。例如，可縮放比特流312可包括甜比特流。
[0059] 圖4是示出示例解碼器(例如，SHVC解碼器）的簡化框圖，其可W對應(yīng)于圖3所示的 示例編碼器。示出的示例解碼器可W被用于例如解碼兩層皿到U皿比特流。
[0060] 如圖4所示，解復(fù)用模塊412可W接收可縮放比特流402,并且可W解復(fù)用可縮放比 特流402 W生成ILP信息414、化比特流404和化比特流418?？煽s放比特流402可包括細(xì)VC比 特流。EL比特流404可W由化解碼器406解碼。化解碼器406可W包括例如皿VC視頻解碼器。 化解碼器406可W被配置為使用用于預(yù)測的一個(gè)或多個(gè)化重構(gòu)圖片（例如，存儲在化DPB 408中）來生成U皿視頻信號410?；忍亓?18可由化解碼器420解碼?；獯a器420可W包括 例如肥VC視頻解碼器或H.264/AVC視頻。化解碼器420可W被配置為使用用于預(yù)測的一個(gè)或 多個(gè)化重構(gòu)圖片（例如，存儲在化DPB 422中）來生成皿視頻信號424。該重構(gòu)視頻信號（例 如UHD視頻f目號410和皿視頻f目號424)可W用于驅(qū)動(dòng)顯不設(shè)備。
[0061 ] BL DPB 422中的一個(gè)或多個(gè)重構(gòu)的化圖片可W使用一個(gè)或多個(gè)圖片級層間處理 技術(shù)在ILP單元916被處理。運(yùn)種圖片級層間處理技術(shù)可包括上采樣(例如，針對空間可縮放 性）、色域轉(zhuǎn)換(例如，針對色域可縮放性)和逆色調(diào)映射(例如，針對位深可縮放性）中的一 者或多者。一個(gè)或多個(gè)處理后的重構(gòu)的BL圖片可W被用作用于EL解碼的參考圖片?？蒞基 于在層間處理中使用的參數(shù)(例如ILP信息414)來執(zhí)行層間處理。預(yù)測信息可包括預(yù)測塊尺 寸、一個(gè)或多個(gè)運(yùn)動(dòng)向量(例如，其可指示運(yùn)動(dòng)方向和運(yùn)動(dòng)量)和/或一個(gè)或多個(gè)參考索引 (例如，其可W指示從哪個(gè)參考圖片得到預(yù)測信號）。運(yùn)可W改善化解碼效率。
[0062] 基于參考索引的框架可利用類似于單層編解碼器中的塊級操作的塊級操作。單層 編解碼器邏輯可W在可縮放譯碼系統(tǒng)內(nèi)被重復(fù)使用?；趨⒖妓饕目蚣芸蒞簡化可縮放 編解碼器設(shè)計(jì)。基于參考索引的框架可提供支持不同類型的可縮放性的靈活性，例如，通過 適當(dāng)?shù)母呒壵Z法信令和/或通過利用層間處理模塊來實(shí)現(xiàn)譯碼效率。一個(gè)或多個(gè)高級語法 變化可W支持層間處理和/或甜VC的多層信令。
[0063] 圖5描繪了用于使用MVC來譯碼具有左視圖（層1)和右視圖（層2)的立體視頻的示 例預(yù)測結(jié)構(gòu)。左視圖視頻可W用I-B-B-P預(yù)測結(jié)構(gòu)進(jìn)行譯碼，并且右視圖視頻可W用P-B-B-B預(yù)測結(jié)構(gòu)進(jìn)行譯碼。如圖5所示，在右視圖中，與左視圖中的第一個(gè)I圖片并置的第一圖片 可被譯碼為P圖片，W及在右視圖中的后續(xù)圖片可W被譯碼為B圖片，其中第一個(gè)預(yù)測源自 右視圖內(nèi)的時(shí)間參考W及第二個(gè)預(yù)測源自左視圖中的層間參考。MVC可能不支持單環(huán)路解 碼特征。例如，如圖5所示，右視圖（層2)視頻的解碼可W W左視圖（層1)中的圖片的整體的 可用性為條件，其中每個(gè)層(視圖）具有各自的補(bǔ)償環(huán)路。MVC的實(shí)現(xiàn)可W包括高級語法變 化，并可W不包括塊級變化。運(yùn)可W使得MVC易于實(shí)現(xiàn)。例如，可W通過在片（slice)和/或圖 片級配置參考圖片來實(shí)施MVCdMVC可例如通過將圖3中示出的示例擴(kuò)展到執(zhí)行多個(gè)視圖間 的層間預(yù)測來支持對多于兩個(gè)視圖的譯碼。
[0064] 圖6是具有層級B圖片的圖片參考關(guān)系的示例的圖。圖片參考排列600示出了一般 的層級B圖片及其圖片預(yù)測關(guān)系的示例。位于較低時(shí)間等級的圖片可W被在較高時(shí)間等級 的圖片參考。例如，如果圖片在傳輸過程中丟失，視頻譯碼設(shè)備可W被配置為使用參考圖片 替換和/或重新生成丟失的圖片。如果使用可縮放視頻譯碼，視頻譯碼設(shè)備可W被配置成使 用當(dāng)前和/或較低層的參考圖片來隱藏來自丟失圖片的錯(cuò)誤，例如如圖6中所示。例如，POC 622可W被POC 662、P0C 612和/或POC 632參考，因?yàn)镻OC 622可W在POC 662的參考圖片列 表中（例如，肥VC和SHVC的常見測試條件(CTC))。實(shí)際錯(cuò)誤傳播可能會影響同一內(nèi)周期中的 其他后續(xù)圖片(例如:如圖7A-E中所示）。
[0065] 圖7A-E是在可縮放視頻譯碼的基礎(chǔ)層(BL)和增強(qiáng)層化L)中的圖片丟失的示例情 況的圖。圖7A是在EL中的層級B結(jié)構(gòu)內(nèi)丟失的非參考圖片化L735)的示例。在示例圖片序列 790中，視頻解碼設(shè)備可針對丟失的化735來復(fù)制圖片化725、化745、和/或化730中的一者 或多者W作為EC解決方案。視頻譯碼設(shè)備可W使用可縮放肥VC測試模型（S歷化C。使用細(xì)M EC的視頻譯碼設(shè)備可W復(fù)制參考列表中最近的下一個(gè)圖片。例如，如果下一個(gè)圖片巧L745) 的基礎(chǔ)量化參數(shù)(QP)值比之前圖片化L725)的低，則復(fù)制的圖片可具有更好的峰值信噪比 PSNR。
[0066] 圖7B是在化中的參考圖片丟失的示例。在示例圖片序列791中，視頻譯碼設(shè)備可W 為了丟失的圖片化726而復(fù)制化706、化746、和/或化721中的一者或多者。因?yàn)榛?26可被 EL716、EL736和/或化766參考，所W丟失化726可能導(dǎo)致在化716、化736、化756、化766和/或 化776(例如，其可W在圖7B中用波進(jìn)行標(biāo)記）的錯(cuò)誤傳播。
[0067] 可W使用可縮放視頻譯碼結(jié)構(gòu)。在示例圖片序列791中，視頻譯碼設(shè)備可W在單層 和/或基礎(chǔ)層視頻譯碼（例如在MPEG-2視頻、H.264AVC、皿VC等中）中使用用于EC的圖片復(fù) 審IJ。例如，如果圖7B中描繪的基礎(chǔ)層被編碼為單層比特流，或被編碼為針對多層比特流的基 礎(chǔ)層，則視頻譯碼設(shè)備可確定化701和化741可W是當(dāng)化721圖片丟失時(shí)用于圖片復(fù)制的候 選圖片。
[0068] 圖7C是化和化中的參考圖片丟失的示例。圖片化727和并置圖片化722可能丟失。 在示例圖片序列792中，視頻譯碼設(shè)備可W復(fù)制化702和/或化742來彌補(bǔ)丟失的圖片化722。 視頻譯碼設(shè)備可W復(fù)制化707、化747、和/或錯(cuò)誤隱藏的化722來彌補(bǔ)丟失的圖片化727。因 為化727可W被化717、化737、和/或化767參考，所W丟失化727可能導(dǎo)致化717、化737、 EL757、EL767和/或化777的錯(cuò)誤傳播。
[0069] 圖7D是化和化中的參考圖片丟失的示例，其中針對化和化有不同的GOP尺寸?；?化的GOP可W分別為八個(gè)和四個(gè)。EL的基礎(chǔ)QP值可W與其他示例相同。在示例圖片序列793 中，視頻譯碼設(shè)備可W例如根據(jù)SHVC的測試條件將增量QP應(yīng)用到不同時(shí)間等級中的圖片。 圖7D中的圖片化748的QP可W低于圖7C中的圖片化747的QP。視頻譯碼設(shè)備可W選擇圖7D中 的化748用于EC。
[0070] 圖7E是具有I-P-P-P譯碼結(jié)構(gòu)的圖片丟失的示例的圖。如果圖片化729丟失，則圖 片化719和/或圖片化724可W是用于圖片復(fù)制的候選。在示例圖片序列794中，視頻譯碼設(shè) 備可W復(fù)制圖片化719和/或圖片化724W補(bǔ)償丟失的圖片化729。
[0071] 在圖7A-E的示例中，如果視頻譯碼設(shè)備(例如，視頻解碼設(shè)備)針對丟失的圖片來 復(fù)制具有最小差異(例如，絕對差和(SAD))的圖片，則可W減小錯(cuò)誤傳播。視頻譯碼設(shè)備可 W選擇與丟失的圖片具有最小差異的圖片W用于通過容易出錯(cuò)的網(wǎng)絡(luò)進(jìn)行視頻流傳輸。
[0072] 視頻譯碼設(shè)備可將EC模式用于可縮放視頻譯碼(SVC)。例如，當(dāng)化中的圖片在傳輸 期間被破壞時(shí)，視頻譯碼設(shè)備(諸如視頻解碼設(shè)備)可W使用化中的圖片來彌補(bǔ)丟失的化圖 片。對于EC，視頻譯碼設(shè)備可W使用較低層圖片來應(yīng)用上采樣。對于EC，視頻譯碼設(shè)備可使 用相同層圖片來應(yīng)用運(yùn)動(dòng)補(bǔ)償。例如，視頻譯碼設(shè)備（諸如視頻解碼設(shè)備）可在層間圖片 (ILP)緩沖器處準(zhǔn)備上采樣的較低層圖片。EC模式可W利用運(yùn)動(dòng)向量(MV)、譯碼單元(CU) 和/或宏塊(MB)級運(yùn)動(dòng)補(bǔ)償和復(fù)制。EC模式包括但不限于圖片復(fù)制(PC)、時(shí)間直接(TD)、運(yùn) 動(dòng)復(fù)制(MC)、基礎(chǔ)層跳過(BLSkip:運(yùn)動(dòng)與殘差上采樣)和/或重構(gòu)的化上采樣(RU)。
[0073] 圖8是圖片復(fù)制的示例的圖。在示例圖片序列800中，視頻解碼設(shè)備可W被配置為 利用圖片復(fù)制(PC)進(jìn)行錯(cuò)誤隱藏。在PC錯(cuò)誤隱藏中，視頻譯碼設(shè)備可W從圖片802和/或從 參考圖片列表(RPL)中的圖片842中復(fù)制隱藏圖片。
[0074] 圖9是用于B圖片的時(shí)間直接的示例的圖。視頻譯碼設(shè)備可W利用用于B圖片的時(shí) 間直接(TD)錯(cuò)誤隱藏。TD(例如，時(shí)間直接MV生成)可W是內(nèi)層E對莫式。譯碼單元(CU)(例如， 或MB)可W從同一層處并置的CU (例如或MB)接收和/或縮放MV，例如如圖9中所示。例如，可 W根據(jù)圖片的時(shí)間距離來縮放MV。例如，視頻譯碼設(shè)備可通過使用圖片順序計(jì)數(shù)(POC)差別 (例如時(shí)間距離)來從MV。930縮放MV 0 910和MVi 920。視頻譯碼設(shè)備可W將TD用于SVC的層 (例如，每一層）中的B圖片。
[0075] 視頻譯碼設(shè)備可W利用運(yùn)動(dòng)復(fù)制(MC)進(jìn)行錯(cuò)誤隱藏。視頻譯碼設(shè)備可W將MC應(yīng)用 于圖片(例如，I和/或P圖片），例如，當(dāng)TD錯(cuò)誤隱藏適用于丟失的圖片時(shí)。PC錯(cuò)誤隱藏可能對 丟失的關(guān)鍵圖片而言不是很有效，例如由于兩個(gè)關(guān)鍵圖片的距離取決于GOP尺寸。在MC錯(cuò)誤 隱藏中，視頻譯碼設(shè)備可W通過復(fù)制之前的關(guān)鍵圖片的運(yùn)動(dòng)場來重新生成一個(gè)或多個(gè)MV， W獲得針對丟失圖片的更準(zhǔn)確的隱藏圖片。視頻譯碼設(shè)備可W使用MC來修復(fù)基礎(chǔ)層關(guān)鍵圖 片的丟失。視頻譯碼設(shè)備可W使用MC來修復(fù)丟失基礎(chǔ)層圖片的增強(qiáng)層的圖片的丟失。
[0076] 視頻譯碼設(shè)備可W利用基礎(chǔ)層跳過(BLSkip:運(yùn)動(dòng)與殘差上采樣)進(jìn)行錯(cuò)誤隱藏。 化化ip可W是層間EC模式。BLSkip可W將殘差上采樣和/或MV放大(upscaling)用于化中的 丟失的圖片。例如，如果化中的圖片丟失，視頻譯碼設(shè)備可W使用殘差上采樣來上采樣化的 殘差。該視頻譯碼設(shè)備可使用放大后的運(yùn)動(dòng)場來在化處進(jìn)行運(yùn)動(dòng)補(bǔ)償。
[0077] 視頻譯碼設(shè)備可利用重構(gòu)化上采樣(抓)進(jìn)行錯(cuò)誤隱藏。在RU中，視頻譯碼設(shè)備可 W上采樣重構(gòu)后的化圖片W用于化處的丟失的圖片。
[0078] 視頻譯碼設(shè)備可W利用化Skip巧D進(jìn)行錯(cuò)誤隱藏。如果化和化圖片同時(shí)丟失，視頻 譯碼設(shè)備可W使用TD生成用于BL圖片的MV。視頻譯碼設(shè)備可W針對EL中的丟失圖片應(yīng)用 BLSkip。
[0079] 采用EC的解碼后的視頻質(zhì)量可W根據(jù)視頻序列的特性而變化，該特性例如諸如為 比特率、運(yùn)動(dòng)、場景變化、亮度等。視頻解碼設(shè)備在沒有原始圖片（例如未編碼的圖片，例如 WYUV格式表示的）的情況下可能無法選擇最佳EC模式(例如，提供最小差異的EC模式）。視 頻解碼設(shè)備可能無法保證針對某丟失的圖片選擇的E對莫式是最佳可能的選擇(例如提供最 小差異的E對莫式）。
[0080] 視頻譯碼設(shè)備可W使用E-ILR模式1。在E-ILR模式1中，視頻譯碼設(shè)備可W通過給 上采樣的化圖片添加運(yùn)動(dòng)補(bǔ)償殘差來導(dǎo)出增強(qiáng)的層間參考圖片，例如如在PCTUS2014/ 032904中描述的，其全部內(nèi)容通過引用的方式結(jié)合于此。例如，根據(jù)E-ILR模式1的E-ILR圖 片可W由視頻譯碼設(shè)備來形成，并且可W用于相應(yīng)EL圖片的錯(cuò)誤隱藏(例如通過復(fù)制該E-ILR圖片）。
[0081] 視頻譯碼設(shè)備可利用E-ILR模式2。在E-ILR模式2中，視頻譯碼設(shè)備可W通過對增 強(qiáng)層圖片進(jìn)行高通濾波、對基礎(chǔ)層圖片進(jìn)行低通濾波并將運(yùn)兩個(gè)得到的濾波后的圖片加到 一起來導(dǎo)出增強(qiáng)的層間參考圖片，如在PCT/US2014/57285中描述的，其全部內(nèi)容通過引用 的方式結(jié)合于此。例如，根據(jù)E-ILR模式2的E-ILR圖片可W由視頻譯碼設(shè)備形成，并且可W 用于相應(yīng)的化圖片的錯(cuò)誤隱藏(例如，通過復(fù)制E-ILR圖片）。
[0082] 視頻譯碼設(shè)備可使用使用PC的EC模式來復(fù)制丟失圖片的相鄰圖片中的一個(gè)或多 個(gè)，例如如表1中所示。如果一個(gè)化圖片丟失，視頻譯碼設(shè)備(例如在圖4中所示的視頻解碼 設(shè)備)可W選擇E對莫式中的一種或多種。
[0083] 表1: EC的PC示例
[0084]
[(
[0086] 視頻譯碼設(shè)備（例如視頻解碼設(shè)備)在該視頻譯碼設(shè)備不能訪問原始圖片的情況 下可能會在從多個(gè)EC模式中確定EC模式(例如，提供最小差異的EC模式)時(shí)遇到困難。視頻 譯碼設(shè)備(例如圖3所示的視頻編碼器)可W在特定的損壞圖片(例如，由于例如分組丟失而 在傳輸中可能被損壞的圖片)上模擬各種EC模式。視頻譯碼設(shè)備可W確定在特定圖片損壞 的情況下要由視頻解碼設(shè)備使用的最佳E對莫式(例如，提供最小差異的E對莫式）。
[0087] 視頻譯碼設(shè)備可W用信號發(fā)送用于視頻解碼器的一個(gè)或多個(gè)錯(cuò)誤隱藏化C)模式。 圖IOA是EC的示例的圖。圖IOB是EC模式信令的示例的圖，其中視頻編碼設(shè)備可W用信號發(fā) 送所確定的EC模式給視頻解碼設(shè)備。圖1000示出了當(dāng)在視頻比特流中沒有用信號發(fā)送EC模 式時(shí)得到的錯(cuò)誤傳播的示例。圖1050示出了當(dāng)在視頻比特流中用信號發(fā)送E對莫式時(shí)得到的 錯(cuò)誤傳播的示例。如1000和1050所示，當(dāng)在視頻比特流中用信號發(fā)送EC模式時(shí)錯(cuò)誤傳播被 降低。
[0088] 視頻譯碼設(shè)備可W使用EC模式信令來計(jì)算原始輸入YUV和使用多個(gè)EC模式（例如 EC模式預(yù)測)模擬的重構(gòu)YUV之間的差異。例如，如圖3所示，視頻編碼設(shè)備1010可W在計(jì)算 出的差異中選擇E對莫式(例如最佳EC模式）。視頻編碼設(shè)備1010可W選擇與其他測試的E對莫 式相比引入最少差異量的EC模式。選擇的E對莫式可W包括但不限于運(yùn)里描述的E對莫式的一 種或多種。視頻編碼設(shè)備1010可W用信號發(fā)送該EC模式給客戶端中的視頻解碼設(shè)備1020。 例如，視頻編碼設(shè)備1010可W通過使用補(bǔ)充增強(qiáng)信息（SEI)消息、通過將信息放在分組頭 中、通過使用分離的協(xié)議等來傳送EC模式到視頻解碼設(shè)備1020?？蒞使用本領(lǐng)域技術(shù)人員 已知的任意方式將E對莫式信息傳遞給視頻解碼設(shè)備1020。
[0089] 參照圖10,圖片1030可能在視頻比特流從視頻編碼設(shè)備1010傳輸?shù)揭曨l解碼設(shè)備 1020期間丟失。如果丟失，視頻編碼設(shè)備1010可確定用于圖片1030的EC模式，如果圖片1030 丟失的話。編碼設(shè)備1010可W在視頻比特流中用信號發(fā)送用于圖片1030的所選擇的EC模 式，如果圖片1030丟失的話。視頻解碼設(shè)備1020可W接收該視頻比特流，并確定圖片1030在 傳輸過程中丟失。視頻解碼設(shè)備1020可W將用信號發(fā)送的EC模式應(yīng)用到丟失的圖片1030。 通過視頻編碼器1010用信號發(fā)送EC模式到視頻解碼器1020W及視頻解碼器1020將所選擇 的E對莫式應(yīng)用到丟失的圖片可W降低錯(cuò)誤傳播。
[0090] EC模式信令可W W層為基礎(chǔ)而被執(zhí)行。例如，視頻編碼設(shè)備可W針對視頻流的每 個(gè)層來確定和/或用信號發(fā)送E對莫式(例如，一個(gè)EC模式）"EC模式信令可W在逐個(gè)圖片的基 礎(chǔ)上被執(zhí)行。例如，視頻編碼設(shè)備可W針對視頻流的層的一個(gè)或多個(gè)圖片（例如每個(gè)圖片） 來確定和/或用信號發(fā)送E對莫式。
[0091] 視頻譯碼設(shè)備可接收包括多個(gè)圖片的視頻輸入。視頻譯碼設(shè)備可W從視頻輸入中 的多個(gè)圖片中選擇第一圖片。視頻譯碼設(shè)備可W針對第一圖片來評估兩個(gè)或更多個(gè)錯(cuò)誤隱 藏模式。錯(cuò)誤隱藏模式可W包括圖片復(fù)制(PC)、時(shí)間直接(TD)、運(yùn)動(dòng)復(fù)制(MC)、基礎(chǔ)層跳過 (BLSkip;運(yùn)動(dòng)與殘差上采樣）、重構(gòu)的化上采樣(抓KE-ILR模式1和E-ILR模式2中的至少兩 者。
[0092] 視頻譯碼設(shè)備可W針對第一圖片從運(yùn)兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇 錯(cuò)誤隱藏模式。例如，視頻譯碼設(shè)備可W基于第一圖片和第一圖片的錯(cuò)誤隱藏版本之間的 差異來選擇錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W選擇具有最小計(jì)算差異的錯(cuò)誤隱藏模式。例 如，該差異可根據(jù)第一圖片和使用所選EC模式確定的第一圖片的錯(cuò)誤隱藏版本之間的絕對 差和(SAD)或結(jié)構(gòu)相似性(SSIM)中的一者或多者來測量。該差異可W使用第一圖片的一個(gè) 或多個(gè)顏色分量來測量。
[0093] 視頻譯碼設(shè)備可W在視頻比特流中用信號發(fā)送針對第一圖片的所選的錯(cuò)誤隱藏 模式。例如，視頻譯碼設(shè)備可W在視頻比特流的補(bǔ)充增強(qiáng)信息（SEI)消息中、在MPEG媒體傳 輸(MMT)傳輸分組中，或在MMT錯(cuò)誤隱藏模式化CM)消息中用信號發(fā)送錯(cuò)誤隱藏模式。
[0094] 視頻譯碼設(shè)備可W針對第二圖片來評估一個(gè)或多個(gè)錯(cuò)誤隱藏模式。針對第二圖片 評估的錯(cuò)誤隱藏模式可W與針對第一圖片評估的多個(gè)錯(cuò)誤隱藏模式相同或不同。該視頻譯 碼設(shè)備可W為所述第二圖片選擇錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W在視頻比特流中用信號 發(fā)送針對第二圖片的所選的錯(cuò)誤隱藏模式和針對第一圖片的所選的錯(cuò)誤隱藏模式。針對第 一圖片的所選的錯(cuò)誤隱藏模式可W與針對第二圖片的所選的錯(cuò)誤隱藏模式相同或不同。 [00%]視頻譯碼設(shè)備可接收包括多個(gè)圖片的視頻比特流。該視頻譯碼設(shè)備可W在視頻比 特流中接收針對第一圖片的錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可確定第一圖片丟失。視頻譯碼 設(shè)備可W執(zhí)行針對第一圖片的錯(cuò)誤隱藏。錯(cuò)誤隱藏可使用針對第一圖片的接收到的錯(cuò)誤隱 藏模式(例如，由視頻編碼設(shè)備確定并且在比特流中用信號發(fā)送的錯(cuò)誤隱藏模式)被執(zhí)行。 視頻譯碼設(shè)備可W在視頻比特流中接收針對第二圖片的錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可確 定第二圖片丟失。視頻譯碼設(shè)備可執(zhí)行針對第二圖片的錯(cuò)誤隱藏。錯(cuò)誤隱藏可W使用針對 第二圖片的接收到的錯(cuò)誤隱藏模式而被執(zhí)行。針對第二圖片的錯(cuò)誤隱藏模式可W與針對第 一圖片的錯(cuò)誤隱藏模式相同或不同。
[0096] 圖20是可W由視頻譯碼設(shè)備（例如，視頻編碼設(shè)備)執(zhí)行的示例EC模式信令的圖。 圖20可W適用于針對單層或可縮放多層視頻的EC模式信令。視頻譯碼設(shè)備可W被配置為在 層級執(zhí)行EC模式信令。例如，視頻譯碼設(shè)備可確定和/或用信號發(fā)送用于視頻流的一個(gè)或多 個(gè)(例如每個(gè))層的EC模式。在2001，視頻譯碼設(shè)備可W從多個(gè)EC模式選擇EC模式(例如，候 選EC模式）。視頻譯碼設(shè)備可W針對多個(gè)圖片中的每個(gè)圖片來評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏 模式。EC模式可包括但不限于圖片復(fù)制（PC)、時(shí)間直接（TD)、運(yùn)動(dòng)復(fù)制（MC)、基礎(chǔ)層跳過 (BLSkip;運(yùn)動(dòng)與殘差上采樣）、重構(gòu)后的化上采樣(RUKE-ILR模式1和/或E-ILR模式2。
[0097] 在2002,視頻譯碼設(shè)備可被配置成基于所選擇的EC模式來執(zhí)行計(jì)算。例如，視頻譯 碼設(shè)備可W比較應(yīng)用到輸入視頻流的層的一個(gè)或多個(gè)圖片的所選E對莫式間的差異。視頻譯 碼設(shè)備可W例如依據(jù)可用的E對莫式執(zhí)行對多個(gè)圖片的計(jì)算。視頻譯碼設(shè)備可W選擇當(dāng)替換 丟失的圖片時(shí)提供最佳圖片質(zhì)量的EC模式。視頻譯碼設(shè)備可W通過使用SAD、SSIM等確定可 W提供最佳圖片質(zhì)量的EC模式。視頻譯碼設(shè)備可基于第一圖片和第一圖片的錯(cuò)誤隱藏版本 之間的差異來選擇錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W選擇具有最小計(jì)算差異的錯(cuò)誤隱藏模 式。例如，視頻譯碼設(shè)備可W基于第一圖片的YUV分量和第一圖片的重構(gòu)版本的YUV分量之 間的差異來選擇錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W使用第一圖片和使用所選EC模式確定的 第一圖片的錯(cuò)誤隱藏版本的絕對差和(SAD)或結(jié)構(gòu)相似性(SSIM)來測量差異。例如，視頻譯 碼設(shè)備可W根據(jù)圖片的YUV分量和使用所選EC模式確定的圖片的重構(gòu)版本的YUV分量的絕 對差和(SAD)或結(jié)構(gòu)相似性(SSIM)來測量差異。視頻譯碼設(shè)備可W使用僅Y分量的SAD或Y、U 和V分量的SAD的加權(quán)和來測量差異。視頻譯碼設(shè)備可W選擇具有最小計(jì)算差異的錯(cuò)誤隱藏 模式。該差異可W使用第一圖片的一個(gè)或多個(gè)顏色分量來測量。
[0098] 在2003,視頻譯碼設(shè)備可確定在2002執(zhí)行的計(jì)算的結(jié)果。例如，該視頻譯碼設(shè)備可 確定用于一個(gè)或多個(gè)E對莫式的性能值。用于一個(gè)或多個(gè)E對莫式的性能值可W基于原始信號 和使用每個(gè)E對莫式的隱藏信號之間的失真。該失真可W利用均方誤差、絕對差和等被計(jì)算。 在2004,所述視頻譯碼設(shè)備可確定另一個(gè)E對莫式是否存在。如果另一個(gè)E對莫式存在，視頻譯 碼設(shè)備可W重復(fù)2001，2002,2003和2004。例如，視頻譯碼設(shè)備可W針對多個(gè)EC模式中的每 一個(gè)執(zhí)行2001，2002,2003和2004^確定多個(gè)6對莫式中的每一個(gè)的性能值。雖然并不限于運(yùn) 種，多個(gè)E對莫式可W包括本文所描述的E對莫式中的一個(gè)或多個(gè)(例如，任何組合）。
[0099] 如果另一個(gè)EC模式不存在，則在2005,視頻譯碼設(shè)備可W比較來自2003的多個(gè)性 能值。視頻譯碼設(shè)備可W比較在2003確定的性能值。視頻譯碼設(shè)備可確定用于層和/或圖片 的最佳性能值(例如，最低失真）dE對莫式可W選擇與該針對層和/或圖片的最佳性能值相關(guān) 聯(lián)的EC模式。視頻譯碼設(shè)備可將多個(gè)圖片劃分成第一圖片子集和第二圖片子集。視頻譯碼 設(shè)備可W針對多個(gè)圖片中的每個(gè)圖片來從兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò)誤 隱藏模式。針對第一圖片子集的所選的錯(cuò)誤隱藏模式可W是相同的，且針對第二圖片子集 的所選的錯(cuò)誤隱藏模式可W是相同的。該視頻譯碼設(shè)備可W在視頻比特流中用信號發(fā)送針 對第一圖片子集的所選的錯(cuò)誤隱藏模式和針對第二圖片子集的所選的錯(cuò)誤隱藏模式。如果 存在多個(gè)層，則視頻譯碼設(shè)備可W針對每個(gè)圖片選擇相同或不同的E對莫式。
[0100] 在2006,該視頻譯碼設(shè)備可W從多個(gè)結(jié)果選擇用于該層和/或圖片的最佳E對莫式。 在2007，視頻譯碼設(shè)備可確定另一層是否存在。如果另一個(gè)層存在，在2008，該視頻譯碼設(shè) 備可W將該層設(shè)置為等于當(dāng)前層加一，并針對當(dāng)前層加一重復(fù)2001,2002,2003,2004， 2005，2006，2007。該視頻譯碼設(shè)備可確定視頻輸入的較高層存在。較高層可W比包括第一 圖片的層更高。視頻譯碼設(shè)備可W從視頻輸入的較高層中的多個(gè)圖片中選擇圖片。視頻譯 碼設(shè)備可W針對較高層的所選圖片來評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W 針對來自較高層的所選圖片來從運(yùn)兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模 式。該視頻譯碼設(shè)備可W在具有針對第一圖片的錯(cuò)誤隱藏模式的視頻比特流中用信號發(fā)送 針對較高層的所選圖片的所選錯(cuò)誤隱藏模式。
[0101] 如果另一層不存在，在2009,視頻譯碼設(shè)備可W在視頻比特流中用信號發(fā)送一個(gè) 或多個(gè)E對莫式的指示。在每個(gè)層內(nèi)，可W存在多個(gè)圖片。視頻譯碼設(shè)備可W針對一個(gè)層來評 估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W從運(yùn)兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式中選擇 錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W針對該層在視頻比特流中用信號發(fā)送所選的錯(cuò)誤隱藏模 式。視頻譯碼設(shè)備可W通過計(jì)算并求和該層中每個(gè)圖片的性能值來計(jì)算一個(gè)或多個(gè)層的性 能值。計(jì)算和求和該層中的每個(gè)圖片的性能值可能會導(dǎo)致在視頻譯碼設(shè)備處的延遲。該視 頻譯碼設(shè)備可W基于在該層中的圖片的選定子集的性能值來計(jì)算每個(gè)層的性能值。視頻譯 碼設(shè)備可W將該圖片子集選為該層中第一個(gè)或更多個(gè)(例如在時(shí)域中）圖片。視頻譯碼設(shè)備 可W基于多個(gè)近來的圖片來周期性地更新該層的性能值。視頻譯碼設(shè)備可基于更新的性能 結(jié)果來選擇該層的新E對莫式。該視頻譯碼設(shè)備可W在該比特流中用信號發(fā)送該新E對莫式的 指示。
[0102] 視頻譯碼設(shè)備可W接收包括多個(gè)圖片的視頻輸入。視頻譯碼設(shè)備可W從視頻輸入 中的多個(gè)圖片選擇第一圖片。視頻譯碼設(shè)備可W針對第一圖片來評估兩個(gè)或更多個(gè)錯(cuò)誤隱 藏模式。視頻譯碼設(shè)備可W針對第一圖片來從運(yùn)兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇 錯(cuò)誤隱藏模式。該視頻譯碼設(shè)備可W在視頻比特流中用信號發(fā)送針對第一圖片的所選擇的 錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W從視頻輸入中的多個(gè)圖片選擇第二圖片。視頻譯碼設(shè)備 可W針對第二圖片來評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式。視頻譯碼設(shè)備可W針對第二圖片而 從運(yùn)兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式。該視頻譯碼設(shè)備可W在視頻 比特流中用信號發(fā)送針對第二圖片的所選擇的錯(cuò)誤隱藏模式。針對第一圖片的所選的錯(cuò)誤 隱藏模式可W與針對第二圖片的所選的錯(cuò)誤隱藏模式不同。針對第一圖片的所選的錯(cuò)誤隱 藏模式可W與針對第二圖片的所選的錯(cuò)誤隱藏模式相同。
[0103] 圖21是示例E對莫式信令的圖。圖21可W是用于單層或可縮放多層視頻比特流的可 應(yīng)用的E對莫式信令。視頻譯碼設(shè)備可W被配置成在圖片級執(zhí)行EC模式信令。例如，該視頻譯 碼設(shè)備可確定和/或用信號發(fā)送用于視頻流的一個(gè)或多個(gè)層(例如每個(gè)層)的一個(gè)或多個(gè)圖 片(例如每個(gè)圖片）的E對莫式。在2101，視頻譯碼設(shè)備可W針對EC從層選擇圖片。E對莫式可包 括但不限于圖片復(fù)制(PC)、時(shí)間直接(TD)、運(yùn)動(dòng)復(fù)制(MC)、基礎(chǔ)層跳過(BLSkip;運(yùn)動(dòng)與殘差 上采樣）、重構(gòu)后的化上采樣(RUKE-ILR模式1和/或E-ILR模式2。在2102,視頻譯碼設(shè)備可 W從多個(gè)E對莫式選擇E對莫式。
[0104] 在2103,該視頻譯碼設(shè)備可W被配置為執(zhí)行計(jì)算。例如，在2103,該視頻譯碼設(shè)備 可W將EC模式應(yīng)用到來自2101的所選擇圖片。例如，視頻譯碼設(shè)備可W比較應(yīng)用到輸入視 頻流的層的一個(gè)或多個(gè)圖片的所選EC模式間的差異。視頻譯碼設(shè)備可基于第一圖片（例如 原始第一圖片或第一圖片的已編碼版本)與第一圖片的錯(cuò)誤隱藏版本之間的差異來選擇錯(cuò) 誤隱藏模式。視頻譯碼設(shè)備可W選擇具有最小計(jì)算差異的錯(cuò)誤隱藏模式。例如，視頻譯碼設(shè) 備可W基于圖片的YUV分量和第一圖片的重構(gòu)版本的YUV分量之間的差異來選擇錯(cuò)誤隱藏 模式。該視頻譯碼設(shè)備可W使用第一圖片和使用所選EC模式確定的第一圖片的錯(cuò)誤隱藏版 本的絕對差和(SAD)或結(jié)構(gòu)相似性(SSIM)來測量差異。例如，視頻譯碼設(shè)備可W根據(jù)該圖片 的YUV分量和使用所選E對莫式確定的該圖片的重構(gòu)版本的YUV分量的絕對差和(SAD)或結(jié)構(gòu) 相似性(SSIM)來測量差異。視頻譯碼設(shè)備可W使用僅Y分量的SAD或Y、U和V分量的SAD的加 權(quán)和來測量差異。視頻譯碼設(shè)備可W選擇具有最小計(jì)算差異的錯(cuò)誤隱藏模式。
[0105] 在2104,視頻譯碼設(shè)備可確定在2103執(zhí)行的計(jì)算的結(jié)果。在2105,視頻譯碼設(shè)備可 確定另一個(gè)EC模式是否存在。如果另一個(gè)EC模式存在，視頻譯碼設(shè)備可W針對多個(gè)EC模式 重復(fù)2102，2103，2104和2105。如果另一個(gè)EC模式不存在，則在2106，視頻譯碼設(shè)備可W比較 來自2104的該多個(gè)結(jié)果。在2107,視頻譯碼設(shè)備可W從運(yùn)多個(gè)結(jié)果中選擇用于所選圖片的 最佳的EC模式。在2108,該視頻譯碼設(shè)備可確定另一個(gè)圖片是否存在。如果另一圖片存在， 視頻譯碼設(shè)備可W重復(fù)2101,2102,2103,2104,2105,2106,2107和2108。如果在2108另一圖 片不存在，則在2109,視頻譯碼設(shè)備可確定另一個(gè)層是否存在。如果另一個(gè)層存在，則在 2109,該視頻譯碼設(shè)備可W將該層設(shè)置為等于當(dāng)前層加一，并針對當(dāng)前層加一重復(fù)2101， 2102,2103,2104,2105,2106,2107,2108和 2109。如果另一層不存在，則在 2111，視頻譯碼設(shè) 備可W在視頻比特流中用信號發(fā)送一個(gè)或多個(gè)E對莫式的指示。
[0106] 圖11是從視頻編碼設(shè)備角度的示例EC模式信令的圖。在1101，視頻編碼設(shè)備可W 處理E對莫式信令W提供E對莫式信息到視頻譯碼設(shè)備，諸如視頻解碼設(shè)備。在1101，在多個(gè)層 可用的情況下視頻譯碼設(shè)備可W從基礎(chǔ)層(例如層0)開始EC模式選擇。在1102,視頻編碼設(shè) 備可將當(dāng)前層設(shè)置為0,例如，從最低層開始。在1103,視頻編碼設(shè)備可W讀取當(dāng)前層的原始 輸入圖片。在1104,視頻編碼設(shè)備可W從參考圖片列表L0,即RPLO(O),讀取第一時(shí)間重構(gòu)圖 片和/或它們的QP。在1104,視頻編碼設(shè)備可W讀取LI,即R化1(0)和/或它們的QP。在1104， 視頻編碼設(shè)備可W從ILP讀取處理的重構(gòu)的參考層(例如較低層)圖片。
[0107] 在1105,視頻編碼設(shè)備可W選擇用于原始輸入圖片的隱藏的最佳圖片。例如，該視 頻編碼設(shè)備可W例如通過測量失真(諸如絕對差和(SAD)和/或結(jié)構(gòu)相似性(SSIM))來比較 RPLO(O)、RPL1(0)和/或ILP間的差異。視頻編碼設(shè)備可W選擇具有最低差異的圖片作為用 于隱藏的最佳圖片。視頻編碼設(shè)備可W在1105的比較中使用Y分量的SAD(例如僅Y分量的 SAD)。例如，該比較可W使用Y、U和/或V分量的SAD的加權(quán)和。例如，視頻編碼設(shè)備可W比較 用于編碼重構(gòu)圖片的QP值。視頻編碼設(shè)備可W選擇具有最低QP的圖片作為用于隱藏的最佳 圖片。
[0108] 在1106，視頻編碼設(shè)備可確定參考層是否存在。如果參考層存在，在1107，視頻編 碼設(shè)備可W從ILP讀取處理的重構(gòu)的參考層(例如，較低層）。如果參考層不存在，則視頻譯 碼設(shè)備可能不能從ILP讀取處理的重構(gòu)的參考層(例如，較低層）圖片。如果參考層存在或不 存在，在1108,視頻編碼設(shè)備可W針對EC選擇具有最小差異的一個(gè)或多個(gè)圖片。在1108中， 視頻編碼設(shè)備可W測量SADW找到最小差異圖片。
[0109] 在1109,視頻編碼設(shè)備可確定較高層是否存在。如果較高層存在，則視頻編碼設(shè)備 將針對該較高層重復(fù)1103,1104,1105,1106,1107和1108。例如，如果依賴層(例如，較高層） 可用，則視頻編碼設(shè)備可W增加層號，并重復(fù)1103，1104，1105，1106，1107和1108。如果較高 層不存在，則視頻編碼設(shè)備可W在1111用信號發(fā)送選擇的/當(dāng)前的E對莫式(例如用于所有層 的EC模式）。選擇的/當(dāng)前的E對莫式可W包括一個(gè)或多個(gè)EC模式。選擇的/當(dāng)前的E對莫式可W 是兩個(gè)或更多個(gè)E對莫式的集合。如果較高層不存在，在1110,視頻編碼設(shè)備可確定不同于之 前EC模式的E對莫式是否存在。在1111，如果決定的E對莫式不同于之前的E對莫式，則視頻編碼 設(shè)備可W用信號發(fā)送選擇的/當(dāng)前的E對莫式。
[0110] 圖12是從視頻解碼設(shè)備角度的示例E對莫式信令的圖。視頻解碼設(shè)備可W處理EC模 式信令。視頻解碼設(shè)備可接收單層或可縮放多層視頻比特流。在1201，視頻解碼設(shè)備可W開 始EC模塊W確定用信號發(fā)送的E對莫式。在1201，視頻解碼設(shè)備可W開始E對莫式處理。運(yùn)可W 在比特流正被解碼時(shí)或之后被執(zhí)行。在1201，視頻解碼設(shè)備可讀取由視頻編碼設(shè)備生成的 用信號發(fā)送的E對莫式。
[0111] 在1202,視頻解碼設(shè)備可W將當(dāng)前層設(shè)置等于0,例如，由此視頻解碼設(shè)備可W在 最低層開始。視頻譯碼設(shè)備在視頻譯碼設(shè)備從該層開始時(shí)可能不能完全對層進(jìn)行解碼。如 果最低層不為0,在1202視頻解碼設(shè)備可W將當(dāng)前層設(shè)置成等于最低層。在1202,視頻解碼 設(shè)備可將EC模式設(shè)置為默認(rèn)EC模式。例如，如果視頻解碼設(shè)備沒有接收到EC模式信號且圖 片丟失，視頻解碼可W將默認(rèn)EC模式應(yīng)用到丟失圖片。默認(rèn)EC模式可W是運(yùn)里所描述的EC 模式之一。默認(rèn)EC模式可W是圖片復(fù)制（PC )、時(shí)間直接（TD )、運(yùn)動(dòng)復(fù)制（MC )、基礎(chǔ)層跳過 (BLSkip;運(yùn)動(dòng)與殘差上采樣）、重構(gòu)后的化上采樣(RU)、E-ILR模式1和/或E-ILR模式2中的 一者。
[0112] 在1203,視頻解碼設(shè)備可確定圖片是否丟失。如果圖片沒有丟失，在1207,視頻解 碼設(shè)備可確定較高層是否存在。如果較高層存在，則視頻解碼設(shè)備可W進(jìn)行到1203,如果圖 片丟失，則在1204視頻解碼設(shè)備可確定在視頻比特流中是否用信號發(fā)送了 EC模式。該EC模 式可適用于當(dāng)前層（例如，如果基于層的EC模式信令被使用）和/或EC模式可適用于當(dāng)前圖 片（例如，如果基于圖片的E對莫式信令被使用）。如果有用信號發(fā)送的EC模式且如果圖片丟 失，則在1205,視頻解碼設(shè)備可將E對莫式設(shè)置為用信號發(fā)送的E對莫式。在1206視頻解碼設(shè)備 可W根據(jù)該用信號發(fā)送的E對莫式進(jìn)行EC(例如根據(jù)運(yùn)里描述E對莫式之一）。如果在1204沒有 用信號發(fā)送EC模式，視頻解碼設(shè)備可W根據(jù)當(dāng)前E對莫式(例如默認(rèn)E對莫式)進(jìn)行EC。在1207， 視頻解碼設(shè)備可確定較高層是否存在。如果較高層存在，則視頻解碼設(shè)備可W重復(fù)1203、 1204、1205、1206、1207 的一者或多者。
[0113] 視頻譯碼設(shè)備可W使用錯(cuò)誤模式文件來評估EC模式信令的性能。該錯(cuò)誤模式文件 可W具有丟失的POC數(shù)。視頻譯碼設(shè)備(諸如如圖4所示的視頻解碼設(shè)備)可W針對POC進(jìn)行 EC。
[0114] 雖然在圖片級和針對SVC進(jìn)行描述，但是視頻譯碼設(shè)備可W在片級和/或針對單層 視頻譯碼來應(yīng)用E對莫式信令。
[0115] 圖13是丟失的兩個(gè)連續(xù)圖片的示例的圖。視頻譯碼設(shè)備1300(諸如圖3中示出的視 頻編碼器)可W模擬多個(gè)丟失的圖片，例如，如圖13所示。如果視頻編碼設(shè)備1300具有模擬 和決定針對丟失的圖片化1325復(fù)制化1345則該視頻編碼設(shè)備可W用替換化1325的化 1305、BL 1312和/或化1345來模擬針對丟失的化1325的EC模式。視頻編碼設(shè)備1300可W 模擬用于兩個(gè)連續(xù)的丟失的圖片的EC模式。視頻編碼設(shè)備1300在圖片的組合被損壞或丟失 的情況下可W選擇要被使用的隱藏模式和/或圖片的最佳組合，并可W在EC模式信令中用 信號發(fā)送隱藏模式和/或圖片的該選擇的組合。視頻編碼設(shè)備1300可W使用該模擬的EC模 式用于低延遲配置。
[0116] 視頻譯碼設(shè)備可W跳過EC模式信令。圖14是EC模式信令的示例的圖。視頻譯碼設(shè) 備(諸如圖3中示出的視頻編碼器)可W用信號發(fā)送用于丟失的化和/或化圖片的E對莫式(例 如提供最小差異的EC模式）（例如化^C_SET:用于化的最優(yōu)EC模式，用于化的最優(yōu)EC模式）， 如果用于化和/或化的最優(yōu)EC模式彼此不同的話，例如在圖7C和/或圖7D的情況中。用于化 和/或化的最優(yōu)EC模式可W被表示為化tECJLn和化巧C_ELn，其中n可W是當(dāng)前圖片的POC 號。在1401，該視頻編碼設(shè)備可W計(jì)算用于化和/或化的最優(yōu)E對莫式。在1402,該視頻編碼設(shè) 備可W讀取布爾選項(xiàng)。例如如果當(dāng)前圖片和之前圖片共享相同或相似的EC模式信令，則視 頻編碼設(shè)備可W設(shè)置布爾選項(xiàng)。
[0117] 在1403,如果兩個(gè)E對莫式不同，則視頻編碼設(shè)備可W在1404用信號發(fā)送每種模式。 在1403,如果兩個(gè)EC模式是相同的，則視頻編碼設(shè)備可W在1405用信號發(fā)送一個(gè)模式。在 1406,如果當(dāng)前圖片的所選的EC模式與之前圖片的EC模式相同，則在1407視頻編碼設(shè)備可 W不用信號發(fā)送當(dāng)前圖片的最優(yōu)EC模式。如果視頻編碼設(shè)備不用信號發(fā)送當(dāng)前圖片的最優(yōu) EC模式，則可W降低信令開銷。如果在1406當(dāng)前圖片的所選EC模式不同于之前圖片的EC模 式，則視頻編碼設(shè)備可W在1408用信號發(fā)送當(dāng)前圖片的最優(yōu)EC模式。視頻編碼設(shè)備可W根 據(jù)分組丟失率(PLR)和/或目標(biāo)比特率改變信令。例如，視頻編碼設(shè)備可W使用布爾標(biāo)志(例 如，SameSigSkip,運(yùn)意味著'固瞄相同EC模式信令'）。表巧日圖14示出了當(dāng)有兩個(gè)層(例如化 和化)時(shí)具有'跳過相同E對莫式信令'的E對莫式的偽代碼和信令的示例。
[0118] 表2:信令E對莫式的偽代碼的示例
[0119]
[0120] 圖15是示例EC模式信令環(huán)境的圖。圖1500示出了視頻編碼器1502和視頻解碼器 1504之間的EC模式選擇和信令的示例。視頻譯碼設(shè)備(諸如圖3中所示的視頻編碼設(shè)備和/ 或圖4中示出的視頻解碼設(shè)備)可W在例如如圖15所示的視頻編碼器和解碼器(例如修改的 S歷視頻編碼器/解碼器）中實(shí)施最優(yōu)E對莫式確定模塊。視頻編碼器1502可確定EC模式。E對莫 式可W是圖片復(fù)制(PC)，時(shí)間直接(TD)，運(yùn)動(dòng)復(fù)制(MC)，基礎(chǔ)層跳過(BLSkip;運(yùn)動(dòng)與殘差上 采樣），重構(gòu)后的化上采樣(RU) ,E-ILR模式1和/或E-ILR模式2。視頻編碼器1502可W用信號 發(fā)送所確定的EC模式到視頻解碼器1504。視頻解碼器1504可從視頻編碼器接收信號。視頻 解碼器1504可W包括E對莫塊。
[0121] 表3示出了示例實(shí)施和測試條件。
[0122] 表3:示例實(shí)施和測試條件
[01,31
[0124]
[0125] 視頻譯碼設(shè)備(諸如視頻編碼設(shè)備(例如甜M 2.0編碼器））可被修改W計(jì)算最優(yōu)EC 模式。視頻譯碼設(shè)備(諸如視頻解碼設(shè)備(例如，S歷2.0解碼器））可被修改W提供EC模塊。 表4示出了具有其內(nèi)部表的修改的編碼器的示例。視頻編碼設(shè)備可W計(jì)算原始YUV(Org.)和 相鄰參考圖片之間的平均差(模式0:之前圖片(Picprev),模式1:下一個(gè)圖片(Picnext),模 式2:上采樣的化圖片(PicBLup)，等等）。視頻編碼設(shè)備可W決定最優(yōu)EC模式。視頻編碼設(shè)備 可W用信號發(fā)送該最優(yōu)E對莫式。
[01%]表4:最優(yōu)E對莫式計(jì)算
[0127]
[0128] 視頻譯碼設(shè)備可W執(zhí)行用于非參考和/或參考的圖片的圖片丟棄測試。表5示出了 E對莫式之間的PSNR增益的示例。在測試序列中，所提出的邸模式(例如EC4)的最大平均PSNR 增益在丟失的圖片中可W在4.94地到8.60地之間，而最小平均Y-PSNR增益在2倍空間縮放 性中可W大約是0.55地。來自化的均勻圖片副本(例如，EC0，EC1和EC3)可W還不是最優(yōu)EC 模式。最小增益來自EC模式2化C2)，且運(yùn)是因?yàn)樯喜蓸拥牟⒅玫闹貥?gòu)后的化圖片大多被選 擇具有最小差異。
[0129] 表6示出了 EC模式之間的平均PSNR增益的示例。視頻譯碼設(shè)備可W使用測試序列 來測試視頻會議場景。由于對序列A的最優(yōu)EC模式可W具有較少數(shù)量的EC模式2，平均PSNR 增益可W大于表5中的增益。提出的抓模式和EC模式2的比較顯示了比表6小的數(shù)。因?yàn)榛疪 5%被應(yīng)用到該測試，對PSNR增益求平均不會提供準(zhǔn)確的比較?？蒞針對具有丟失的圖片的 期內(nèi)和/或GOP測量PSNR增益。錯(cuò)誤傳播可W被找到和/或2倍空間縮放性的平均Y-PSNR增益 可W從0.81地到1.03地。雖然表5中的PSNR值可W針對非參考的丟失的圖片，表7中的PSNR 值可W是具有錯(cuò)誤傳播的期內(nèi)和GOP周期的平均數(shù)。表7中的PSNR值可W不大于表5中的值。
[0130] 表5:針對非參考的圖片的E對莫式之間的PSNR增益示例
[0131]
[0132] 圖16是錯(cuò)誤模式文件生成的示例的圖。圖片1650示出了在錯(cuò)誤模式文件中丟失的 圖片1604。如在1650中所示，圖片1604存在于基礎(chǔ)層。圖片1604在增強(qiáng)層中丟失。通過使用 測試序列，視頻譯碼設(shè)備可能生成錯(cuò)誤模式文件。在錯(cuò)誤模式文件中，位于第二時(shí)間等級中 的兩個(gè)圖片(例如，POC 4)可W每40張圖片被丟棄，并且PLR可為約4% (例如，如圖16中）。
[0133] 表6示出了針對參考的圖片的EC模式（例如除了EC模式2)之間的平均Y-PSNR增益 的示例。平均質(zhì)量改善可W是2地的PSNR。
[0134] 表6:針對參考的圖片的E對莫式之間的平均PSNR增益的示例(序列A)
[0135]
[C
[C
[013引圖17是EC模式2和EC模式4之間的示例PSNR比較的圖。在該示例中，POC 68和POC 84可W根據(jù)該錯(cuò)誤模式文件被丟棄。如圖17所示，當(dāng)POC 68和POC 84被丟棄時(shí)，提出的E對莫 式(例如，EC模式4;EC4)相比于E對莫式2可W顯示更好的PSNR。由于參考的圖片運(yùn)時(shí)被放棄， 因此出現(xiàn)了錯(cuò)誤傳播，運(yùn)可能降低后面的圖片質(zhì)量。表7提供了 EC4和EC2之間的PSNR增益的 示例。
[0139]視頻譯碼設(shè)備可W使用EC模式信令來提高視頻質(zhì)量，例如，當(dāng)視頻譯碼設(shè)備通過 易出錯(cuò)網(wǎng)絡(luò)傳送多媒體數(shù)據(jù)時(shí)。視頻譯碼設(shè)備可W在多媒體服務(wù)器和客戶端(例如WTRU)之 間用信號發(fā)送提出的EC模式。例如，可在視頻標(biāo)準(zhǔn)（例如，AVC，SVC，肥VC和細(xì)VC)中定義的 SEI消息可W攜帶該E對莫式。視頻譯碼設(shè)備可W使用MMT分組頭和/或MMT消息協(xié)議來用信號 發(fā)送該EC模式。視頻譯碼設(shè)備可W用信號發(fā)送所選擇的POC數(shù)和/或增量POC數(shù)(例如，針對 PC而言，當(dāng)前的POC-選擇的POC)。
[0140] 視頻譯碼設(shè)備可W使用SEI消息來用信號發(fā)送EC模式(例如，在皿VC，SHVC等中）。 視頻譯碼設(shè)備可W使用SEI消息（例如新SEI消息）提供QoS信息（例如，EC_mode)。視頻譯碼 設(shè)備可將EC模式設(shè)置到SEI消息，例如，如表8、表9和/或表10中所示的。視頻譯碼設(shè)備可W 在SEI凈荷語法中添力陽C_mode。沈I類型數(shù)(例如，140)可W例如根據(jù)該標(biāo)準(zhǔn)被改變。視頻譯 碼設(shè)備可W使用基于SEI消息的E對莫式信令來提供多媒體服務(wù)器和客戶端之間的一般通信 信道。由應(yīng)用開發(fā)人員開發(fā)的E對莫式可W使用用戶定義的EC模式。例如，在表10中，從9到15 的EC模式可W用于用戶定義的EC模式。視頻譯碼設(shè)備可W實(shí)施用于該服務(wù)的EC模式。視頻 譯碼設(shè)備可W在用戶定義的E對莫式中定義E對莫式。
[0141] 表8: SEI凈荷語法的示例
[0142]
[0143]
[0144]
[0145]
[0146]
[0147] 視頻譯碼設(shè)備可W使用MPEG媒體傳輸(MMT)用信號發(fā)送EC模式。視頻譯碼設(shè)備可 W使用MMT傳輸分組的語法(例如新語法)提供QoS信息化C_mode)。視頻譯碼設(shè)備可W將EC 模式設(shè)置為匪T傳輸分組，例如，如表11中所不。視頻譯碼設(shè)備可W在匪1'_9日。461:(111'_分 組)語法中添加 ECjnode，例如如表11中所示。視頻譯碼設(shè)備可W改變語法位置。
[0148] 表11:匪T傳輸分組語法的不例
[0149]
[0150] 視頻詳媽巧備可使用MMT錯(cuò)誤隱臧模巧（ECM)巧懇用信號發(fā)送EC模巧。圖18A是 使用可支持的EC模式的組播群組的示例的圖。圖18B是使用可支持的EC模式的示例會話發(fā) 起的圖。視頻譯碼設(shè)備可W使用由多媒體系統(tǒng)（例如，MPEG-4系統(tǒng)，MPEG-H系統(tǒng)匪T等）定義 的消息在多媒體服務(wù)器1810和客戶端1820/1822/1824之間用信號發(fā)送E對莫式。例如，服務(wù) 器1810和客戶端1820/1822/1824可W交換可支持EC模式(例如EC模式候選)的信息?？蛻舳?1820/1822/1824可W例如在會話發(fā)起時(shí)請求具有客戶端1820/1822/1824能夠支持的EC模 式列表的多媒體服務(wù)。服務(wù)器1810可W決定接收到的列表中的可支持的EC模式。如果服務(wù) 器1810正在組播媒體內(nèi)容給一個(gè)或多個(gè)訂閱的客戶端，服務(wù)器1810可W選擇在那些客戶端 1820/1822/1824之間共享的EC模式。如果服務(wù)器1810正在單播媒體內(nèi)容給一個(gè)客戶端 1824,那么服務(wù)器可W例如根據(jù)其EC模式預(yù)測的計(jì)算復(fù)雜性(例如如在圖18A和圖18B中所 示)選擇EC模式(例如，提供最小差異的EC模式）。如果服務(wù)器1810正廣播媒體內(nèi)容，則服務(wù) 器1810可生成具有不同優(yōu)先級的多個(gè)推薦的EC模式。例如，如果服務(wù)器1810生成按照EC模 式的優(yōu)先列表(例如{2,3，1})的EC模式，則該生成的EC模式可W指示客戶端1824可W在客 戶端1824支持EC模式2時(shí)首先使用EC模式2。如果客戶端1824不支持EC模式2,由服務(wù)器1810 生成的EC模式的優(yōu)先列表可向客戶端1824指示使用EC模式3和/或EC模式1。
[0151] 如果服務(wù)器1810向客戶端1824傳送預(yù)編碼視頻，則服務(wù)器1810可W在會話發(fā)起時(shí) 間之前向客戶端1824傳送全部圖片的EC模式（例如，所有的EC模式）。服務(wù)器1810可傳送具 有不同時(shí)間分辨率(例如，關(guān)于每一G0P，期內(nèi)，等)的多個(gè)圖片的E對莫式。
[0152] 視頻譯碼設(shè)備可W使用具有會話描述協(xié)議(SDP)的會話發(fā)起協(xié)議(SIP)來用于握 手過程。SDP的當(dāng)前媒體描述可W包括媒體名稱和/或傳輸?shù)刂?、媒體標(biāo)題、連接信息、帶寬 信息、加密密鑰，等等。視頻譯碼設(shè)備可W通過當(dāng)前SDP和/或擴(kuò)展的SDP攜帶EC模式候選。 SDP可W被擴(kuò)展，或例如，如表12所示。
[0153] 表12:在IETF中定義的SDP的擴(kuò)展的示例 [01541
[01巧」視頻譯碼設(shè)備可W例如除了 SDP外還可W通過類SIP協(xié)議(例如新的類SIP協(xié)議)攜 帶E對莫式候選。
[0156] 服務(wù)器可W例如在握手過程之后傳送一個(gè)或多個(gè)EC模式給客戶端。視頻譯碼設(shè)備 可W使用ECM消息(例如，新的ECM消息）。
[0157] 視頻譯碼設(shè)備可W使用MMT ECM消息提供用于MMT接收實(shí)體(例如在客戶端處的解 碼器)的E對莫式信息。視頻譯碼設(shè)備可W分配消息標(biāo)識符(例如，message_id)的值，例如，如 表13所示。視頻譯碼設(shè)備可W定義EC消息的語義的語法，例如，如表14中所示。
[015引表13:消息標(biāo)識符（例如，message_id)值的示例 [0159]
[01W」 巧14: WJM巧思巧保的不例
[0161]
[0162] message_id可W指示ECM消息的ID。此字段的長度可W是16比特。
[0163] version可指示ECM消息的版本。此字段的長度可W是化k特。
[0164] length可指示從下一個(gè)字段開始到ECM消息的最后一個(gè)字節(jié)的字節(jié)計(jì)數(shù)的ECM消 息的長度。值'0'對該字段可W不是有效的。此字段的長度可W是32比特。
[01化]packet_id可?指不在MMT分組頭中的packet_id。
[0166] number of打ames可W指示具有packet_id的分組中的視頻和/或音頻帖的數(shù)量。 [0167] number of streams可W指示視頻和/或音頻流的數(shù)量。針對視頻流，視頻譯碼設(shè) 備可W使用流的數(shù)量來指示用于可縮放視頻譯碼的可縮放層數(shù)。針對音頻流，視頻譯碼設(shè) 備可W使用流的數(shù)量來指示音頻通道的數(shù)量。例如，如果視頻圖片的數(shù)量是"0"，則層數(shù)值 可W是"0"。
[016引 ec_mode可W指示錯(cuò)誤隱藏化C)模式。視頻譯碼設(shè)備可使用ec_mode來向視頻和/ 或音頻解碼設(shè)備通知該E對莫式W隱藏丟失的圖片和/或音頻塊。視頻和/或音頻解碼設(shè)備可 W使用該E對莫式，直到下一個(gè)ECM消息已到達(dá)。
[0169] Reserved可W指示預(yù)留8比特為將來使用。例如，視頻或音頻譯碼設(shè)備可W在此處 添加 last_ec_mode。視頻和/或音頻譯碼設(shè)備可W使用last_ec_mode來指示將使用的ec_ mode直到下一個(gè)ECM消息到達(dá)。
[0170] 視頻譯碼設(shè)備可W使用MPEG Green來用信號發(fā)送E對莫式。視頻譯碼設(shè)備可使用EC 模式信令來加強(qiáng)通過易出錯(cuò)環(huán)境的視頻傳輸。視頻譯碼設(shè)備可W在MPEG Green中使用E對莫 式信令，例如，W減少在某些情況下該設(shè)備的功率消耗，同時(shí)維持所感知的視頻質(zhì)量。
[0171] 支持用于IP多媒體子系統(tǒng)的多媒體電話服務(wù)(MTSI)和/或多媒體消息服務(wù)(MMS) 的客戶端可W接收E對莫式信令。視頻譯碼設(shè)備可W在編碼器側(cè)跳過某些視頻圖片W卸載視 頻編碼設(shè)備的計(jì)算工作量，例如，W減少功率消耗(例如，在編碼器和/或解碼器處）。跳過圖 片可能會導(dǎo)致在接收器側(cè)的品質(zhì)惡化。視頻解碼設(shè)備可隨機(jī)地復(fù)制之前解碼的圖片W補(bǔ)償 跳過的圖片。視頻譯碼設(shè)備可使用EC模式信令(例如，如表10中指定的）來指示視頻解碼設(shè) 備可W使用哪個(gè)特定的參考圖片來重構(gòu)跳過的圖片。例如，如果客戶端側(cè)的電池在流傳輸 應(yīng)用中電量低，視頻解碼設(shè)備針對非參考圖片可W繞過解碼過程，并應(yīng)用編碼器用信號發(fā) 送的E對莫式W省電。視頻譯碼設(shè)備可使用E對莫式信令作為規(guī)范綠色的元數(shù)據(jù)，例如，與參數(shù) 一起，如該帖中的最大像素強(qiáng)度、飽和參數(shù)、省電請求等，它們可被包括在MPEG Green中。
[0172] 圖19A是在其中可W實(shí)施一個(gè)或更多個(gè)公開的實(shí)施方式的示例通信系統(tǒng)1900的 圖。通信系統(tǒng)1900可W是向多個(gè)用戶提供內(nèi)容，例如語音、數(shù)據(jù)、視頻、消息發(fā)送、廣播等的 多接入系統(tǒng)。通信系統(tǒng)1900可W使多個(gè)無線用戶通過系統(tǒng)資源共享(包括無線帶寬)訪問運(yùn) 些內(nèi)容。例如，通信系統(tǒng)可W使用一種或多種信道接入方法，例如碼分多址(CDMA)，時(shí)分多 址（TDMA )，頻分多址(抑MA )，正交抑MA ((FDMA )，單載波FMDA (SC-抑MA)等。
[0173] 如圖19A所示，通信系統(tǒng)1900可W包括無線發(fā)射/接收單元(WTRU)1902a、1902b、 1902c、和/或1902d(其通常或整體上被稱為WTRU)，無線電接入網(wǎng)(RAN) 1903/1904/1905,核 屯、網(wǎng)1906/1907/1909,公共交換電話網(wǎng)（PSTN) 1908、因特網(wǎng)1910和其他網(wǎng)絡(luò)1912。不過應(yīng)該 理解的是，公開的實(shí)施方式考慮到了任何數(shù)量的WTRU、基站、網(wǎng)絡(luò)和/或網(wǎng)絡(luò)元件。 WTRU1902a、1902b、1902c、1902d的每一個(gè)可W是配置為在無線環(huán)境中進(jìn)行操作和/或通信 的任何類型的設(shè)備。作為示例，可W將WTRU 1902a、190化、1902c、1902d配置為發(fā)送和/或接 收無線信號，并可W包括用戶設(shè)備化E)、基站、固定或者移動(dòng)用戶單元、尋呼器、蜂窩電話、 個(gè)人數(shù)字助理(PDA)、智能電話、筆記本電腦、上網(wǎng)本、個(gè)人計(jì)算機(jī)、無線傳感器、消費(fèi)電子產(chǎn) P A-(VA-(V 口口 O
[0174] 通信系統(tǒng)1900還可W包括基站1914a和基站1914b。基站1914a、1914b的每一個(gè)都 可W是配置為與WT抓1902a、190化、1902c、1902d中的至少一個(gè)無線對接W便于接入一個(gè) 或者更多個(gè)通信網(wǎng)絡(luò)，例如核屯、網(wǎng)1906/1907/1909、因特網(wǎng)1910和/或網(wǎng)絡(luò)1912的任何設(shè)備 類型。作為示例，基站1914a、1914b可W是基站收發(fā)信臺（BTS)、節(jié)點(diǎn)B、e節(jié)點(diǎn)B、家庭節(jié)點(diǎn)B、 家庭e節(jié)點(diǎn)B、站點(diǎn)控制器、接入點(diǎn)(AP)、無線路由器等等。雖然基站1914a、1914b的每一個(gè)被 描述為單獨(dú)的元件，但是應(yīng)該理解的是，基站1914a、1914b可W包括任何數(shù)量互連的基站 和/或網(wǎng)絡(luò)元件。
[01 巧]基站 1914a可 W 是RAN 1903/1904/1905 的一部分，RAN 1903/1904/1905還可 W 包 括其他基站和/或網(wǎng)絡(luò)元件(未顯示），例如基站控制器(BSC)、無線電網(wǎng)絡(luò)控制器(RNC)、中 繼節(jié)點(diǎn)等?？蒞將基站1914a和/或基站1914b配置為在特定地理區(qū)域之內(nèi)發(fā)送和/或接收無 線信號，該區(qū)域可W被稱為小區(qū)（未顯示）。小區(qū)還可W被劃分為小區(qū)扇區(qū)。例如，與基站 1914a關(guān)聯(lián)的小區(qū)可W劃分為S個(gè)扇區(qū)。因此，在一種實(shí)施方式中，基站1914a可W包括S個(gè) 收發(fā)信機(jī)，即每一個(gè)用于小區(qū)的一個(gè)扇區(qū)。在另一種實(shí)施方式中，基站1914a可W使用多輸 入多輸出(MIMO)技術(shù)，因此可W將多個(gè)收發(fā)信機(jī)用于小區(qū)的每一個(gè)扇區(qū)。
[0176] 基站 1914a、1914b 可 W 通過空中接口 1915/1916/1917 與 WTRU 1902a、1902b、 1902c、1902d中的一個(gè)或者更多個(gè)通信，該空中接口 1915/1916/1917可W是任何合適的無 線通信鏈路(例如，射頻(RF)、微波、紅外（IR)、紫外線(UV)、可見光等）。可W使用任何合適 的無線電接入技術(shù)(RAT)來建立空中接口 1915/1916/1917。
[0177] 更具體地，如上所述，通信系統(tǒng)1900可W是多接入系統(tǒng)，并可W使用一種或者多種 信道接入方案，例如 CDMA、TDMA、FDMA、0FDMA、SC-FDMA等等。例如，RAN 1903/1904/1905中的 基站1914a和WTRU 1902a、1902b、1902c可W使用例如通用移動(dòng)電信系統(tǒng)(UMTS)陸地?zé)o線電 接入化TRA)的無線電技術(shù)，其可W使用寬帶CDMA(WCDMA)來建立空中接口 1915/1916/1917。 WCDMA可W包括例如高速分組接入化SPA)和/或演進(jìn)的HSPA化SPA+)的通信協(xié)議。HSPA可W 包括高速下行鏈路分組接入化SDPA)和/或高速上行鏈路分組接入化SUPA)。
[017引在另一種實(shí)施方式中，基站1914a和WT抓1902a、190化、1902c可W使用例如演進(jìn) 的UMTS陸地?zé)o線電接入化-UTRA)的無線電技術(shù)，其可W使用長期演進(jìn)化TE)和/或高級LTE 化TE-A)來建立空中接口 1915/1916/1917。
[01巧]在其他實(shí)施方式中，基站1914a和WTRU 1902a、1902b、1902c可W使用例如 IE邸802.16(即，全球微波接入互操作性(WiMAX) )、CDMA2000XDMA2000 1XXDMA2000EV-DO、暫行標(biāo)準(zhǔn)2000(IS-2000)、暫行標(biāo)準(zhǔn)95QS-95)、暫行標(biāo)準(zhǔn)856(IS-856)、全球移動(dòng)通信系 統(tǒng)(GSM)、GSM演進(jìn)的增強(qiáng)型數(shù)據(jù)速率化DGE)、GSM EDGE(GERAN)等等的無線電技術(shù)。
[0180] 圖19A中的基站1914b可W是無線路由器、家庭節(jié)點(diǎn)B、家庭e節(jié)點(diǎn)B或者接入點(diǎn)，例 如，并且可W使用任何適當(dāng)?shù)腞ATW方便局部區(qū)域中的無線連接，例如商業(yè)場所、住宅、車 輛、校園等等。在一種實(shí)施方式中，基站1914b和WTRU 1902c、1902d可W實(shí)施例如IE趾 802.11的無線電技術(shù)來建立無線局域網(wǎng)(WLAN)。在另一種實(shí)施方式中，基站1914b和WT抓 1902c、1902d可W使用例如IE邸802.15的無線電技術(shù)來建立無線個(gè)域網(wǎng)(WPAN)。在另一種 實(shí)施方式中，基站1914b和WTRU 1902c、1902d可W使用基于蜂窩的RAT(例如，WCDMA， CDMA2000，GSM，LTE，LTE-A等)來建立微微小區(qū)或毫微微小區(qū)。如圖19A所示，基站1914b可W 具有到因特網(wǎng)110的直接連接。因此，基站1914b可W不需要經(jīng)由核屯、網(wǎng)1906/1907/1909而 接入到因特網(wǎng)110。
[0181] RAN 1903/1904/1905 可 W 與核屯、網(wǎng) 1906/1907/1909通信，所述核屯、網(wǎng) 1906/1907/ 1909可W是被配置為向WT抓1902曰、1902b、1902c、1902d中的一個(gè)或更多個(gè)提供語音、數(shù) 據(jù)、應(yīng)用和/或基于網(wǎng)際協(xié)議的語音(VoIP)服務(wù)等的任何類型的網(wǎng)絡(luò)。例如，核屯、網(wǎng)1906/ 1907/1909可W提供呼叫控制、計(jì)費(fèi)服務(wù)、基于移動(dòng)位置的服務(wù)、預(yù)付費(fèi)呼叫、因特網(wǎng)連接、 視頻分配等和/或執(zhí)行高級安全功能，例如用戶認(rèn)證。雖然圖19A中未示出，應(yīng)該理解的是， RAN 1903/1904/1905 和 / 或核屯、網(wǎng) 1906/1907/1909 可 W 與使用和 RAN1903/1904/1905 相同 的RAT或不同RAT的其他RAN進(jìn)行直接或間接的通信。例如，除了連接到正在使用E-UTRA無線 電技術(shù)的RAN 1903/1904/1905之外，核屯、網(wǎng)1906/1907/1909還可W與使用GSM無線電技術(shù) 的另一個(gè)RAN(未示出)通信。
[0182] 核屯、網(wǎng)1906/1907/1909 還可 W 充當(dāng) WT 抓 1902a、190 化、1902c、1902d 接入到PSTN 1908、因特網(wǎng)1910和/或其他網(wǎng)絡(luò)1912的網(wǎng)關(guān)。PSTN 1908可W包括提供普通老式電話服務(wù) (POTS)的電路交換電話網(wǎng)絡(luò)。因特網(wǎng)1910可W包括使用公共通信協(xié)議的互聯(lián)計(jì)算機(jī)網(wǎng)絡(luò)和 設(shè)備的全球系統(tǒng)，所述協(xié)議例如有TCP/IP網(wǎng)際協(xié)議組中的傳輸控制協(xié)議(TCP)、用戶數(shù)據(jù)報(bào) 協(xié)議(UDP)和網(wǎng)際協(xié)議(IP)。網(wǎng)絡(luò)1912可W包括被其他服務(wù)提供商擁有和/或運(yùn)營的有線或 無線的通信網(wǎng)絡(luò)。例如，網(wǎng)絡(luò)1912可W包括連接到一個(gè)或更多個(gè)RAN的另一個(gè)核屯、網(wǎng)，該RAN 可W使用和RAN 1903/1904/1905相同的RAT或不同的RAT。
[0183] 通信系統(tǒng)1900中的WT抓1902a、190化、1902c、1902d的某些或全部可W包括多模 式能力，即WTRU 1902a、190化、1902c、1902d可W包括用于在不同無線鏈路上與不同無線網(wǎng) 絡(luò)進(jìn)行通信的多個(gè)收發(fā)信機(jī)。例如，圖19A中示出的WTRU 1902c可被配置為與基站1914a通 信，所述基站1914a可W使用基于蜂窩的無線電技術(shù)，W及與基站1914b通信，所述基站 1914b可W使用IE邸802無線電技術(shù)。
[0184] 圖19B是WT抓1902示例的系統(tǒng)圖。如圖19B所示，WT抓1902可W包括處理器1918、 收發(fā)信機(jī)1920、發(fā)射/接收元件1922、揚(yáng)聲器/麥克風(fēng)1924、鍵盤1926、顯示器/觸摸板1928、 不可移動(dòng)存儲器1930、可移動(dòng)存儲器1932、電源1934、全球定位系統(tǒng)(GPS)忍片組1936和其 他外圍設(shè)備1938。應(yīng)該理解的是，WTRU 1902可W在保持與實(shí)施方式一致時(shí)，包括前述元件 的任何子組合。而且，實(shí)施方式考慮了基站1914a和1914b和/或基站1914a和1914b可W表示 的節(jié)點(diǎn)(諸如但不局限于收發(fā)信臺(BTS)、節(jié)點(diǎn)B、站點(diǎn)控制器、接入點(diǎn)(AP)、家庭節(jié)點(diǎn)B、演進(jìn) 型家庭節(jié)點(diǎn)B(e節(jié)點(diǎn)B)、家庭演進(jìn)型節(jié)點(diǎn)B化eNB)、家庭演進(jìn)型節(jié)點(diǎn)B網(wǎng)關(guān)和代理節(jié)點(diǎn)等可W 包括圖19B所描繪和運(yùn)里描述的一些或所有元件。
[0185] 處理器1918可W是通用處理器、專用處理器、常規(guī)處理器、數(shù)字信號處理器(DSP)、 多個(gè)微處理器、與DSP核相關(guān)聯(lián)的一個(gè)或更多個(gè)微處理器、控制器、微控制器、專用集成電路 (ASIC)、場可編程口陣列(FPGA)電路、任何其他類型的集成電路（1C)、狀態(tài)機(jī)等等。處理器 1918可執(zhí)行信號編碼、數(shù)據(jù)處理、功率控制、輸入/輸出處理和/或使WTRU 1902運(yùn)行于無線 環(huán)境中的任何其他功能。處理器1918可W禪合到收發(fā)信機(jī)1920,所述收發(fā)信機(jī)1920可禪合 到發(fā)射/接收元件1922。雖然圖19B描述了處理器1918和收發(fā)信機(jī)1920是單獨(dú)的部件，但是 應(yīng)該理解的是，處理器1918和收發(fā)信機(jī)1920可W-起集成在電子封裝或忍片中。
[0186] 發(fā)射/接收元件1922可W被配置為通過空中接口 1915/1916/1917將信號發(fā)送到基 站(例如，基站1914a)，或從基站(例如，基站1914a)接收信號。例如，在一種實(shí)施方式中，發(fā) 射/接收元件1922可W是被配置為發(fā)送和/或接收RF信號的天線。在另一種實(shí)施方式中，發(fā) 射/接收元件1922可W是被配置為發(fā)送和/或接收例如IR、UV或可見光信號的發(fā)射器/檢測 器。在另一種實(shí)施方式中，發(fā)射/接收元件1922可W被配置為發(fā)送和接收RF和光信號兩者。 應(yīng)當(dāng)理解，發(fā)射/接收元件1922可W被配置為發(fā)送和/或接收無線信號的任何組合。
[0187] 另外，雖然發(fā)射/接收元件1922在圖19B中描述為單獨(dú)的元件，但是WT抓1902可W 包括任意數(shù)量的發(fā)射/接收元件1922。更具體的，WTRU1902可W使用例如MIMO技術(shù)。因此，在 一種實(shí)施方式中，WTRU 1902可W包括用于通過空中接口 1915/1916/1917發(fā)送和接收無線 信號的兩個(gè)或更多個(gè)發(fā)射/接收元件1922(例如，多個(gè)天線）。
[0188] 收發(fā)信機(jī)1920可W被配置為調(diào)制要由發(fā)射/接收元件1922發(fā)送的信號和/或解調(diào) 由發(fā)射/接收元件1922接收的信號。如上面提到的，WTRU 1902可W具有多模式能力。因此收 發(fā)信機(jī)1920可W包括使WTRU 1902經(jīng)由多個(gè)例如UTRA和IE邸802.11的RAT通信的多個(gè)收發(fā) 信機(jī)。
[0189] WTRU 1902的處理器1918可W禪合到下述設(shè)備，并且可W從下述設(shè)備中接收用戶 輸入數(shù)據(jù)：揚(yáng)聲器/麥克風(fēng)1924、鍵盤1926和/或顯示器/觸摸板1928(例如，液晶顯示器 (LCD)顯示單元或有機(jī)發(fā)光二極管(OLED)顯示單元）。處理器1918還可W輸出用戶數(shù)據(jù)到揚(yáng) 聲器/麥克風(fēng)1924、鍵盤1926和/或顯示/觸摸板1928。另外，處理器1918可W從任何類型的 適當(dāng)?shù)拇鎯ζ髟L問信息，并且可W存儲數(shù)據(jù)到任何類型的適當(dāng)?shù)拇鎯ζ髦校绮豢梢苿?dòng) 存儲器1930和/或可移動(dòng)存儲器1932。不可移動(dòng)存儲器1930可W包括隨機(jī)存取存儲器 (RAM)、只讀存儲器(ROM)、硬盤或任何其他類型的存儲器設(shè)備?？梢苿?dòng)存儲器1932可W包括 用戶標(biāo)識模塊(SIM)卡、記憶棒、安全數(shù)字(SD)存儲卡等等。在其他實(shí)施方式中，處理器1918 可W從在物理位置上沒有位于WTRU 1902上，例如位于服務(wù)器或家用計(jì)算機(jī)(未示出）上的 存儲器訪問信息，并且可W將數(shù)據(jù)存儲在該存儲器中。
[0190] 處理器1918可W從電源1934接收電能，并且可W被配置為分配和/或控制到WTRU 1902中的其他部件的電能。電源1934可W是給WTRU 1902供電的任何適當(dāng)?shù)脑O(shè)備。例如，電 源1934可W包括一個(gè)或更多個(gè)干電池(例如，儀儒(NiCd)、儀鋒(NiZn)、儀氨(NiMH)、裡離子 化i-ion)等等），太陽能電池，燃料電池等等。
[0191] 處理器1918還可W禪合到GI^忍片組1936,所述GPS忍片組1936可W被配置為提供 關(guān)于WTRU 1902當(dāng)前位置的位置信息(例如，經(jīng)度和締度）。另外，除來自GI^忍片組1936的信 息或作為其替代，WTRU 1902可W通過空中接口 1915/1916/1917從基站(例如，基站1914a、 1914b)接收位置信息和/或基于從兩個(gè)或更多個(gè)鄰近基站接收的信號的定時(shí)來確定其位 置。應(yīng)當(dāng)理解，WTRU 1902在保持實(shí)施方式的一致性時(shí)，可W通過任何適當(dāng)?shù)奈恢么_定方法 獲得位置信息。
[0192] 處理器1918可W禪合到其他外圍設(shè)備1938,所述外圍設(shè)備1938可W包括一個(gè)或更 多個(gè)提供附加特性、功能和/或有線或無線連接的軟件和/或硬件模塊。例如，外圍設(shè)備1938 可W包括加速計(jì)、電子羅盤、衛(wèi)星收發(fā)信機(jī)、數(shù)字相機(jī)（用于照片或視頻）、通用串行總線 化SB)端日、振動(dòng)設(shè)備、電視收發(fā)信機(jī)、免提耳機(jī)、藍(lán)牙（BluelOO化化）模塊、調(diào)頻(F^0無線電 單元、數(shù)字音樂播放器、媒體播放器、視頻游戲機(jī)模塊、因特網(wǎng)瀏覽器等等。
[0193] 圖19C是根據(jù)實(shí)施方式的RAN 1903和核屯、網(wǎng)1906的系統(tǒng)圖。如上面提到的，RAN 1903可使用UTRA無線電技術(shù)通過空中接口 1915與WT抓1902a、1902b、1902c通信。RAN 1903 還可W與核屯、網(wǎng)1906通信。如圖19C所示，RAN 1903可W包括節(jié)點(diǎn)B 1940a、1940b、1940c，節(jié) 點(diǎn)B 1940a、1940b、1940c的每一個(gè)包括一個(gè)或更多個(gè)用于通過空中接口 1915與WTRU 1902a、1902b、1902c 通信的收發(fā)信機(jī)。節(jié)點(diǎn) B 1940a、1940b、1940c 的每一個(gè)可 W 與 RAN 1903 內(nèi)的特定小區(qū)（未顯示）關(guān)聯(lián)。RAN 1903還可W包括RNC 1942a、1942b。應(yīng)當(dāng)理解的是，RAN 1903在保持實(shí)施方式的一致性時(shí)，可W包括任意數(shù)量的節(jié)點(diǎn)B和RNC。
[0194] 如圖19C所示，節(jié)點(diǎn)B 1940a、1940b可W與RNC 1942a通信。此外，節(jié)點(diǎn)B 1940c可W 與 RNC 1942b 通信。節(jié)點(diǎn) B 1940a、1940b、1940c 可 W 通過 Iub 接口分別與 RNC 1942a、1942b 通 信。RNC 1942a、194化可W通過Iur接口相互通信。RNC 1942a、1942b的每一個(gè)可W被配置W 控制其連接的各個(gè)節(jié)點(diǎn)B 1940a、1940b、1940c。另外，RNC 1942a、194化的每一個(gè)可W被配 置W執(zhí)行或支持其他功能，例如外環(huán)功率控制、負(fù)載控制、準(zhǔn)入控制、分組調(diào)度、切換控制、 宏分集、安全功能、數(shù)據(jù)加密等等。
[01巧]圖19C中所示的核屯、網(wǎng)1906可W包括媒體網(wǎng)關(guān)(MGW) 1944、移動(dòng)交換中屯、（MSC) 1946、服務(wù)GPRS支持節(jié)點(diǎn)（SGSNH948、和/或網(wǎng)關(guān)GPRS支持節(jié)點(diǎn)（GGSN) 1950。盡管前述元件 的每一個(gè)被描述為核屯、網(wǎng)106的部分，應(yīng)當(dāng)理解的是，運(yùn)些元件中的任何一個(gè)可W被不是核 屯、網(wǎng)運(yùn)營商的實(shí)體擁有或運(yùn)營。
[0196] RAN 1903 中的 RNC 1942a 可 W 通過 IuCS 接口連接至核屯、網(wǎng)1906 中的 MSC 1946dMSC 1946 可 W 連接至 MGW 1944dMSC 1946 和 MGW 1944可 W 向 WT 抓 1902a、1902b、1902c 提供到電 路交換網(wǎng)絡(luò)(例如PSTN 108)的接入，W便于WTRU 1902a、190化、1902c和傳統(tǒng)陸地線路通信 設(shè)備之間的通信。
[0197] RAN 1903中RNC 1942a還可W通過IuPS接口連接至核屯、網(wǎng)1906中的SGSN 1948。 SGSN 1948可 W 連接至 GGSN 1950dSGSN 1948和 GGSN 1950可 W 向 WT 抓 1902a、1902b、1902c 提供到分組交換網(wǎng)絡(luò)(例如因特網(wǎng)1910)的接入，W便于WTRU 1902a、190化、1902c和IP使能 設(shè)備之間的通信。
[0198] 如上所述，核屯、網(wǎng)1906還可W連接至網(wǎng)絡(luò)1912,網(wǎng)絡(luò)1912可W包括由其他服務(wù)提 供商擁有或運(yùn)營的其他有線或無線網(wǎng)絡(luò)。
[0199] 圖19D是根據(jù)實(shí)施方式的RAN 1904和核屯、網(wǎng)1907的系統(tǒng)圖。如上面提到的，RAN 1904可使用E-UTRA無線電技術(shù)通過空中接口 1916與WTRU1902a、1902b、1902c通信。RAN 1904還可W與核屯、網(wǎng)1907通信。
[0200] RAN 1904可包括e節(jié)點(diǎn)B 1960a、1960b、1960c，但可W理解的是，RAN104可W包括 任意數(shù)量的e節(jié)點(diǎn)B而保持與各種實(shí)施方式的一致性。eNB 1960a、196化、1960c的每一個(gè)可 包括一個(gè)或更多個(gè)用于通過空中接口 1916與WTRU 1902a、190化、1902c通信的收發(fā)信機(jī)。在 一種實(shí)施方式中，e節(jié)點(diǎn)B 1960a、196化、1960c可W使用MIMO技術(shù)。因此，e節(jié)點(diǎn)B 1960a例如 可W使用多個(gè)天線來向WTRU 1902a發(fā)送無線信號和/或從其接收無線信號。
[0201] e節(jié)點(diǎn)B 1960a、196化、1960c的每一個(gè)可W與特定小區(qū)關(guān)聯(lián)(未顯示），并可W被配 置為處理無線資源管理決策、切換決策、在上行鏈路和/或下行鏈路中的用戶調(diào)度等等。如 圖19D所示，e節(jié)點(diǎn)B 1960a、1960b、1960c可W通過X2接口相互通信。
[0202] 圖19D中所示的核屯、網(wǎng)1907可W包括移動(dòng)性管理實(shí)體(MME) 1962、服務(wù)網(wǎng)關(guān)1964 和/或分組數(shù)據(jù)網(wǎng)絡(luò)(PDN)網(wǎng)關(guān)1966。雖然前述單元的每一個(gè)被描述為核屯、網(wǎng)1907的一部 分，應(yīng)當(dāng)理解的是，運(yùn)些單元中的任意一個(gè)可W由除了核屯、網(wǎng)運(yùn)營商之外的實(shí)體擁有和/或 運(yùn)營。
[0203] MME 1962 可 W 經(jīng)由 Sl 接口連接到 RAN 1904 中的 e 節(jié)點(diǎn) B 1960a、1960b、1960c 的每 一個(gè)，并可W作為控制節(jié)點(diǎn)。例如，匪E 1962可W負(fù)責(zé)WT抓1902a、1902b、1902c的用戶認(rèn) 證、承載激活/去激活、在WT抓1902a、1902b、1902c的初始附著期間選擇特定服務(wù)網(wǎng)關(guān)等 等。MME 1962還可W提供控制平面功能，用于在RAN 1904和使用例如GSM或者WCDMA的其他 無線電技術(shù)的其他RAN(未顯示)之間切換。
[0204] 服務(wù)網(wǎng)關(guān)1964可W經(jīng)由Sl接口連接到RAN 1904中的eNB 1960a、1960b、1960c的每 一個(gè)。服務(wù)網(wǎng)關(guān)1964通常可W向/從WTRU 1902曰、190化、1902c路由和轉(zhuǎn)發(fā)用戶數(shù)據(jù)分組。月良 務(wù)網(wǎng)關(guān)1964還可W執(zhí)行其他功能，例如在eNB間切換期間錯(cuò)定用戶平面、當(dāng)下行鏈路數(shù)據(jù)對 于WT抓1902a、190化、1902c可用時(shí)觸發(fā)尋呼、管理和存儲WT抓1902a、190化、1902c的上下 文(context)等等。
[0205] 服務(wù)網(wǎng)關(guān)1964還可W連接到PDN網(wǎng)關(guān)1966，PDN網(wǎng)關(guān)1966可W向WTRU 1902曰、 1902b、1902c提供到分組交換網(wǎng)絡(luò)（例如因特網(wǎng)1910)的接入，W便于WT抓1902a、1902b、 1902c與IP使能設(shè)備之間的通信。
[0206] 核屯、網(wǎng)1907可W便于與其他網(wǎng)絡(luò)的通信。例如，核屯、網(wǎng)1907可W向WT抓1902曰、 1902b、1902c提供到電路交換網(wǎng)絡(luò)（例如PSTN 1908)的接入，W便于WT抓1902a、1902b、 1902c與傳統(tǒng)陸地線路通信設(shè)備之間的通信。例如，核屯、網(wǎng)1907可W包括IP網(wǎng)關(guān)(例如IP多 媒體子系統(tǒng)（IMS)服務(wù)器），或者與之通信，該IP網(wǎng)關(guān)作為核屯、網(wǎng)1907與PSTN 1908之間的接 口。另外，核屯、網(wǎng)1907可W向WT抓1902a、190化、1902c提供到網(wǎng)絡(luò)1912的接入，該網(wǎng)絡(luò)1912 可W包括被其他服務(wù)提供商擁有和/或運(yùn)營的其他有線或無線網(wǎng)絡(luò)。
[0207] 圖19E是根據(jù)實(shí)施方式的RAN 1905和核屯、網(wǎng)1909的系統(tǒng)圖。RAN 1905可W是使用 IE邸802.16無線電技術(shù)通過空中接口 1917與WT抓1902a、1902b、1902c進(jìn)行通信的接入服 務(wù)網(wǎng)絡(luò)(ASN)。如下面進(jìn)一步討論的，WTRU1902a、1902b、1902c ,RAN 105和核屯、網(wǎng)1909的不 同功能實(shí)體之間的鏈路可W被定義為參考點(diǎn)。
[020引如圖1犯所示，RAN 1905可W包括基站1980曰、1980b、1980c和ASN網(wǎng)關(guān)1982,但應(yīng)當(dāng) 理解的是，RAN 1905可W包括任意數(shù)量的基站和ASN網(wǎng)關(guān)而與實(shí)施方式保持一致?；?1980曰、198化、1980c的每一個(gè)可W與RAN 1905中特定小區(qū)（未示出）關(guān)聯(lián)并可W包括一個(gè)或 更多個(gè)通過空中接口 1917與WT抓1902a、190化、1902c通信的收發(fā)信機(jī)。在一個(gè)實(shí)施方式 中，基站1980a、1980b、1980c可W使用MIMO技術(shù)。因此，基站1980a例如使用多個(gè)天線來向 WTRU 1902a發(fā)送無線信號，或從其接收無線信號?；?980a、1980b、1980c可W提供移動(dòng)性 管理功能，例如呼叫切換化andoff)觸發(fā)、隧道建立、無線電資源管理，業(yè)務(wù)分類、服務(wù)質(zhì)量 策略執(zhí)行等等。ASN網(wǎng)關(guān)1982可W充當(dāng)業(yè)務(wù)聚集點(diǎn)，并且負(fù)責(zé)尋呼、緩存用戶資料 (profile)、路由到核屯、網(wǎng)1909等等。
[0209] WTRU 1902a、1902b、1902c和RAN 1905之間的空中接口 1917可W被定義為使用 802.16規(guī)范的Rl參考點(diǎn)。另外，WTRU 1902a、190化、1902c的每一個(gè)可W與核屯、網(wǎng)1909建立 邏輯接口（未顯示）dWTRU 1902a、190化、1902c和核屯、網(wǎng)1909之間的邏輯接口可W定義為R2 參考點(diǎn)，其可W用于認(rèn)證、授權(quán)、IP主機(jī)化OSt)配置管理和/或移動(dòng)性管理。
[0210] 基站1980a、1980b、1980c的每一個(gè)之間的通信鏈路可W定義為包括便于WTRU切換 和基站間轉(zhuǎn)移數(shù)據(jù)的協(xié)議的R8參考點(diǎn)。基站1980a、1980b、1980c和ASN網(wǎng)關(guān)1982之間的通信 鏈路可W定義為R6參考點(diǎn)。R6參考點(diǎn)可W包括用于促進(jìn)基于與WTRU 1902a、190化、1902c的 每一個(gè)關(guān)聯(lián)的移動(dòng)性事件的移動(dòng)性管理的協(xié)議。
[0211] 如圖1犯所示，RAN 1905可W連接至核屯、網(wǎng)1909dRAN 1905和核屯、網(wǎng)1909之間的通 信鏈路可W定義為包括例如便于數(shù)據(jù)轉(zhuǎn)移和移動(dòng)性管理能力的協(xié)議的R3參考點(diǎn)。核屯、網(wǎng) 1909可W包括移動(dòng)IP本地代理(MIP-HA) 1984,認(rèn)證、授權(quán)、計(jì)費(fèi)（AAA)服務(wù)器1986和網(wǎng)關(guān) 1988。盡管前述的每個(gè)元件被描述為核屯、網(wǎng)1909的部分，應(yīng)當(dāng)理解的是，運(yùn)些元件中的任意 一個(gè)可W由不是核屯、網(wǎng)運(yùn)營商的實(shí)體擁有或運(yùn)營。
[0212] MIP-HA可W負(fù)責(zé)IP地址管理，并可W使WT抓1902a、1902b、1902c在不同ASN和/或 不同核屯、網(wǎng)之間漫游。MIP-HA 1984可W向WT抓1902a、190化、1902c提供分組交換網(wǎng)絡(luò)（例 如因特網(wǎng)110)的接入，W促進(jìn)WTRU1902a、190化、1902c和IP使能設(shè)備之間的通信。AAA服務(wù) 器1986可W負(fù)責(zé)用戶認(rèn)證和支持用戶服務(wù)。網(wǎng)關(guān)1988可促進(jìn)與其他網(wǎng)絡(luò)互通。例如，網(wǎng)關(guān)可 W向WT抓1902a、1902b、1902c提供電路交換網(wǎng)絡(luò)（例如PSTN 108)的接入，W促進(jìn)WTRU 1902a、1902b、1902c和傳統(tǒng)陸地線路通信設(shè)備之間的通信。此外，網(wǎng)關(guān)188可W向WTRU 1902a、190化、1902c提供網(wǎng)絡(luò)1912,其可W包括由其他服務(wù)提供商擁有或運(yùn)營的其他有線 或無線網(wǎng)絡(luò)。
[0213] 盡管未在圖1犯中顯示，應(yīng)當(dāng)理解的是，RAN 1905可W連接至其他ASN，并且核屯、網(wǎng) 1909可W連接至其他核屯、網(wǎng)。RAN 1905和其他ASN之間的通信鏈路可W定義為R4參考點(diǎn)，其 可W包括協(xié)調(diào)RAN 1905和其他ASN之間的WT抓1902a、190化、1902c的移動(dòng)性的協(xié)議。核屯、 網(wǎng)1909和其他核屯、網(wǎng)之間的通信鏈路可W定義為R5參考點(diǎn)，其可W包括促進(jìn)本地核屯、網(wǎng)和 被訪問核屯、網(wǎng)之間的互通的協(xié)議。
[0214] 雖然W上W特定組合描述了特征和元素，但是本領(lǐng)域技術(shù)人員可W理解每個(gè)特征 或元素能夠單獨(dú)使用或與其他特征和元素任意組合使用。此外，運(yùn)里描述的方法可W用計(jì) 算機(jī)程序、軟件和/或固件實(shí)現(xiàn)，其可包含到由計(jì)算機(jī)和/或處理器執(zhí)行的計(jì)算機(jī)可讀介質(zhì) 中。計(jì)算機(jī)可讀介質(zhì)的示例包括電子信號(通過有線或無線連接傳送)和計(jì)算機(jī)可讀存儲介 質(zhì)。計(jì)算機(jī)可讀存儲介質(zhì)的示例包括，但不限制為，只讀存儲器（ROM)、隨機(jī)存取存儲器 (RAM)、寄存器、緩沖存儲器、半導(dǎo)體存儲器設(shè)備、磁性介質(zhì)（例如內(nèi)部硬盤和可移動(dòng)磁盤）、 磁光介質(zhì)和光介質(zhì)（例如CD-ROM盤和數(shù)字通用盤(DVD))。與軟件關(guān)聯(lián)的處理器用于實(shí)現(xiàn)射 頻收發(fā)信機(jī)，用于WTRU、肥、終端、基站、RNC或任何主計(jì)算機(jī)。
【主權(quán)項(xiàng)】
1. 一種視頻譯碼設(shè)備，包括： 處理器，被配置成： 針對視頻輸入中的多個(gè)圖片中的第一圖片評估多個(gè)錯(cuò)誤隱藏模式； 針對所述第一圖片從所述多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式； 以及 在視頻比特流中用信號發(fā)送針對所述第一圖片的所選擇的錯(cuò)誤隱藏模式。2. 根據(jù)權(quán)利要求1所述的視頻譯碼設(shè)備，其中所述處理器被配置成： 針對所述視頻輸入中的所述多個(gè)圖片中的第二圖片評估所述多個(gè)錯(cuò)誤隱藏模式； 針對所述第二圖片從所述多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式；以及 在所述視頻比特流中用信號發(fā)送針對所述第二圖片的所選的錯(cuò)誤隱藏模式和針對所 述第一圖片的所選的錯(cuò)誤隱藏模式，其中針對所述第一圖片的所選的錯(cuò)誤隱藏模式不同于 針對所述第二圖片的所選的錯(cuò)誤隱藏模式。3. 根據(jù)權(quán)利要求1所述的視頻譯碼設(shè)備，其中所述處理器被配置成： 針對第二圖片評估所述多個(gè)錯(cuò)誤隱藏模式； 針對所述第二圖片從所述多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式；以及 在所述視頻比特流中用信號發(fā)送針對所述第二圖片的所選的錯(cuò)誤隱藏模式和針對所 述第一圖片的所選的錯(cuò)誤隱藏模式，其中針對所述第一圖片的所選的錯(cuò)誤隱藏模式與針對 所述第二圖片所選的錯(cuò)誤隱藏模式相同。4. 根據(jù)權(quán)利要求1所述的視頻譯碼設(shè)備，其中所述處理器被配置成基于所述第一圖片 與所述第一圖片的錯(cuò)誤隱藏版本之間的差異選擇所述錯(cuò)誤隱藏模式，以及其中所述處理器 選擇具有最小計(jì)算差異的所述錯(cuò)誤隱藏模式。5. 根據(jù)權(quán)利要求4所述的視頻譯碼設(shè)備，其中所述差異根據(jù)所述第一圖片與使用所選 錯(cuò)誤隱藏模式確定的所述第一圖片的錯(cuò)誤隱藏版本之間的絕對差和（SAD)或結(jié)構(gòu)相似性 (SSIM)中的一者或多者被測量。6. 根據(jù)權(quán)利要求4所述的視頻譯碼設(shè)備，其中所述差異使用所述第一圖片的一個(gè)或多 個(gè)顏色分量被測量。7. 根據(jù)權(quán)利要求1所述的視頻譯碼設(shè)備，其中所述多個(gè)錯(cuò)誤隱藏模式包括圖片復(fù)制 (PC)、時(shí)間直接(TD)、運(yùn)動(dòng)復(fù)制(MC)、基礎(chǔ)層跳過(BLSkip;運(yùn)動(dòng)和殘差上采樣）、重構(gòu)BL上采 樣(RU)、E-ILR模式1和E-ILR模式2中的至少兩者。8. 根據(jù)權(quán)利要求1所述的視頻譯碼設(shè)備，其中在所述視頻比特流中用信號發(fā)送針對所 述第一圖片的所選的錯(cuò)誤隱藏模式包括在所述視頻比特流的補(bǔ)充增強(qiáng)信息（SEI)消息中、 MPEG媒體傳輸(MMT)傳輸分組中或MMT錯(cuò)誤隱藏模式(ECM)消息中用信號發(fā)送所述錯(cuò)誤隱藏 模式。9. 根據(jù)權(quán)利要求1所述的視頻譯碼設(shè)備，其中所述處理器被配置成： 針對所述多個(gè)圖片中的每個(gè)圖片評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式； 將所述多個(gè)圖片分成第一圖片子集和第二圖片子集； 針對所述多個(gè)圖片中的每個(gè)圖片從所述兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò) 誤隱藏模式，其中針對所述第一圖片子集的所選的錯(cuò)誤隱藏模式是相同的，且針對所述第 二圖片子集的所選的錯(cuò)誤隱藏模式是相同的；以及 在所述視頻比特流中用信號發(fā)送針對所述第一圖片子集的所選的錯(cuò)誤隱藏模式和針 對所述第二圖片子集的所選的錯(cuò)誤隱藏模式。10. 根據(jù)權(quán)利要求1所述的視頻譯碼設(shè)備，其中所述處理器被配置成： 確定所述視頻輸入的較高層存在，其中該較高層高于包括所述第一圖片的層； 從所述視頻輸入的該較高層中的多個(gè)圖片中選擇圖片； 針對所述較高層的所選的圖片評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式； 針對來自所述較高層的所選的圖片從所述兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇 錯(cuò)誤隱藏模式；以及 在具有針對所述第一圖片的錯(cuò)誤隱藏模式的所述視頻比特流中用信號發(fā)送針對所述 較高層的所選圖片的所選錯(cuò)誤隱藏模式。11. 一種視頻譯碼設(shè)備，包括： 處理器，被配置成： 接收包括多個(gè)圖片的視頻比特流； 接收針對所述視頻比特流中的第一圖片的錯(cuò)誤隱藏模式； 確定所述第一圖片丟失；以及 執(zhí)行針對所述第一圖片的錯(cuò)誤隱藏，其中使用針對所述第一圖片的所接收的錯(cuò)誤隱藏 模式執(zhí)行錯(cuò)誤隱藏。12. 根據(jù)權(quán)利要求11所述的視頻譯碼設(shè)備，其中所述處理器被配置成： 接收針對所述視頻比特流中的第二圖片的錯(cuò)誤隱藏模式； 確定所述第二圖片丟失；以及 執(zhí)行針對所述第二圖片的錯(cuò)誤隱藏，其中使用針對所述第二圖片的所接收的錯(cuò)誤隱藏 模式來執(zhí)行錯(cuò)誤隱藏。13. 根據(jù)權(quán)利要求12所述的視頻譯碼設(shè)備，其中針對所述第二圖片的所述錯(cuò)誤隱藏模 式與針對所述第一圖片的所述錯(cuò)誤隱藏模式相同。14. 根據(jù)權(quán)利要求12所述的視頻譯碼設(shè)備，其中針對所述第二圖片的所述錯(cuò)誤隱藏模 式與針對所述第一圖片的所述錯(cuò)誤隱藏模式不同。15. -種視頻譯碼設(shè)備，包括： 處理器，被配置成： 針對層評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式； 從所述兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式；以及 針對該層在視頻比特流中用信號發(fā)送所選的錯(cuò)誤隱藏模式。16. 根據(jù)權(quán)利要求15所述的視頻譯碼設(shè)備，其中所述兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式包括 圖片復(fù)制(PC)、時(shí)間直接(TD)、運(yùn)動(dòng)復(fù)制(MC)、基礎(chǔ)層跳過(BLSkip;運(yùn)動(dòng)和殘差上采樣）、重 構(gòu)BL上采樣(RU)、E-I LR模式1和E-1LR模式2中的至少兩者。17. -種視頻譯碼方法，包括： 針對視頻輸入中的多個(gè)圖片中的第一圖片評估多個(gè)錯(cuò)誤隱藏模式； 針對所述第一圖片從所述多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式；以及 在視頻比特流中用信號發(fā)送針對所述第一圖片的所選擇的錯(cuò)誤隱藏模式。18. 根據(jù)權(quán)利要求17所述的視頻譯碼方法，該方法還包括： 針對所述多個(gè)圖片中的第二圖片評估所述多個(gè)錯(cuò)誤隱藏模式； 針對所述第二圖片從所述多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式；以及 在所述視頻比特流中用信號發(fā)送針對所述第二圖片的所選的錯(cuò)誤隱藏模式和針對所 述第一圖片的所選的錯(cuò)誤隱藏模式，其中針對所述第一圖片的所選的錯(cuò)誤隱藏模式不同于 針對所述第二圖片的所選的錯(cuò)誤隱藏模式。19. 根據(jù)權(quán)利要求17所述的視頻譯碼方法，該方法還包括： 針對第二圖片評估所述多個(gè)錯(cuò)誤隱藏模式； 針對所述第二圖片從所述多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式；以及 在所述視頻比特流中用信號發(fā)送針對所述第二圖片的所選的錯(cuò)誤隱藏模式和針對所 述第一圖片的所選的錯(cuò)誤隱藏模式，其中針對所述第一圖片的所選的錯(cuò)誤隱藏模式與針對 所述第二圖片所選的錯(cuò)誤隱藏模式相同。20. 根據(jù)權(quán)利要求17所述的視頻譯碼方法，該方法還包括基于所述第一圖片與所述第 一圖片的錯(cuò)誤隱藏版本之間的差異選擇所述錯(cuò)誤隱藏模式，以及選擇具有最小計(jì)算差異的 所述錯(cuò)誤隱藏模式。21. 根據(jù)權(quán)利要求20所述的視頻譯碼設(shè)備，其中所述差異根據(jù)所述第一圖片與使用所 選錯(cuò)誤隱藏模式確定的所述第一圖片的錯(cuò)誤隱藏版本之間的絕對差和(SAD)或結(jié)構(gòu)相似性 (SSIM)中的一者或多者被測量。22. 根據(jù)權(quán)利要求20所述的視頻譯碼方法，其中所述差異使用所述第一圖片的一個(gè)或 多個(gè)顏色分量被測量。23. 根據(jù)權(quán)利要求17所述的視頻譯碼方法，其中所述多個(gè)錯(cuò)誤隱藏模式包括圖片復(fù)制 (PC)、時(shí)間直接(TD)、運(yùn)動(dòng)復(fù)制(MC)、基礎(chǔ)層跳過(BLSkip;運(yùn)動(dòng)和殘差上采樣）、重構(gòu)BL上采 樣(RU)、E-ILR模式1和E-ILR模式2中的至少兩者。24. 根據(jù)權(quán)利要求17所述的視頻譯碼方法，該方法還包括在所述視頻比特流的補(bǔ)充增 強(qiáng)信息（SEI)消息中、MPEG媒體傳輸(MMT)傳輸分組中或MMT錯(cuò)誤隱藏模式(ECM)消息中用信 號發(fā)送所述錯(cuò)誤隱藏模式。25. 根據(jù)權(quán)利要求17所述的視頻譯碼方法，該方法還包括： 針對所述多個(gè)圖片中的每個(gè)圖片評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式； 將所述多個(gè)圖片分成第一圖片子集和第二圖片子集； 針對所述多個(gè)圖片中的每個(gè)圖片從所述兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇錯(cuò) 誤隱藏模式，其中針對所述第一圖片子集的所選的錯(cuò)誤隱藏模式是相同的，且針對所述第 二圖片子集的所選的錯(cuò)誤隱藏模式是相同的；以及 在所述視頻比特流中用信號發(fā)送針對所述第一圖片子集的所選的錯(cuò)誤隱藏模式和針 對所述第二圖片子集的所選的錯(cuò)誤隱藏模式。26. 根據(jù)權(quán)利要求17所述的視頻譯碼方法，其中所述處理器被配置成： 確定所述視頻輸入的較高層存在，其中該較高層高于包括所述第一圖片的層； 從所述視頻輸入的該較高層中的多個(gè)圖片中選擇圖片； 針對所述較高層的所選的圖片評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式； 針對來自所述較高層的所選的圖片從所述兩個(gè)或更多個(gè)評估的錯(cuò)誤隱藏模式中選擇 錯(cuò)誤隱藏模式；以及 在具有針對所述第一圖片的所述錯(cuò)誤隱藏模式的所述視頻比特流中用信號發(fā)送針對 所述較高層的所選圖片的所選錯(cuò)誤隱藏模式。27. -種視頻譯碼方法，包括： 接收包括多個(gè)圖片的視頻比特流； 接收針對所述視頻比特流中的第一圖片的錯(cuò)誤隱藏模式； 確定所述第一圖片丟失；以及 執(zhí)行針對所述第一圖片的錯(cuò)誤隱藏，其中使用針對所述第一圖片的所接收的錯(cuò)誤隱藏 模式執(zhí)行錯(cuò)誤隱藏。28. 根據(jù)權(quán)利要求27所述的視頻譯碼方法，該方法還包括： 接收針對所述視頻比特流中的第二圖片的錯(cuò)誤隱藏模式； 確定所述第二圖片丟失；以及 執(zhí)行針對所述第二圖片的錯(cuò)誤隱藏，其中使用針對所述第二圖片的所接收的錯(cuò)誤隱藏 模式來執(zhí)行錯(cuò)誤隱藏。29. 根據(jù)權(quán)利要求28所述的視頻譯碼方法，其中針對所述第二圖片的所述錯(cuò)誤隱藏模 式與針對所述第一圖片的所述錯(cuò)誤隱藏模式相同。30. 根據(jù)權(quán)利要求28所述的視頻譯碼方法，其中針對所述第二圖片的所述錯(cuò)誤隱藏模 式與針對所述第一圖片的所述錯(cuò)誤隱藏模式不同。31. -種視頻譯碼方法，包括： 針對層評估兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式； 從所述兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式中選擇錯(cuò)誤隱藏模式； 針對該層在視頻比特流中用信號發(fā)送所選的錯(cuò)誤隱藏模式。32. 根據(jù)權(quán)利要求31所述的視頻譯碼方法，其中所述兩個(gè)或更多個(gè)錯(cuò)誤隱藏模式包括 圖片復(fù)制(PC)、時(shí)間直接(TD)、運(yùn)動(dòng)復(fù)制(MC)、基礎(chǔ)層跳過(BLSkip;運(yùn)動(dòng)和殘差上采樣）、重 構(gòu)BL上采樣(RU)、E-I LR模式1和E-1LR模式2中的至少兩者。
【文檔編號】H04N19/895GK105830448SQ201480070154
【公開日】2016年8月3日
【申請日】2014年10月22日
【發(fā)明人】E·S·柳, 葉琰, 賀玉文, Y·何
【申請人】Vid拓展公司