二幀在較低空 間分辨率下的一個(gè)或多個(gè)編碼的第二空間單元，所述一個(gè)或多個(gè)編碼的第二空間單元由相 機(jī)捕獲并且從發(fā)送器終端發(fā)送；接收使用旋轉(zhuǎn)運(yùn)動(dòng)傳感器檢測(cè)到的相機(jī)在第一幀與第二幀 之間的旋轉(zhuǎn)角度的指示，其中作為相機(jī)在第一幀與第二幀之間的旋轉(zhuǎn)角度的結(jié)果，第二空 間單元與第一空間單元至少部分地不對(duì)齊，并且其中第二空間單元中的每一個(gè)在空間上與 至少一個(gè)第一空間單元部分地重疊；基于所述指示來(lái)組合第一空間單元和第二空間單元， 以便重建比第一空間單元的較低空間分辨率和第二空間單元的較低空間分辨率至少更高 的空間分辨率的圖像。
[0054] 盡管已經(jīng)用特定于結(jié)構(gòu)特征和/或方法學(xué)行為的語(yǔ)言描述了本主題，但是應(yīng)當(dāng)理 解，所附權(quán)利要求中定義的主題未必限于上面所描述的特定特征或行為。相反，上面所描述 的特定特征和行為作為實(shí)現(xiàn)權(quán)利要求的示例形式被公開(kāi)。
【主權(quán)項(xiàng)】
1. 一種從發(fā)送器終端向接收器終端發(fā)送視頻數(shù)據(jù)的方法，所述方法包括： 使用由相機(jī)所捕獲的視頻信號(hào)的第一幀的圖像數(shù)據(jù)來(lái)確定所述第一幀在較低空間分 辨率下的一個(gè)或多個(gè)編碼的第一空間單元； 將所述第一幀的所述一個(gè)或多個(gè)編碼的第一空間單元發(fā)送到所述接收器終端； 使用由所述相機(jī)所捕獲的所述視頻信號(hào)的第二幀的圖像數(shù)據(jù)來(lái)確定所述第二幀在較 低空間分辨率下的一個(gè)或多個(gè)編碼的第二空間單元； 將使用旋轉(zhuǎn)運(yùn)動(dòng)傳感器檢測(cè)到的所述相機(jī)在所述第一幀與所述第二幀之間的旋轉(zhuǎn)角 度的指示發(fā)送到所述接收器終端；以及 將所述第二幀的所述一個(gè)或多個(gè)編碼的第二空間單元發(fā)送到所述接收器終端，其中作 為所述相機(jī)在所述第一幀與所述第二幀之間的所述旋轉(zhuǎn)角度的結(jié)果，所述第二空間單元與 所述第一空間單元至少部分地不對(duì)齊，并且其中所述第二空間單元中的每一個(gè)在空間上與 至少一個(gè)第一空間單元部分地重疊， 從而使得所述接收器終端能夠基于所述指示來(lái)組合所述第一空間單元和所述第二空 間單元，以便重建比所述第一空間單元的所述較低空間分辨率和所述第二空間單元的所述 較低空間分辨率至少更高的空間分辨率的圖像。2. 根據(jù)權(quán)利要求1所述的方法，其中所述相機(jī)的旋轉(zhuǎn)包括在與所述第一幀的所述圖 像數(shù)據(jù)由所述相機(jī)捕獲到所在的方向垂直的平面中的旋轉(zhuǎn)，所述平面中的所述旋轉(zhuǎn)引起所 述第二空間單元相對(duì)于所述第一空間單元的旋轉(zhuǎn)移位以便在所述接收器終端處組合所述 第一空間單元和所述第二空間單元。3. 根據(jù)權(quán)利要求1或權(quán)利要求2所述的方法，其中所述相機(jī)的旋轉(zhuǎn)包括在與所述第一 幀的所述圖像數(shù)據(jù)由所述相機(jī)捕獲到所在的所述方向垂直的所述平面外的旋轉(zhuǎn)，在所述平 面外的所述旋轉(zhuǎn)引起所述第二空間單元相對(duì)于所述第一空間單元的調(diào)整大小以便在所述 接收器終端處組合所述第一空間單元和所述第二空間單元。4. 根據(jù)任何前述權(quán)利要求所述的方法，其進(jìn)一步包括： 使用由所述相機(jī)所捕獲的所述視頻信號(hào)的至少一個(gè)另外的幀的圖像數(shù)據(jù)來(lái)確定所 述至少一個(gè)另外的幀中的每一個(gè)在較低空間分辨率下的一個(gè)或多個(gè)編碼的另外的空間單 元； 將由所述旋轉(zhuǎn)運(yùn)動(dòng)傳感器針對(duì)所述至少一個(gè)另外的幀所檢測(cè)到的所述相機(jī)的至少一 個(gè)另外的旋轉(zhuǎn)角度的至少一個(gè)指示發(fā)送到所述接收器終端；以及 將所述至少一個(gè)另外的幀的所述一個(gè)或多個(gè)編碼的另外的空間單元發(fā)送到所述接收 器終端，其中作為所述相機(jī)的所述至少一個(gè)另外的旋轉(zhuǎn)角度的結(jié)果，所述另外的空間單元 與所述第一空間單元或所述第二空間單元至少部分地不對(duì)齊，并且其中所述另外的空間單 元中的每一個(gè)在空間上與至少一個(gè)第一空間單元部分地重疊， 從而使得所述接收器終端能夠基于所述指示來(lái)組合所述第一空間單元、所述第二空間 單元以及另外的空間單元，以便重建比所述第一空間單元的所述較低空間分辨率、所述第 二空間單元的所述較低空間分辨率以及所述另外的空間單元的所述較低空間分辨率至少 更高的空間分辨率的圖像。5. -種被配置成將視頻數(shù)據(jù)發(fā)送到接收器終端的移動(dòng)終端，所述移動(dòng)終端包括： 相機(jī)，其被配置成：（i)捕獲視頻信號(hào)的第一幀的圖像數(shù)據(jù)，并且（ii)捕獲所述視頻信 號(hào)的第二幀的圖像數(shù)據(jù)； 旋轉(zhuǎn)運(yùn)動(dòng)傳感器，其被配置成檢測(cè)所述相機(jī)在所述第一幀與所述第二幀之間的旋轉(zhuǎn)角 度； 編碼器，其被配置成：（i)使用所捕獲的所述第一幀的圖像數(shù)據(jù)來(lái)確定所述第一幀在 較低空間分辨率下的一個(gè)或多個(gè)編碼的第一空間單元，并且（ii)使用所捕獲的所述第二幀 的圖像數(shù)據(jù)來(lái)確定所述第二幀在較低空間分辨率下的一個(gè)或多個(gè)編碼的第二空間單元，使 得作為所述相機(jī)在所述第一幀與所述第二幀之間的所述旋轉(zhuǎn)角度的結(jié)果，所述第二空間單 元與所述第一空間單元至少部分地不對(duì)齊，并且其中所述第二空間單元中的每一個(gè)在空間 上與至少一個(gè)第一空間單元部分地重疊；以及 發(fā)送器，其被配置成向所述接收器終端發(fā)送：（i)所述第一幀的所述一個(gè)或多個(gè)編碼 的第一空間單元，（ii)所述第二幀的所述一個(gè)或多個(gè)編碼的第二空間單元，以及（iii)所檢 測(cè)到的旋轉(zhuǎn)角度的指示， 使得所述移動(dòng)終端被配置成使得所述接收器終端能夠基于所述指示來(lái)組合所述第一 空間單元和所述第二空間單元，以便重建比所述第一空間單元的所述較低分辨率和所述第 二空間單元的所述較低空間分辨率至少更高的空間分辨率的圖像。6. -種在接收器終端處從發(fā)送器終端接收視頻數(shù)據(jù)的方法，所述方法包括： 接收視頻信號(hào)的第一幀在較低空間分辨率下的一個(gè)或多個(gè)編碼的第一空間單元，所述 一個(gè)或多個(gè)編碼的第一空間單元由相機(jī)捕獲并且從所述發(fā)送器終端發(fā)送； 接收所述視頻信號(hào)的第二幀在較低空間分辨率下的一個(gè)或多個(gè)編碼的第二空間單元， 所述一個(gè)或多個(gè)編碼的第二空間單元由所述相機(jī)捕獲并且從所述發(fā)送器終端發(fā)送； 接收使用旋轉(zhuǎn)運(yùn)動(dòng)傳感器檢測(cè)到的所述相機(jī)在所述第一幀與所述第二幀之間的旋轉(zhuǎn) 角度的指示，其中作為所述相機(jī)在所述第一幀與所述第二幀之間的所述旋轉(zhuǎn)角度的結(jié)果， 所述第二空間單元與所述第一空間單元至少部分地不對(duì)齊，并且其中所述第二空間單元中 的每一個(gè)在空間上與至少一個(gè)第一空間單元部分地重疊； 基于所述指示來(lái)組合所述第一空間單元和所述第二空間單元，以便重建比所述第一空 間單元的所述較低空間分辨率和所述第二空間單元的所述較低空間分辨率至少更高的空 間分辨率的圖像。7. 根據(jù)權(quán)利要求6所述的方法，其中所述組合所述第一空間單元和所述第二空間單 元包括基于所述相機(jī)的所述旋轉(zhuǎn)角度來(lái)確定所述第一空間單元和所述第二空間單元中的 至少一個(gè)的到公共平面中的投影，其中所述第一空間單元和所述第二空間單元在所述公共 平面中被組合。8. 根據(jù)權(quán)利要求6或權(quán)利要求7所述的方法，其中所述組合所述第一空間單元和所述 第二空間單元包括針對(duì)與部分重疊的第一空間單元和第二空間單元的多個(gè)組合相對(duì)應(yīng)的 多個(gè)圖像區(qū)中的每一個(gè)確定重建圖像的相應(yīng)的圖像值。9. 根據(jù)權(quán)利要求6至8中的任一項(xiàng)所述的方法，其進(jìn)一步包括在所述接收器終端的顯 示器處輸出所述重建圖像。10. -種計(jì)算機(jī)程序產(chǎn)品，其被具體化在非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)上并且配置以便當(dāng) 在處理器上執(zhí)行時(shí)執(zhí)行根據(jù)權(quán)利要求1至4或6至9中的任一項(xiàng)所述的方法。
【專利摘要】計(jì)算機(jī)程序產(chǎn)品和一種用于發(fā)送和接收視頻數(shù)據(jù)的移動(dòng)終端。由相機(jī)所捕獲的視頻信號(hào)的第一幀和第二幀的圖像數(shù)據(jù)被用來(lái)確定所述第一幀在較低空間分辨率下的編碼的第一空間單元和所述第二幀在較低空間分辨率下的編碼的第二空間單元，其被發(fā)送到接收器終端。所述第二空間單元由于所述相機(jī)在所述第一幀與所述第二幀之間的旋轉(zhuǎn)而與所述第一空間單元不對(duì)齊，使得所述第二空間單元中的每一個(gè)與至少一個(gè)第一空間單元部分地重疊。所述相機(jī)在所述第一幀與所述第二幀之間的旋轉(zhuǎn)角度的指示使用旋轉(zhuǎn)運(yùn)動(dòng)傳感器來(lái)檢測(cè)并且被發(fā)送到所述接收器終端。所述接收器終端使用所述指示來(lái)組合所述第一空間單元和所述第二空間單元以重建更高空間分辨率的圖像。
【IPC分類】H04N21/2662, H04N21/4223, H04N21/2343
【公開(kāi)號(hào)】CN104937943
【申請(qǐng)?zhí)枴緾N201380069476
【發(fā)明人】L.比沃拉斯基
【申請(qǐng)人】微軟技術(shù)許可有限責(zé)任公司
【公開(kāi)日】2015年9月23日
【申請(qǐng)日】2013年11月1日
【公告號(hào)】EP2901704A1, US9185437, US20140118562, WO2014071097A1