圖像傳輸系統(tǒng)及其傳輸端裝置與接收端裝置制造方法
【專利摘要】一種圖像傳輸系統(tǒng)及其傳輸端裝置與接收端裝置。在圖像傳輸系統(tǒng)中包括經(jīng)由多個通信鏈路相連接的傳輸端裝置及接收端裝置。傳輸端裝置接收一筆原始圖像數(shù)據(jù)，并參考感興趣圖像區(qū)域(Region?of?Interest，ROI)信息自此原始圖像數(shù)據(jù)中決定ROI圖像數(shù)據(jù)。傳輸端裝置還提供兩個獨立的圖像處理路徑分別針對原始圖像數(shù)據(jù)及ROI圖像數(shù)據(jù)進行處理，并經(jīng)由此些通信鏈路分別輸出處理后的原始圖像數(shù)據(jù)及ROI圖像數(shù)據(jù)。接收端裝置接收處理后的原始圖像數(shù)據(jù)及ROI圖像數(shù)據(jù)，并據(jù)以合并得到還原幀畫面數(shù)據(jù)。
【專利說明】 圖像傳輸系統(tǒng)及其傳輸端裝置與接收端裝置
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種圖像傳輸系統(tǒng)，且特別涉及一種應用多個數(shù)據(jù)串流，來分別針對原始圖像數(shù)據(jù)及感興趣圖像區(qū)域(Region of Interest, R0I)圖像數(shù)據(jù)進行傳輸?shù)膱D像傳輸系統(tǒng)。
【背景技術(shù)】
[0002]在科技發(fā)展日新月異的現(xiàn)今時代中，圖像提取、處理及傳輸?shù)募夹g(shù)被開發(fā)出來，并廣泛地被應用在諸如第三代或第四代通信系統(tǒng)(Third or Fourth Generation MobileTelecommunication)、視頻電話、網(wǎng)絡視頻會議、實時通信視頻、網(wǎng)絡影音傳輸接口或遠端圖像保全/監(jiān)視系統(tǒng)等圖像處理及傳送應用場合中。隨著消費者對于影音質(zhì)量的要求日漸提升，如何在有限的傳輸頻寬限制下，有效地傳遞質(zhì)量較佳的圖像數(shù)據(jù)，為業(yè)界不斷致力的方向之一。

【發(fā)明內(nèi)容】

[0003]根據(jù)本發(fā)明的第一方面，提出一種傳輸端裝置，包括信源單元、存儲單元、圖像處理單元、第一、第二編碼單元及傳輸單元。信源單元提供原始圖像數(shù)據(jù)。圖像處理單元接收原始圖像數(shù)據(jù)，并響應于感興趣圖像區(qū)域(Region of Interest, R0I)信息,從原始圖像數(shù)據(jù)中找出并將ROI圖像數(shù)據(jù)存儲于存儲單元中。第一編碼單元存取信源單元中的原始圖像數(shù)據(jù)，并據(jù)以編碼產(chǎn)生第一圖像串流數(shù)據(jù)。第二編碼單元存取該存儲單元中的ROI圖像數(shù)據(jù)，并據(jù)以編碼產(chǎn)生第二圖像串流數(shù)據(jù)，第二圖像串流數(shù)據(jù)具有參考時間字段(“字段”也稱之為“欄位”)信息及空間字段信息，分別指示ROI圖像數(shù)據(jù)與原始圖像數(shù)據(jù)的時間域及空間域?qū)P(guān)系。傳輸單元接收第一及第二圖像串流數(shù)據(jù)，并分別經(jīng)由第一及第二通信鏈路傳輸?shù)谝患暗诙D像串流數(shù)據(jù)。
[0004]根據(jù)本發(fā)明的第二方面提供一種接收端裝置，包括第一、第二暫存單元、接收單元、第一、第二解碼單元、圖像選擇單元及圖像處理單元。接收單元經(jīng)由第一及第二通信鏈路分別接收第一及第二圖像串流數(shù)據(jù)，并將其分別存儲在第一及第二暫存單元中。第一解碼單元存取第一暫存單元中的第一圖像串流數(shù)據(jù)，并據(jù)以解碼產(chǎn)生及暫存還原原始圖像數(shù)據(jù)。第二解碼單元存取第二暫存單元中的第二圖像串流數(shù)據(jù)，并據(jù)以解碼產(chǎn)生并暫存ROI圖像數(shù)據(jù)，第二圖像串流數(shù)據(jù)具有還原參考時間字段信息及還原空間字段信息，分別指示還原ROI圖像數(shù)據(jù)與還原原始圖像數(shù)據(jù)的時間域及空間域?qū)P(guān)系。圖像選擇單元參考還原參考時間及還原空間字段信息從第一及第二解碼單元中存取相互對應的一筆選取還原幀畫面及一筆選取還原ROI畫面。圖像處理單元接收選取還原幀畫面及選取還原ROI畫面，并據(jù)以合并得到還原幀畫面數(shù)據(jù)。
[0005]根據(jù)本發(fā)明的第三方面，提供一種圖像傳輸系統(tǒng)，其中包括如前述段落所述的傳輸端裝置及接收端裝置。
[0006]為了對本發(fā)明的上述及其他方面有更佳的了解，下文特舉優(yōu)選實施例，并配合附圖，作詳細說明如下:
【專利附圖】

【附圖說明】
[0007]圖1繪示依照本發(fā)明實施例的圖像傳輸系統(tǒng)的方塊圖。
[0008]圖2繪示依照本發(fā)明實施例的傳輸端裝置的方塊圖。
[0009]圖3繪示依照本發(fā)明實施例的接收端裝置的方塊圖。
[0010]圖4繪示圖像選擇單元的操作示意圖。
[0011]【主要元件符號說明】
[0012]1:圖像傳輸系統(tǒng)
[0013]10:傳輸端裝置
[0014]20:接收端裝置
[0015]C1、C2:通信鏈路
[0016]101:信源單元
[0017]103:存儲單元
[0018]105:圖像處理單元
`[0019]107、109:編碼單元
[0020]111:傳輸單元
[0021]107a、109a:數(shù)據(jù)存取模塊
[0022]107b、109b:編碼內(nèi)核模塊
[0023]107c、109c:暫存模塊
[0024]201:接收單元
[0025]203>205:暫存單元
[0026]207,209:解碼單元
[0027]211:圖像選擇單元
[0028]213:圖像處理單元
[0029]207a、209a:解碼內(nèi)核模塊
[0030]207b、209b:暫存模塊
[0031]S_in:狀態(tài)指示信號
[0032]D_R0I:R0I 圖像數(shù)據(jù)
[0033]D_R0I’:還原ROI圖像數(shù)據(jù)
[0034]D_1:原始圖像數(shù)據(jù)
[0035]D_i’:還原原始圖像數(shù)據(jù)
[0036]Fm:還原幀畫面數(shù)據(jù)
[0037]F(t-2)-F(t+2):還原幀畫面數(shù)據(jù)
[0038]f (t-2)-f (t+2):還原 ROI 畫面數(shù)據(jù)
[0039]S_in:狀態(tài)指示信號
[0040]SI =ROI 信息
[0041]Str_1、Str_i’、Str_R01、Str_R0I’:圖像串流數(shù)據(jù)【具體實施方式】
[0042]請參照圖1，其繪示依照本發(fā)明實施例的圖像傳輸系統(tǒng)的方塊圖。本實施例的圖像傳輸系統(tǒng)I包括傳輸端裝置10及接收端裝置20，其經(jīng)由期間的通信鏈路Cl及C2相互連接并進行通信操作。通信鏈路Cl及C2例如可以A/V端子、D-sub連接端口、DVI連接端口、HDMI連接端口、DisplayPort連接端口、USB連接端口、RJ-45連接端口為接口的實體線路來實現(xiàn)，或是諸如無線網(wǎng)絡或移動通信系統(tǒng)路徑等非實體路徑來實現(xiàn)。此外，通信鏈路Cl及C2也可選擇性地以不同的路徑來實現(xiàn)；例如通信鏈路Cl及C2其中一個經(jīng)由USB實體路徑來實現(xiàn)，而其中的另一個經(jīng)由無線網(wǎng)絡來實現(xiàn)。
[0043]傳輸端裝置
[0044]請參照圖2，其繪示依照本發(fā)明實施例的傳輸端裝置的方塊圖。舉例來說，傳輸端裝置10包括信源單元101、存儲單元103、圖像處理單元105、編碼單元107、109及傳輸單元
111。信源單元101例如為圖像數(shù)據(jù)提取裝置或為圖像數(shù)據(jù)接收裝置，其對應地提取或接收原始圖像，以對應地提供原始圖像數(shù)據(jù)D_i。舉例來說，信源單元101可為錄像機、手持式照相機等圖像數(shù)據(jù)提取裝置，或是圖像信號連接端口、網(wǎng)絡控制器等圖像數(shù)據(jù)接收裝置。
[0045]圖像處理單元105分別與信源單元101及存儲單元103耦接，圖像處理單元105接收原始圖像數(shù)據(jù)D_i,并響應于感興趣圖像區(qū)域(Region of Interest, R0I)信息SI,從原始圖像數(shù)據(jù)D_i中決定一筆ROI圖像數(shù)據(jù)D_R0I，并將ROI圖像數(shù)據(jù)D_R0I存儲于存儲單元103中。舉例來說，ROI圖像數(shù)據(jù)D_R0I可為自原始圖像數(shù)據(jù)D_i中復制對應至ROI區(qū)域的ROI圖像數(shù)據(jù)。換句話說，對于原始圖像數(shù)據(jù)D_i中的ROI區(qū)域來說，其的圖像數(shù)據(jù)內(nèi)容同時被存儲在信源單元101及存儲單元103中。
[0046]在一具體實施例中，ROI信息SI例如由使用者所定義，并經(jīng)由信源單元101提供至圖像處理單元105，例如由使用者對應地定義原始圖像數(shù)據(jù)D_i中處于視覺重心的圖像區(qū)域為ROI區(qū)域。
[0047]在一具體實施例中，例如在視頻電話或網(wǎng)絡視頻會議的應用情境，ROI信息SI例如可選擇性地將原始圖像數(shù)據(jù)D_i中人臉圖像顯示區(qū)域、畫面中心區(qū)域或是成像焦距景深內(nèi)的區(qū)域定義為ROI區(qū)域，而后由圖像處理單元105辨識人臉圖像顯示區(qū)域、畫面中心區(qū)域或是成像焦距景深內(nèi)的區(qū)域以決定或產(chǎn)生ROI圖像數(shù)據(jù)。
[0048]在一具體實施例中，例如在遠端圖像監(jiān)視系統(tǒng)的應用情境，ROI信息SI例如可對應至原始圖像數(shù)據(jù)D_i中變異量(例如是前后不同幀畫面間的變異量)最大的區(qū)域定義為ROI區(qū)域，而后由圖像處理單元105搜尋變異量最大的區(qū)域以決定或產(chǎn)生ROI圖像數(shù)據(jù)。
[0049]編碼單元107存取信源單元101中的原始圖像數(shù)據(jù)D_i，并據(jù)以編碼產(chǎn)生圖像串流數(shù)據(jù)Str_i。舉例來說，編碼單元107可為任何現(xiàn)有的圖像壓縮、編碼、處理單元，用以針對原始圖像數(shù)據(jù)D_i進行諸如壓縮、編碼及相關(guān)處理操作。進一步的說，編碼單元107包括數(shù)據(jù)存取模塊107a、編碼內(nèi)核模塊107b及暫存模塊107c，其分別用以存取原始圖像數(shù)據(jù)D_i中的各筆幀畫面數(shù)據(jù)、針對各筆幀畫面數(shù)據(jù)進行編碼處理及暫存相關(guān)操作后所得到的數(shù)據(jù)。
[0050]舉例來說，原始圖像數(shù)據(jù)D_i中包括原始時間字段信息，其對應地指示原始圖像數(shù)據(jù)D_i中各筆幀畫面數(shù)據(jù)的時間索引值。編碼單元107例如選擇性地參考原始圖像數(shù)據(jù)D_i中的原始時間字段信息或參考其編碼操作中產(chǎn)生的幀索引信息，在圖像串流數(shù)據(jù)Str_i中夾帶各筆幀畫面數(shù)據(jù)的時間字段信息。
[0051]編碼單元109存取存儲單元103中的ROI圖像數(shù)據(jù)D_R0I，并據(jù)以編碼產(chǎn)生圖像串流數(shù)據(jù)Str_R0I。與編碼單元107相似，編碼單元109也可為任何現(xiàn)有的圖像壓縮、編碼及處理單元，以針對ROI圖像數(shù)據(jù)D_R0I進行對應的處理；而編碼單元109亦對應地具有數(shù)據(jù)存取模塊109a、編碼內(nèi)核模塊109b及暫存模塊109c。
[0052]由于ROI圖像數(shù)據(jù)D_R0I由圖像處理單元105自原始圖像數(shù)據(jù)D_i中復制而得，ROI圖像數(shù)據(jù)0_如1中亦包括與原始時間字段信息對應的參考時間字段信息，以指示ROI圖像數(shù)據(jù)D_R0I中各筆ROI畫面數(shù)據(jù)的時間索引值。此外，ROI圖像數(shù)據(jù)D_R0I還包括空間字段信息，以指示各筆ROI畫面數(shù)據(jù)與原始圖像數(shù)據(jù)中的各筆幀畫面數(shù)據(jù)的像素值坐標關(guān)系。換句話說，ROI圖像數(shù)據(jù)D_R0I對應地包括參考時間字段信息及空間字段信息，以對應地指示ROI圖像數(shù)據(jù)D_R0I中的各筆ROI畫面數(shù)據(jù)與原始圖像數(shù)據(jù)D_i中各筆幀畫面數(shù)據(jù)的時間域及空間域?qū)P(guān)系。
[0053]編碼單元109例如選擇性地參考ROI圖像數(shù)據(jù)D_R0I中的參考時間字段信息或參考其編碼操作產(chǎn)生的幀時序索引信息，在圖像串流數(shù)據(jù)Str_R0I中夾帶各筆ROI畫面數(shù)據(jù)的參考時間字段信息及空間字段信息。
[0054]舉一個操作實例來說，編碼單元107及109以完全獨立的硬件模塊來實現(xiàn)，以經(jīng)由完全獨立的兩組線路分別對原始圖像數(shù)據(jù)D_i及ROI圖像數(shù)據(jù)D_R0I進行處理。
[0055]傳輸單元111接收編碼單元107及109所產(chǎn)生的圖像串流數(shù)據(jù)Str_i及Str_R0I，并分別經(jīng)由通信鏈路Cl及C2傳輸圖像串流數(shù)據(jù)Str_i及Str_R0I。據(jù)此，傳輸端裝置10可有效地經(jīng)由通信鏈路Cl傳送信源單元101所提供的原始圖像數(shù)據(jù)D_i，同時額外通過通信連接C2來傳送原始圖像數(shù)據(jù)D_i中對應的ROI圖像數(shù)據(jù)D_R0I。通信鏈路Cl及C2可以任何現(xiàn)有的圖像數(shù)據(jù)傳輸接口及協(xié)議來傳輸。簡言之，圖像串流數(shù)據(jù)Str_i及Str_R0I經(jīng)由傳輸端裝置10中完全獨立的兩個串流路徑來提供，而其也可獨立地經(jīng)由完全不相同的傳輸路徑來進行傳輸。
[0056]再者，由于傳輸端裝置10通過完全獨立的兩個串流路徑來產(chǎn)生圖像串流數(shù)據(jù)Str_i及Str_R0I，編碼單元107及109也可以具有不同壓縮比例或是不同處理機制的編碼器來實現(xiàn)。舉例來說，相較于編碼單元107，編碼單元109系配置有運算量較高的錯誤更正機制或是壓縮比率較低圖像還原質(zhì)量較高的圖像處理機制，以針對ROI圖像數(shù)據(jù)D_R0I配置運算負載較高的圖像處理機制，以對應地提供質(zhì)量較佳的ROI圖像數(shù)據(jù)D_R0I。
[0057]在本實施例中，雖僅原始圖像數(shù)據(jù)D_i及ROI圖像數(shù)據(jù)D_R0I分別存儲在信源單元101及存儲單元103中，而編碼單元107及109分別存取并針對信源單元101及存儲單元103中的圖像數(shù)據(jù)進行編碼操作的情形為例作說明，然而，本實施例的傳輸端裝置10并不局限于此。
[0058]在其他例子中，本實施例的傳輸端裝置10也可省去存儲單元103的配置，編碼單元109通過圖像處理單元105耦接至存取信源單元101。此時，圖像處理單元105可參考ROI信息SI，以調(diào)整編碼單元109存取信源單元101時的存儲器存取指針(Pointer)設定。據(jù)此，通過圖像處理單元105的存儲器存取指針設定操作，編碼單元107及109可分別從信源單元101中存取得到原始圖像數(shù)據(jù)D_i及ROI圖像數(shù)據(jù)0_如1，藉此針對其進行對應的圖像編碼操作而無需存儲單元103的配置。[0059]接收端裝置
[0060]請參照圖3，其繪示依照本發(fā)明實施例的接收端裝置的方塊圖。舉例來說，接收端裝置20包括接收單元201、暫存單元203、205、解碼單元207、209、圖像選擇單元211及圖像處理單元213。
[0061]接收單元201分別經(jīng)由通信鏈路Cl及C2與傳輸單元111進行通信操作，以對應地接收并分別將到圖像串流數(shù)據(jù)Str_i’及Str_R0I’存儲在暫存單元203及205中。在理想情況中，通信鏈路Cl及C2為理想傳輸通道，而接收單元201接收到的圖像串流數(shù)據(jù)Str_i’及Str_R0I’實質(zhì)上分別等于傳輸單元111所提供的圖像串流數(shù)據(jù)Str_i及Str_R0I。
[0062]解碼單元207存取暫存單元203中存儲的圖像串流數(shù)據(jù)Str_i’，并據(jù)以解碼產(chǎn)生還原原始圖像數(shù)據(jù)D_i’。舉例來說，解碼單元207包括解碼內(nèi)核模塊207a及暫存模塊207b ;解碼內(nèi)核模塊207a配置與編碼內(nèi)核模塊107b對應的解碼操作能力，以解碼得到還原原始圖像數(shù)據(jù)D_i’，并將還原原始圖像數(shù)據(jù)D_i’存儲在暫存模塊207b中。
[0063]解碼單元209存取暫存單元205中存儲的圖像串流數(shù)據(jù)Str_R0I’，并據(jù)以解碼產(chǎn)生還原ROI圖像數(shù)據(jù)D_R0I’。相似地，解碼單元209例如包括解碼內(nèi)核模塊209a及暫存模塊209b ;解碼內(nèi)核模塊209a配置與編碼內(nèi)核模塊109b對應的解碼操作能力，以解碼得到還原ROI圖像數(shù)據(jù)D_R0I’，并將還原ROI圖像數(shù)據(jù)D_R0I’存儲在暫存模塊209b中。
[0064]此外，解碼單元207及209還找出圖像串流數(shù)據(jù)Str_i’及Str_R0I’中夾帶的各幀畫面數(shù)據(jù)的原始時間字段信息及各筆ROI畫面數(shù)據(jù)的參考時間字段信息與空間字段信息，并將其存儲在還原原始圖像數(shù)據(jù)D_i’及還原ROI圖像數(shù)據(jù)0_如1’中。其中，還原原始時間字段信息(位于還原原始圖像數(shù)據(jù)D_i’中)與還原參考時間字段信息(位于還原ROI圖像數(shù)據(jù)D_R0I’中)對應，并分別用以指示還原原始圖像數(shù)據(jù)D_i’中各筆還原幀畫面數(shù)據(jù)的時間索引值，及還原ROI圖像數(shù)據(jù)0_如1’中各筆還原ROI畫面數(shù)據(jù)的時間索引值。此外，還原ROI圖像數(shù)據(jù)0_如1’中更具有還原空間字段信息。據(jù)此，對應地指示各筆還原ROI圖像數(shù)據(jù)與對應的各筆還原幀畫面數(shù)據(jù)間的時間域及空間域?qū)P(guān)系。
[0065]圖像選擇單元211參考還原原始時間字段信息、還原參考時間字段信息及還原空間字段信息，分別從暫存模塊207b及209b中存取對應至相同時間索引值的選取還原幀畫面及選取還原ROI畫面。
[0066]請參照圖4，其繪示圖像選擇單元211的操作示意圖。舉例來說，在某個操作時點上，暫存模塊207b暫存還原原始圖像數(shù)據(jù)D_i’中的5筆還原幀畫面數(shù)據(jù)F (t-2)、F(t-l)、F(t)、F(t+l)及F(t+2)，其中的還原原始時間字段信息分別對應至時間索引值t-2、t-l、t、t+1及t+2，其中t為大于或等于2的自然數(shù)。相似地，暫存模塊20%暫存還原ROI圖像數(shù)據(jù)0_如1’中的5筆還原ROI畫面數(shù)據(jù)€(卜2)、€(卜1)4(0、€&+1)及f (t+2)，其中的還原參考時間字段信息分別對應至時間索引值t-2、t-1、t、t+1及t+2。
[0067]在這個操作實例中，圖像選擇單元211參考各筆還原幀畫面數(shù)據(jù)F (t-2)至F (t+2)的還原原始時間字段信息及各筆還原ROI畫面數(shù)據(jù)f (t-2)至f (t+2)的還原參考時間字段信息，找出對應具有相同時間索引值的一筆選取還原巾貞畫面及一筆選取還原ROI畫面,例如是還原幀畫面數(shù)據(jù)F (t)及還原ROI畫面數(shù)據(jù)f(t)。
[0068]圖像處理單元213接收選取還原幀畫面及選取還原ROI畫面，并根據(jù)還原空間字段信息以合并得到還原幀畫面數(shù)據(jù)Fm。舉例來說，圖像處理單元213通過將選取還原ROI畫面數(shù)據(jù)覆蓋并取代選取還原幀畫面數(shù)據(jù)的方式，覆蓋區(qū)域的信息由還原空間字段信息提供，藉此整合此兩筆畫面數(shù)據(jù)；圖像處理單元213更例如針對還原幀畫面數(shù)據(jù)Fm進行平滑化操作。
[0069]據(jù)此，經(jīng)由上述操作流程，本實施例的接收端裝置20可有效地經(jīng)由通信鏈路Cl及C2接收傳輸端裝置10提供的圖像串流數(shù)據(jù)Str_i’及Str_R0I’，并據(jù)以合并得到還原幀畫面數(shù)據(jù)Fm。
[0070]在本實施例中，雖僅以圖像選擇單元211執(zhí)行如圖4所示的畫面數(shù)據(jù)選取操作的情形為例作說明，然而，本實施例的圖像選擇單元211并不局限于此。在其他例子中，圖像選擇單元211更用提供狀態(tài)指示信號S_in通知圖像處理單元213還原原始圖像數(shù)據(jù)D_i’及還原ROI圖像數(shù)據(jù)D_R0I’是否發(fā)生數(shù)據(jù)遺失的情形，并指示其經(jīng)由不同的圖像處理方法來得到還原幀畫面數(shù)據(jù)Fm。
[0071]進一步的說，當還原原始及還原ROI圖像數(shù)據(jù)D_i’及D_R0I’中均未發(fā)生數(shù)據(jù)遺失時，狀態(tài)指示信號S_in對應至預設數(shù)值；圖像處理單元213響應于對應至預設數(shù)值的狀態(tài)指示信號S_in，執(zhí)行前述根據(jù)對應至相同時間索引值的選取還原幀畫面及選取還原ROI畫面合并得到還原幀畫面數(shù)據(jù)Fm的操作。
[0072]相對地，當遺失還原原始圖像數(shù)據(jù)D_i’中對應至時間索引值t的還原幀畫面數(shù)據(jù)F(t)時，圖像選擇單元211輸出對應至第一狀態(tài)數(shù)值的狀態(tài)指示信號S_in，并選擇性選擇對應至前一個或后一個時間索引值的還原幀畫面數(shù)據(jù)(即是F(t-l)或F(t+1))作為選擇還原幀畫面。據(jù)此，圖像處理單元213響應于對應至第一狀態(tài)數(shù)值的狀態(tài)指示信號S_in，根據(jù)實質(zhì)上對應至不同時間索引值的選取還原幀畫面(例如是F(t-l)或F(t+1)及選取還原ROI畫面(f(t))合并得到還原幀畫面數(shù)據(jù)Fm。此外，圖像處理單元213還選擇性地額外針對選取還原幀畫面進行諸如移動補償?shù)刃扪a操作。
[0073]相對地，當遺失還原ROI圖像數(shù)據(jù)D_R0I’中對應至時間索引值t的還原ROI畫面數(shù)據(jù)f(t)時，圖像選擇單元211輸出對應至第二狀態(tài)數(shù)值的狀態(tài)指示信號S_in。據(jù)此，圖像處理單元213響應于對應至第二狀態(tài)數(shù)值的狀態(tài)指示信號S_in，直接將選取還原幀畫面(例如是F(t))及作為還原幀畫面數(shù)據(jù)Fm。換句話說，在遺失還原ROI畫面數(shù)據(jù)f(t)的情況下，圖像處理單元213對應地舍棄合并選取還原幀畫面及選取還原ROI畫面的操作，以將選取還原巾貞畫面輸出。
[0074]本實施例的圖像傳輸系統(tǒng)包括傳輸端裝置及接收端裝置，其間通過多個通信鏈路相連接。傳輸端裝置通過完全獨立的兩個圖像數(shù)據(jù)處理路徑來進行原始圖像數(shù)據(jù)及ROI圖像數(shù)據(jù)的編碼及傳輸處理；接收端裝置經(jīng)由此些通信鏈路分別接收此筆原始圖像數(shù)據(jù)串流及ROI圖像數(shù)據(jù)串流，并對應地通過完全獨立的圖像數(shù)據(jù)處理路徑來進行對應的數(shù)據(jù)解碼及接收處理。據(jù)此，相較于傳統(tǒng)圖像傳輸系統(tǒng)，本實施例的圖像傳輸系統(tǒng)具有可獨立地傳輸原始圖像及ROI圖像，及可有效地在未大幅增加數(shù)據(jù)傳輸量的情況下，提升原始圖像中ROI區(qū)域的圖像顯示質(zhì)量的優(yōu)點。
[0075]綜上所述，雖然本發(fā)明已以優(yōu)選實施例公開如上，然其并非用以限定本發(fā)明。本領(lǐng)域技術(shù)人員在不脫離本發(fā)明的精神和范圍內(nèi)，當可作各種的更動與潤飾。因此，本發(fā)明的保護范圍當視所附權(quán)利要求書所界定者為準。
【權(quán)利要求】
1.一種傳輸端裝置,包括: 一信源單元，用以提供一原始圖像數(shù)據(jù)； 一圖像處理單元，接收該原始圖像數(shù)據(jù)，并響應于一感興趣圖像區(qū)域ROI (Region ofInterest)信息，從該原始圖像數(shù)據(jù)中決定一 ROI圖像數(shù)據(jù)； 一第一編碼單元，存取該原始圖像數(shù)據(jù)，并據(jù)以編碼產(chǎn)生一第一圖像串流數(shù)據(jù)； 一第二編碼單元，存取該ROI圖像數(shù)據(jù)，并據(jù)以編碼產(chǎn)生一第二圖像串流數(shù)據(jù)，其中該第二圖像串流數(shù)據(jù)具有一參考時間字段信息及一空間字段信息，分別指示該ROI圖像數(shù)據(jù)與該原始圖像數(shù)據(jù)的時間域及空間域?qū)P(guān)系；以及 一傳輸單元，接收該第一及該第二圖像串流數(shù)據(jù)，并分別經(jīng)由一第一通信鏈路及一第二通信鏈路傳輸該第一及該第二圖像串流數(shù)據(jù)。
2.如權(quán)利要求1所述的傳輸端裝置，其中該原始圖像數(shù)據(jù)包括一原始時間字段信息，用以指示該原始圖像數(shù)據(jù)中各多個幀畫面的索引值。
3.如權(quán)利要求2所述的傳輸端裝置，其中該圖像處理單元系參考該原始時間字段信息以產(chǎn)生該參考時間字段信息，該參考時間字段信息與該原始時間字段信息對應，并用以指示該ROI圖像數(shù)據(jù)中各多個ROI畫面的索引值。
4.一種接收端裝置，包括: 一第一暫存單元及一第二暫存單元；` 一接收單元，經(jīng)由一第一通信鏈路及一第二通信鏈路分別接收一第一圖像串流數(shù)據(jù)及一第二圖像串流數(shù)據(jù)，并將該第一及該第二圖像串流數(shù)據(jù)分別存儲在該第一及該第二暫存單元中； 一第一解碼單元，存取該第一暫存單元中的該第一圖像串流數(shù)據(jù)，并據(jù)以解碼產(chǎn)生及暫存一還原原始圖像數(shù)據(jù)； 一第二解碼單元，存取該第二暫存單元中的該第二圖像串流數(shù)據(jù)，并據(jù)以解碼產(chǎn)生并暫存一還原感興趣圖像區(qū)域ROI (Region of Interest)圖像數(shù)據(jù),該第二圖像串流數(shù)據(jù)具有一還原參考時間字段信息及一還原空間字段信息，分別指示該還原ROI圖像數(shù)據(jù)與該還原原始圖像數(shù)據(jù)的時間域及空間域?qū)P(guān)系； 一圖像選擇單元，參考該還原參考時間及該還原空間字段信息從該第一及該第二解碼單兀中存取相互對應的一選取還原幀畫面及一選取還原ROI畫面；以及 一圖像處理單元，接收該選取還原幀畫面及該選取還原ROI畫面，并據(jù)以合并得到一還原幀畫面數(shù)據(jù)。
5.如權(quán)利要求4所述的接收端裝置，其中該還原原始圖像數(shù)據(jù)包括一還原原始時間字段信息，用以指示該還原原始圖像數(shù)據(jù)中各多個還原幀畫面的索引值。
6.如權(quán)利要求5所述的接收端裝置，其中該圖像處理單元系參考該還原原始時間字段信息來產(chǎn)生該還原參考時間字段信息，該還原參考時間字段信息與該還原原始時間字段信息對應，并用以指示該還原ROI圖像數(shù)據(jù)中各多個還原ROI畫面的索引值。
7.—種圖像傳輸系統(tǒng),包括: 一傳輸端裝置，包括: 一信源單元，用以提供一原始圖像數(shù)據(jù)； 一存儲單元；一第一圖像處理單元，接收該原始圖像數(shù)據(jù)，并響應于一感興趣圖像區(qū)域ROI (Regionof Interest)信息，從該原始圖像數(shù)據(jù)中決定一 ROI圖像數(shù)據(jù)，該圖像處理單元還將該ROI圖像數(shù)據(jù)存儲于該存儲單元中； 一第一編碼單元，存取該信源單元中的該原始圖像數(shù)據(jù)，并據(jù)以編碼產(chǎn)生一第一圖像串流數(shù)據(jù)； 一第二編碼單元，存取該存儲單元中的該ROI圖像數(shù)據(jù)，并據(jù)以編碼產(chǎn)生一第二圖像串流數(shù)據(jù)，其中該第二圖像串流數(shù)據(jù)具有一參考時間字段信息及一空間字段信息，分別指示該ROI圖像數(shù)據(jù)與該原始圖像數(shù)據(jù)的時間域及空間域?qū)P(guān)系 '及 一傳輸單元，接收該第一及該第二圖像串流數(shù)據(jù)，并分別經(jīng)由一第一通信鏈路及一第二通信鏈路傳輸該第一及該第二圖像串流數(shù)據(jù)；以及 一接收端裝置，經(jīng)由該第一及該第二通信鏈路與該傳輸端裝置耦接，該接收端裝置包括: 一第一暫存單元及一第二暫存單元； 一接收單元，分別經(jīng)由該第一及該第二通信鏈路接收該第一及該第二圖像串流數(shù)據(jù)，并將該第一及該第二圖像串流數(shù)據(jù)分別存儲在該第一及該第二暫存單元中； 一第一解碼單元，存取該第一暫存單元中的該第一圖像串流數(shù)據(jù)，并據(jù)以解碼產(chǎn)生及暫存一還原原始圖像數(shù)據(jù)； 一第二解碼單元，存取該第二暫存單元中的該第二圖像串流數(shù)據(jù)，并據(jù)以解碼產(chǎn)生并暫存一還原ROI圖像數(shù)據(jù)，該第二圖像串流數(shù)據(jù)具有一還原參考時間字段信息及一還原空間字段信息，分別指示該還原ROI 圖像數(shù)據(jù)與該還原原始圖像數(shù)據(jù)的時間域及空間域?qū)P(guān)系； 一圖像選擇單元，參考該還原參考時間及該還原空間字段信息從該第一及該第二解碼單兀中存取相互對應的一選取還原幀畫面及一選取還原ROI畫面；及 一圖像處理單元，接收該選取還原幀畫面及該選取還原ROI畫面，并據(jù)以合并得到一還原幀畫面數(shù)據(jù)。
8.如權(quán)利要求7所述的圖像傳輸系統(tǒng)，其中該原始圖像數(shù)據(jù)包括一原始時間字段信息，該原始時間字段信息用以指示該原始圖像數(shù)據(jù)中各多個幀畫面的索引值。
9.如權(quán)利要求8所述的圖像傳輸系統(tǒng)，其中該第一圖像處理單元系參考該原始時間字段信息以產(chǎn)生該參考時間字段信息，該參考時間字段信息與該原始時間字段信息對應，并用以指示該ROI圖像數(shù)據(jù)中各多個ROI畫面的索引值。
10.如權(quán)利要求9所述的圖像傳輸系統(tǒng)，其中該還原原始圖像數(shù)據(jù)包括一還原原始時間字段信息，該還原原始時間字段信息與該原始時間字段信息對應，并用以指示該還原原始圖像數(shù)據(jù)中各多個還原幀畫面的索引值。
11.如權(quán)利要求10所述的圖像傳輸系統(tǒng)，其中該還原參考時間字段信息與該還原原始時間字段信息對應，并用以指示該還原ROI圖像數(shù)據(jù)中各多個還原ROI畫面的索引值。
【文檔編號】H04N19/20GK103517076SQ201210238854
【公開日】2014年1月15日 申請日期:2012年7月10日 優(yōu)先權(quán)日:2012年6月19日
【發(fā)明者】鄭楷儒, 陳榮坤, 林之寅 申請人:廣達電腦股份有限公司