專利名稱：圖像發(fā)送方法和裝置，以及圖像記錄方法和裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像處理技術(shù)，特別是涉及基于區(qū)域圖像對原圖像進行處理的圖像記錄技術(shù)，圖像通信技術(shù)，圖像再現(xiàn)技術(shù)。
背景技術(shù)：
數(shù)字照相機的出廠臺數(shù)超過了銀鹽(膠片)照相機，在個人級別上欣賞圖像的人口正在增加。最近，市場上還出現(xiàn)了可拍攝分辨率超過1000萬像素的照片的數(shù)字照相機。
但是，要把這些圖像發(fā)送給朋友，或者保存到遠程的服務(wù)器時，盡管具備寬帶網(wǎng)通信，也需要相當(dāng)長的時間。不僅是數(shù)字照相機的圖像，在將高精細的圖像發(fā)送給用戶的服務(wù)中，在用戶終端的等待時間同樣也成為問題。

發(fā)明內(nèi)容
本發(fā)明就是鑒于以上問題點而完成的，目的是提供一種不損及圖像的清晰度地傳送圖像的技術(shù)。此外，還提供降低傳送的等待時間的影響的技術(shù)。
為了達到上述目的，本發(fā)明提供一種圖像記錄方法，包括多次將原圖像的一部分區(qū)域切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像以在再現(xiàn)時能順利再現(xiàn)的形式進行保存的步驟。
本發(fā)明從原圖像切出多個區(qū)域圖像，獲取它們的區(qū)域圖像的位置關(guān)系。因此，在再現(xiàn)區(qū)域圖像時，能夠根據(jù)上述的位置關(guān)系，連續(xù)地或者平滑地顯示多個區(qū)域圖像。此外，在這樣地顯示區(qū)域圖像期間，如果依次保存區(qū)域圖像，則能夠保存整個原圖像。
如果從發(fā)送方流式分發(fā)信息區(qū)域圖像，則接收方能夠在接收數(shù)據(jù)量少的區(qū)域圖像后進行再現(xiàn)，在后臺逐步積累數(shù)據(jù)，根據(jù)上述位置關(guān)系的信息合成區(qū)域圖像，再現(xiàn)或者重新構(gòu)筑原圖像或者其一部分。期間，如果用插補等方法對多個區(qū)域圖像進行連續(xù)顯示，用戶就能夠在欣賞預(yù)排圖像和類似的活動圖像的同時獲取原圖像的數(shù)據(jù)。
另外，本發(fā)明的處理也可作為程序或者記錄它的記錄介質(zhì)來提供。此外，也可以提供將本發(fā)明的處理分配給各個單元的裝置。對本發(fā)明的各處理進行改編或者組合的技術(shù)也同樣，作為本發(fā)明是有效的。
具體實施例方式
本實施方式的圖像通信系統(tǒng)包括圖像發(fā)送裝置和圖像接收裝置，通過因特網(wǎng)和其他包括廣播的網(wǎng)絡(luò)連接起來。
圖像發(fā)送裝置包括以下結(jié)構(gòu)。
通信單元，與網(wǎng)絡(luò)進行通信。
圖像輸入單元，用任意的方法獲取成為處理對象的原圖像。為此，可以包含照相機，也可以把在其他場所拍攝或者生成的原圖像通過通信單元輸入。原圖像不僅限于照相機拍攝的圖像，通過CG生成的圖像也可以，但是，從某種程度上說，最好是像素數(shù)多，也就是說高分辨率的圖像。
區(qū)域圖像選擇單元，具有GUI，具有繪圖(drawing)軟件或者圖像編輯軟件的功能。向用戶顯示原圖像。由于原圖像是高分辨率的，因此在圖像發(fā)送裝置的畫面上有時只能夠顯示部分區(qū)域。這時，區(qū)域圖像選擇單元具備用戶在畫面上使原圖像畫面滾動的接口。當(dāng)在進行了畫面滾動的位置上顯示所希望的部分時，用戶指示“捕獲(capture)”。用戶多次捕獲區(qū)域圖像。
捕獲指示輸入單元，檢測上述的捕獲指示。
位置獲取單元，在檢測出捕獲指示時，把例如用戶在畫面上放置光標(biāo)的位置作為要捕獲的區(qū)域圖像的“中心位置”而獲取，并獲取區(qū)域圖像在原圖像中被切出的區(qū)域位置信息。
第1匹配信息生成單元，根據(jù)中心位置和區(qū)域位置信息，求出被捕獲的區(qū)域圖像間的相對位置信息，作為匹配信息(將此稱為第1匹配信息)進行保存。相對位置信息，在區(qū)域圖像僅進行平行移動時作為移動矢量來獲取，但一般作為仿射變換(affine transformation)信息來獲取。也就是說，區(qū)域圖像間的關(guān)系通過平行移動、旋轉(zhuǎn)、放大或者縮小來記述。
第2匹配信息生成單元，在被捕獲的區(qū)域圖像間進行已知的圖像匹配處理，作為這些圖像間的匹配信息(將此稱為第2匹配信息)進行保存。該信息作為像素單位或者圖像塊單位的對應(yīng)信息被記述。
數(shù)據(jù)流生成單元，使區(qū)域圖像和第1匹配信息聯(lián)相關(guān)聯(lián)地使之成為數(shù)據(jù)流，傳遞到通信單元?；蛘哂涗浀奖镜赜涗泦卧?。根據(jù)需要，也加入第2匹配信息。比如，生成{區(qū)域圖像A，區(qū)域圖像B，區(qū)域圖像AB間的第1以及第2匹配信息，...}這種數(shù)據(jù)流。數(shù)據(jù)流生成單元根據(jù)需要將區(qū)域圖像進行壓縮編碼，或者具有對整個數(shù)據(jù)流進行壓縮編碼的編碼器。
圖像接收裝置包括以下結(jié)構(gòu)。
通信單元，與網(wǎng)絡(luò)進行通信。
數(shù)據(jù)流輸入單元，從圖像發(fā)送裝置接收上述數(shù)據(jù)流。
數(shù)據(jù)流分析單元，從接收到的數(shù)據(jù)流，檢測并區(qū)分區(qū)域圖像的數(shù)據(jù)，第1以及第2匹配信息。
圖像觀測器，將區(qū)域圖像以及后述的第1、第2插補圖像顯示在畫面上。當(dāng)區(qū)域圖像的數(shù)據(jù)是被壓縮的圖像時，圖像觀測器具有圖像解碼器，對圖像進行譯碼后將其再現(xiàn)。
第1插補單元，根據(jù)第1匹配信息，生成區(qū)域圖像間的插補圖像(稱為第1插補圖像)。第1插補圖像通過對始點方的區(qū)域圖像實施仿射變換，然后將其內(nèi)插到終點方的區(qū)域圖像之間來獲得。第1插補圖像不限于一張，而是取能平滑地進行顯示的張數(shù)。
第2插補單元，根據(jù)第2匹配信息，生成區(qū)域圖像間的插補圖像(稱為第2插補圖像)。第2插補圖像，作為對始點方的區(qū)域圖像和對終點方的區(qū)域圖像的對應(yīng)像素以及對應(yīng)像素塊進行內(nèi)插后的變形(morphing)圖像而獲得。第2插補圖像不限于一張，而是取能平滑地進行顯示的張數(shù)。
圖像合成單元，根據(jù)區(qū)域圖像和第1匹配信息，對多個區(qū)域圖像進行合成，也就是說，通過進行拼接重新構(gòu)成原圖像或者其一部分。根據(jù)區(qū)域圖像的中心位置和區(qū)域位置信息對區(qū)域圖像進行排列，反復(fù)進行使一方的區(qū)域圖像來代表用多個區(qū)域圖像進行重合的地方的處理，能夠再次構(gòu)成由多個區(qū)域圖像所覆蓋的全區(qū)域的圖像。如果其覆蓋了整個原圖像則能夠完全再現(xiàn)原圖像，如果不完全覆蓋，則只用能夠覆蓋之處也可以進行再現(xiàn)。此外，不能覆蓋的區(qū)域也可通過圖像發(fā)送裝置的數(shù)據(jù)流生成單元，作為“未覆蓋區(qū)域圖像數(shù)據(jù)”納入數(shù)據(jù)流中。這時，在圖像合成單元能夠完全再現(xiàn)原圖像。
圖像的發(fā)送和接收原圖像是非常高精細的圖像，數(shù)據(jù)量很多。實施方式的圖像數(shù)據(jù)通信技術(shù)并不是在發(fā)送完整個原圖像之前停止顯示并等待，而是首先發(fā)送區(qū)域圖像，并將其進行顯示。在一個接著一個地發(fā)送區(qū)域圖像并依次將其顯示的期間，可提高消除用戶的無聊感，同時在后臺(background)從原圖像的數(shù)據(jù)開始逐漸積累。因此，實施方式的技術(shù)具有圖像依次傳送技術(shù)的優(yōu)點，從把區(qū)域圖像作為活動圖像依次展現(xiàn)這一點來看，在傳送過程中也具有作為內(nèi)容(content)價值。
用戶在圖像發(fā)送裝置上顯示原圖像，捕獲多個區(qū)域圖像。區(qū)域圖像可以說是在原圖像上開設(shè)窗口，從窗口窺視的區(qū)域性圖像，因此如果依次顯示這些多個區(qū)域圖像，就成為在廣闊的原圖像上進行預(yù)排(walk-through)那樣的圖像。因此，用戶可預(yù)先看到這樣做的效果，在實現(xiàn)合適的移動的移動路徑(motion path)上進行捕獲指示。
在圖像接收裝置，不僅是區(qū)域圖像，它們的插補圖像也從第1匹配信息生成，因此，多個區(qū)域圖像作為非常平滑的活動圖像來顯示。所以，就像是通過照相機的取景器依次觀看廣闊的空間的一部分，以這樣的方法逐步接收原圖像。
此外，第2匹配信息在區(qū)域圖像之間的變化大時，或者取出2幅區(qū)域圖像的原圖像原本就不同時，不能通過仿射變換來表達等的場合使用。也就是說，在本實施方式中，不僅是單一的原圖像，還能夠根據(jù)不同的原圖像，在圖像接收裝置再現(xiàn)活動圖像。在這種情況下，如果在各個區(qū)域圖像上附加將其切出的原圖像的ID，則能夠?qū)γ總€原圖像進行合成和再構(gòu)筑。
如上所述，根據(jù)該實施方式，能將非常高精細的原圖像作為一個活動圖像內(nèi)容向用戶進行顯示，而且能在不感到等待時間的同時積累原圖像的數(shù)據(jù)。能夠通過捕獲區(qū)域圖像的移動路徑以及區(qū)域圖像的大小等，作為發(fā)送方所希望的內(nèi)容來發(fā)送原圖像。從這個意義上，即使在不需要進行原圖像的積累的應(yīng)用中，也能夠?qū)崿F(xiàn)從靜止圖像生成活動圖像內(nèi)容并進行分發(fā)這樣的新的圖像表達以及服務(wù)的技術(shù)。
本發(fā)明的各種實施方式本發(fā)明的圖像發(fā)送裝置方的處理的方式如下所示。
(方式1)一種圖像記錄方法，其特征在于，包括多次將原圖像的一部分區(qū)域切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像以在再現(xiàn)時能順利再現(xiàn)的形式進行保存的步驟。
(方式2)一種圖像記錄方法，其特征在于，包括在設(shè)在原圖像的移動路徑上將上述原圖像的一部分區(qū)域多次切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像與上述移動路徑的信息一起進行保存的步驟。
(方式3)一種圖像記錄方法，其特征在于，包括多次將原圖像的一部分區(qū)域切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像和它們的相對位置信息一起進行保存的步驟。
(方式4)一種圖像記錄方法，其特征在于，包括多次將原圖像的一部分區(qū)域切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像與在上述原圖像中它們各自所占的區(qū)域位置信息一起進行保存的步驟。
(方式5)在方式1～4的任一項所記載的方法中，還包括將被保存的數(shù)據(jù)作為流式數(shù)據(jù)進行發(fā)送的步驟。
(方式6)在方式3記載的方法中，將上述相對位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
(方式7)在方式4記載的方法中，將上述區(qū)域位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
(方式8)在方式3記載的方法中，進一步保存上述多個區(qū)域圖像之間的匹配數(shù)據(jù)。
(方式9)在方式8記載的方法中，通過在上述多個區(qū)域圖像之間進行圖像匹配計算，生成上述匹配數(shù)據(jù)。
另一方面，圖像接收裝置方的處理的方式如下所示。
(方式10)一種圖像通信方法，其特征在于反復(fù)進行切出原圖像的一部分區(qū)域，作為區(qū)域圖像進行發(fā)送的處理，在進行所述發(fā)送時一并發(fā)送上述區(qū)域圖像在上述原圖像中的位置信息。
(方式11)在方式10記載的方法中，接收上述區(qū)域圖像和上述位置信息，保存到接收裝置的本地記錄裝置上。
(方式12)在方式11記載的方法中，根據(jù)上述位置信息合成上述區(qū)域圖像，再現(xiàn)上述原圖像或者其一部分。
(方式13)
在方式11記載的方法中，還發(fā)送上述區(qū)域圖像之間的匹配數(shù)據(jù)。
(方式14)一種圖像再現(xiàn)方法，其特征在于，包括獲取在設(shè)在原圖像的移動路徑上從上述原圖像切出后生成的多個區(qū)域圖像的步驟；根據(jù)上述移動路徑的信息合成獲取的多個區(qū)域圖像，再現(xiàn)上述原圖像或者其一部分的步驟。
(方式15)一種圖像再現(xiàn)方法，其特征在于，包括獲取切出原圖像的一部分區(qū)域而生成的多個區(qū)域圖像和它們的相對位置信息的步驟；根據(jù)上述相對位置信息合成獲取的多個區(qū)域圖像，再現(xiàn)上述原圖像或者其一部分的步驟。
(方式16)一種圖像再現(xiàn)方法，其特征在于，包括獲取多次切出原圖像的一部分區(qū)域而生成的多個區(qū)域圖像和這些區(qū)域圖像在上述原圖像中各自所占的區(qū)域位置信息的步驟；根據(jù)上述區(qū)域位置信息合成獲取的多個區(qū)域圖像，再現(xiàn)上述原圖像或者其一部分的步驟。
(方式17)在方式14～16的任一項記載的方法中，還包括至少將上述區(qū)域圖像作為流式數(shù)據(jù)通過網(wǎng)絡(luò)進行接收的步驟。
(方式18)在方式15記載的方法中，將上述相對位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
(方式19)在方式16記載的方法中，將上述區(qū)域位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
(方式20)一種圖像再現(xiàn)方法，其特征在于，包括獲取在設(shè)在原圖像的移動路徑上從上述原圖像切出而生成的多個區(qū)域圖像的步驟；根據(jù)上述移動路徑的信息，對獲取的多個區(qū)域圖像進行插補的步驟。
(方式21)一種圖像再現(xiàn)方法，其特征在于，包括獲取切出原圖像的一部分區(qū)域而生成的多個區(qū)域圖像和它們的相對位置信息的步驟；根據(jù)上述相對位置信息，插補獲取的多個區(qū)域圖像的步驟。
(方式22)一種圖像再現(xiàn)方法，其特征在于，包括獲取多次切出原圖像的一部分區(qū)域而生成的多個區(qū)域圖像和這些區(qū)域圖像在上述原圖像中各自所占的區(qū)域位置信息的步驟；根據(jù)上述區(qū)域位置信息，對獲取的多個區(qū)域圖像進行插補的步驟。
(方式23)在方式20～22的任一項記載的方法中，還包括至少將上述區(qū)域圖像作為流式數(shù)據(jù)通過網(wǎng)絡(luò)進行接收的步驟。
(方式24)在方式21記載的方法中，將上述相對位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
(方式25)在方式22記載的方法中，將上述區(qū)域位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
此外，獲取用原尺寸表示的被拍攝物體的原圖像，從該原圖像切出部分區(qū)域作為區(qū)域圖像，進行以上各種處理的服務(wù)，即使在新的圖像表達中也具有作為非常有趣的服務(wù)的可行性。
權(quán)利要求
1.一種圖像記錄方法，其特征在于，包括多次將原圖像的一部分區(qū)域切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像以在再現(xiàn)時能順利再現(xiàn)的形式進行保存的步驟。
2.一種圖像記錄方法，其特征在于，包括在設(shè)在原圖像的移動路徑上將上述原圖像的一部分區(qū)域多次切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像與上述移動路徑的信息一起進行保存的步驟。
3.一種圖像記錄方法，其特征在于，包括多次將原圖像的一部分區(qū)域切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像和它們的相對位置信息一起進行保存的步驟。
4.一種圖像記錄方法，其特征在于，包括多次將原圖像的一部分區(qū)域切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像與在上述原圖像中它們各自所占的區(qū)域位置信息一起進行保存的步驟。
5.根據(jù)權(quán)利要求1～4的任意一項所述的圖像記錄方法，其特征在于還包括將保存的數(shù)據(jù)作為流式數(shù)據(jù)進行發(fā)送的步驟。
6.根據(jù)權(quán)利要求3所述的圖像記錄方法，其特征在于將上述相對位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
7.根據(jù)權(quán)利要求4所述的圖像記錄方法，其特征在于將上述區(qū)域位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
8.根據(jù)權(quán)利要求3所述的圖像記錄方法，其特征在于進一步保存上述多個區(qū)域圖像之間的匹配數(shù)據(jù)。
9.根據(jù)權(quán)利要求8所述的圖像記錄方法，其特征在于通過在上述多個區(qū)域圖像之間進行圖像匹配計算，生成上述匹配數(shù)據(jù)。
10.一種圖像通信方法，其特征在于反復(fù)進行切出原圖像的一部分區(qū)域，作為區(qū)域圖像進行發(fā)送的處理，在進行所述發(fā)送時一并發(fā)送上述區(qū)域圖像在上述原圖像中的位置信息。
11.根據(jù)權(quán)利要求10所述的圖像通信方法，其特征在于接收上述區(qū)域圖像和上述位置信息，保存到接收裝置的本地記錄裝置上。
12.根據(jù)權(quán)利要求11所述的圖像通信方法，其特征在于根據(jù)上述位置信息合成上述區(qū)域圖像，再現(xiàn)上述原圖像或者其一部分。
13.根據(jù)權(quán)利要求11所述的圖像通信方法，其特征在于進一步發(fā)送上述區(qū)域圖像之間的匹配數(shù)據(jù)。
14.一種圖像再現(xiàn)方法，其特征在于，包括獲取在設(shè)在原圖像的移動路徑上從上述原圖像切出后生成的多個區(qū)域圖像的步驟；根據(jù)上述移動路徑的信息合成獲取的多個區(qū)域圖像，再現(xiàn)上述原圖像或者其一部分的步驟。
15.一種圖像再現(xiàn)方法，其特征在于，包括獲取切出原圖像的一部分區(qū)域而生成的多個區(qū)域圖像和它們的相對位置信息的步驟；根據(jù)上述相對位置信息合成獲取的多個區(qū)域圖像，再現(xiàn)上述原圖像或者其一部分的步驟。
16.一種圖像再現(xiàn)方法，其特征在于，包括獲取多次切出原圖像的一部分區(qū)域而生成的多個區(qū)域圖像和這些區(qū)域圖像在上述原圖像中各自所占的區(qū)域位置信息的步驟；根據(jù)上述區(qū)域位置信息合成獲取的多個區(qū)域圖像，再現(xiàn)上述原圖像或者其一部分的步驟。
17.根據(jù)權(quán)利要求14～16的任意一項所述的圖像再現(xiàn)方法，其特征在于還包括至少將上述區(qū)域圖像作為流式數(shù)據(jù)通過網(wǎng)絡(luò)進行接收的步驟。
18.根據(jù)權(quán)利要求15所述的圖像再現(xiàn)方法，其特征在于將上述相對位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
19.根據(jù)權(quán)利要求16所述的圖像再現(xiàn)方法，其特征在于將上述區(qū)域位置信息作為上述多個區(qū)域圖像間的仿射變換信息獲取。
20.一種圖像再現(xiàn)方法，其特征在于，包括獲取在設(shè)在原圖像的移動路徑上從上述原圖像切出而生成的多個區(qū)域圖像的步驟；根據(jù)上述移動路徑的信息，對獲取的多個區(qū)域圖像進行插補的步驟。
21.一種圖像再現(xiàn)方法，其特征在于，包括獲取切出原圖像的一部分區(qū)域而生成的多個區(qū)域圖像和它們的相對位置信息的步驟；根據(jù)上述相對位置信息，插補獲取的多個區(qū)域圖像的步驟。
22.一種圖像再現(xiàn)方法，其特征在于，包括獲取多次切出原圖像的一部分區(qū)域而生成的多個區(qū)域圖像和這些區(qū)域圖像在上述原圖像中各自所占的區(qū)域位置信息的步驟；根據(jù)上述區(qū)域位置信息，對獲取的多個區(qū)域圖像進行插補的步驟。
23.根據(jù)權(quán)利要求20～22的任意一項所述的圖像再現(xiàn)方法，其特征在于還包括至少將上述區(qū)域圖像作為流式數(shù)據(jù)通過網(wǎng)絡(luò)進行接收的步驟。
24.根據(jù)權(quán)利要求21的圖像再現(xiàn)方法，其特征在于將上述相對位置信息作為上述多個區(qū)域圖像之間的仿射變換信息獲取。
25.根據(jù)權(quán)利要求22的圖像再現(xiàn)方法，其特征在于將上述區(qū)域位置信息作為上述多個區(qū)域圖像之間的仿射變換信息獲取。
全文摘要
本發(fā)明提供一種圖像發(fā)送方法和裝置，以及圖像記錄方法和裝置，能解決因大的圖像數(shù)據(jù)的接收很費時間而產(chǎn)生的用戶等待時間的問題。本發(fā)明的圖像發(fā)送方法包括多次將原圖像的一部分區(qū)域切出，來獲取多個區(qū)域圖像的步驟；將獲取的多個區(qū)域圖像以在再現(xiàn)時能順利再現(xiàn)的形式進行保存的步驟。
文檔編號H04N1/387GK1645905SQ20041000461
公開日2005年7月27日 申請日期2004年2月18日 優(yōu)先權(quán)日2003年2月19日
發(fā)明者伊藤博文, 秋吉風(fēng)織 申請人:特爾斐控股有限公司