用于存儲圖像數(shù)據(jù)的方法和設(shè)備的制作方法
【專利摘要】本發(fā)明提供一種用于存儲圖像數(shù)據(jù)的方法和設(shè)備。提供了一種處理圖像數(shù)據(jù)的方法。所述方法包括接收輸入的圖像數(shù)據(jù)，確定輸入的圖像數(shù)據(jù)是否與在數(shù)據(jù)庫中預(yù)存儲的存儲的圖像數(shù)據(jù)匹配；在數(shù)據(jù)庫中存儲被確定為與存儲的圖像數(shù)據(jù)匹配的輸入的圖像數(shù)據(jù)；提供存儲在數(shù)據(jù)庫中的存儲的圖像數(shù)據(jù)。
【專利說明】用于存儲圖像數(shù)據(jù)的方法和設(shè)備
【技術(shù)領(lǐng)域】
[0001]本發(fā)明通常涉及一種用于存儲圖像數(shù)據(jù)的方法和設(shè)備。更具體地講，本發(fā)明涉及一種建立由用戶提供的圖像數(shù)據(jù)的數(shù)據(jù)庫(DB)以重新使用用于服務(wù)的圖像數(shù)據(jù)的方法和設(shè)備。
【背景技術(shù)】
[0002]無線終端當(dāng)前基于各個無線終端的位置提供各種服務(wù)。例如，提供基于無線終端所在的位置顯示地圖、提供導(dǎo)航功能或跟蹤位置的服務(wù)。具體地講，提供了在提供地圖或?qū)Ш焦δ軙r將周圍圖像提供給用戶的服務(wù)。
[0003]然而，當(dāng)前提供的圖像因為以2維(2D)格式構(gòu)造所以在查看圖像的視點上具有限制。因此，用戶在獲得用戶期望的精確圖像中會感到不放心。
[0004]另外，與不斷改變的實際環(huán)境相反，關(guān)于圖像數(shù)據(jù)的使用存在與所需的配備和經(jīng)濟可行性相關(guān)的限制。因此，用戶在現(xiàn)實中通過連續(xù)的更新來建立關(guān)于廣域的圖像數(shù)據(jù)的DB時具有困難。
[0005]因此，需要存在一種用于通過使用由使用服務(wù)的用戶獲得的圖像數(shù)據(jù)，實時并自動地建立將被用于所述服務(wù)的圖像數(shù)據(jù)DB的方法和設(shè)備。
[0006]以上信息被呈現(xiàn)為背景信息以僅幫助本公開的理解。針對本發(fā)明，上面的任意信息是否可應(yīng)用為現(xiàn)有技術(shù)，沒有做出確定，也沒有做出斷定。

【發(fā)明內(nèi)容】

[0007]本發(fā)明的一方面在于至少解決上述的問題和/或缺點，并在于至少提供以下描述的優(yōu)點。因此，本發(fā)明的一方面在于提供一種用于通過使用由使用服務(wù)的用戶獲得的圖像數(shù)據(jù)，實時并自動地建立將被用于所述服務(wù)的圖像數(shù)據(jù)數(shù)據(jù)庫(DB)的方法和設(shè)備。
[0008]根據(jù)本發(fā)明的一方面，提供一種處理圖像數(shù)據(jù)的方法。所述方法包括:接收輸入的圖像數(shù)據(jù)；確定輸入的圖像數(shù)據(jù)是否與在數(shù)據(jù)庫中預(yù)存儲的存儲的圖像數(shù)據(jù)匹配；在數(shù)據(jù)庫中存儲被確定為與存儲的圖像數(shù)據(jù)匹配的輸入的圖像數(shù)據(jù)；提供存儲在數(shù)據(jù)庫中的存儲的圖像數(shù)據(jù)。
[0009]根據(jù)本發(fā)明的另一方面，提供一種圖像數(shù)據(jù)輸入裝置。所述圖像數(shù)據(jù)輸入裝置包括:相機單元，捕獲圖像；位置信息識別器，識別與圖像數(shù)據(jù)輸入裝置所在的位置相應(yīng)的位置信息；方向信息處理器，識別包括在數(shù)據(jù)輸入裝置中的相機面向的方向；圖像數(shù)據(jù)產(chǎn)生器，將時間信息、從相機單元提供的圖像、從位置信息處理器提供的位置信息、由方向信息處理器識別的方向信息進(jìn)行組合以產(chǎn)生圖像數(shù)據(jù)。
[0010]根據(jù)本發(fā)明的另一方面，提供一種用于處理圖像數(shù)據(jù)的設(shè)備。所述設(shè)備包括:圖像數(shù)據(jù)輸入單元，接收輸入的圖像數(shù)據(jù)；圖像數(shù)據(jù)匹配單元，確定輸入的圖像數(shù)據(jù)是否與圖像數(shù)據(jù)數(shù)據(jù)庫中預(yù)存儲的存儲的圖像數(shù)據(jù)匹配；圖像數(shù)據(jù)管理器，存儲被確定為與圖像數(shù)據(jù)數(shù)據(jù)庫中的存儲的圖像數(shù)據(jù)匹配的輸入的圖像數(shù)據(jù)，并管理存儲的輸入的圖像數(shù)據(jù)；圖像數(shù)據(jù)提供器，提供存儲在圖像數(shù)據(jù)數(shù)據(jù)庫中的存儲的圖像數(shù)據(jù)。
[0011]根據(jù)本發(fā)明的另一方面，提供一種用于提供圖像數(shù)據(jù)的系統(tǒng)。所述系統(tǒng)包括:至少一個用戶終端，被配置為捕獲圖像，確定用于圖像的上下文圖像數(shù)據(jù)，將上下文圖像數(shù)據(jù)和圖像聯(lián)系起來，并發(fā)送到包括圖像和與圖像相關(guān)的上下文圖像數(shù)據(jù)的至少一個服務(wù)器；至少一個服務(wù)器，被配置為接收圖像數(shù)據(jù)，確定圖像數(shù)據(jù)是否與在所述至少一個服務(wù)器上預(yù)存儲的任何存儲的圖像數(shù)據(jù)相應(yīng)，并更新與接收的圖像數(shù)據(jù)相應(yīng)的存儲的圖像數(shù)據(jù)。
[0012]根據(jù)本發(fā)明的方面，因為圖像數(shù)據(jù)管理系統(tǒng)的操作不在特定時間被執(zhí)行，而是通過屬于多個人或非特定的人的諸如終端(例如，便攜式多媒體裝置、平板個人計算機(PC)、數(shù)字相機等)和移動通信裝置(例如，蜂窩式電話、智能電話等)的圖像數(shù)據(jù)輸入裝置被頻繁和反復(fù)執(zhí)行，所以可通過使用從多個圖像數(shù)據(jù)輸入裝置提供的圖像數(shù)據(jù)更有效地構(gòu)造圖像數(shù)據(jù)的數(shù)據(jù)庫。
[0013]根據(jù)本發(fā)明的方面，通過實時更新由圖像數(shù)據(jù)輸入裝置頻繁提供的圖像數(shù)據(jù)，可提供相應(yīng)區(qū)域或位置的最新的圖像數(shù)據(jù)，因此可將更實際的圖像數(shù)據(jù)提供給用戶。
[0014]根據(jù)本發(fā)明的方面，通過從由用戶提供的圖像自動識別附加信息并在圖像數(shù)據(jù)DB中存儲識別的附加信息，管理圖像數(shù)據(jù)DB的管理器可減輕手動輸入附加信息的負(fù)擔(dān)，并可有效地構(gòu)造具有更好的用戶使用的附加信息。
[0015]通過下面結(jié)合附圖公開本發(fā)明的示例性實施例的詳細(xì)描述，本發(fā)明的其他方面、優(yōu)點和突出特點對本領(lǐng)域的技術(shù)人員將變得清楚。
【專利附圖】

【附圖說明】
[0016]從下面結(jié)合附圖進(jìn)行描述，本發(fā)明的特定示例性實施例的上述和其它方面、特征和優(yōu)點將更易于理解，其中:
[0017]圖1是根據(jù)本發(fā)明的示例性實施例的圖像數(shù)據(jù)存儲管理系統(tǒng)的框圖；
[0018]圖2是示出根據(jù)本發(fā)明的示例性實施例的包括在圖像數(shù)據(jù)管理系統(tǒng)中的圖像數(shù)據(jù)輸入裝置的詳細(xì)配置的框圖；
[0019]圖3是示出根據(jù)本發(fā)明的示例性實施例的包括在圖像數(shù)據(jù)管理系統(tǒng)中的圖像數(shù)據(jù)管理服務(wù)器的詳細(xì)配置的框圖；
[0020]圖4示出根據(jù)本發(fā)明的示例性實施例的存儲在圖像數(shù)據(jù)管理服務(wù)器的數(shù)據(jù)庫中的存儲的圖像數(shù)據(jù)的示例；
[0021]圖5是根據(jù)本發(fā)明的示例性實施例的圖像數(shù)據(jù)處理方法的流程圖。
[0022]貫穿附圖，相同的標(biāo)號將被理解為指示相同的部件、組件和結(jié)構(gòu)。
【具體實施方式】
[0023]提供參照附圖進(jìn)行的以下描述以幫助對由權(quán)利要求及其等同物限定的本發(fā)明的示例性實施例的全面理解。包括各種特定細(xì)節(jié)以幫助理解，但是這些僅被視作示例性的。因此，本領(lǐng)域的普通技術(shù)人員將認(rèn)識到，在不脫離本發(fā)明的范圍和精神的情況下，可做出對這里描述的實施例的各種改變和修改。此外，為了清楚和簡明，可省略對公知功能和構(gòu)造的描述。
[0024]在以下描述和權(quán)利要求中使用的術(shù)語和詞語不限于字面含義，而是僅由發(fā)明人使用來實現(xiàn)對本發(fā)明的清楚和一致理解。因此，本領(lǐng)域的技術(shù)人員應(yīng)該清楚的是，僅為了示出目的并且不是為了限制由權(quán)利要求及其等同物限定本發(fā)明的目的，來提供本發(fā)明的示例性實施例的以下描述。
[0025]將理解，單數(shù)形式包括復(fù)數(shù)形式，除非上下文清楚地另有說明。因此，例如，對“組件接口”的提及包括對一個或多個這種接口的提及。
[0026]僅作為非窮盡說明，在此描述的便攜式終端可指示移動裝置(例如，蜂窩式電話、智能電話、個人數(shù)字助理(PDA)、數(shù)字相機、便攜式游戲機和MP3播放器、便攜式/個人多媒體播放器(PMP)、手持電子書、便攜式膝上型個人計算機(PC)、全球定位系統(tǒng)(GPS)導(dǎo)航、平板PC)與在此所公開的一致的能夠進(jìn)行無線通信或網(wǎng)絡(luò)通信的裝置(諸如臺式PC、高清晰電視(HDTV)、光盤播放器、機頂盒等)。
[0027]圖1是根據(jù)本發(fā)明的示例性實施例的圖像數(shù)據(jù)存儲管理系統(tǒng)的框圖。
[0028]參照圖1，根據(jù)本發(fā)明的示例性實施例的圖像數(shù)據(jù)管理系統(tǒng)包括通過有線/無線通信網(wǎng)絡(luò)連接的圖像數(shù)據(jù)輸入裝置和圖像數(shù)據(jù)管理服務(wù)器。
[0029]圖像數(shù)據(jù)輸入裝置10包括用于拍攝圖像的相機和用于通過有線/無線通信網(wǎng)絡(luò)發(fā)送圖像數(shù)據(jù)的通信模塊。例如，圖像數(shù)據(jù)輸入裝置10可與便攜式終端、為特定用途(例如，構(gòu)造圖像數(shù)據(jù))而提供的圖像拍攝裝置等相應(yīng)。
[0030]圖像數(shù)據(jù)管理服務(wù)器20接收從圖像數(shù)據(jù)輸入裝置10提供的圖像數(shù)據(jù)，以建立數(shù)據(jù)庫(DB)，并形成環(huán)境，其中，建立的數(shù)據(jù)庫可通過所述環(huán)境提供給用戶。
[0031]具體地講，圖像數(shù)據(jù)管理服務(wù)器20可從多個圖像數(shù)據(jù)輸入裝置10接收圖像數(shù)據(jù)以存儲接收的圖像數(shù)據(jù)，考慮包括在從所述多個圖像數(shù)據(jù)輸入裝置10提供的圖像數(shù)據(jù)中的信息(例如，位置信息、方向信息、時間信息、天氣信息等)更新圖像數(shù)據(jù)以存儲和管理更新的圖像數(shù)據(jù)，并將最新更新的圖像數(shù)據(jù)提供給用戶，和/或根據(jù)時間順序以歷史形式提供更新的圖像數(shù)據(jù)。
[0032]將描述圖像數(shù)據(jù)管理系統(tǒng)的操作。首先圖像數(shù)據(jù)輸入裝置10通過有線/無線通信網(wǎng)絡(luò)將獲得的圖像數(shù)據(jù)發(fā)送到圖像數(shù)據(jù)管理服務(wù)器20。其后，圖像數(shù)據(jù)管理服務(wù)器20考慮包括在圖像數(shù)據(jù)中的各種信息(例如，GPS信息、方向信息、時間信息、天氣信息等)識別與接收的圖像數(shù)據(jù)匹配的數(shù)據(jù)庫的區(qū)域，并識別與接收的圖像數(shù)據(jù)匹配的存儲的圖像數(shù)據(jù)。此后，圖像數(shù)據(jù)管理服務(wù)器20識別接收的圖像數(shù)據(jù)和存儲的圖像數(shù)據(jù)之間的相關(guān)性，將存儲的圖像數(shù)據(jù)更新為接收的圖像數(shù)據(jù)，并存儲更新的圖像數(shù)據(jù)。
[0033]圖像數(shù)據(jù)管理系統(tǒng)的操作不在特定時間被執(zhí)行，而是通過圖像數(shù)據(jù)輸入裝置10(例如，屬于許多和非特定的人的便攜式終端等)被頻繁和反復(fù)地執(zhí)行。因此，圖像數(shù)據(jù)管理服務(wù)器20具有的優(yōu)點在于:圖像數(shù)據(jù)管理服務(wù)器20可通過使用從多個圖像數(shù)據(jù)輸入裝置10提供的圖像數(shù)據(jù)在圖像數(shù)據(jù)管理服務(wù)器20內(nèi)更有效地建立圖像數(shù)據(jù)的數(shù)據(jù)庫。另外，圖像數(shù)據(jù)管理服務(wù)器20具有的優(yōu)點在于:圖像數(shù)據(jù)管理服務(wù)器20可通過實時更新由圖像數(shù)據(jù)輸入裝置10提供的圖像數(shù)據(jù)提供相應(yīng)的區(qū)域或位置的最新圖像數(shù)據(jù)，從而將更實際的圖像數(shù)據(jù)提供給用戶。
[0034]根據(jù)本發(fā)明的示例性實施例，圖像數(shù)據(jù)輸入裝置10產(chǎn)生圖像數(shù)據(jù)并將所述圖像數(shù)據(jù)發(fā)送給圖像數(shù)據(jù)管理服務(wù)器20，圖像數(shù)據(jù)管理服務(wù)器20從圖像數(shù)據(jù)輸入裝置10接收所述圖像數(shù)據(jù)，將所述圖像數(shù)據(jù)和存儲在數(shù)據(jù)庫中的圖像數(shù)據(jù)進(jìn)行匹配，并在數(shù)據(jù)庫中更新相應(yīng)的圖像數(shù)據(jù)。
[0035]圖2是示出根據(jù)本發(fā)明的示例性實施例的包括在圖像數(shù)據(jù)管理系統(tǒng)中的圖像數(shù)據(jù)輸入裝置的詳細(xì)配置的框圖。
[0036]參照圖2，圖像數(shù)據(jù)輸入裝置200包括相機單元210、位置信息處理器220、方向信息處理器230和圖像數(shù)據(jù)產(chǎn)生器240。
[0037]相機單元210可以是用于拍攝圖像的一般相機，所述相機以原始數(shù)據(jù)形式或使用預(yù)定格式壓縮的數(shù)據(jù)形式輸出關(guān)于拍攝的區(qū)域的顏色信息。根據(jù)本發(fā)明的示例性實施例，圖像指示從相機單元210輸出的數(shù)據(jù)，并被定義為原始數(shù)據(jù)或使用預(yù)定格式壓縮的顏色信
肩、O
[0038]通常，位置信息處理器220與用于確定圖像數(shù)據(jù)輸入裝置200當(dāng)前所在的區(qū)域的緯度和經(jīng)度的坐標(biāo)的裝置相應(yīng)。圖像數(shù)據(jù)輸入裝置200通過識別從衛(wèi)星發(fā)送的信號來確定衛(wèi)星和接收器之間的距離。作為示例，位置信息處理器220可基于從衛(wèi)星發(fā)送的信號確定衛(wèi)星和接收器之間的距離。位置信息處理器220是用于基于衛(wèi)星導(dǎo)航系統(tǒng)處理信號以識別位置的模塊，可包括例如 GPS、BEID0U、D0RIS、GL0NASS、GALILE0、IRNSS、QZSS、EGN0S、GAGAN、GPS-C, LAAS, MSAS, WAAS、STARFIRE 等。
[0039]另外，當(dāng)位置信息處理器220位于室內(nèi)時，位置信息處理器220還可包括用于確定室內(nèi)位置的模塊。例如，位置信息處理器220可通過使用W1-F1、加速傳感器、G傳感器等來檢測室內(nèi)位置和移動。
[0040]另外，位置信息處理器220可通過使用高度傳感器來確定圖像數(shù)據(jù)輸入裝置的高度，并可在位置信息中包括確定的高度。
[0041]具體地講，方向信息處理器230確定包括在圖像數(shù)據(jù)輸入裝置中的相機朝向的方向，產(chǎn)生關(guān)于方向的信息(在下文中，被稱為方向信息)，其后，提供產(chǎn)生的方向信息。例如，方向信息處理器230可包括方向傳感器,其中，通過所述方向傳感器確定方向信息?？蛇x擇地，方向信息處理器230通過使用利用加速傳感器、磁場傳感器等確定的信息來確定方向信息。
[0042]圖像數(shù)據(jù)產(chǎn)生器240控制相機單元210、位置信息處理器220和方向信息處理器230的操作以產(chǎn)生圖像數(shù)據(jù)。圖像數(shù)據(jù)產(chǎn)生器240首先指示相機單元210進(jìn)行操作，因此相機單元210被激活。其后，圖像數(shù)據(jù)產(chǎn)生器240通過使用預(yù)覽功能將通過相機單元210獲得的顏色信息輸出到顯示器(未示出)。同時，圖像數(shù)據(jù)產(chǎn)生器240對位置信息處理器220和方向信息處理器230進(jìn)行操作，并控制用于獲得位置信息和方向信息的操作以待命。
[0043]其后，當(dāng)由用戶輸入拍攝按鈕時，相機單元210將顏色信息轉(zhuǎn)換為預(yù)定格式的信息，并產(chǎn)生并輸出相應(yīng)視點和時間的圖像。當(dāng)圖像被產(chǎn)生時，圖像數(shù)據(jù)產(chǎn)生器240指示位置信息處理器220和方向信息處理器230識別(例如，確定)相應(yīng)視點和時間的位置信息和方向信息。另外，圖像數(shù)據(jù)產(chǎn)生器240通過組合由相機單元210提供的圖像、由位置信息處理器220提供的位置信息、由方向信息處理器230提供的方向信息以及時間信息(可在內(nèi)部識別)來產(chǎn)生圖像數(shù)據(jù)。產(chǎn)生的圖像數(shù)據(jù)首先被存儲在圖像數(shù)據(jù)產(chǎn)生器240內(nèi)，然后通過通信模塊被發(fā)送到圖像數(shù)據(jù)管理服務(wù)器。
[0044]另外，圖像數(shù)據(jù)輸入裝置還可包括用于從由相機單元210提供的圖像提取附加信息并提供提取的附加信息的附加信息處理器250。附加信息處理器250可通過將字符檢測算法應(yīng)用到圖像來從由相機單元210提供的圖像檢測附加信息(例如，預(yù)定字符、方向指示等)。字符可包括例如在路標(biāo)中標(biāo)記的字符、建筑物的招牌中標(biāo)記的字符、聯(lián)系號碼、指示特定產(chǎn)品的價格的字符等。此時，附加信息處理器250可將檢測到附加信息的區(qū)域的坐標(biāo)提供給圖像數(shù)據(jù)管理器330，從而可使用檢測到附加信息的區(qū)域的坐標(biāo)來識別附加信息的三維位置。
[0045]同時，在產(chǎn)生圖像數(shù)據(jù)時，圖像數(shù)據(jù)產(chǎn)生器240可產(chǎn)生還包括由附加信息處理器250提供的附加信息的圖像數(shù)據(jù)。
[0046]圖3是示出根據(jù)本發(fā)明的示例性實施例的包括在圖像數(shù)據(jù)管理系統(tǒng)中的圖像數(shù)據(jù)管理服務(wù)器的詳細(xì)配置的框圖。
[0047]參照圖3，圖像數(shù)據(jù)管理服務(wù)器300包括:圖像數(shù)據(jù)輸入單元310、圖像數(shù)據(jù)匹配單元320、圖像數(shù)據(jù)管理器330、圖像數(shù)據(jù)提供器340和圖像數(shù)據(jù)DB350。
[0048]圖像數(shù)據(jù)輸入單元310與用于從外部接收圖像數(shù)據(jù)的輸入/輸出接口裝置相應(yīng)。作為示例，圖像數(shù)據(jù)輸入單元310執(zhí)行通過通信網(wǎng)絡(luò)接收由圖像數(shù)據(jù)輸入裝置產(chǎn)生的圖像數(shù)據(jù)的功能或從用于存儲由外部裝置獲取的圖像數(shù)據(jù)的存儲介質(zhì)接收圖像數(shù)據(jù)的功能。圖像數(shù)據(jù)輸入單元310可通過存儲介質(zhì)接收圖像數(shù)據(jù)，其中，所述存儲介質(zhì)存儲由外部裝置、USB、光傳輸端口、串行端口、并行端口等獲取的圖像數(shù)據(jù)。
[0049]圖像數(shù)據(jù)匹配單元320將從圖像數(shù)據(jù)輸入單元310輸入的圖像數(shù)據(jù)(在下文中，被稱為輸入的圖像數(shù)據(jù))和存儲在圖像數(shù)據(jù)DB中的圖像數(shù)據(jù)(在下文中，被稱為存儲的圖像數(shù)據(jù))進(jìn)行比較，并識別(例如，確定)與輸入的圖像數(shù)據(jù)匹配的存儲的圖像數(shù)據(jù)。圖像數(shù)據(jù)匹配單元320可通過考慮包括在圖像數(shù)據(jù)中的位置信息、方向信息、時間信息等來識別(例如，確定)匹配的存儲的圖像數(shù)據(jù)。更優(yōu)選地是，圖像數(shù)據(jù)匹配單元320可通過使用位置信息和時間信息并且反映天氣信息來向提供天氣信息的服務(wù)器(未示出)做出對天氣信息的請求來識別存儲的圖像數(shù)據(jù)。
[0050]另外，圖像數(shù)據(jù)匹配單元320記下(例如，計算)輸入的圖像數(shù)據(jù)和存儲的圖像數(shù)據(jù)之間的圖像匹配率。當(dāng)圖像匹配率等于或大于預(yù)定比率時，圖像數(shù)據(jù)匹配單元320可確定輸入的圖像數(shù)據(jù)與存儲的圖像數(shù)據(jù)匹配(例如，相應(yīng))。
[0051]具體地講，將描述圖像數(shù)據(jù)匹配單元320的操作。圖像數(shù)據(jù)匹配單元320首先通過反映包含在輸入的圖像數(shù)據(jù)中的位置信息、方向信息、時間信息、天氣信息等從圖像數(shù)據(jù)DB350檢測與輸入的圖像數(shù)據(jù)相應(yīng)的多個存儲的圖像數(shù)據(jù)作為候選組。另外，圖像數(shù)據(jù)匹配單元320將包括在檢測的候選組中的多個存儲的圖像數(shù)據(jù)的每個圖像和輸入的圖像數(shù)據(jù)的圖像應(yīng)用到圖像匹配算法，以識別兩個圖像之間的匹配率。其后，圖像數(shù)據(jù)匹配單元320確定輸入的圖像數(shù)據(jù)與具有相對高的匹配率的存儲的圖像數(shù)據(jù)匹配。如上所述，圖像數(shù)據(jù)匹配單元320反映位置信息、方向信息、時間信息、天氣信息等，然后通過處理圖像匹配的處理再次識別(例如，確定)包括在選擇的候選組中的圖像是否與輸入的圖像數(shù)據(jù)匹配，從而可檢測更精確地匹配的圖像數(shù)據(jù)，因此圖像數(shù)據(jù)的可靠性可增加。因此，當(dāng)根據(jù)本發(fā)明的示例性實施例的圖像數(shù)據(jù)管理服務(wù)器300被應(yīng)用到增強現(xiàn)實時，可提供更精確且可靠的圖像數(shù)據(jù)。
[0052]圖像數(shù)據(jù)管理器330管理存儲在圖像數(shù)據(jù)DB350中的圖像數(shù)據(jù)。另外，圖像數(shù)據(jù)管理器330將通過圖像數(shù)據(jù)匹配單元320被識別(例如，確定)為與輸入的圖像數(shù)據(jù)匹配的存儲的圖像數(shù)據(jù)更新為輸入的圖像數(shù)據(jù)，并存儲更新的輸入的圖像數(shù)據(jù)。此時，圖像數(shù)據(jù)管理器330將存儲的圖像數(shù)據(jù)更新為輸入的圖像數(shù)據(jù)，隨后存儲更新的輸入的圖像數(shù)據(jù)，或者根據(jù)相應(yīng)的存儲的圖像數(shù)據(jù)的時間順序存儲輸入的圖像數(shù)據(jù)。
[0053]另外，當(dāng)存儲的圖像數(shù)據(jù)被存儲時，在相同位置和角度存在多個圖像數(shù)據(jù)時，圖像數(shù)據(jù)管理器330可通過使用多個圖像數(shù)據(jù)提取3維(3D)數(shù)據(jù)，還存儲提取的3D數(shù)據(jù)。具體地講，圖像數(shù)據(jù)管理器330在相同位置和角度從多個圖像識別(例如，確定)重疊區(qū)域，將重疊區(qū)域轉(zhuǎn)換為3D圖像格式的圖像，并將立體匹配應(yīng)用到3D轉(zhuǎn)換的圖像，從而包括在3D轉(zhuǎn)換的圖像中的對象的特征點被提取，并且提取的特征點被存儲為3D數(shù)據(jù)。此時，由于存在具有相同的位置和角度的多個圖像，所以可實現(xiàn)更實際的3D圖像，并可提取基于實施的3D圖像的更精確和可靠的3D圖像。
[0054]圖4示出根據(jù)本發(fā)明的示例性實施例的存儲在圖像數(shù)據(jù)管理服務(wù)器的數(shù)據(jù)庫中的存儲的圖像數(shù)據(jù)的示例。
[0055]參照圖4，圖像數(shù)據(jù)DB350被劃分為存儲關(guān)于圖像數(shù)據(jù)的信息的區(qū)域和存儲實際圖像的區(qū)域。例如，為了如圖4中所示容易地執(zhí)行包括在圖像數(shù)據(jù)中的多條信息之間的匹配，存儲關(guān)于圖像數(shù)據(jù)的信息的區(qū)域根據(jù)預(yù)定格式存儲圖像數(shù)據(jù)。為此，圖像數(shù)據(jù)管理器330在圖像數(shù)據(jù)DB350中存儲通過圖像匹配單元320識別的信息。作為示例，通過圖像匹配單元320識別的信息可與輸入的圖像數(shù)據(jù)的位置信息、方向信息、時間信息、天氣信息等相應(yīng)。圖像數(shù)據(jù)管理器330基于預(yù)定規(guī)則自動地產(chǎn)生索引信息，以通過附加地使用時間信息和天氣信息有效搜索存儲的圖像數(shù)據(jù)，并在圖像數(shù)據(jù)DB350中存儲產(chǎn)生的索引信息。例如，當(dāng)考慮時間信息產(chǎn)生索引信息時，當(dāng)日期介于三月和五月之間時，索引信息被設(shè)置為與春天相應(yīng)；當(dāng)日期介于六月和八月之間時被設(shè)置為與夏天相應(yīng)；當(dāng)日期介于就九月和十一月之間時被設(shè)置為與秋天相應(yīng)；當(dāng)日期介于十二月和二月之間時被設(shè)置為冬天相應(yīng)；當(dāng)時間介于6:00和12:00時被設(shè)置為上午相應(yīng)；當(dāng)時間介于12:00和18:00之間時被設(shè)置為與下午相應(yīng)；當(dāng)時間介于18:00和20:00之間時被設(shè)置為與傍晚相應(yīng)，當(dāng)時間被設(shè)置在20:00和6:00之間時被設(shè)置為與夜晚相應(yīng)等。
[0056]圖像數(shù)據(jù)提供器340具有這樣的環(huán)境:存儲在圖像數(shù)據(jù)DB350中的存儲的圖像數(shù)據(jù)通過所述環(huán)境被提供給用戶終端。例如，圖像數(shù)據(jù)提供器340從存儲在圖像數(shù)據(jù)DB350中的存儲的圖像數(shù)據(jù)識別與用戶終端請求的位置、方向和時間相應(yīng)的圖像數(shù)據(jù)，并提供網(wǎng)頁或3D地圖應(yīng)用環(huán)境，其中，識別的存儲的圖像數(shù)據(jù)可通過所述網(wǎng)頁或3D地圖應(yīng)用提供給用戶終端。
[0057]另外，圖像數(shù)據(jù)管理服務(wù)器300還可包括用于從輸入的圖像數(shù)據(jù)識別附加信息的附加信息處理器360。例如，附加信息處理器360可通過將字符檢測算法應(yīng)用到包括在輸入的圖像數(shù)據(jù)中的圖像從圖像檢測附加信息(例如，預(yù)定字符、方向指示等)。
[0058]因為圖像數(shù)據(jù)輸入裝置可包括附加信息處理器，所以輸入的圖像數(shù)據(jù)可能已包括附加信息。因此，當(dāng)輸入的圖像數(shù)據(jù)包括附加信息時，附加信息處理器360識別(例如，確定)包括在輸入的圖像數(shù)據(jù)中的附加信息，以將識別的附加信息提供給圖像數(shù)據(jù)管理器330，而沒有從包括在輸入的圖像數(shù)據(jù)中的圖像單獨地檢測附加信息。
[0059]另外，附加信息提供器360可將檢測到附加信息的區(qū)域的坐標(biāo)提供給圖像數(shù)據(jù)管理器330，圖像數(shù)據(jù)管理器330可通過使用檢測到附加信息的區(qū)域的坐標(biāo)來識別附加信息的3D位置。具體地講，圖像數(shù)據(jù)管理器330通過識別與檢測到附加信息的輸入的圖像數(shù)據(jù)相應(yīng)的多個存儲的圖像數(shù)據(jù)，在相同的位置和角度上從多個圖像識別重疊區(qū)域，并將重疊區(qū)域轉(zhuǎn)換為具有3D圖像格式的圖像，并將立體匹配應(yīng)用到3D轉(zhuǎn)換的圖像，從而識別附加信息被包括在3D轉(zhuǎn)換的圖像的3D坐標(biāo)。因此，通過具有相同的位置和角度的多個圖像，附加信息可在更接近于現(xiàn)實的位置被表示，從而可提供更精確和可靠的3D地圖或增強現(xiàn)實服務(wù)。根據(jù)現(xiàn)有技術(shù)，管理器手動地將附加信息直接映射到圖像。然而，根據(jù)本發(fā)明的示例性實施例，管理器可提供簡單的地圖并通過圖像數(shù)據(jù)管理服務(wù)器將附加信息表示在精確的位置上，而沒有直接映射或輸入大量數(shù)據(jù)的麻煩。
[0060]將通過參照前述組件和圖5描述圖像數(shù)據(jù)處理方法的順序來討論圖像數(shù)據(jù)管理服務(wù)器的詳細(xì)操作。
[0061]圖5示出根據(jù)本發(fā)明的示例性實施例的由圖像數(shù)據(jù)管理服務(wù)器執(zhí)行的圖像數(shù)據(jù)處理方法的順序。
[0062]參照圖5，首先，圖像數(shù)據(jù)輸入單元310從外部接收圖像數(shù)據(jù)。例如，在步驟51，圖像數(shù)據(jù)輸入單元310通過通信網(wǎng)絡(luò)執(zhí)行接收由圖像數(shù)據(jù)輸入裝置產(chǎn)生的圖像數(shù)據(jù)的功能，或通過終端(例如，USB)接收由外部裝置獲取的圖像數(shù)據(jù)。
[0063]其后，在步驟52，輸入的圖像數(shù)據(jù)被發(fā)送到圖像數(shù)據(jù)匹配單元320，圖像數(shù)據(jù)匹配單元320將輸入的圖像數(shù)據(jù)和存儲的圖像數(shù)據(jù)進(jìn)行比較，以確定是否存在與輸入的圖像數(shù)據(jù)匹配的任何存儲的圖像數(shù)據(jù)。
[0064]其后，在步驟53，圖像數(shù)據(jù)匹配單元320識別(例如，確定)圖像數(shù)據(jù)DB350中是否存在與輸入的圖像數(shù)據(jù)匹配的存儲的圖像數(shù)據(jù)。具體地講，圖像數(shù)據(jù)匹配單元320通過反映包括在輸入的圖像數(shù)據(jù)中的位置信息、方向信息、時間信息、天氣信息等來從圖像數(shù)據(jù)DB350檢測與輸入的圖像數(shù)據(jù)相應(yīng)的多個存儲的圖像數(shù)據(jù)作為候選組。另外，圖像數(shù)據(jù)匹配單元320將包括在檢測到的候選組中的多個存儲的圖像數(shù)據(jù)中的每個圖像和輸入的圖像數(shù)據(jù)的圖像應(yīng)用到圖像匹配算法，以識別兩個圖像的匹配率，并確定輸入的圖像數(shù)據(jù)與具有相對高的匹配率的存儲的圖像數(shù)據(jù)匹配。如上所述，因為圖像數(shù)據(jù)匹配單元320在反映位置信息、方向信息、時間信息和/或天氣信息之后，通過對包括在選擇的候選組中的圖像再次執(zhí)行圖像匹配的處理來識別(例如，確定)存儲的圖像數(shù)據(jù)是否與輸入的圖像數(shù)據(jù)匹配，因此，更精確地匹配的圖像數(shù)據(jù)可被檢測，從而圖像數(shù)據(jù)的可靠性可增加。根據(jù)本發(fā)明的示例性實施例的圖像數(shù)據(jù)管理服務(wù)器在應(yīng)用到增強現(xiàn)實時，可提供更精確和可靠的圖像數(shù)據(jù)。
[0065]其后，當(dāng)在步驟53與輸入的圖像數(shù)據(jù)相應(yīng)的存儲的圖像數(shù)據(jù)被確定為存在(例如，被識別)時，圖像數(shù)據(jù)匹配單元320將結(jié)果提供給圖像數(shù)據(jù)提供器340，在步驟54，圖像數(shù)據(jù)提供器340從圖像數(shù)據(jù)DB350檢測相應(yīng)的存儲的圖像數(shù)據(jù)。
[0066]其后，在步驟55，圖像數(shù)據(jù)提供器340將指示存在與輸入的圖像數(shù)據(jù)相應(yīng)的存儲的圖像數(shù)據(jù)和在步驟54識別的存儲的圖像數(shù)據(jù)的結(jié)果值提供給圖像數(shù)據(jù)輸入裝置。
[0067]相反地，當(dāng)在步驟53確定不存在與輸入的圖像數(shù)據(jù)相應(yīng)的存儲的圖像數(shù)據(jù)時，圖像數(shù)據(jù)管理單元320將其結(jié)果提供給圖像數(shù)據(jù)提供器340，在步驟56，圖像數(shù)據(jù)提供器340將指示不存在與輸入的圖像數(shù)據(jù)相應(yīng)的存儲的圖像數(shù)據(jù)的結(jié)果值提供給圖像數(shù)據(jù)輸入裝置。[0068]另外，圖像數(shù)據(jù)管理器330將被圖像數(shù)據(jù)匹配單元320識別為與輸入的圖像數(shù)據(jù)匹配的存儲的圖像數(shù)據(jù)更新為輸入的圖像數(shù)據(jù)，隨后存儲更新的輸入的圖像數(shù)據(jù)。在步驟57，圖像數(shù)據(jù)管理器330在關(guān)于圖像數(shù)據(jù)的信息被存儲的區(qū)域中存儲由圖像匹配單元320識別的信息，并在實際圖像被存儲的區(qū)域中存儲包括在輸入的圖像數(shù)據(jù)中的圖像。作為示例，由圖像匹配單元320識別的信息可與輸入的圖像數(shù)據(jù)的位置信息、時間信息和天氣信息相應(yīng)。
[0069]另外，在步驟57，圖像數(shù)據(jù)管理器330基于預(yù)定規(guī)則自動產(chǎn)生索引信息，以通過使用時間信息和天氣信息有效地搜索存儲的圖像數(shù)據(jù)，并將產(chǎn)生的索引信息存儲在圖像數(shù)據(jù)DB350中。例如，在步驟57，圖像數(shù)據(jù)管理器更新存儲在圖像數(shù)據(jù)DB350中的存儲的圖像數(shù)據(jù)。
[0070]當(dāng)在步驟57圖像數(shù)據(jù)管理器330存儲該存儲的圖像數(shù)據(jù)時，如果在相同的位置和角度存在多個圖像數(shù)據(jù)，則可通過使用多個圖像數(shù)據(jù)來提取并進(jìn)一步存儲3D數(shù)據(jù)。具體地講，圖像數(shù)據(jù)管理器330在相同的位置和角度從多個圖像識別重疊區(qū)域，將重疊區(qū)域轉(zhuǎn)換為3D圖像格式的圖像，將立體匹配應(yīng)用到3D轉(zhuǎn)換的圖像，從而包括在3D轉(zhuǎn)換的圖像中的對象的特征點被提取并且提取的特征點被存儲為3D數(shù)據(jù)。此時，因為可存在具有相同的位置和角度的多個圖像，所以可實現(xiàn)更接近現(xiàn)實的3D圖像，因此可基于實現(xiàn)的3D圖像提取更精確和可靠的3D數(shù)據(jù)。
[0071]另外，重復(fù)執(zhí)行步驟51至57，直到圖像數(shù)據(jù)處理方法的操作結(jié)束。例如，在步驟58，圖像數(shù)據(jù)管理器330可確定是否存在任何進(jìn)一步輸入的圖像數(shù)據(jù)。如果不存在進(jìn)一步輸入的數(shù)據(jù)，則圖像數(shù)據(jù)處理方法可結(jié)束。相反地，如果進(jìn)一步輸入的圖像數(shù)據(jù)存在，則所述方法可返回步驟51。
[0072]盡管已描述圖像數(shù)據(jù)DB通過使用在從用戶終端接收圖像數(shù)據(jù)、匹配圖像數(shù)據(jù)、提供其結(jié)果的處理期間輸入的輸入的圖像數(shù)據(jù)被更新，但是本發(fā)明的示例性實施例不限于此，并且只要通過使用從多個用戶終端提供的圖像數(shù)據(jù)自動建立DB的操作可被執(zhí)行，就可被應(yīng)用。例如，當(dāng)在沒有來自用戶終端的與輸入的圖像數(shù)據(jù)相應(yīng)的結(jié)果的請求的情況下，輸入的圖像數(shù)據(jù)僅通過圖像數(shù)據(jù)的輸入被確定為與存儲的圖像數(shù)據(jù)匹配時，輸入的圖像數(shù)據(jù)可被更新并存儲在DB中。在此情況下，可省略步驟54至56。
[0073]另外，根據(jù)本發(fā)明的示例性實施例的圖像數(shù)據(jù)處理方法還可包括從輸入的圖像數(shù)據(jù)識別附加信息的操作。可通過附加信息處理器360執(zhí)行從輸入的圖像數(shù)據(jù)識別附加信息的操作。可在步驟53至57之間執(zhí)行識別附加信息的操作。首先，識別附加信息是否被包括在輸入的圖像數(shù)據(jù)中。當(dāng)輸入的圖像數(shù)據(jù)被確定為包括附加信息時，不單獨執(zhí)行從包括在輸入的圖像數(shù)據(jù)中的圖像檢測附加信息的操作。當(dāng)附加信息不被包括在輸入的圖像數(shù)據(jù)中時，執(zhí)行將字符檢測算法應(yīng)用到包括在輸入的圖像數(shù)據(jù)中的圖像以從圖像檢測附加信息(例如，預(yù)定字符、方向指示等)的操作。
[0074]另外，附加信息處理器360可將檢測到附加信息的區(qū)域的坐標(biāo)提供給圖像數(shù)據(jù)管理器330，圖像數(shù)據(jù)管理器330可通過使用檢測到附加信息的區(qū)域的坐標(biāo)來識別附加信息的3D位置。具體地講，圖像數(shù)據(jù)管理器330通過識別與檢測到附加信息的輸入的圖像數(shù)據(jù)相應(yīng)的多個存儲的圖像數(shù)據(jù)，在相同的位置和角度從多個圖像識別重疊區(qū)域，將所述重疊區(qū)域轉(zhuǎn)換為具有3D圖像格式的圖像，并將立體匹配應(yīng)用到3D轉(zhuǎn)換的圖像，從而識別包括在3D轉(zhuǎn)換的圖像中的附加信息的3D坐標(biāo)。因此，存在的優(yōu)點在于:管理圖像數(shù)據(jù)DB350的管理器可減輕手動輸入附加信息的負(fù)擔(dān)，并且可有效地構(gòu)造具有更好的用戶使用的附加信息。另外，通過具有相同的位置和角度的多個圖像，可在接近于顯示的位置表示附加信息，因此可提供更精確和可靠的3D地圖或增強現(xiàn)實服務(wù)。
[0075]將理解根據(jù)權(quán)利要求和說明書中描述的本發(fā)明的示例性實施例可以以硬件、軟件或硬件和軟件的組合的形式被實現(xiàn)。
[0076]任何這樣的軟件可被存儲在非暫時性計算機可讀存儲介質(zhì)中。非暫時性計算機可讀存儲介質(zhì)存儲一個或多個程序(軟件模塊)，所述一個或多個程序包括當(dāng)在電子裝置中被一個或多個處理器執(zhí)行時使得電子裝置執(zhí)行本發(fā)明的方法的指令。
[0077]任何這樣的軟件可以以易失性或非易失性存儲器(例如，像只讀存儲器(ROM)、不論是否可擦除或可重寫的存儲裝置)的形式，或以存儲器(例如，隨機存取存儲器(RAM)、存儲條、裝置)、或集成電路、或光學(xué)或磁性可讀介質(zhì)(例如，緊湊盤(CD)、數(shù)字通用磁盤(DVD)、磁盤或磁帶等)的形式被存儲。將理解，存儲裝置和存儲介質(zhì)是適用于存儲包括當(dāng)被執(zhí)行時實施本發(fā)明的示例性實施例的指令的一個程序或多個程序的機器可讀存儲器的示例性實施例。因此，示例性實施例提供包括用于實施在本說明書的權(quán)利要求中的任何一個所要求的設(shè)備和方法的代碼的程序和存儲這樣的程序的機器可讀存儲器。
[0078]雖然已參照本發(fā)明的其特定實施例顯示和描述了本發(fā)明，但是本領(lǐng)域的普通技術(shù)人員將理解，在不脫離由權(quán)利要求及其等同物限定的本發(fā)明的精神和范圍的情況下，可以對其進(jìn)行形式和細(xì)節(jié)的各種改變。
【權(quán)利要求】
1.一種處理圖像數(shù)據(jù)的方法，所述方法包括: 接收輸入的圖像數(shù)據(jù)； 確定輸入的圖像數(shù)據(jù)是否與在數(shù)據(jù)庫中預(yù)存儲的存儲的圖像數(shù)據(jù)匹配； 在數(shù)據(jù)庫中存儲被確定為與存儲的圖像數(shù)據(jù)匹配的輸入的圖像數(shù)據(jù)； 提供存儲在數(shù)據(jù)庫中的存儲的圖像數(shù)據(jù)。
2.如權(quán)利要求1所述的方法，其中，輸入的圖像數(shù)據(jù)包括位置信息、方向信息、時間信息和圖像。
3.如權(quán)利要求1所述的方法，其中，存儲的圖像數(shù)據(jù)包括位置信息、方向信息、時間信息、天氣信息和圖像。
4.如權(quán)利要求1所述的方法，還包括: 產(chǎn)生包括字符的附加信息，其中，從包括在輸入的圖像數(shù)據(jù)中的圖像檢測所述字符。
5.如權(quán)利要求1所述的方法，其中，接收輸入的圖像數(shù)據(jù)的步驟包括: 從用戶終端接收輸入的圖像數(shù)據(jù)以及用于識別用戶終端的位置的請求。
6.如權(quán)利要求5所述的方法，還包括: 將與輸入的圖像數(shù)據(jù)匹配的存儲的圖像數(shù)據(jù)提供給用戶終端。
7.一種圖像數(shù)據(jù)輸入裝置，包括: 相機單元，捕獲圖像； 位置信息識別器，識別與圖像數(shù)據(jù)輸入裝置所在的位置相應(yīng)的位置信息； 方向信息處理器，識別包括在數(shù)據(jù)輸入裝置中的相機面向的方向； 圖像數(shù)據(jù)產(chǎn)生器，將時間信息、從相機單元提供的圖像、從位置信息處理器提供的位置信息、由方向信息處理器識別的方向信息進(jìn)行組合以產(chǎn)生圖像數(shù)據(jù)。
8.如權(quán)利要求7所述的圖像數(shù)據(jù)輸入裝置，其中，方向信息處理器包括方向傳感器，并通過使用通過方向傳感器檢測的信息來確定方向信息。
9.如權(quán)利要求7所述的圖像數(shù)據(jù)輸入裝置，其中，方向信息處理器通過使用通過加速傳感器和磁場傳感器中的至少一個檢測到的信息來確定方向信息。
10.如權(quán)利要求7所述的圖像數(shù)據(jù)輸入裝置，還包括:附加信息處理器，從由相機單元提供的圖像提取附加信息，并提供提取的附加信息。
11.一種用于處理圖像數(shù)據(jù)的設(shè)備，所述設(shè)備包括: 圖像數(shù)據(jù)輸入單元，接收輸入的圖像數(shù)據(jù)； 圖像數(shù)據(jù)匹配單元，識別輸入的圖像數(shù)據(jù)是否與圖像數(shù)據(jù)數(shù)據(jù)庫中預(yù)存儲的存儲的圖像數(shù)據(jù)匹配； 圖像數(shù)據(jù)管理器，存儲被確定為與圖像數(shù)據(jù)數(shù)據(jù)庫中的存儲的圖像數(shù)據(jù)匹配的輸入的圖像數(shù)據(jù)，并管理存儲的輸入的圖像數(shù)據(jù)； 圖像數(shù)據(jù)提供器，提供存儲在圖像數(shù)據(jù)數(shù)據(jù)庫中的存儲的圖像數(shù)據(jù)。
12.如權(quán)利要求11所述的設(shè)備，其中，輸入的圖像數(shù)據(jù)包括位置信息、方向信息、時間 息和圖像。
13.如權(quán)利要求11所述的設(shè)備，存儲的圖像數(shù)據(jù)包括位置信息、方向信息、時間信息、天氣信息和圖像。
14.如權(quán)利要求11所述的設(shè)備，還包括:附加信息處理器，產(chǎn)生包括字符的附加信息，其中，從包括在輸入的圖像數(shù)據(jù)中的圖像檢測所述字符。
15.如權(quán)利要求11所述的設(shè)備，其中，圖像數(shù)據(jù)輸入單元從用戶終端接收圖像數(shù)據(jù)以及用于識別用戶終端的位置 的請求。
【文檔編號】G06F17/30GK103473254SQ201310222840
【公開日】2013年12月25日 申請日期:2013年6月6日 優(yōu)先權(quán)日:2012年6月6日
【發(fā)明者】鄭址洪, 曹益煥, 白盛煥, 慎大揆, 鄭鎮(zhèn)會 申請人:三星電子株式會社