專利名稱：移動終端設(shè)備和計算機程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種能夠與互聯(lián)網(wǎng)和家庭網(wǎng)絡(luò)連接的移動終端設(shè)備以及一種用于該移動終端設(shè)備的計算機程序。
背景技術(shù)：
近年來，移動電話終端已顯著變成一種具有多功能和高性能的終端。市場上已經(jīng)出現(xiàn)的一些移動電話終端所提供的功能包括利用互聯(lián)網(wǎng)的Web瀏覽功能和電子郵件功能；利用照相機的拍照功能；還有利用全球定位系統(tǒng)(GPS)的位置檢測功能；以及釆用如藍牙(注冊商標)和無線LAN的近距離無線通信功能。
提出了這樣一種技術(shù)，在該技術(shù)中，配備有照相機的移動電話通過電子郵件將用照相機拍攝的圖像發(fā)送到圖像檢索服務(wù)提供服務(wù)器，然后該服務(wù)器從接收到的圖像提取特征量并將具有相似特征量的Web站點的URL發(fā)送回移動電話；由此，移動電話在從該服務(wù)器接收到應(yīng)答時訪問該URL以獲得Web信息(參照文獻l(第2003-271650號日本專利公報))。
提出了另一種技術(shù)，在該技術(shù)中，圖像處理設(shè)備讀取記錄在存儲介質(zhì)中的圖像，同時從位置信息檢索地像信息，并通過合成經(jīng)檢索而獲得的地像信息和從存儲介質(zhì)讀取的圖像來創(chuàng)建合成圖像(參照文獻2 (第2001-266169號日本專利公報))。如果用戶通過組合各種設(shè)備(包括數(shù)字電器)來構(gòu)成家庭網(wǎng)絡(luò)，
并利用標準化的DLNA (數(shù)字生活網(wǎng)絡(luò)聯(lián)盟)的規(guī)范使得可在家里的各個地方容易地欣賞音頻-視頻內(nèi)容，那么用戶可以自由地取得存儲在服務(wù)器中的諸如照片、動畫和音樂的數(shù)字內(nèi)容，并可以在期望的設(shè)備上重放它們，而不需要執(zhí)行復(fù)雜的設(shè)置(參照文獻3 ( 2008年1月11曰在互聯(lián)網(wǎng)上檢索到的 "What is DLAN",URL:http:〃www.alpha.co.jp/biz/products/dlna/about/))。移動電話終端也可以用作符合DLNA的設(shè)備。

發(fā)明內(nèi)容
盡管文獻1中描述的技術(shù)可以從Web站點獲得與拍攝的圖像對應(yīng)的信息，但是該技術(shù)旨在從紙介質(zhì)和商品包裝上的廣告將用戶引導(dǎo)到Web站點，而不是立即用于編輯和欣賞拍攝的圖像的應(yīng)用。
盡管文獻2中描述的技術(shù)可以獲得拍攝的圖像的位置可直觀理解的印象，但是該技術(shù)僅將地圖與拍攝的圖像合成，并且在為了拍攝之后可以使家庭或朋友欣賞而加入與拍攝相關(guān)的信息這一點上是不足的。
根據(jù)上述情況完成了本發(fā)明，并且本發(fā)明提供了一種移動終端設(shè)備和計算機程序，其能夠通過獲取與拍攝的圖像相關(guān)并且與圖像的拍攝相關(guān)的各種信息，并將所述各種信息合成到移動終端設(shè)備中的原始圖像，來創(chuàng)建新圖像。
根據(jù)本發(fā)明實施例的移動終端設(shè)備能夠連接到互聯(lián)網(wǎng)和家庭網(wǎng)絡(luò)，并包括附隨信息存儲裝置，用于存儲通過拍攝獲得的圖像以及與所述圖像或所述拍攝相關(guān)的附隨信息；檢索請求裝置，用于請求互聯(lián)網(wǎng)上的檢索服務(wù)器用所述附隨信息作為關(guān)鍵詞執(zhí)行檢索；檢索結(jié)果存儲裝置，用于臨時存儲從所述檢索服務(wù)器獲得的檢索結(jié)果；圖像合成裝置，用于通過將所述檢索結(jié)果與通過所述拍攝獲得的圖像進行合成來創(chuàng)建合成圖像；和傳輸裝置，用于將所述合成圖像發(fā)送到家庭網(wǎng)絡(luò)上的指定輸出設(shè)備。
5本移動終端設(shè)備響應(yīng)于用戶的操作，請求互聯(lián)網(wǎng)上的檢索服務(wù)器用與圖像和拍攝相關(guān)的附隨信息(例如，拍攝日期、拍攝位置、用戶輸入的信息)作為關(guān)鍵詞執(zhí)行檢索，并通過將檢索結(jié)果與原始圖像進行合成來創(chuàng)建合成圖像。另外，本移動終端設(shè)備將合成圖像發(fā)送到家庭網(wǎng)絡(luò)上的指定輸出設(shè)備，并且合成圖像被顯示在輸出設(shè)備的大屏幕顯示器上。
移動終端設(shè)備還可包括對應(yīng)表，該對應(yīng)表將被請求執(zhí)行檢索的檢
索服務(wù)器的URL與關(guān)鍵詞的每個種類相關(guān)聯(lián)。所述檢索請求裝置可以請求具有與用于檢索的關(guān)鍵詞的種類對應(yīng)的URL的檢索服務(wù)器來執(zhí)行所述檢索。
一種根據(jù)本發(fā)明實施例的計算機程序可由移動終端設(shè)備執(zhí)行，該移動終端設(shè)備能夠連接到互聯(lián)網(wǎng)和家庭網(wǎng)絡(luò)，所述計算機程序包括如下步驟獲取通過拍攝獲得的圖像和與所述圖像或所述拍攝相關(guān)的附隨信息；請求互聯(lián)網(wǎng)上的檢索服務(wù)器用所述附隨信息作為關(guān)鍵詞來執(zhí)行檢索；臨時存儲從所述檢索服務(wù)器獲得的檢索結(jié)果；通過將所述檢索結(jié)果與通過所述拍:f聶獲得的圖像進行合成來創(chuàng)建合成圖像；以及將所述合成圖像發(fā)送到家庭網(wǎng)絡(luò)上的指定輸出設(shè)備。
下面將詳細解釋根據(jù)本發(fā)明實施例的其它構(gòu)成和工作效果。


從下文給出的詳細描述和的附圖中可以充分地理解本發(fā)明，附圖僅以示例方式給出，因此并不是限制本發(fā)明的限定，在附圖中圖1是示出了根據(jù)本發(fā)明實施例的整個系統(tǒng)的概略結(jié)構(gòu)的圖；圖2是示出了才艮據(jù)本發(fā)明實施例的移動終端內(nèi)部的概略硬件配置的框圖3是表示根據(jù)本發(fā)明實施例的移動終端的處理示例的流程圖；圖4A是示出了根據(jù)本發(fā)明實施例的在移動終端的顯示屏幕上的圖像的縮略圖顯示示例的圖4B是示出了才艮據(jù)本發(fā)明實施例的在移動設(shè)備的顯示屏幕上通過選擇顯示的圖像的示例的圖5是示出了根據(jù)本發(fā)明實施例的將圖像的附隨信息列出為檢索用的關(guān)鍵詞的選項的關(guān)鍵詞列表屏幕的圖6是示出了根據(jù)本發(fā)明實施例的將"關(guān)鍵詞種類"和"檢索站點URL"相關(guān)聯(lián)的對應(yīng)表的示例的圖7是示出了根據(jù)本發(fā)明實施例的移動終端在顯示屏幕上顯示作為通過檢索服務(wù)器檢索關(guān)于特定關(guān)鍵詞的相關(guān)信息的結(jié)果而獲得的相關(guān)信息列表的屏幕的圖8是示出了根據(jù)本發(fā)明實施例的在顯示屏幕上將檢測到的輸出設(shè)備列出為選項的輸出設(shè)備列表屏幕的圖9是示出了在如圖3中的步驟S16所示的檢索相關(guān)信息和顯示檢索結(jié)果的列表的過程中的處理細節(jié)的流程圖IO是示出了在如圖3中的步驟S21所示的圖像合成處理的細節(jié)的流程圖11A是示出了根據(jù)本發(fā)明實施例的針對相關(guān)信息與原始圖像的合成的用戶操作示例的圖11B是示出了根據(jù)本發(fā)明實施例的針對相關(guān)信息與原始圖像的合成的用戶操作示例的圖11C是示出了根據(jù)本發(fā)明實施例的針對相關(guān)信息與原始圖像的合成的用戶操作示例的圖11D是示出了根據(jù)本發(fā)明實施例的針對相關(guān)信息與原始圖像的合成的用戶操作示例的圖12是示出了通過將相關(guān)信息進一步添加到圖llD中示出的原始圖像而創(chuàng)建了合成圖像的狀態(tài)的圖；以及
圖13是示出了根據(jù)本發(fā)明實施例的在用戶指定的輸出設(shè)備中的合成圖像的顯示示例的圖。
具體實施例方式
在下文中，參照附圖詳細解釋本發(fā)明的優(yōu)選實施例。
7圖1是示出了根據(jù)本發(fā)明實施例的整個系統(tǒng)的概略結(jié)構(gòu)的圖。
配備有照相機的移動終端200位于系統(tǒng)的中心。移動終端200 具有連接到互聯(lián)網(wǎng)150的功能和連接到本地家庭網(wǎng)絡(luò)350的功能。移 動終端200通過互聯(lián)網(wǎng)150連接到一個或多個檢索服務(wù)器100，并且 通過家庭網(wǎng)絡(luò)350連接到一個或多個輸出設(shè)備400。家庭網(wǎng)絡(luò)350可 采用包括與移動終端200的無線接口的無線網(wǎng)絡(luò)(藍牙(注冊商標)、 無線LAN等)，并且也可采用部分使用有線網(wǎng)絡(luò)的網(wǎng)絡(luò)。輸出設(shè)備 400是例如設(shè)置有顯示設(shè)備和電視設(shè)備的個人計算機，其在顯示屏幕 上輸出可視信息。移動終端200還具有GPS接收功能，用以從預(yù)定 的GPS衛(wèi)星140 (實際上從多個衛(wèi)星)接收無線電波并檢測自己的實 際位置(綽度、經(jīng)度、高度等)。
本實施例解釋了符合DLNA (數(shù)字生活網(wǎng)絡(luò)聯(lián)盟)的家庭網(wǎng)絡(luò) 350。 DLNA的各種設(shè)備的功能包括DMS (數(shù)字媒體服務(wù)器)、DMC (數(shù)字媒體控制器)、DMR (數(shù)字媒體渲染器)和DMP (數(shù)字媒體 播放器)。
DMS是管理并對公眾發(fā)布在通信網(wǎng)絡(luò)上共享的數(shù)字內(nèi)容的服務(wù) 器。通常，PC、視頻記錄和再現(xiàn)設(shè)備、數(shù)字照相機等可用作DMS。 DMP是再現(xiàn)通過DMS向公眾發(fā)布的數(shù)字內(nèi)容的播放器。通常，電視 機、數(shù)字音樂播放器、立體聲系統(tǒng)等可用作DMP。 DMC是控制內(nèi)容 再現(xiàn)的開始、停止、快進等的控制器。DMR是主要在DMC的控制 下再現(xiàn)內(nèi)容的設(shè)備。DMR沒有用于內(nèi)容的選擇或再現(xiàn)操作的用戶界 面。圖像監(jiān)視器、揚聲器等可用作DMR。 DMP可被認為具有DMC 和DMR兩種功能。支持DLNA的單個設(shè)備可設(shè)置有一個或多個上述 功能。例如， 一個i殳備可用作DMS和DMC，用作DMS和DMP、 或者用作DMS和DMR。在本實施例的情況下，移動終端200用作 DMS和DMC。移動終端200也可用作DMS和DMP。
在不改變當前DLNA規(guī)范的情況下可以使用本系統(tǒng)。無論設(shè)備 的制造商是誰，均可以在網(wǎng)絡(luò)上相互操作與DLNA對應(yīng)的任何設(shè)備。
移動終端200用作與互聯(lián)網(wǎng)150上的檢索服務(wù)器IOO關(guān)聯(lián)的客戶機，并且訪問檢索服務(wù)器100并接收檢索服務(wù)。
在圖1的系統(tǒng)中，在用內(nèi)置照相機進行拍攝時，移動終端200 獲取諸如拍攝日期、拍攝時間、拍攝位置等的拍攝附隨信息(EXIF 信息)，并存儲該附隨信息與拍攝的圖像數(shù)據(jù)?？梢约尤胗脩翎槍ε?攝的圖像輸入的任何信息作為標簽信息。該標簽信息也用作相關(guān)圖像 的"附隨信息"。
移動終端200選擇存儲在內(nèi)部的圖像，并將添加到選擇的圖像的 附隨信息作為關(guān)鍵詞發(fā)送到檢索服務(wù)器100。檢索服務(wù)器100檢索與 該關(guān)鍵詞對應(yīng)的信息，并將獲得的檢索結(jié)果信息返回至移動終端200。 移動終端200根據(jù)用戶的指令執(zhí)行諸如將返回的檢索結(jié)果信息合成到 相關(guān)圖像的圖像編輯，并存儲編輯結(jié)果。移動終端200將合成的相關(guān) 圖像(合成圖像)發(fā)送到指定的輸出設(shè)備400以進行顯示。在本實施 例中，假定輸出設(shè)備400的顯示屏幕尺寸充分大于移動終端200的顯 示屏幕的尺寸，從而允許多個用戶同時觀看。
圖2是示出了根據(jù)本實施例的移動終端內(nèi)部的概略硬件配置的框圖。
移動終端200具有通過總線216相互連接的多個單元。所述多個 單元包括控制器201、通信單元203、顯示單元204、操作單元205、 存儲單元206、語音處理單元210、連接到語音處理單元210的揚聲 器211和麥克風212、照相機單元213、近距離無線通信單元214和 全球定位系統(tǒng)接收單元(GPS接收器)215。本發(fā)明的附隨信息存儲 裝置、檢索結(jié)果存儲裝置、郵件存儲裝置由存儲單元206構(gòu)成。
控制器201包括CPU等，并控制移動終端200的每個部分。在 本實施例中，控制器201還用作圖像處理器，該圖像處理器執(zhí)行包括 將在后面描述的圖像合成的各種圖像處理。本發(fā)明的圖像合成裝置由 控制器201構(gòu)成。本發(fā)明的檢索請求裝置由控制器201和通信單元203 構(gòu)成。當然，可以提供獨立于控制器201的圖像處理器。本發(fā)明的傳 輸裝置由近距離無線通信單元214構(gòu)成。
通信單元203包括RF單元、調(diào)制電路等，并且經(jīng)由天線202與
9基站執(zhí)行電話呼叫、郵件、WEB數(shù)據(jù)等的無線通信。
顯示單元204提供用于向用戶呈現(xiàn)可視信息的顯示界面，并包括 諸如LCD和有機電致發(fā)光顯示器的顯示設(shè)備。
操作單元205向用戶提供輸入接口以輸入指令和數(shù)據(jù)，并包括各 種操作鍵，諸如數(shù)字鍵盤、光標移動鍵、通話鍵和電源鍵。
存儲單元206包括諸如ROM、 RAM和HDD的存儲設(shè)備，并存 儲CPU執(zhí)行的OS和各種應(yīng)用的程序以及各種數(shù)據(jù)。ROM可包括能 夠重寫的非易失性存儲器，諸如閃速存儲器。所述程序還包括用于實 現(xiàn)本實施例中的DLNA功能的程序和必要數(shù)據(jù)。
語音處理單元210包括音頻編碼器和解碼器、D/A轉(zhuǎn)換器、A/D 轉(zhuǎn)換器等，并執(zhí)行對揚聲器211 (包括耳機)的語音輸出以及從麥克 風212的語音輸入。
照相機單元213具有諸如CMOS和CCD等圖像傳感器，并構(gòu)成 用于獲得被拍攝對象的數(shù)字圖像數(shù)據(jù)的拍攝單元。
近距離無線通信單元214具有諸如無線LAN和藍牙(注冊商標) 的無線通信裝置。
GPS接收器215是從GPS衛(wèi)星140接收信號并輸出位置信息的 位置檢測裝置。該位置檢測裝置不一定需要基于GPS。另選地，在移 動電話終端的情況下，位置檢測裝置可基于移動電話基站獲得位置信 息。位置信息不限于經(jīng)度和絆度。另選地，位置信息可以是地名、城 鎮(zhèn)名等。
圖3是表示在利用本系統(tǒng)的典型情況下移動終端200的處理示例 的流程圖。作為本處理的前提，假定用戶用照相機獲取的圖像與附隨 信息一起存儲在移動終端200中。
根據(jù)用戶的指令，移動終端200從存儲在存儲單元206中的圖像 中選擇期望的圖像(步驟S10)，并獲取附隨信息(步驟Sll)?？?以從如圖4A所示的圖像的縮略圖顯示(或從圖像列表顯示(未示出)) 中選擇圖像。在本示例中，受關(guān)注圖像被強調(diào)顯示，并且用戶可以通 過光標移動鍵來移動強調(diào)顯示。在圖4A中，強調(diào)顯示被例示為圍繞圖像的粗框42。另選地，強調(diào)顯示可采用任意的顯示風格，如高亮顯 示。被強調(diào)顯示的圖像的ID信息、分辨率和數(shù)據(jù)量被顯示在屏幕的 底部。圖4B示出了相關(guān)信息列表屏幕40，選擇的圖像作為合成圖像 的原始圖像44被顯示在整個屏幕40上。
作為原始圖像44獲取的圖像和相關(guān)信息以原來的高分辨率存儲 在移動終端200中。然后，以對應(yīng)于顯示屏幕的顯示尺寸的適當縮小 的尺寸顯示復(fù)制的圖像。因此，當隨后將該圖像發(fā)送到輸出設(shè)備并在 大尺寸顯示屏幕上顯示該圖像時，可以避免分辨率不足。
接下來，例如，通過操作圖4B的屏幕的"菜單"按鈕，執(zhí)行該圖 像的附隨信息的列表顯示，作為用于檢索的關(guān)鍵詞的選項51-55 (步 驟S12)，如圖5中的關(guān)鍵詞列表屏幕50所示。附隨信息包括如上所 述的EXIF倌息、標簽信息等。在本示例中，附隨信息包括圖像的拍 攝日期、拍攝時間和拍攝位置、以及用戶輸入的語句(標簽信息)。 用戶選擇這些關(guān)鍵詞中的任何一個關(guān)鍵詞用于檢索(步驟S13)。在 這種情況下，受關(guān)注關(guān)鍵詞被高亮顯示。優(yōu)選地也可以同時接受多個 關(guān)鍵詞的選擇。在這種情況下，執(zhí)行關(guān)鍵詞的AND檢索。
可以使用單一固定的檢索站點(檢索服務(wù)器)，或者另選地，根 據(jù)關(guān)鍵詞的種類可使用不同的檢索站點。在這種情況下，如圖6中的 對應(yīng)表60所示，"關(guān)鍵詞種類"和"檢索站點URL，，相互關(guān)聯(lián)并與實現(xiàn) 本實施例的操作的程序一起預(yù)先存儲在存儲單元206中。例如，可以 將地圖檢索站點與"位置"關(guān)聯(lián)，將新聞檢索站點與"日期"關(guān)聯(lián)。可對 應(yīng)于一個關(guān)鍵詞種類登記多個檢索站點URL。在這種情況下，通過邏 輯加法(OR)提取多個檢索站點的檢索結(jié)果。
按照這種方式，通過根據(jù)關(guān)鍵詞的種類關(guān)聯(lián)不同的檢索站點，可 以消除用戶希望的相關(guān)信息的種類之外的相關(guān)信息(噪聲)。
用戶 一次指定的關(guān)鍵詞的數(shù)量并不限于一條?？赏瑫r指定多個關(guān) 鍵詞，并可執(zhí)行按照邏輯積(AND)的檢索。在這種情況下，要被使 用的檢索站點可以不進行具體限制。例如，對于關(guān)鍵詞種類的每個組 合，可預(yù)先決定檢索站點。作為選擇，當指定多個關(guān)鍵詞種類時，可
ii使用預(yù)先確定的檢索站點。作為另一選擇，可以使用針對多個關(guān)鍵詞 種類中的一個或多個關(guān)鍵詞種類指定的一個或多個檢索站點。
現(xiàn)在返回參照圖3，當用戶發(fā)出檢索相關(guān)信息的指令時(步驟S14 處為"是")，移動終端200通過互聯(lián)網(wǎng)150訪問預(yù)定的檢索站點(步 驟S15)。當執(zhí)行相關(guān)信息的檢索并且作為結(jié)果獲得列表信息時，在 顯示屏幕上顯示該列表信息(步驟S16)。這里的"列表信息"不是指 檢索結(jié)果的整個數(shù)據(jù)本體，而是指用于識別數(shù)據(jù)本體的信息(標題、 概要等)。當然，直接獲取數(shù)據(jù)本體自身的模式是可行的。在針對檢 索的命中數(shù)目變大的情況進行的準備中，可以預(yù)先確定將一次獲取的 相關(guān)信息的最大數(shù)目。
圖7示出了移動終端200在顯示屏幕上顯示包括相關(guān)信息71至 73的相關(guān)信息列表的屏幕。當選擇某個關(guān)鍵詞并且檢索服務(wù)器檢索關(guān) 于該關(guān)鍵詞的相關(guān)信息時獲得相關(guān)信息71至73。"相關(guān)信息"與關(guān)鍵 詞相關(guān)，并可根據(jù)關(guān)鍵詞和檢索站點中的每個而改變。相關(guān)信息的種 類包括圖像、文本等。圖7的示例示出了通過縮略圖來列出多個圖像 (這里為航拍照片、地圖、路線圖)的狀態(tài)，其中，所述多個圖像是 作為用拍攝位置信息作為關(guān)鍵詞來檢索地圖檢索站點的結(jié)果而獲得 的。另外，在該畫面中，受關(guān)注圖像被高亮顯示并且用戶可移動該高 亮顯示。檢索結(jié)果不一定為多條，檢索結(jié)果可為一條，或者可為"無 法獲得數(shù)據(jù)"。
當用戶從相關(guān)信息列表的屏幕選擇指定的相關(guān)信息時(步驟 S17)，請求下載相關(guān)信息的數(shù)據(jù)本體(步驟S18)。當響應(yīng)于該下載 請求從檢索服務(wù)器發(fā)送涉及的相關(guān)信息的數(shù)據(jù)本體時，獲取了數(shù)據(jù)本 體(步驟S19)。
當用戶發(fā)出將相關(guān)信息粘貼在原始圖像上的指令時(步驟S20 處為"是，，)，要被粘貼的圖像被合成到原始圖像(步驟S21)。在這 種情況下，在存儲單元206中臨時創(chuàng)建移動終端中存儲的原始圖像的 拷貝，該拷貝與要被粘貼的圖像一起顯示。通過創(chuàng)建并使用原始圖像 的拷貝，可以防止對原始圖像的其它可能的破壞。當相關(guān)信息為除了圖像之外的數(shù)據(jù)(如文本)時，該數(shù)據(jù)被轉(zhuǎn)換成位像并與原始圖 像合成。后面將描述針對相關(guān)信息與原始圖像的合成的用戶操作的具 體示例。
響應(yīng)于用戶的將圖像發(fā)送到輸出設(shè)備400的指令(步驟S22處為 "是，，)，移動終端檢索家庭網(wǎng)絡(luò)350上的輸出設(shè)備(步驟S23)。如 在圖8的輸出設(shè)備列表屏幕80中所示，檢測到的輸出設(shè)備400的列 表作為選項80至83被顯示在顯示屏幕上(步驟S24)。當用戶選擇 一個輸出設(shè)備400時(步驟S25)，移動終端通過家庭網(wǎng)絡(luò)350將存 儲單元206中的合成圖像發(fā)送到選擇的輸出設(shè)備400 (步驟S26)。
假定作為合成圖像所發(fā)送至的伙伴設(shè)備的輸出設(shè)備400主要為 具有比移動終端更大的屏幕尺寸的監(jiān)視器或電視機。用戶可以與他或 她的朋友與家人一起在大屏幕上觀看移動終端的圖像。同時，用戶可 以愉快地觀看已從檢索服務(wù)器獲得的或者由用戶輸入的、已被添加到 圖像信息的相關(guān)信息。
可以在編輯結(jié)束之后經(jīng)過預(yù)定時間自動刪除復(fù)制的圖像或者可 以在傳輸之后立即自動刪除復(fù)制的圖像，從而復(fù)制的圖像(合成圖像) 不會占用移動終端內(nèi)的存儲區(qū)域。因此，系統(tǒng)可恢復(fù)到與使用前相同 的狀態(tài)。
圖9解釋了在檢索相關(guān)信息并顯示列表的步驟16中示出的處理 的細節(jié)。
首先，基于關(guān)鍵詞，向登記的檢索站點請求執(zhí)行檢索(步驟S31 )。 從檢索站點獲得作為檢索結(jié)果的相關(guān)信息(步驟S32)，并將該相關(guān) 信息臨時存儲在移動終端內(nèi)的存儲區(qū)域中(步驟S33)。
當存在對于涉及的關(guān)鍵詞要進行進一步檢索的檢索站點時(步驟 S34中為"否，，)，流程返回至步驟S31。否則，在顯示屏幕上顯示存 儲的相關(guān)信息的列表(步驟S35)。
圖10解釋了步驟S21示出的圖像的合成處理的細節(jié)。
首先，創(chuàng)建原始圖像的拷貝(步驟S40)。接下來，請求用戶選 擇要被合成到復(fù)制圖像的一項相關(guān)信息(步驟S41)。除了選擇的相關(guān)信息之外的相關(guān)信息被刪除(步驟S42)。根據(jù)用戶針對將在后面 描述的功能菜單等的操作，執(zhí)行編輯，諸如將涉及的被選擇的相關(guān)信 息和其它相關(guān)信息合成到原始圖像的復(fù)制圖像(步驟S43 )。步驟S43
繼續(xù)執(zhí)行直到編輯完成。當編輯完成時(步驟S44處為"是")，重寫 保存編輯之后的復(fù)制圖像(即，合成圖像)(步驟S45)。
圖IIA至圖11D解釋了針對相關(guān)信息與原始圖像的合成的用戶 操作的具體示例。這里，示出了編輯的示例。在編輯中，包括地 像52的各種相關(guān)信息被粘貼在原始圖像44上，其中，所述相關(guān)信息 是通過用原始圖像44的拍攝位置作為關(guān)鍵詞進行檢索而獲得的相關(guān) 信息。
如圖IIA所示，選擇的相關(guān)信息被布置在開始決定的顯示屏幕 上的特定位置，并可以通過由軟鍵顯示54提供的光標移動鍵來垂直 和水平移動選擇的相關(guān)信息。圖11B示出了地像52被移動到最 終固定位置的狀態(tài)。在這種狀態(tài)下，地像52被合成到原始圖像， 并變成不可分離的。該合成圖像的文件數(shù)據(jù)可被存儲為具有與原始圖 像不同的名稱的文件。
如圖11C所示，通過功能軟鍵"功能"56的指令打開功能菜單57。 根據(jù)菜單項目，進一步打開子菜單58。在根據(jù)本實施例的移動終端中， 功能菜單57是關(guān)于與拍攝的圖像相關(guān)的各種功能的菜單。功能菜單 57包括諸如"發(fā)送"、"添加圖像"、"添力口郵件"、"添加符號"、"添加 日期"和"合成消息"的菜單項目。菜單項目"發(fā)送"發(fā)出用于將合成圖 像發(fā)送到輸出設(shè)備的指令。菜單項目"添加圖像"發(fā)出用于在檢索服務(wù) 器中檢索相關(guān)信息并將相關(guān)信息作為圖像合成到原始圖像的指令。當 原始圖像與存儲在存儲單元206中的電子郵件相關(guān)聯(lián)時(例如，當作 為電子郵件的附件獲得原始圖像時)，菜單項目"添加郵件，，發(fā)出用于 將電子郵件的文本作為相關(guān)信息合成到原始圖像的指令。菜單選項 "添加符號"發(fā)出用于將諸如圓形、星形、十字、心形標記和箭頭的圖 形標記作為相關(guān)信息合成到原始圖像的指令，如圖11C的子菜單58 所示。茱單項目"添加日期"發(fā)出用于將原始圖像的拍攝日期作為相關(guān)信息合成到原始圖像的指令。菜單項目"合成消息"發(fā)出用于將消息作 為相關(guān)信息合成到原始圖像的指令。所述消息包括用戶從預(yù)先準備的 消息中選擇的消息以及用戶新輸入的消息。菜單項目不限于上述的項 目，可以添加實現(xiàn)其它功能的菜單項目?？梢杂闷渌椒ù婀δ懿?br> 單57來指示上述菜單項目。
圖11D示出了當菜單項目"添加符號，，的"箭頭，，被指示時以可移 動的方式顯示箭頭形圖形圖像58的狀態(tài)。通過操作光標移動鍵，可 以將圖形圖像58布置在原始圖像上的任意位置，并且圖形圖像58可 在最終固定位置被合成到原始圖像。
圖12示出了通過利用菜單項目"添加日期，，的指令來添加拍攝日 期并通過利用菜單項目"添加郵件"的指令來添加電子郵件的文本，從 而將附加相關(guān)信息合成到原始圖像44的狀態(tài)。如果電子郵件的文本 超出了預(yù)定數(shù)據(jù)量，則僅顯示預(yù)定數(shù)據(jù)量。按照這種方式，通過將諸 如"拍攝的照片是何時拍攝的？"、"拍攝的圖像被附于哪一封郵件？" 或"拍攝的圖像是在哪里拍攝的？，，等的實際的相關(guān)信息添加到拍攝 的圖像，可以為一個拍攝的圖像加入"故事"。
在一種情況下，要被發(fā)送到輸出設(shè)備400的合成圖像僅為完成了 圖12的合成操作的單個合成圖像。在另一情況下，要被發(fā)送的合成 圖像包括在預(yù)先指定的數(shù)據(jù)文件夾中或在用戶指定的數(shù)據(jù)文件夾中 包含的全部合成圖像?？梢匀我獠捎蒙鲜銮闆r中的一種。優(yōu)選地，用 戶可以根據(jù)情況選擇任一情況。
圖13示出了在用戶指定的輸出設(shè)備400中的合成圖像的顯示示 例。本示例對應(yīng)于如上所述在預(yù)先指定的數(shù)據(jù)文件夾中的多個合成圖 像被發(fā)送到輸出設(shè)備400的情況。本示例提供了區(qū)域74和區(qū)域76， 在區(qū)域74中，包括在該數(shù)據(jù)文件夾中的合成圖像被顯示為縮略 像61至63，在區(qū)域76中，顯示選擇的一個合成圖像。當在區(qū)域74 中未顯示涉及的數(shù)據(jù)文件夾中的全部縮略像時，能夠利用旁邊的 滾動條顯示64進行滾動。附屬的遙控設(shè)備(未示出)可執(zhí)行輸出設(shè) 備400的操作。
15按照這種方式，通過利用本系統(tǒng)，可以將合成圖像發(fā)送到與已經(jīng) 合成了圖像的移動終端不同的輸出設(shè)備，并且該合成圖像可被家庭或 朋友共享和欣賞。
通過利用本系統(tǒng)，即使不改變環(huán)境中的家用電器，也可以利用每 個電器作為新的通信工具。
在上面解釋了本發(fā)明的優(yōu)選實施例。然而，除了以上已經(jīng)描述的 之外，還可以進行各種改變和變型。例如，盡管假定相關(guān)信息為文本 和圖畫(靜止圖像)，相關(guān)信息也可包括動畫、音樂數(shù)據(jù)等，并且合 成后的數(shù)據(jù)可被轉(zhuǎn)換成多媒體數(shù)據(jù)。
根據(jù)本發(fā)明的實施例，通過根據(jù)拍攝圖像的附隨信息來檢索相關(guān) 信息，能夠快速且容易地收集各種相關(guān)信息，并且通過將獲得的相關(guān) 信息之中的期望相關(guān)信息合成到拍攝圖像，能夠容易地執(zhí)行將各種相 關(guān)信息包含在一個拍攝圖像中的工作。
通過將這種合成圖像發(fā)送到家庭網(wǎng)絡(luò)上的指定輸出設(shè)備，多個用 戶可以共享和欣賞輸出設(shè)備中的同一合成圖像。
本領(lǐng)域的技術(shù)人員應(yīng)該理解，根據(jù)設(shè)計要求或其它因素可以進行 各種變型、組合、次組合和替換，只要它們在權(quán)利要求或其等同物的 范圍內(nèi)即可。
1權(quán)利要求
1、一種能夠連接到互聯(lián)網(wǎng)和家庭網(wǎng)絡(luò)的移動終端設(shè)備，該移動終端設(shè)備包括附隨信息存儲裝置，用于存儲通過拍攝獲得的圖像以及與所述圖像或所述拍攝相關(guān)的附隨信息；檢索請求裝置，用于請求互聯(lián)網(wǎng)上的檢索服務(wù)器用所述附隨信息作為關(guān)鍵詞執(zhí)行檢索；檢索結(jié)果存儲裝置，用于臨時存儲從所述檢索服務(wù)器獲得的檢索結(jié)果；圖像合成裝置，用于通過將所述檢索結(jié)果與通過所述拍攝獲得的圖像進行合成來創(chuàng)建合成圖像；和傳輸裝置，用于將所述合成圖像發(fā)送到家庭網(wǎng)絡(luò)上的指定輸出設(shè)備。
2、 根據(jù)權(quán)利要求1所述的移動終端設(shè)備，還包括對應(yīng)表，將被請求執(zhí)行檢索的檢索服務(wù)器的URL與關(guān)鍵詞的每個種類相關(guān)聯(lián)，其中，所述檢索請求裝置請求具有與用于檢索的關(guān)鍵詞的種類對應(yīng)的URL的檢索服務(wù)器來執(zhí)行所述檢索。
3、 根據(jù)權(quán)利要求1所述的移動終端設(shè)備，其中，所述附隨信息是隨著所述拍攝被自動附加到拍攝的圖像的數(shù)據(jù)。
4、 根據(jù)權(quán)利要求1所述的移動終端設(shè)備，還包括位置檢測裝置，用于檢測當前位置，其中，所述附隨信息是所述位置檢測裝置獲得的位置信息。
5、 根據(jù)權(quán)利要求1所述的移動終端設(shè)備，還包括輸入裝置，用戶利用所述輸入裝置輸入信息，其中，根據(jù)用戶給出的指令，所述圖像合成裝置通過將通過輸入裝置針對拍攝的圖像輸入的信息與通過所述拍攝獲得的圖像合成來創(chuàng)建合成圖像。
6、 根據(jù)權(quán)利要求1所述的移動終端設(shè)備，還包括郵件存儲裝置，用于存儲接收到的電子郵件，其中，所述圖像合成裝置包括合成裝置，所述合成裝置用于在拍攝的圖像被附于接收到的電子郵件的情況下，將所述電子郵件的文本與該拍攝的圖像進行合成。
7、 一種包括在移動終端設(shè)備中的計算機可執(zhí)行的計算機程序，所述移動終端設(shè)備能夠連接到互聯(lián)網(wǎng)和家庭網(wǎng)絡(luò)，所述計算機程序包括如下步驟獲取通過拍攝獲得的圖像和與所述圖像或所述拍攝相關(guān)的附隨4各息5請求互聯(lián)網(wǎng)上的檢索服務(wù)器用所述附隨信息作為關(guān)鍵詞來執(zhí)行檢索；臨時存儲從所述檢索服務(wù)器獲得的檢索結(jié)果；通過將所述檢索結(jié)果與通過所述拍攝獲得的圖像進行合成來創(chuàng)建合成圖像；以及將所述合成圖像發(fā)送到家庭網(wǎng)絡(luò)上的指定輸出設(shè)備。
全文摘要
本發(fā)明涉及移動終端設(shè)備和計算機程序。提供了一種能夠連接到互聯(lián)網(wǎng)和家庭網(wǎng)絡(luò)的移動終端設(shè)備，包括附隨信息存儲裝置，用于存儲通過拍攝獲得的圖像以及與所述圖像或所述拍攝相關(guān)的附隨信息；檢索請求裝置，用于請求互聯(lián)網(wǎng)上的檢索服務(wù)器用附隨信息作為關(guān)鍵詞執(zhí)行檢索；檢索結(jié)果存儲裝置，用于臨時存儲從檢索服務(wù)器獲得的檢索結(jié)果；圖像合成裝置，用于通過將檢索結(jié)果與通過所述拍攝獲得的圖像進行合成來創(chuàng)建合成圖像；和傳輸裝置，用于將合成圖像發(fā)送到家庭網(wǎng)絡(luò)上的指定輸出設(shè)備。
文檔編號G06F17/30GK101540800SQ200910128778
公開日2009年9月23日 申請日期2009年3月19日 優(yōu)先權(quán)日2008年3月19日
發(fā)明者野口芳華 申請人:索尼愛立信移動通信日本株式會社