專利名稱：具有拍攝功能的設(shè)備的制作方法
技術(shù)領(lǐng)域：
本公開涉及具有拍攝功能的終端。
背景技術(shù)：
總體上，具有拍攝功能的終端在拍攝模式啟用的情況下在預(yù)覽屏幕上顯示圖像。 如果啟用了拍攝模式，具有拍攝功能的終端啟用預(yù)覽模式并在預(yù)覽屏幕上實時地顯示圖像，即，屏幕顯示對應(yīng)于圖像傳感器通過攝像機的鏡頭檢測到的圖像的經(jīng)過處理的數(shù)據(jù)。在啟用了預(yù)覽模式的狀態(tài)下，用戶可以啟用靜止圖像拍攝模式并捕獲和記錄在預(yù)覽模式中顯示在屏幕上的圖像。此外，用戶可以啟用運動圖像拍攝模式以捕獲和記錄從啟用運動圖像拍攝模式的時間點到停用運動圖像拍攝模式的時間點為止的運動圖像，從而與屏幕上顯示的圖像一起記錄周圍的聲音。具有這種拍攝功能的終端除了具有拍攝功能外，還具有記錄功能、數(shù)據(jù)存儲功能、 存儲數(shù)據(jù)獲取功能、與外部設(shè)備(如個人計算機(PC))的數(shù)據(jù)通信的功能。近來，已經(jīng)增加了諸如電話通話功能、音樂和/或運動圖像等的多媒體文件播放功能、廣播接收/發(fā)送功能以及用于遠程控制電子設(shè)備(如電視機)的功能的各種功能中的至少一種。例如，具有拍攝功能的終端可以包括數(shù)字攝像機、便攜式多媒體播放器(PMP)、移動電話、個人數(shù)字助理 (PDA)、智能電話、MPEG層3播放器(MP3P)等。但是，在具有拍攝功能的現(xiàn)有終端中，使用單獨的圖像編輯軟件工具僅能讀取并編輯已記錄的圖像。此外，在具有拍攝功能的現(xiàn)有終端中，在啟用了拍攝模式的情況下，為了控制可遠程控制的電子設(shè)備，必須停止拍攝模式并切換到電子設(shè)備遠程控制模式。例如，如果可以遠程控制的電子設(shè)備在開啟的狀態(tài)下被顯示在預(yù)覽屏幕上，則必須切換該模式以關(guān)閉該電子設(shè)備。

發(fā)明內(nèi)容
本發(fā)明的示例性實施方式提供了一種具有拍攝功能的終端，該終端能夠在所拍攝的圖像被顯示在預(yù)覽屏幕上的狀態(tài)下提供圖像編輯服務(wù)。本發(fā)明的示例性實施方式提供了一種具有拍攝功能的終端，該終端能夠利用圖像識別方法識別在預(yù)覽屏幕上顯示的虛擬對象并遠程控制與所識別出的虛擬對象相對應(yīng)的真實對象。本發(fā)明的附加特征和優(yōu)點將在下面的描述中加以闡述，并且部分上根據(jù)該描述變得清楚，或者可以通過本發(fā)明的實踐來獲知。一個示例性實施方式提供了一種具有拍攝功能的終端，該終端包括用于產(chǎn)生圖像幀的圖像輸入單元；用于在屏幕上顯示由所述圖像輸入單元產(chǎn)生的所述圖像幀的圖像輸出單元；控制器，如果啟用了預(yù)覽模式，則所述控制器將所述圖像輸入單元產(chǎn)生的所述圖像幀實時地發(fā)送給所述圖像輸出單元，其中，如果在所述預(yù)覽模式中選擇了在所述圖像輸出單元在所述屏幕上顯示的圖像中的對象，則所述控制器識別所選擇的對象，檢測其中存在有與所識別出的對象相匹配的對象的圖像幀，處理所檢測到的圖像幀，并且將經(jīng)過處理的圖像幀發(fā)送給所述圖像輸出單元。一個示例性實施方式提供了一種具有拍攝功能的終端，該終端包括用于執(zhí)行無線通信的通信單元；用于產(chǎn)生圖像幀的圖像輸入單元；用于在屏幕上顯示由所述圖像輸入單元產(chǎn)生的所述圖像幀的圖像輸出單元；用于存儲關(guān)于與特征數(shù)據(jù)相匹配的無線通信協(xié)議的信息的存儲器；以及控制器，如果啟用了預(yù)覽模式，則所述控制器將所述圖像輸入單元產(chǎn)生的所述圖像幀實時地發(fā)送給所述圖像輸出單元，其中，如果在所述圖像輸出單元在所述屏幕上顯示的圖像中選擇了對象，則所述控制器提取所選擇的對象的特征數(shù)據(jù)，從所述存儲器中獲取與所提取出的特征數(shù)據(jù)相匹配的對象的無線通信協(xié)議，利用獲取的無線通信協(xié)議來產(chǎn)生用于對象控制的遠程控制信號，并且通過所述通信單元來發(fā)送所產(chǎn)生的遠程控制信號。應(yīng)當(dāng)理解，上面的一般描述和下面的詳細描述都是示例性和說明性的，旨在提供對所要求保護的本發(fā)明的進一步解釋。其它特征和方面將從以下的詳細描述、附圖和權(quán)利要求書中顯現(xiàn)。


所包括的附圖用于提供對本發(fā)明的進一步理解，并被結(jié)合到說明書中且構(gòu)成說明書的一部分，附圖示出了本發(fā)明的實施方式，并與文字說明一起用于解釋本發(fā)明的原理。圖1是示出了根據(jù)一個示例性實施方式的具有拍攝功能的終端的構(gòu)造的示意性框圖。圖2、圖3、圖4和圖5是例示了在根據(jù)一個示例性實施方式的具有拍攝功能的終端上顯示的預(yù)覽圖像的圖。
具體實施例方式下面將參照附圖更全面地描述本發(fā)明的示例性實施方式，在附圖中示出了示例性實施方式。但是，本公開可以通過很多不同的形式來實施，因此不應(yīng)當(dāng)視為限于本文所闡述的示例性實施方式。相反，提供這些示例性實施方式是為了使得本公開更加完整，并這些示例性實施方式將向本領(lǐng)域技術(shù)人員全面地傳達本公開的范圍。在描述中，可以略去公知特征和技術(shù)的細節(jié)以避免不必要地模糊所提出的實施方式。本文所使用的詞語僅是出于說明特定實施方式的目的，并不旨在限制本公開。除非上下文清楚地另有所指，否則在本文中使用的單數(shù)形式“一”和“所述”旨在也包括復(fù)數(shù)形式。此外，“一”等詞語的使用并不表示數(shù)量上的限制，而是表示存在至少一個所涉及的項。詞語“第一”、“第二”等的使用并不意味著特定的順序，而是將它們包括在內(nèi)以標(biāo)識各個單獨要素。此外，詞語“第一”、“第二”等的使用并不表示任何順序和重要性，而是使用詞語“第一”、“第二”等來將一個要素與另一個要素區(qū)分開來。還應(yīng)當(dāng)理解的是，在本說明書中使用時，詞語“包括”是指存在所陳述的特征、區(qū)域、要件、步驟、操作、要素和/或部件，但是并不排除一個或更多個其他特征、區(qū)域、要件、步驟、操作、要素、部件和/或它們的組合的存在或添加。
除非另有限定，否則在本文中使用的所有詞語(包括科技術(shù)語)都具有本領(lǐng)域普通技術(shù)人員所普遍理解的相同含義。還應(yīng)當(dāng)理解，應(yīng)當(dāng)把例如在普遍使用的詞典中限定的詞語解釋為具有與它們在相關(guān)技術(shù)和本公開中的語境相一致的含義，并且除非在本文中做出清楚的限定，否則不應(yīng)當(dāng)以理想化或過度正式的方式解釋它們。在附圖中，相同的附圖標(biāo)記表示相同的要素。為了清楚起見，可以夸大附圖的形狀、尺寸和區(qū)域等。下面，將參照附圖詳細地描述根據(jù)示例性實施方式的具有拍攝功能的終端。圖1是示出了根據(jù)示例性實施方式的具有拍攝功能的終端的構(gòu)造的示意性框圖。 參照圖1，具有拍攝功能的終端包括圖像輸入單元10、圖像處理單元20、圖像輸出單元30、 聲音輸入單元40、聲音輸出單元50、存儲器60、通信單元70、用戶操作單元75以及控制器 80。圖像輸入單元10采集并處理光學(xué)信號，并且將該光學(xué)信號轉(zhuǎn)換成圖像信號。圖像輸入單元10還以幀為單位對轉(zhuǎn)換后的圖像信號進行處理，以產(chǎn)生圖像幀。圖像輸入單元 10包括用于將光學(xué)信號轉(zhuǎn)換成模擬圖像信號的圖像傳感器和用于處理從圖像傳感器輸出的模擬圖像信號并輸出數(shù)字信號的信號處理模塊。圖像傳感器例如可以包括電荷耦合器件 (CCD)或互補金屬氧化物半導(dǎo)體(CM0Q傳感器。根據(jù)圖像傳感器的類型，數(shù)模(D/A)轉(zhuǎn)換器(未示出)可以集成到圖像傳感器中，或者可以是分立的部件。圖像處理單元20根據(jù)圖像輸出單元30的特點(如圖像輸出單元30的屏幕尺寸) 來處理由圖像輸入單元10產(chǎn)生的圖像幀。也就是說，圖像處理單元20可以包括用于將圖像信號編碼或解碼成適于圖像輸出單元30的特點的特定格式的圖像編解碼器。圖像輸出單元30在控制器80的控制下在屏幕上顯示圖像幀，以在屏幕上顯示靜止圖像或運動圖像。例如，圖像輸出單元30可以包括具有或不具有觸摸屏的液晶顯示器 (IXD)、無機或有機發(fā)光二極管(LED)顯示器等。如果圖像輸出單元包括觸摸屏，則可以執(zhí)行與用戶操作單元75類似的輸入。始終可以根據(jù)觸摸輸入、拖拽輸入、多點觸摸輸入等來操縱選定對象90。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象刪除模式，則圖像輸出單元30 在屏幕上顯示可以刪除選定對象90的預(yù)覽圖像。當(dāng)在屏幕上顯示預(yù)覽圖像的同時，可以將預(yù)覽圖像存儲在與圖像輸出單元相關(guān)聯(lián)的緩沖存儲器(未示出)中。但是，預(yù)覽圖像可能還未被存儲在終端的存儲器60中。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象移動模式，則如圖2所示，圖像輸出單元30在屏幕上顯示可以移動選定圖像90的位置的預(yù)覽圖像。參照圖2，用戶可以選擇對象90，S卩，某人在所顯示的預(yù)覽圖像中的圖像，并且在所顯示的預(yù)覽圖像內(nèi)移動選定對象90。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象拍攝模式，則圖像輸出單元30 在屏幕上顯示預(yù)覽圖像，在該預(yù)覽圖像中，僅選定對象90被移動，而不包括選定對象90的區(qū)域則停止不動或處于靜止?fàn)顟B(tài)。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象放大/縮小模式，則圖像輸出單元30在屏幕上顯示預(yù)覽圖像，在該預(yù)覽圖像中，僅選定對象90被移動和放大/縮小，而不包括選定對象90的區(qū)域停止不動或處于靜止?fàn)顟B(tài)。
如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象合成模式，則圖像輸出單元30 在屏幕上顯示預(yù)覽圖像，在該預(yù)覽圖像中，根據(jù)選定對象90的移動而移動了將與選定對象 90合成的文字(S卩，“Jindo狗”)或圖像，如圖3所示。參照圖3，文字“Jindo狗”可以被選擇和/或添加到預(yù)覽圖像，與選定對象90合成，并且隨選定對象90 —起移動。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象余像(after-image)模式，則圖像輸出單元30在屏幕上顯示預(yù)覽圖像，在該預(yù)覽圖像中，僅選定對象90與選定對象90 的余像一起移動，而不包括選定對象90的區(qū)域則停止不動，如圖4所示。參照圖4，選定對象90 (例如，單板滑雪者)被移動，而不包括選定對象90的區(qū)域則停止不動。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了圖像特性改變模式，則圖像輸出單元30 在屏幕上顯示亮度與選定對象90的亮度相同的預(yù)覽圖像，如圖5所示。參照圖5，該圖像的亮度可以被改變?yōu)榕c選定對象90的亮度相對應(yīng)、相同或相似。再次參照圖1，聲音輸入單元40采集并處理聲音，并且產(chǎn)生聲音信號。例如，聲音輸入單元40可以包括麥克風(fēng)等。聲音輸出單元50輸出聲音信號。例如，聲音輸出單元50可以包括揚聲器等。存儲器60存儲數(shù)據(jù)(例如，靜止圖像、運動圖像、聲音、聲音相關(guān)數(shù)據(jù)等)，并且向控制器提供所獲取的存儲數(shù)據(jù)。存儲器60可以存儲關(guān)于與對象的特征數(shù)據(jù)相匹配的語音信息的聲音信號波形的信息和關(guān)于無線通信協(xié)議的信息。通信單元70執(zhí)行控制器80與無線通信系統(tǒng)之間的無線通信、控制器80與另一個終端之間的無線通信或者控制器80與另一個終端之間通過網(wǎng)絡(luò)的無線通信。例如，通信單元70可以包括局域網(wǎng)(LAN)無線通信模塊、無線因特網(wǎng)模塊、廣播按收模塊、移動通信模塊等。LAN通信模塊可以包括藍牙、射頻識別(RFID)、紅外數(shù)據(jù)聯(lián)合、超寬帶(UWB)和ZigBee 模塊、以及各種有線通信端口。用戶操作單元75根據(jù)用戶的操作而產(chǎn)生用于控制終端操作模式的各種輸入事件。同時，用戶操作單元75提供用戶接口(UI)以供進行用戶輸入(如，選擇存在于圖像輸出單元30在屏幕上顯示的圖像中的對象并且移動選定對象90)。例如，用戶操作單元75可以包括鍵區(qū)、滾輪開關(guān)、觸摸板等。圖像輸出單元30可以包括用戶操作單元75，從而圖像輸出單元30可以是觸摸屏?？刂破?0根據(jù)由用戶操作單元75產(chǎn)生的輸入事件來啟用或停用各種終端操作模式?？刂破?0在拍攝模式被啟用的狀態(tài)下啟用預(yù)覽模式，隨后通過圖像處理單元20 將圖像輸入單元10產(chǎn)生的圖像幀實時發(fā)送給圖像輸出單元30。圖像輸出單元30順序地接收這些圖像幀并在屏幕上顯示這些圖像幀。如果用戶在啟用了預(yù)覽模式的狀態(tài)下選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象，則控制器80識別該選定對象，檢測其中存在與選定對象匹配的對象的圖像幀，將檢測到的圖像幀處理成適合于終端操作模式，并且將經(jīng)過處理的圖像幀發(fā)送給圖像輸出單元30。具體地說，如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象控制模式，則在用戶利用用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象時，控制器80提取選定對象90的特征數(shù)據(jù)(例如，該對象所占用的區(qū)域的形狀、像素RGB值等)，并且將提取出的特征數(shù)據(jù)存儲在存儲器60中。之后，控制器80從由圖像輸入單元10產(chǎn)生的圖像幀中檢測存在與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象的圖像幀。此外，控制器 80在檢測到的圖像幀中對與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象進行控制，并且通過圖像處理單元20將其中該對象受到控制的圖像幀發(fā)送給圖像輸出單元30，或者通過通信單元70將該圖像幀發(fā)送給另一個終端。如果用戶通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象，則控制器80可以啟用選定對象控制模式。選定對象控制模式可以包括選定對象刪除模式、選定對象移動模式、選定對象拍攝模式、選定對象放大/縮小模式、選定對象合成模式、選定對象余像模式、圖像特性改變模式、選定對象語音/聲音分離/去除模式、對象遠程控制模式等。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象刪除模式，并且如果用戶在用戶輸入等待狀態(tài)下通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象，則控制器80提取選定對象90的特征數(shù)據(jù)?？刂破?0將提取出的特征數(shù)據(jù)存儲在存儲器60中，并且從由圖像輸入單元10產(chǎn)生的圖像幀中提取其中存在與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象的圖像幀。此外，控制器80在檢測到的圖像幀中刪除與存儲器60 中存儲的特征數(shù)據(jù)相對應(yīng)的對象，并且通過圖像處理單元20把刪除了該對象的圖像幀發(fā)送給圖像輸出單元30，或者通過通信單元70把刪除了該對象的圖像幀發(fā)送給另一個終端。控制器80利用歸一化方法(normalization method)以與周圍環(huán)境的圖像圖案相似的圖案來填充圖像幀中刪除了對象的部位。例如，為了以與周圍環(huán)境的圖像圖案相似的圖案來填充圖像幀中刪除了對象的部位，可以使用圖像幀中包圍選定對象90所占據(jù)區(qū)域的預(yù)定像素的RGB值。如圖2所示，如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象移動模式，并且如果用戶在用戶輸入等待狀態(tài)下通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象并將選定對象90移動到特定位置，則控制器80提取選定對象90的特征數(shù)據(jù)，并且檢查選定對象90在屏幕上的移動位置。控制器80將提取出的特征數(shù)據(jù)以及選定對象90的移動位置存儲在存儲器60中，從圖像輸入單元10產(chǎn)生的圖像幀中檢測其中存在與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象的圖像幀?？刂破?0在檢測到的圖像幀中將與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象移動到存儲器60中存儲的選定對象90 的移動位置處。之后，控制器80通過圖像處理單元20將其中移動了對象的圖像幀發(fā)送給圖像輸出單元30，或者通過通信單元70將其中移動了對象的圖像幀發(fā)送給另一個終端?？刂破?0利用歸一化方法以與周圍環(huán)境的圖像圖案相似的圖案來填充圖像幀中被移走對象的部位。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象拍攝模式，并且如果用戶在用戶輸入等待狀態(tài)下通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象，則控制器80提取選定對象90的特征數(shù)據(jù)，并且將提取出的特征數(shù)據(jù)以及與圖像輸入單元10所產(chǎn)生的任一圖像幀相對應(yīng)的背景圖像幀存儲在存儲器60中。之后，控制器80 從圖像輸入單元10所產(chǎn)生的圖像幀中檢測其中存在與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象的圖像幀。此外，控制器80在檢測到的圖像幀中刪除未選中區(qū)域，并且通過圖像處理單元20將刪除了未選中區(qū)域的圖像幀發(fā)送給圖像輸出單元30，或者通過通信單元70將刪除了未選中區(qū)域的圖像幀發(fā)送給另一個終端。該未選中區(qū)域是檢測到的圖像幀中不包括由與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象所占據(jù)的區(qū)域的區(qū)域。控制器80利用歸一化方法以顏色來填充圖像幀中被刪除的未選中區(qū)域，或者用未選中區(qū)域被刪除的圖像幀來覆蓋存儲器60中存儲的背景圖像幀。如果在圖像輸出單元30的屏幕上顯示了其中僅移動了選定對象而使不包括選定對象90的未選中區(qū)域停止不動的預(yù)覽圖像，則控制器80利用歸一化方法以與周圍環(huán)境的圖像圖案相似的圖案來填充伴隨選定對象90的移動而在選定對象90與未選中區(qū)域之間產(chǎn)生的未限定空間。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象放大/縮小模式，并且如果用戶在用戶輸入等待狀態(tài)下通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象并且按比例放大/縮小了選定對象90的尺寸，則控制器80提取選定對象90 的特征數(shù)據(jù)，并且將提取出的特征數(shù)據(jù)、選定對象90的放大/縮小比例、以及與圖像輸入單元10所產(chǎn)生的任一圖像幀相對應(yīng)的背景圖像幀存儲在存儲器60中。之后，控制器80從圖像輸入單元10所產(chǎn)生的圖像幀中檢測其中存在與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象的圖像幀。此外，控制器80按照存儲器60中存儲的放大/縮小比例來放大/縮小在檢測到的圖像幀中與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象，并且刪除不包括被放大/縮小的對象的區(qū)域，即，未選中區(qū)域。將被刪除了未選中區(qū)域的圖像幀通過圖像處理單元20 發(fā)送給圖像輸出單元30，或者通過通信單元70發(fā)送給另一個終端?？刂破?0利用歸一化方法以顏色來填充圖像幀中被刪除的未選中區(qū)域，或者用被刪除了未選中區(qū)域的圖像幀來覆蓋存儲器60中存儲的背景圖像幀。如果如圖3所示在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象合成模式，并且如果用戶在用戶輸入等待狀態(tài)下通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象，則控制器80提取選定對象90的特征數(shù)據(jù)，并且將提取出的特征數(shù)據(jù)存儲在存儲器60中。之后，控制器80從圖像輸入單元10所產(chǎn)生的圖像幀中檢測其中存在與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象的圖像幀。此外，控制器80檢查所檢測到的圖像幀中與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象的位置(例如，2維或3維位置坐標(biāo))， 并且在與檢查到的對象位置相對應(yīng)的位置處產(chǎn)生其中存在待合成的文字或圖像的新圖像幀。之后，控制器80將所產(chǎn)生的新圖像幀與檢測到的圖像幀合成，并且通過圖像處理單元 20將合成的圖像幀發(fā)送給圖像輸出單元30，或者通過通信單元70將合成的圖像幀發(fā)送給另一個終端。待合成的文字或圖像可以由用戶通過用戶操作單元75直接輸入，或者可以是預(yù)先存儲在存儲器60中的數(shù)據(jù)。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象語音/聲音分離/去除模式， 并且如果用戶在用戶輸入等待狀態(tài)下通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象，則控制器80提取選定對象90的特征數(shù)據(jù)，并且從存儲器60獲取與提取出的特征數(shù)據(jù)相匹配的語音信息的聲音信號波形。之后，控制器80從聲音輸入單元40所產(chǎn)生的聲音信號中提取出具有與所獲取的語音信息的聲音信號波形相匹配的波形的聲音信號，分離/去除與提取出的聲音信號相對應(yīng)的語音或聲音，并且通過聲音輸出單元50來發(fā)送由聲音輸入單元40產(chǎn)生的聲音信號。如果如圖4所示在啟用了預(yù)覽模式的狀態(tài)下又啟用了選定對象余像模式，并且如果用戶在用戶等待狀態(tài)下通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象，則控制器80提取選定對象90的特征數(shù)據(jù)，并且將提取出的特征數(shù)據(jù)以及與圖像輸入單元10所產(chǎn)生的任一圖像幀相對應(yīng)的背景圖像幀存儲在存儲器60中。之后，控制器80從圖像輸入單元10所產(chǎn)生的圖像幀中檢測其中存在與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象的圖像幀，并且順序地將檢測到的圖像幀與存儲器60中存儲的背景圖像幀合成。這里，按照使得幀具有間隔的方式執(zhí)行合成?？刂破?0通過圖像處理單元20將合成的圖像幀發(fā)送給圖像輸出單元30，或者通過通信單元70將合成的圖像幀發(fā)送給另一個終端。控制器80可以在圖像幀被與背景圖像幀合成起來的時間點起過去預(yù)定時間后順序地去除與背景圖像幀合成的圖像幀，使得與背景圖像幀合成的圖像幀隨著時間的過去而消失。如果如圖5所示在啟用了預(yù)覽模式的狀態(tài)下又啟用了圖像特性改變模式，并且如果用戶在用戶輸入等待狀態(tài)下通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象，則控制器80提取選定對象90的特征數(shù)據(jù)，并且將提取出的特征數(shù)據(jù)存儲在存儲器60中。之后，控制器80從圖像輸入單元10所產(chǎn)生的圖像幀中檢測其中存在與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象的圖像幀，并且將檢測到的圖像幀的整體特性 (例如，顏色、亮度等)改變成適合于在存儲器60中存儲的特征數(shù)據(jù)。另選地，控制器80將在檢測到的圖像幀中存在的對象的特性(例如，顏色、亮度等)改變成適合于存儲器60中存儲的特征數(shù)據(jù)，并且通過圖像處理單元20將改變后的圖像幀發(fā)送給圖像輸出單元30，或者通過通信單元70將改變后的圖像幀發(fā)送給另一個終端。如果在啟用了預(yù)覽模式的狀態(tài)下又啟用了對象遠程控制模式，并且如果用戶在用戶輸入等待狀態(tài)下通過用戶操作單元75選擇了在圖像輸出單元30的屏幕上顯示的圖像中的對象，則控制器80提取選定對象90的特征數(shù)據(jù)。之后，控制器80從存儲器60獲取與提取出的特征數(shù)據(jù)相匹配的對象的無線通信協(xié)議，利用所獲取的無線通信協(xié)議來產(chǎn)生用于對象控制的遠程控制信號，并且通過通信單元70發(fā)送所產(chǎn)生的遠程控制信號。這里，與選定對象90相對應(yīng)的真實對象(例如，諸如TV接收機的電子設(shè)備)包括特定的無線通信協(xié)議， 如紅外接收通信模塊。這樣的電子設(shè)備接收從終端發(fā)送的遠程控制信號，并且使用接收到的遠程控制信號來執(zhí)行預(yù)定操作。在圖像輸入單元10所產(chǎn)的圖像幀中，其中不存在與選定對象匹配的對象(S卩，與存儲器60中存儲的特征數(shù)據(jù)相對應(yīng)的對象)的圖像幀可以由控制器80通過圖像處理單元 20直接發(fā)送給圖像輸出單元30。此外，如果在啟用了預(yù)覽模式的狀態(tài)下通過通信單元70從另一個終端接收到圖像幀，則控制器80通過圖像處理單元20將接收的圖像幀發(fā)送給圖像輸出單元30。根據(jù)示例性實施方式，可以在在預(yù)覽屏幕上顯示拍攝圖像的狀態(tài)下提供圖像編輯服務(wù)，并且可以在將拍攝圖像記錄到存儲器中之前對圖像進行編輯。因而，用戶不需要在記錄了拍攝圖像之后使用單獨的圖像編輯工具來執(zhí)行圖像編輯操作。此外，根據(jù)示例性實施方式，通過圖像識別方法來識別在預(yù)覽屏幕上顯示的虛擬對象，并且可以對與所識別的虛擬對象相對應(yīng)的真實對象進行遠程控制。因而，無需在啟用了預(yù)覽模式的狀態(tài)下改變模式就可以控制屏幕上顯示的對象。對于本領(lǐng)域技術(shù)人員而言很明顯，在不偏離本發(fā)明的精神或范圍的條件下，可以對本發(fā)明做出各種修改和變型。因而，本發(fā)明旨在涵蓋落入所附權(quán)利要求及其等同物的范圍內(nèi)的對本發(fā)明的修改和變型。 本申請要求2010年2月9日提交的韓國專利申請No. 10-2010-0011923的優(yōu)先權(quán)， 通過引用將該韓國專利申請并入于此，如同在此做了全面闡述一樣。
權(quán)利要求
1.一種具有拍攝功能的終端，該終端包括用于產(chǎn)生圖像幀的圖像輸入單元；用于在屏幕上顯示由所述圖像輸入單元產(chǎn)生的所述圖像幀的圖像輸出單元；以及控制器，如果啟用了預(yù)覽模式，則所述控制器將所述圖像輸入單元產(chǎn)生的所述圖像幀實時發(fā)送給所述圖像輸出單元，其中，如果在所述預(yù)覽模式中選擇了在所述圖像輸出單元的所述屏幕上顯示的圖像中的對象，則所述控制器識別該選定對象，檢測其中存在與所識別出的對象相匹配的對象的圖像幀，處理所檢測到的圖像幀，并且將經(jīng)過處理的圖像幀發(fā)送給所述圖像輸出單元。
2.根據(jù)權(quán)利要求1所述的終端，其中，如果啟用了選定對象控制模式，則所述控制器提取并存儲所述選定對象的特征數(shù)據(jù)，檢測其中存在與所存儲的特征數(shù)據(jù)相匹配的對象的圖像幀，控制所檢測到的圖像幀中與所存儲的特征數(shù)據(jù)相匹配的所述對象，并且將其中所述對象受到控制的所述圖像幀發(fā)送給所述圖像輸出單元。
3.根據(jù)權(quán)利要求2所述的終端，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的所述圖像中的所述對象，則所述控制器啟用所述選定對象控制模式。
4.根據(jù)權(quán)利要求1所述的終端，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的所述圖像中的所述對象，則所述控制器提取并存儲所述選定對象的特征數(shù)據(jù)，檢測其中存在與所存儲的特征數(shù)據(jù)相匹配的對象的圖像幀，刪除所檢測到的圖像幀中與所存儲的特征數(shù)據(jù)相匹配的所述對象，并且將刪除了所述對象后的所述圖像幀發(fā)送給所述圖像輸出單元。
5.根據(jù)權(quán)利要求4所述的終端，其中，所述控制器利用歸一化方法以與周圍環(huán)境的圖像圖案相似的圖案來填充所述圖像幀中刪除了所述對象的部位。
6.根據(jù)權(quán)利要求1所述的終端，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的所述圖像中的所述對象并且將該選定對象從第一位置移動到第二位置，則所述控制器提取所述選定對象的特征數(shù)據(jù)，檢查所述選定對象在所述屏幕上的移動位置，存儲所述選定對象的所述特征數(shù)據(jù)和所述移動位置，檢測其中存在與所存儲的特征數(shù)據(jù)相匹配的對象的圖像幀，將所檢測到的圖像幀中與所存儲的特征數(shù)據(jù)相匹配的對象移動到所存儲的所述選定對象的移動位置，并且將移動了所述對象后的所述圖像幀發(fā)送給所述圖像輸出單元，所述第一位置對應(yīng)于所述選定對象在所述圖像中的原始位置，并且所述第二位置對應(yīng)于所述移動位置。
7.根據(jù)權(quán)利要求6所述的終端，其中，所述控制器利用歸一化方法以與周圍環(huán)境的圖像圖案相似的圖案來填充所述選定對象被移動的部位。
8.根據(jù)權(quán)利要求1所述的終端，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的所述圖像中的所述對象，則所述控制器提取該選定對象的特征數(shù)據(jù)，存儲所提取出的特征數(shù)據(jù)以及與所述圖像輸入單元所產(chǎn)生的圖像幀相對應(yīng)的背景圖像幀，檢測其中存在與所存儲的特征數(shù)據(jù)相匹配的對象的圖像幀，刪除在所檢測到的圖像幀中不包括由與所存儲的特征數(shù)據(jù)相匹配的所述對象占據(jù)的區(qū)域的未選中區(qū)域，并且將刪除了所述未選中區(qū)域后的所述圖像幀發(fā)送給所述圖像輸出單元。
9.根據(jù)權(quán)利要求8所述的終端，其中，所述控制器利用歸一化方法以顏色來填充所述圖像幀中被刪除的未選中區(qū)域，或者用刪除了所述未選中區(qū)域后的所述圖像幀來覆蓋所存儲的背景圖像幀。
10.根據(jù)權(quán)利要求9所述的終端，其中，如果在所述圖像輸出單元的所述屏幕上顯示了其中僅所述選定對象被移動而使不包括所述選定對象的所述未選中區(qū)域停止不動的預(yù)覽圖像，則利用歸一化方法以與周圍環(huán)境的圖像圖案相似的圖案來填充隨著所述選定對象的移動而在所述選定對象與所述未選中區(qū)域之間產(chǎn)生的未限定空間。
11.根據(jù)權(quán)利要求1所述的終端，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的所述圖像中的所述對象并且根據(jù)比例放大或縮小了所述選定對象，則所述控制器提取所述選定對象的特征數(shù)據(jù)，存儲所提取出的特征數(shù)據(jù)、所述選定對象的放大/縮小比例以及與所述圖像輸入單元所產(chǎn)生的圖像幀相對應(yīng)的背景圖像幀，檢測其中存在與所存儲的特征數(shù)據(jù)相匹配的對象的圖像幀，按照所存儲的放大/縮小比例來放大或縮小所檢測到的圖像幀中與所存儲的特征數(shù)據(jù)相匹配的對象，刪除不包括被放大或縮小的對象的未選中區(qū)域，并且將刪除了所述未選中區(qū)域后的所述圖像幀發(fā)送給所述圖像輸出單元。
12.根據(jù)權(quán)利要求11所述的終端，其中，所述控制器利用歸一化方法以顏色來填充所述圖像幀中被刪除的未選中區(qū)域，或者用刪除了所述未選中區(qū)域后的所述圖像幀來覆蓋所存儲的背景圖像幀。
13.根據(jù)權(quán)利要求1所述的終端，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的所述圖像中的所述對象，則所述控制器提取所述選定對象的特征數(shù)據(jù)，存儲所提取出的特征數(shù)據(jù)，檢測其中存在與所存儲的特征數(shù)據(jù)相匹配的對象的圖像幀，檢查所檢測到的圖像幀中與所存儲的特征數(shù)據(jù)相匹配的所述對象的位置，在與檢查到的所述對象的位置相對應(yīng)的位置處產(chǎn)生其中存在待合成的文字或圖像的新圖像幀，將產(chǎn)生的新圖像幀與所檢測到的圖像幀合成，并且將合成的圖像幀發(fā)送給所述圖像輸出單元。
14.根據(jù)權(quán)利要求1所述的終端，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的所述圖像中的所述對象，則所述控制器提取所述選定對象的特征數(shù)據(jù)，存儲所提取出的特征數(shù)據(jù)以及與所述圖像輸入單元所產(chǎn)生的圖像幀相對應(yīng)的背景圖像幀，檢測其中存在與所存儲的特征數(shù)據(jù)相匹配的對象的圖像幀，按使幀具有間隔的方式將所檢測到的圖像幀與所存儲的背景圖像幀合成，并且將合成的圖像幀發(fā)送給所述圖像輸出單元。
15.根據(jù)權(quán)利要求14所述的終端，其中，所述控制器順序去除與所述背景圖像幀合成的所述圖像幀。
16.根據(jù)權(quán)利要求1所述的終端，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的所述圖像中的所述對象，則所述控制器提取所述選定對象的特征數(shù)據(jù)，存儲所提取出的特征數(shù)據(jù)，檢測其中存在與所存儲的特征數(shù)據(jù)相匹配的對象的圖像幀，改變所檢測到的圖像幀的特性，并且將改變了特性后的所述圖像幀發(fā)送給所述圖像輸出單元。
17.根據(jù)權(quán)利要求16所述的終端，其中，所述控制器改變所檢測到的圖像幀中存在的對象的特性，并且將改變了所述對象的特性后的所述圖像幀發(fā)送給所述圖像輸出單元。
18.根據(jù)權(quán)利要求1所述的終端，該終端還包括用于產(chǎn)生聲音信號的聲音輸入單元；用于輸出由所述聲音輸入單元產(chǎn)生的所述聲音信號的聲音輸出單元；以及用于存儲關(guān)于與對象的特征數(shù)據(jù)相匹配的聲音信息的聲音信號波形的信息，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的所述圖像中的所述對象，則所述控制器提取該選定對象的特征數(shù)據(jù)，從所述存儲器中獲取與所提取出的特征數(shù)據(jù)相匹配的聲音信息的聲音信號波形，從所述聲音輸入單元所產(chǎn)生的所述聲音信號中提取具有與所獲取的所述聲音信息的聲音信號波形相匹配的波形模式的聲音信號，并且分離/去除與所提取出的聲音信號相對應(yīng)的聲音。
19.根據(jù)權(quán)利要求1所述的終端，該終端還包括通信單元，所述通信單元用于執(zhí)行所述控制器與無線通信系統(tǒng)之間的無線通信、所述控制器與另一個終端之間的無線通信和/或所述控制器與另一個終端之間通過網(wǎng)絡(luò)的無線通信。
20.一種具有拍攝功能的終端，該終端包括 用于執(zhí)行無線通信的通信單元；用于產(chǎn)生圖像幀的圖像輸入單元；用于在屏幕上顯示由所述圖像輸入單元產(chǎn)生的所述圖像幀的圖像輸出單元； 用于存儲關(guān)于與特征數(shù)據(jù)相匹配的無線通信協(xié)議的信息的存儲器；以及控制器，如果啟用了預(yù)覽模式，則所述控制器將所述圖像輸入單元產(chǎn)生的所述圖像幀實時發(fā)送給所述圖像輸出單元，其中，如果選擇了在所述圖像輸出單元的所述屏幕上顯示的圖像中的對象，則所述控制器提取該選定對象的特征數(shù)據(jù)，從所述存儲器中獲取與所提取出的特征數(shù)據(jù)相匹配的對象的無線通信協(xié)議，利用獲取的無線通信協(xié)議來產(chǎn)生用于對象控制的遠程控制信號，并且通過所述通信單元來發(fā)送所產(chǎn)生的遠程控制信號。
全文摘要
本發(fā)明涉及一種具有拍攝功能的設(shè)備。一種終端包括圖像輸入單元、圖像輸出單元以及控制器，在啟用了預(yù)覽模式的情況下，控制器將圖像輸入單元產(chǎn)生的圖像幀實時發(fā)送給圖像輸出單元。如果選擇了在圖像輸出單元的屏幕上顯示的圖像中的對象，則控制器識別該選定對象，檢測其中存在與所識別出的對象相匹配的對象的圖像幀，處理所檢測到的圖像幀，并且將經(jīng)過處理的圖像幀發(fā)送給圖像輸出單元，使得可以在記錄所拍攝的圖像之前編輯圖像。
文檔編號H04N5/232GK102164234SQ201110004238
公開日2011年8月24日 申請日期2011年1月4日 優(yōu)先權(quán)日2010年2月9日
發(fā)明者吳相均, 廉亨植, 樸成煥, 李振揆, 李曉瑛, 申丁燮, 邊光皞, 金南明, 金善景 申請人:株式會社泛泰