至控制單元33??刂茊卧?3根據(jù)使用圖3所示的各種部件順序地捕獲的運(yùn)動(dòng)圖像來(lái)生成時(shí)間長(zhǎng)度為大約I分鐘的運(yùn)動(dòng)圖像文件,并且將所生成的運(yùn)動(dòng)圖像文件傳送至服務(wù)器14。
[0051]<實(shí)現(xiàn)眼鏡安裝型攝像頭功能的示例性配置>
[0052]將參照?qǐng)D3描述用于實(shí)現(xiàn)眼鏡安裝型攝像頭11的功能的示例性配置。如參照?qǐng)D2所述,眼鏡安裝型攝像頭11設(shè)置有成像單元32和控制單元33??刂茊卧?3被配置成包括記錄單元51、全球定位系統(tǒng)(GPS) 52、實(shí)時(shí)時(shí)鐘(RTC) 53、地軸傳感器54、陀螺儀傳感器55、控制器56和通信單元57。記錄單元51暫時(shí)記錄從成像單元32順序地提供的運(yùn)動(dòng)圖像。在這種情況下,記錄單元51獲取根據(jù)如下信息獲得的成像方向信息:從GPS 52提供的位置信息、從RTC 53提供的時(shí)間信息、從地軸傳感器54提供的地軸的方向信息、從陀螺儀傳感器55提供的關(guān)于偏轉(zhuǎn)、傾斜和側(cè)傾角速度的信息。記錄單元51將所獲取的信息與構(gòu)成所捕獲的運(yùn)動(dòng)圖像的每個(gè)幀圖像相關(guān)聯(lián)地記錄。更具體地,記錄單元51基于關(guān)于偏轉(zhuǎn)、傾斜和側(cè)傾角速度的信息以及由地軸傳感器54檢測(cè)到的地軸的方向信息,來(lái)估計(jì)成像單元32的成像方向。記錄單元51將估計(jì)的成像方向信息與幀圖像相關(guān)聯(lián)地存儲(chǔ)。記錄單元51根據(jù)從成像單元32順序地提供的運(yùn)動(dòng)圖像來(lái)以預(yù)定時(shí)間間隔生成運(yùn)動(dòng)圖像文件,并且將所生成的運(yùn)動(dòng)圖像文件提供至控制器56。
[0053]GPS 52接收來(lái)自衛(wèi)星(未示出)的無(wú)線電波并且計(jì)算要用作地球上的位置信息的瑋度和經(jīng)度信息。GPS 52將所計(jì)算出的信息作為指示成像位置的信息提供至記錄單元51。RTC 53管理實(shí)際時(shí)間,并且將指示圖像捕獲時(shí)間的信息提供至記錄單元51。地軸傳感器54檢測(cè)在眼鏡安裝型攝像頭11的方向上相對(duì)于地軸的傾斜,并且將檢測(cè)結(jié)果提供至記錄單元51。陀螺儀傳感器55檢測(cè)偏轉(zhuǎn)、傾斜和側(cè)傾角速度并將檢測(cè)結(jié)果提供至記錄單元51ο
[0054]控制器56控制眼鏡安裝型攝像頭11的控制單元33的整體操作??刂破?6控制記錄單元51基于從成像單元32提供的運(yùn)動(dòng)圖像數(shù)據(jù)生成具有預(yù)定時(shí)間長(zhǎng)度(例如,大約I分鐘的時(shí)間長(zhǎng)度)的運(yùn)動(dòng)圖像文件,并且獲取所生成的運(yùn)動(dòng)圖像文件??刂破?6控制通信單元57經(jīng)由網(wǎng)絡(luò)13將所生成的運(yùn)動(dòng)圖像文件傳送至服務(wù)器14。
[0055]<用于實(shí)現(xiàn)再現(xiàn)終端功能的示例性配置>
[0056]將參照?qǐng)D4描述用于實(shí)現(xiàn)再現(xiàn)終端12的功能的示例性配置。
[0057]再現(xiàn)終端12被配置成包括控制單元71、顯示單元72、操作單元73、通信單元74和顯示圖像存儲(chǔ)單元75。控制單元71控制再現(xiàn)終端12的整體操作。顯示單元72可以包括液晶顯示器(IXD)、有機(jī)電致發(fā)光(EL)顯示器或其它顯示裝置。顯示單元72顯示由從服務(wù)器14提供的地圖圖像構(gòu)成的顯示圖像或者顯示由從服務(wù)器14提供的運(yùn)動(dòng)圖像文件構(gòu)成的再現(xiàn)圖像。操作單元73可以包括鍵盤(pán)、鼠標(biāo)或操作按鈕。當(dāng)用戶操作該操作單元73以輸入各種命令和指令時(shí),操作單元73將與用戶的操作相對(duì)應(yīng)的操作信號(hào)提供至控制單元71。通信單元74在控制單元71的控制下將數(shù)據(jù)和命令經(jīng)由網(wǎng)絡(luò)13傳送至服務(wù)器以及經(jīng)由網(wǎng)絡(luò)13從服務(wù)器14接收數(shù)據(jù)和命令。顯示圖像存儲(chǔ)單元75存儲(chǔ)用作用戶界面(UI)的顯示圖像,其允許選擇和再現(xiàn)存儲(chǔ)在服務(wù)器14中的運(yùn)動(dòng)圖像文件。要存儲(chǔ)的顯示圖像的示例包括必需為界面圖像的地圖圖像。
[0058]<用于實(shí)現(xiàn)服務(wù)器功能的示例性配置>
[0059]將參照?qǐng)D5描述用于實(shí)現(xiàn)服務(wù)器14的功能的示例性配置。
[0060]服務(wù)器14被配置成包括通信單元91、記錄單元92、存儲(chǔ)單元93和再現(xiàn)管理單元94。通信單元91經(jīng)由網(wǎng)絡(luò)13將數(shù)據(jù)、運(yùn)動(dòng)圖像文件和各種命令傳送至眼鏡安裝型攝像頭11和再現(xiàn)終端12以及從眼鏡安裝型攝像頭11和再現(xiàn)終端12接收數(shù)據(jù)、運(yùn)動(dòng)圖像文件和各種命令。記錄單元92設(shè)置有索引添加單元101。記錄單元92順序地接收從眼鏡安裝型攝像頭11傳送的時(shí)間長(zhǎng)度為大約I分鐘的運(yùn)動(dòng)圖像文件。記錄單元92允許索引添加單元101基于包括在運(yùn)動(dòng)圖像文件中的幀圖像以及與添加到幀圖像中的成像位置和成像方向有關(guān)的信息而生成每個(gè)運(yùn)動(dòng)圖像文件的索引,并且將所生成的索引分配給每個(gè)運(yùn)動(dòng)圖像文件。然后,記錄單元92將被編有索引的運(yùn)動(dòng)圖像文件存儲(chǔ)在存儲(chǔ)單元93中。
[0061]當(dāng)再現(xiàn)終端12經(jīng)由通信單元91指示再現(xiàn)管理單元94再現(xiàn)所捕獲的運(yùn)動(dòng)圖像文件時(shí),再現(xiàn)管理單元94基于所捕獲的圖像在預(yù)先存儲(chǔ)的地圖上的成像位置,來(lái)生成顯示指示用戶的移動(dòng)路徑的路線的顯示圖像。基于存儲(chǔ)在存儲(chǔ)單元93中的運(yùn)動(dòng)圖像文件的以幀圖像為單位存儲(chǔ)的成像位置和成像方向來(lái)進(jìn)行顯示圖像的生成。再現(xiàn)管理單元94將存儲(chǔ)在存儲(chǔ)單元93中的運(yùn)動(dòng)圖像文件的圖像校正為模糊減少的圖像并將校正后的運(yùn)動(dòng)圖像文件提供至再現(xiàn)終端12。
[0062]更具體地,再現(xiàn)管理單元94被配置成包括我的地圖創(chuàng)建單元111、成像方向著色單元112、對(duì)象識(shí)別單元113、地圖數(shù)據(jù)存儲(chǔ)單元114、路線編輯單元115、轉(zhuǎn)換運(yùn)動(dòng)圖像文件生成單元116、節(jié)點(diǎn)差分計(jì)算單元117、邊緣差分計(jì)算單元118、評(píng)價(jià)值計(jì)算單元119和轉(zhuǎn)換運(yùn)動(dòng)圖像文件選擇單元120。
[0063]當(dāng)再現(xiàn)終端12經(jīng)由通信單元91指示我的地圖創(chuàng)建單元111再現(xiàn)運(yùn)動(dòng)圖像文件時(shí),我的地圖創(chuàng)建單元111從存儲(chǔ)單元93讀取被指示再現(xiàn)的運(yùn)動(dòng)圖像文件。我的地圖創(chuàng)建單元111指定指示用戶的移動(dòng)路徑的路線,并且生成要顯示在地圖數(shù)據(jù)存儲(chǔ)單元114中存儲(chǔ)的地圖上的被稱(chēng)為我的地圖的顯示圖像,同時(shí)捕獲構(gòu)成運(yùn)動(dòng)圖像文件的圖像?;谥甘踞槍?duì)構(gòu)成被指示再現(xiàn)的運(yùn)動(dòng)圖像文件的每個(gè)幀圖像所存儲(chǔ)的成像位置的信息來(lái)執(zhí)行我的地圖創(chuàng)建單元111的指定和生成。我的地圖連同運(yùn)動(dòng)圖像文件一起被分發(fā)給再現(xiàn)終端12并且顯示在再現(xiàn)終端12上。根據(jù)在相同位置處捕獲的幀圖像的數(shù)量來(lái)將所顯示的地圖劃分成具有步長(zhǎng)大小(step size)的段(sect1n)。當(dāng)通過(guò)使用指示器等指向地圖上的位置時(shí),顯示對(duì)應(yīng)于所指向的位置的幀圖像或者再現(xiàn)從在對(duì)應(yīng)的成像位置處捕獲的幀圖像開(kāi)始的運(yùn)動(dòng)圖像文件。
[0064]成像方向著色單元112基于與包括在運(yùn)動(dòng)圖像文件中的幀圖像相關(guān)聯(lián)地存儲(chǔ)的成像方向信息,將不同顏色應(yīng)用至用作上述顯示圖像的我的地圖上所顯示的路線上的對(duì)應(yīng)位置。該處理使得路線上的顏色的頻繁變化以指示成像方向的頻繁變化。因而,當(dāng)運(yùn)動(dòng)圖像文件被再現(xiàn)并由用戶觀看而不進(jìn)行任何修改的情況下,模糊將更明顯并且觀看運(yùn)動(dòng)圖像文件的用戶感到暈動(dòng)癥。另一方面,當(dāng)在一些段中路線上的顏色保持不變時(shí),這意味著成像方向在這些段中保持恒定。因而,當(dāng)運(yùn)動(dòng)圖像文件被再現(xiàn)并由用戶觀看而不進(jìn)行任何修改的情況下,模糊將不太明顯并且觀看運(yùn)動(dòng)圖像文件的用戶不會(huì)感到暈動(dòng)癥。
[0065]對(duì)象識(shí)別單元113針對(duì)每個(gè)幀圖像來(lái)識(shí)別圖像中的對(duì)象,提取所識(shí)別的對(duì)象圖像,將關(guān)于所識(shí)別的對(duì)象的信息添加到對(duì)象圖像中,并且以分類(lèi)的方式將其存儲(chǔ)在存儲(chǔ)單元93中。對(duì)象圖像構(gòu)成稍后將描述的跨界導(dǎo)航菜單,并且當(dāng)生成上述顯示圖像我的地圖時(shí)以對(duì)于每個(gè)對(duì)象可選擇的狀態(tài)顯示。
[0066]地圖數(shù)據(jù)存儲(chǔ)單元114存儲(chǔ)關(guān)于地球的地圖圖像的數(shù)據(jù),并且在我的地圖創(chuàng)建單元111創(chuàng)建我的地圖時(shí)將該地圖數(shù)據(jù)提供至我的地圖創(chuàng)建單元111。
[0067]路線編輯單元115對(duì)如下獲得的路線進(jìn)行編輯:基于存儲(chǔ)單元93中存儲(chǔ)的運(yùn)動(dòng)圖像文件中包括的每個(gè)幀圖像的報(bào)頭中所包括的成像位置信息,來(lái)在我的地圖上繪制指示成像位置的信息。
[0068]轉(zhuǎn)換運(yùn)動(dòng)圖像文件生成單元116針對(duì)存儲(chǔ)單元93中存儲(chǔ)的運(yùn)動(dòng)圖像文件中所包括的每個(gè)幀圖像,通過(guò)利用前后幀圖像等執(zhí)行用于對(duì)成像方向進(jìn)行轉(zhuǎn)換的視角轉(zhuǎn)換或旋轉(zhuǎn)處理,來(lái)生成多種轉(zhuǎn)換圖像。然后,轉(zhuǎn)換運(yùn)動(dòng)圖像文件生成單元116生成由轉(zhuǎn)換圖像構(gòu)成的轉(zhuǎn)換運(yùn)動(dòng)圖像文件,并且將轉(zhuǎn)換運(yùn)動(dòng)圖像文件存儲(chǔ)在存儲(chǔ)單元93中。此時(shí),轉(zhuǎn)換運(yùn)動(dòng)圖像文件生成單元116通過(guò)將關(guān)于經(jīng)由轉(zhuǎn)換處理而改變的成像方向的信息添加至轉(zhuǎn)換幀圖像來(lái)存儲(chǔ)轉(zhuǎn)換運(yùn)動(dòng)圖像文件。
[0069]節(jié)點(diǎn)差分計(jì)算單元117通過(guò)針對(duì)每個(gè)轉(zhuǎn)換圖像獲得轉(zhuǎn)換圖像與轉(zhuǎn)換前的原始圖像之間的差分來(lái)計(jì)算節(jié)點(diǎn)差分。節(jié)點(diǎn)差分計(jì)算單元117計(jì)算轉(zhuǎn)換運(yùn)動(dòng)圖像文件中包括的所有圖案的轉(zhuǎn)換后的圖像或原始圖像中的節(jié)點(diǎn)之間的差分之和,該轉(zhuǎn)換運(yùn)動(dòng)圖像文件是通過(guò)按時(shí)間序列以各種圖案組合轉(zhuǎn)換圖像或原始圖像而生成的。
[0070]邊緣差分計(jì)算單元118通過(guò)獲得按時(shí)間序列布置的轉(zhuǎn)換圖像或原始圖像之間的差分來(lái)計(jì)算邊緣差分。邊緣差分計(jì)算單元118計(jì)算轉(zhuǎn)換運(yùn)動(dòng)圖像文件中包括的所有圖案的轉(zhuǎn)換圖像或原始圖像之間的邊緣差分之和,該轉(zhuǎn)換運(yùn)動(dòng)圖像文件是通過(guò)按時(shí)間序列以各種圖案組合轉(zhuǎn)換后的圖像或原始圖像而生成的。
[0071]評(píng)價(jià)值計(jì)算單元119通過(guò)如下操作獲得每個(gè)轉(zhuǎn)換運(yùn)動(dòng)圖像文件的評(píng)價(jià)值:計(jì)算通過(guò)按時(shí)間序列以各種圖案組合轉(zhuǎn)換圖像或原始圖像而生成的圖案的轉(zhuǎn)換運(yùn)動(dòng)圖像文件中的、節(jié)點(diǎn)間的差分之和與邊緣間的差分之和的總和。在這種情況下,評(píng)價(jià)值計(jì)算單元119獲取從再現(xiàn)終端12提供的權(quán)重信息,并且將權(quán)重賦予節(jié)點(diǎn)差分和以及邊緣差分和中的每一個(gè)以計(jì)算評(píng)價(jià)值。
[0072]轉(zhuǎn)換運(yùn)動(dòng)圖像文件選擇單元120從通過(guò)按時(shí)間序列、以各種圖案組合轉(zhuǎn)換圖像或原始圖像而生成的圖案的所有轉(zhuǎn)換運(yùn)動(dòng)圖像文件當(dāng)中,選擇具有最小評(píng)價(jià)值的運(yùn)動(dòng)圖像文件。轉(zhuǎn)換運(yùn)動(dòng)圖像文件選擇單元120經(jīng)由通信單元91將所選擇的運(yùn)動(dòng)圖像文件傳送至請(qǐng)求再現(xiàn)運(yùn)動(dòng)圖像文件的再現(xiàn)終端12。
[0073]禁止編輯單元121針對(duì)構(gòu)成被指示再現(xiàn)的運(yùn)動(dòng)圖像文件的每個(gè)幀圖像,基于添加到幀圖像中的成像位置和時(shí)間信息,搜索要禁止在被指示再現(xiàn)的圖像中再現(xiàn)的區(qū)域。禁止編輯單元121執(zhí)行用于將搜索出的區(qū)域改變成例如馬賽克圖像的處理。也就是說(shuō),在由眼鏡安裝型攝像頭11捕獲的圖像中,禁止區(qū)域可以包括包含諸如個(gè)人可標(biāo)識(shí)信息的信息的區(qū)域、似乎捕獲到基于位置信息指定的軍事秘密等的區(qū)域以及在預(yù)定時(shí)間進(jìn)行公開(kāi)可能有問(wèn)題的區(qū)域。
[0074]<成像和記錄處理>
[0075]將參照?qǐng)D6描述圖1所示的圖像處理系統(tǒng)的成像和記錄處理。該處理在操作眼鏡安裝型攝像頭11的操作單元(未示出)時(shí)開(kāi)始并且指示成像單元32開(kāi)始捕獲圖像。
[0076]在步驟Sll中,成像單元32捕獲圖像并將所捕獲的圖像數(shù)據(jù)提供至記錄單元51。
[0077]在步驟S12中,GPS 52接收來(lái)自衛(wèi)星(未示出)的無(wú)線電波,計(jì)算要用作地球上的位置的瑋度和經(jīng)度,并且將包括作為計(jì)算結(jié)果而獲得的瑋度和經(jīng)度的地球上的位置信息提供至記錄單元51。
[0078]在步驟S13中,地軸傳感器54測(cè)量相對(duì)于地軸的方向的傾斜,并將關(guān)于作為測(cè)量結(jié)果而獲得的、眼鏡安裝型攝像頭11相對(duì)于地軸的方向的傾斜角的信息提供至記錄單元51ο
[0079]在步驟S14中,陀螺儀傳感器55檢測(cè)眼鏡安裝型攝像頭11的偏轉(zhuǎn)、傾斜和側(cè)傾角速度,并且將關(guān)于作為檢測(cè)結(jié)果而獲得的每個(gè)角速度的信息提供至記錄單元51。該處理允許記錄單元51基于相對(duì)于地軸的傾斜角以及偏轉(zhuǎn)、傾斜和側(cè)傾角速度來(lái)計(jì)算并存儲(chǔ)成像方向。
[0080]在步驟S15中,RTC 53讀取當(dāng)前時(shí)間信息并將所讀取的當(dāng)前時(shí)間信息提供至記錄單元51ο
[0081]在步驟S16中,記錄單元51獲取關(guān)于緊前的運(yùn)動(dòng)圖像文件的信息。
[0082]在步驟S17中,記錄單元51以幀圖像為單位記錄運(yùn)動(dòng)圖像數(shù)據(jù)。在這種情況下,記錄單元51在捕獲每個(gè)幀圖像的定時(shí)將指示地球上的位置信息的成像位置、指示提