專利名稱：一種可視化的網(wǎng)絡(luò)用戶多媒體管理方法
技術(shù)領(lǐng)域：
本發(fā)明涉及網(wǎng)絡(luò)尤其是社交網(wǎng)絡(luò)數(shù)據(jù)管理，多媒體檢索領(lǐng)域及地圖開發(fā)領(lǐng)域，特別涉及在地圖上生成游記系統(tǒng)。
背景技術(shù)：
隨著生活水平的提高，人們開始熱衷旅游，并在旅游過程中拍攝大量圖片上傳到圖片分享網(wǎng)站與社交網(wǎng)絡(luò)。知名的圖片分享網(wǎng)站如Flickr，上傳的圖片總數(shù)達(dá)50億張。社交網(wǎng)絡(luò)中的圖片上傳數(shù)量更為驚人，光hcebook—家就達(dá)到了 600億。在我國，人人網(wǎng)、開心網(wǎng)等社交網(wǎng)站成為了主要的上傳與分享圖片的途徑。并且，隨著4G時代的到來，不僅在 ^utube、優(yōu)酷、土豆網(wǎng)等視頻分享網(wǎng)站，社交網(wǎng)絡(luò)中用戶上傳的視頻數(shù)據(jù)也會急劇上升。因此，對于如此大規(guī)模的用戶數(shù)與多媒體數(shù)據(jù)，如何有效地管理頗為重要。目前的分享網(wǎng)站社交網(wǎng)絡(luò)中的圖片與視頻管理方式基本相同。一個用戶下有若干文件夾，這樣的管理方式不利于向用戶直觀展示這些多媒體數(shù)據(jù)的空間位置分布，以及用戶旅游時的路線。隨著科技的進(jìn)步，人們使用智能手機(jī)和部分?jǐn)?shù)碼相機(jī)拍照時帶有時間和GPS記錄功能，在上傳圖片時，F(xiàn)lickr可用戶手動在地圖上找到圖片位置標(biāo)注。在Flickr上，當(dāng)用戶查看的圖片具有GPS時，會出現(xiàn)該圖片在地圖上對應(yīng)的位置。微軟亞洲研究院發(fā)布的 TRAVELGUIDE系統(tǒng)，該系統(tǒng)用戶可在地圖上找到景點(diǎn)位置，添加圖片并添加評論，系統(tǒng)自動生成路線，以動畫方式放映。但這一功能僅針對某張圖，或某次旅行，并未被用戶大規(guī)模相片的管理中，尤其未被用于社交網(wǎng)絡(luò)的圖片管理中。并且更沒有提供對視頻的相關(guān)展示功能?，F(xiàn)有的社交網(wǎng)絡(luò)的圖片管理方法未能以可視化的方式管理圖片。同時，現(xiàn)有的圖片管理方法僅能查看用戶本人圖片和評論，當(dāng)用戶需要查看同一景點(diǎn)代表性圖片及評論要格外使用搜索引擎。

發(fā)明內(nèi)容
本發(fā)明的目的是提供一種直觀的形式豐富的網(wǎng)絡(luò)用戶多媒體管理方法，將用戶選擇的數(shù)據(jù)，不僅僅是圖片，還包括視頻、音頻、文字在地圖上的對應(yīng)位置顯示，并連成旅游路線，在連成線路同時，呈現(xiàn)用戶的旅游與日常生活，與社交網(wǎng)絡(luò)中的好友分享，方便用戶，更好地推廣在地圖上生成游記。為達(dá)到以上目的，本發(fā)明是采取如下技術(shù)方案予以實(shí)現(xiàn)的一種可視化的網(wǎng)絡(luò)用戶多媒體管理方法，其特征在于，包括下述步驟用戶多媒體數(shù)據(jù)輸入單元10、確定數(shù)據(jù)GPS單元20、時間窗單元30 ；多媒體類型選擇單元40 ；地圖自適應(yīng)縮放單元50 ；在地圖上顯示多媒體圖標(biāo)及路線單元60 ；用戶瀏覽旅游日志單元70 ；所述用戶多媒體數(shù)據(jù)輸入單元10對圖片100、視頻110、文字120和音頻130建立索引；
所述確定數(shù)據(jù)GPS單元20將用戶多媒體數(shù)據(jù)輸入單元10中建好索引的數(shù)據(jù)進(jìn)行 GPS確定，包括解析數(shù)據(jù)附帶的位置信息；對于無位置信息的數(shù)據(jù)，用戶進(jìn)行手動GPS標(biāo)注， 在地圖上找到對應(yīng)位置；對于地名而非GPS信息，通過地名與GPS轉(zhuǎn)換API獲得GPS ；所述時間窗單元30對確定數(shù)據(jù)GPS單元20進(jìn)行GPS確定的索引進(jìn)行時間索引；所述多媒體類型選擇單元40將時間窗單元30確定時間索引后的多媒體數(shù)據(jù)進(jìn)行種類選擇，包括圖片、視頻、文字和音頻某一種，或組合；在時間窗單元30的基礎(chǔ)上再進(jìn)行多媒體類型要求的索引；所述地圖自適應(yīng)縮放單元50針對時間窗單元30確定的和多媒體類型選擇單元40 選定的索引結(jié)果，進(jìn)行地圖縮放級別的確定，以使得所選定的時間窗及選定類型的多媒體內(nèi)容在地圖上恰好占據(jù)整個屏幕，使游記有更好的展示效果；所述在地圖上顯示多媒體圖標(biāo)及路線單元60，將來自地圖自適應(yīng)縮放單元50多媒體數(shù)據(jù)及地圖縮放級別，根據(jù)時間、GPS、圖標(biāo)存放位置，按照時間先后順序在地圖上對應(yīng) GPS顯示多媒體圖標(biāo)，并根據(jù)時間先后連成路線，并生成旅游日志；所述用戶瀏覽旅游日志單元70對所生成的旅游日志進(jìn)行游記瀏覽，包括多媒體資料瀏覽單元700，代表性圖片單元710，和評論單元720。上述方案中，所述用戶多媒體數(shù)據(jù)輸入單元10對圖片、視頻、文字和音頻建立索引的具體步驟為建立索引表，每個多媒體資料為一行，列數(shù)為9，每一列表示一個索引類型，分別為id為表示圖片唯一的編號；uf為user flag，表示標(biāo)記此圖是否為用戶上傳圖片；u為 user Id，表示用戶編號；t為time，表示圖片上傳時間；m為material表示多媒體種類；gps 表示多媒體資料的GPS ；url表示多媒體資料的存放地址；icon表示多媒體資料的略縮圖標(biāo)的存放地，其中圖片圖標(biāo)為略縮圖，視頻圖標(biāo)為第一幀的略縮圖，文字圖標(biāo)與音樂圖片為表示文字和音樂的圖標(biāo)；c表示評論存放地址，索引提供指向存儲在表的指定列中的數(shù)據(jù)值的指針，然后根據(jù)指定的排序順序?qū)@些指針排序；所述時間窗單元30對確定數(shù)據(jù)GPS單元20進(jìn)行GPS確定的索引進(jìn)行時間索引的具體方法為記距今最遠(yuǎn)時間為‘，距今最近距離為、2。將用戶所選擇的時間段為、和t2， 初始時、=t01, t2 = ‘。本發(fā)明提供兩種途徑供用戶選擇時間段。途徑一為直接輸入具體的起始和結(jié)束時間。途徑二為移動滾動條的左右按鈕。在途徑二中，滾動條的最左端為 t01最右端為‘始終不變，中間位置均勻與時間一一映射，這樣左右按鈕映射到了新的、、 t2。根據(jù)、、t2確定時間索引范圍。所述地圖自適應(yīng)縮放單元50中的地圖縮放級別的確定步驟為首先獲取在確定數(shù)據(jù)GPS單元20中GPS在經(jīng)度和緯度上的極值，記為LAm以及L0m。然后根據(jù)LAm，LOm的值來確定地圖的縮放級別；方法為將地圖選定為某一等級i，獲取上下左右極值點(diǎn)，并計(jì)算得到經(jīng)度緯度距離分別記LAi, LOi,在選擇縮放級別時，比較LAm，LAi LAi+1,以及L0m，L0」，L0J+1， 當(dāng)LA^ < LAm < LAi&LOj^ < LOm < L0」，選k = min(i, j)，則選定的地圖縮放級別為k。所述代表性圖片單元710中的代表性圖片生成流程包括圖片庫建立單元、圖片庫預(yù)處理單元和代表性圖片生成單元，其中圖片庫建立單元首先用用戶標(biāo)識Uf來區(qū)別圖片是否為用戶上傳圖片，對于非用戶上傳圖片則無需進(jìn)行GPS對應(yīng)景點(diǎn)圖片擴(kuò)充；對用戶上傳圖片的GPS在庫內(nèi)進(jìn)行索引，當(dāng)圖片數(shù)達(dá)到30張以上時則不需要進(jìn)行補(bǔ)圖，否則進(jìn)行TOB檢索，利用圖片搜索引擎進(jìn)行補(bǔ)圖并入庫，同樣選擇補(bǔ)圖數(shù)為30，在此之前需進(jìn)行GPS與地名轉(zhuǎn)換；圖片庫預(yù)處理單元對圖片分別進(jìn)行視覺特征提取，KMEANS聚類、類間排序與類內(nèi)排序；所述視覺特征為全局特征，包括顏色直方圖、顏色矩、小波紋理特征；接著，對全局特征進(jìn)行KMEANS聚類，取聚類中心數(shù)為30，包括4個季節(jié)白天黑色和不用場景類型的組合， 通過聚類，圖片庫中圖片根據(jù)其顏色和紋理劃分到不同的類中，根據(jù)圖片種類和拍攝時間排序，然后進(jìn)行類間排序，根據(jù)類內(nèi)GPS、用戶與拍攝時間分布廣度排序；類內(nèi)SIFT匹配排序，對各類做類內(nèi)的SIFT匹配比較選取一張圖片Pi，將某一 SIFT描述Xim與另一張圖片 Pj中的所有SIFT描述Xjn做相似性度量，選擇距離最近的點(diǎn)作為預(yù)選匹配對，為了達(dá)到對稱性，只有當(dāng)Xjn的最近距離點(diǎn)也為Xim時，才確定兩點(diǎn)匹配；當(dāng)兩張圖片間的匹配點(diǎn)數(shù)達(dá)到3對時，認(rèn)為這兩張圖片匹配，根據(jù)圖片與其他圖片匹配的張數(shù)排序；代表性圖片生成單元為提高瀏覽代表性圖片的速度，建立針對代表性圖片集的索引結(jié)構(gòu)對代表性圖片集建立索引表，每張代表性圖片為一行，列數(shù)為5，每一列表示一個索引類型，分別為id為表示圖片唯一的編號；gps表示多媒體資料GPS ；url表示多媒體資料的存放地址；clu代表圖片所屬聚類類別標(biāo)號；q代表圖片在類內(nèi)排序標(biāo)號；索引提供指向存儲在表的指定列中的數(shù)據(jù)值的指針，然后根據(jù)指定的排序順序?qū)@些指針排序；在用戶瀏覽代表性圖片時，先進(jìn)行 GPS索引，找到特定GPS范圍內(nèi)的圖片對應(yīng)的行，然后按照類別標(biāo)號與類內(nèi)排序標(biāo)號從小到大順序讀取圖片，如clulql，clu2ql...clunql，clulq2，clu2q2…此處η的選擇根據(jù)實(shí)際情況為10。與現(xiàn)有技術(shù)相比，本發(fā)明優(yōu)點(diǎn)在于，為多媒體資料離線建立索引，并進(jìn)行預(yù)處理， 使用戶在線獲取個人數(shù)據(jù)時減少等待時間。對于用戶新上傳數(shù)據(jù)，可與已存庫中多媒體數(shù)據(jù)建立相同索引結(jié)構(gòu)。選取的代表性圖片地點(diǎn)準(zhǔn)確，能反映該地點(diǎn)代表景物，能反映該地點(diǎn)不同季節(jié)、不同時間如白天、黑夜，不用視角，圖片重復(fù)性少。并且用戶不需要額外借助搜索引擎，即能瀏覽該景點(diǎn)代表性圖片，彌補(bǔ)了用戶旅游時僅能看到某一季節(jié)或時間段圖片的遺憾。


圖1為本發(fā)明方法的總體步驟示意圖。圖2為本發(fā)明方法中采用軟件游記界面示意圖。圖中標(biāo)記1為地圖區(qū)域，標(biāo)記2 為用戶當(dāng)前選擇多媒體信息區(qū)域，包括拍攝時間、位置信息等。標(biāo)記3為時間窗，能選擇在地圖上顯示游記的時間范圍。標(biāo)記4為多媒體瀏覽器區(qū)域，包括如圖片和視頻文件第一幀， 共有4個按鈕，上下按鈕為游覽前后景點(diǎn)，左右按鈕為瀏覽同一景點(diǎn)代表性圖片。標(biāo)記5為評論框區(qū)域，包括用戶評論、官方評論、其他用戶評論和好友評論。標(biāo)記6為好友窗口區(qū)域， 顯示瀏覽過該景點(diǎn)的好友，可游覽該好友瀏覽此景點(diǎn)時的圖片和評論。標(biāo)記7為多媒體類型選擇，可任意組合圖片、視頻、文字和音樂顯示。圖3為圖1中的代表性圖片生成示意圖。圖4為本發(fā)明方法中所采用的多媒體數(shù)據(jù)索引結(jié)構(gòu)圖。其中(a)圖為多媒體資料索引結(jié)果，uf表示user flag。標(biāo)記此圖是否為用戶上傳圖片，用以與從WEB中檢索的圖區(qū)分。u表示user Id。t表示圖片上傳時間。m表示多媒體種類，如圖片、視頻、文字和音樂。 gps表示多媒體資料GPS。url表示多媒體資料的存放地址。icon表示多媒體資料的圖標(biāo)的存放地址。c表示評論地址。(b)圖為針對代表性圖片的索引結(jié)構(gòu)。僅針對代表性圖片建立的圖片索引gps代表圖片所在GPS。url代表圖片存放地址。clu代表圖片所屬聚類類別標(biāo)號。q代表圖片在類內(nèi)排序標(biāo)號。圖5為本發(fā)明方法效果截圖。其中(a)圖為用戶i的游記，選擇的媒體類型為圖片。在地圖上生成游記并顯示路線；(b)圖為用戶i調(diào)整時間窗后游記，可見瀏覽景點(diǎn)減少， 圖片數(shù)減少。
具體實(shí)施例方式圖1給出了本發(fā)明中對社交網(wǎng)絡(luò)用戶多媒體資料進(jìn)行可視化管理的方法的總體步驟示意圖。包括用戶多媒體數(shù)據(jù)輸入單元10、確定數(shù)據(jù)GPS單元20、時間窗單元30 ；多媒體類型選擇單元40 ；地圖自適應(yīng)縮放單元50 ；在地圖上顯示多媒體圖標(biāo)及路線單元60 ； 用戶瀏覽旅游日志單元70。所述的用戶多媒體數(shù)據(jù)輸入單元10中的多媒體數(shù)據(jù)包括圖片100、視頻110、文字 120和音頻130。該單元對圖片、視頻、文字和音頻建立索引。具體建立索引步驟，建立索引表如圖4(a)所示，每個多媒體資料為一行，列數(shù)為 9，每一列表示一個索引類型，分別為id為表示圖片唯一的編號；uf為user flag，表示標(biāo)記此圖是否為用戶上傳圖片；u為user Id，表示用戶編號；t為time，表示圖片上傳時間；m 為material表示多媒體種類；gps表示多媒體資料GPS ；url表示多媒體資料的存放地址； icon表示多媒體資料的略縮圖標(biāo)的存放地，其中圖片的圖標(biāo)為略縮圖，視頻的圖標(biāo)為第一幀略縮圖，文字圖標(biāo)與音樂圖標(biāo)為表示文字和音樂的圖標(biāo)；c表示評論存放地址。索引提供指向存儲表的指定列中的數(shù)據(jù)值的指針，然后根據(jù)指定的排序順序?qū)@些指針排序。確定數(shù)據(jù)GPS單元20將用戶多媒體數(shù)據(jù)輸入單元10中建好索引數(shù)據(jù)進(jìn)行GPS確定，確定包括解析數(shù)據(jù)附帶的位置信息；對于無位置信息的數(shù)據(jù)，用戶進(jìn)行手動GPS標(biāo)注， 在地圖上找到對應(yīng)位置；對于地名而非GPS信息，通過地名與GPS轉(zhuǎn)換API獲得GPS。以上單元10單元20為離線預(yù)處理單元，離線建立索引使用戶在線獲取個人數(shù)據(jù)時減少等待時間。對于用戶新上傳數(shù)據(jù)，添加到已有索引表中，與已存庫中多媒體數(shù)據(jù)建立相同索引結(jié)構(gòu)。時間窗單元30對確定數(shù)據(jù)GPS單元20所GPS確定的索引進(jìn)行時間索引，用戶可選擇具體的時間段進(jìn)行游記生成并瀏覽，便于用戶有針對性查找資料。對建立索引用進(jìn)行時間索引，記距今最遠(yuǎn)時間為‘，距今最近距離為‘。將用戶所選擇的時間段為、和t2， 初始時、=t01, t2 = ‘。本發(fā)明提供兩種途徑使用戶選擇時間段。途徑一為直接輸入具體的起始和結(jié)束時間。途徑二為移動滾動條的左右按鈕。在途徑二中，滾動條的最左端為 ^最右端為‘始終不變，中間位置均勻一一映射，這樣左右按鈕映射到了新的t1; t2。在索引中，進(jìn)行滿足時間要求的索引。多媒體類型選擇40將時間窗單元30確定時間索引后的多媒體資料數(shù)據(jù)進(jìn)行種類選擇，包括圖片、視頻、文字和音頻某一種，或組合；在時間窗單元30的基礎(chǔ)上再進(jìn)行多媒體類型要求的索引。地圖自適應(yīng)縮放單元50針對時間窗單元30確定的和多媒體類型選擇單元40選定的索引結(jié)果，進(jìn)行地圖縮放級別的確定，以使得所選定的時間窗及選定類型的多媒體內(nèi)容在地圖上恰好占據(jù)整個屏幕，使游記有更好的展示效果，步驟為首先獲取在確定數(shù)據(jù)GPS 單元20中GPS在經(jīng)度和緯度上的極值，記為LAm以及L0m。然后根據(jù)LAm，LOm的值來確定地圖的縮放級別。方法為將地圖選定為某一等級i，獲取上下左右極值點(diǎn)，并計(jì)算得到經(jīng)度緯度距離分別記LAi, LOi0在選擇縮放級別時，比較LAm，LAi, LAi+1，以及L0m，LOj, L0J+1,當(dāng)LAh < LAm < LA^LOjm < LOm < LOj,選k = min (i，j)，則選定的地圖縮放級別為k。這里給出必應(yīng)地圖中i級LAi, LOi數(shù)據(jù)做參考
權(quán)利要求
1.一種可視化的網(wǎng)絡(luò)用戶多媒體管理方法，其特征在于，包括下述步驟用戶多媒體數(shù)據(jù)輸入單元10、確定數(shù)據(jù)GPS單元20、時間窗單元30 ；多媒體類型選擇單元40 ；地圖自適應(yīng)縮放單元50 ；在地圖上顯示多媒體圖標(biāo)及路線單元60 ；用戶瀏覽旅游日志單元70 ；所述用戶多媒體數(shù)據(jù)輸入單元10對圖片100、視頻110、文字120和音頻130建立索引；所述確定數(shù)據(jù)GPS單元20將用戶多媒體數(shù)據(jù)輸入單元10中建好索引的數(shù)據(jù)進(jìn)行GPS 確定，包括解析數(shù)據(jù)附帶的位置信息；對于無位置信息的數(shù)據(jù)，用戶進(jìn)行手動GPS標(biāo)注，在地圖上找到對應(yīng)位置；對于地名而非GPS信息，通過地名與GPS轉(zhuǎn)換API獲得GPS ；所述時間窗單元30對確定數(shù)據(jù)GPS單元20進(jìn)行GPS確定的索引進(jìn)行時間索引；所述多媒體類型選擇單元40將時間窗單元30確定時間索引后的多媒體數(shù)據(jù)進(jìn)行種類選擇，包括圖片、視頻、文字和音頻某一種，或組合；在時間窗單元30的基礎(chǔ)上再進(jìn)行多媒體類型要求的索引；所述地圖自適應(yīng)縮放單元50針對時間窗單元30確定的和多媒體類型選擇單元40選定的索引結(jié)果，進(jìn)行地圖縮放級別的確定，以使得所選定的時間窗及選定類型的多媒體內(nèi)容在地圖上恰好占據(jù)整個屏幕，使游記有更好的展示效果；所述在地圖上顯示多媒體圖標(biāo)及路線單元60，將來自地圖自適應(yīng)縮放單元50多媒體數(shù)據(jù)及地圖縮放級別，根據(jù)時間、GPS、圖標(biāo)存放位置，按照時間先后順序在地圖上對應(yīng)GPS 顯示多媒體圖標(biāo)，并根據(jù)時間先后連成路線，并生成旅游日志；所述用戶瀏覽旅游日志單元70對所生成的旅游日志進(jìn)行游記瀏覽，包括多媒體資料瀏覽單元700，代表性圖片單元710，和評論單元720。
2.如權(quán)利要求1所述的可視化的網(wǎng)絡(luò)用戶多媒體管理方法，其特征在于，用戶多媒體數(shù)據(jù)輸入單元10對圖片、視頻、文字和音頻建立索引的具體步驟為建立索引表，每個多媒體資料為一行，列數(shù)為9，每一列表示一個索引類型，分別為id 為表示圖片唯一的編號；uf為user flag，表示標(biāo)記此圖是否為用戶上傳圖片；u為user Id，表示用戶編號；t為time，表示圖片上傳時間；m為material表示多媒體種類；gps表示多媒體資料的GPS ；url表示多媒體資料的存放地址；icon表示多媒體資料的略縮圖標(biāo)的存放地，其中圖片圖標(biāo)為略縮圖，視頻圖標(biāo)為第一幀略縮圖，文字圖標(biāo)與音樂圖片為表示文字和音樂的圖標(biāo)；c表示評論存放地址，索引提供指向存儲在表的指定列中的數(shù)據(jù)值的指針， 然后根據(jù)指定的排序順序?qū)@些指針排序。
3.如權(quán)利要求1所述的可視化的網(wǎng)絡(luò)用戶多媒體管理方法，其特征在于，所述時間窗單元30對確定數(shù)據(jù)GPS單元20進(jìn)行GPS確定的索引進(jìn)行時間索引的具體方法為記距今最遠(yuǎn)時間為‘，距今最近距離為‘。將用戶所選擇的時間段為、和t2，初始時 ti = toi, t2 = t02O本發(fā)明提供兩種途徑供用戶選擇時間段。途徑一為直接輸入具體的起始和結(jié)束時間。途徑二為移動滾動條的左右按鈕。在途徑二中，滾動條的最左端為^最右端為‘始終不變，中間位置均勻與時間一一映射，這樣左右按鈕映射到了新的、、、。根據(jù) 、、t2確定時間索引范圍。
4.如權(quán)利要求1所述的可視化的網(wǎng)絡(luò)用戶多媒體管理方法，其特征在于，所述地圖自適應(yīng)縮放單元50中的地圖縮放級別的確定步驟為首先獲取在確定數(shù)據(jù)GPS單元20中GPS 在經(jīng)度和緯度上的極值，記為LAm以及L0m。然后根據(jù)LAm，L0m的值來確定地圖的縮放級別；方法為將地圖選定為某一等級i，獲取上下左右極值點(diǎn)，并計(jì)算得到經(jīng)度緯度距離分別記 LAi, LOi,在選擇縮放級別時，比較 LAm，LAi, LAi+1，以及 L0m，LOj, L0J+1,當(dāng) LAh < LAm < LA^LCV1 < LOffl < LOj,選k = min(i, j)，則選定的地圖縮放級別為k。
5.如權(quán)利要求1所述的可視化的網(wǎng)絡(luò)用戶多媒體管理方法，其特征在于，所述代表性圖片單元710中的代表性圖片生成流程包括圖片庫建立單元、圖片庫預(yù)處理單元和代表性圖片生成單元，其中圖片庫建立單元首先用用戶標(biāo)識uf來區(qū)別圖片是否為用戶上傳圖片，對于非用戶上傳圖片則無需進(jìn)行GPS對應(yīng)景點(diǎn)圖片擴(kuò)充；對用戶上傳圖片的GPS在庫內(nèi)進(jìn)行索引，當(dāng)圖片數(shù)達(dá)到30張以上時則不需要進(jìn)行補(bǔ)圖，否則進(jìn)行TOB檢索，利用圖片搜索引擎進(jìn)行補(bǔ)圖并入庫，同樣選擇補(bǔ)圖數(shù)為30，在此之前需進(jìn)行GPS與地名轉(zhuǎn)換；圖片庫預(yù)處理單元對圖片分別進(jìn)行視覺特征提取，KMEANS聚類、類間排序與類內(nèi)排序； 所述視覺特征為全局特征，包括顏色直方圖、顏色矩、小波紋理特征；接著，對全局特征進(jìn)行KMEANS聚類，取聚類中心數(shù)為30，包括4個季節(jié)白天黑色和不用場景類型的組合，通過聚類，圖片庫中圖片根據(jù)其顏色和紋理劃分到不同的類中，根據(jù)圖片種類和拍攝時間排序， 然后進(jìn)行類間排序，根據(jù)類內(nèi)GPS、用戶與拍攝時間分布廣度排序；類內(nèi)SIFT匹配排序，在各類做類內(nèi)的SIFT匹配比較選取一張圖片Pi，將某一 SIFT描述Xim與另一張圖片Pj中的所有SIFT描述Xjn做相似性度量，選擇距離最近的點(diǎn)作為預(yù)選匹配對，為了達(dá)到對稱性， 只有當(dāng)Xjn的最近距離點(diǎn)也為Xim時，才確定兩點(diǎn)匹配；當(dāng)兩張圖片間的匹配點(diǎn)數(shù)達(dá)到3對時，認(rèn)為這兩張圖片匹配，根據(jù)圖片與其他圖片匹配的張數(shù)排序；代表性圖片生成單元為提高瀏覽代表性圖片的速度，建立針對代表性圖片集的索引結(jié)構(gòu)對代表性圖片集建立索引表，每張代表性圖片為一行，列數(shù)為5，每一列表示一個索引類型，分別為id為表示圖片唯一的編號；gps表示多媒體資料GPS ；url表示多媒體資料的存放地址；clu代表圖片所屬聚類類別標(biāo)號；q代表圖片在類內(nèi)排序標(biāo)號；索引提供指向存儲在表的指定列中的數(shù)據(jù)值的指針，然后根據(jù)指定的排序順序?qū)@些指針排序；在用戶瀏覽代表性圖片時，先進(jìn)行GPS索引，找到特定GPS范圍內(nèi)的圖片對應(yīng)的行，然后按照類別標(biāo)號與類內(nèi)排序標(biāo)號從小到大順序讀取圖片。
全文摘要
本發(fā)明公開了一種可視化的網(wǎng)絡(luò)用戶多媒體管理方法，區(qū)別于現(xiàn)有僅以不同文件夾存放、管理多媒體數(shù)據(jù)的方法，其特征在于對于用戶已上傳的圖片、音頻、視頻和文檔，本發(fā)明根據(jù)圖片自帶GPS與時間信息，在地圖上生成旅游路線，并可在電腦和手機(jī)端顯示；系統(tǒng)實(shí)時提供與瀏覽圖片同一地點(diǎn)的代表性圖片，官方介紹和其他用戶評論并且可編輯自己感受；用戶可選擇時間段查看游記；用戶可將旅游日志與好友分享；對數(shù)據(jù)建立索引結(jié)構(gòu)，并離線預(yù)處理GPS信息與代表性圖片。
文檔編號G06F17/30GK102521253SQ20111036497
公開日2012年6月27日 申請日期2011年11月17日 優(yōu)先權(quán)日2011年11月17日
發(fā)明者李凡, 李靖, 蔣舒卉, 藍(lán)可, 錢學(xué)明 申請人:西安交通大學(xué)