專利名稱：信息處理設(shè)備、方法和計算機程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及信息處理設(shè)備、信息處理方法和計算機程序，更具體地說，涉及在確保圖像的顯示尺寸的同時，允許用戶在如其所愿排列圖像之后查看圖像的信息處理設(shè)備、信息處理方法和計算機程序。
背景技術(shù)：
在近年來的數(shù)字照相機中(參見JP-A-2007-019685),內(nèi)置閃速存儲器和可移除介質(zhì)的容量趨向于增大。伴隨容量的增大，可拍攝圖像的數(shù)目也增大。
另一方面，不同于過去的銀鹽照相機，數(shù)字照相機具有能夠當場再現(xiàn)拍攝的圖像，允許用戶檢查圖像的重大優(yōu)點。

發(fā)明內(nèi)容
不過，在數(shù)字照相機中，由于各種限制的緣故，液晶面板的尺寸有限。數(shù)字照相機允許用戶每次檢查的圖像的數(shù)目，即，能夠顯示在液晶面板上的圖像的數(shù)目有限。如果減小一個圖像的顯示尺寸，那么能夠顯示在液晶面板上的圖像的數(shù)目增大。不過，即使用戶看見圖像，用戶也難以識別這么小的圖像是什么。這導致不合理的結(jié)果。
在過去的數(shù)字照相機中，作為使用戶檢查圖像的一種方法，采用把圖像排列成矩陣形式的圖像表現(xiàn)方法。不過，過去的這種圖像表現(xiàn)方法不能滿足用戶的在如其所愿排列圖像之后查看圖像的希望。
于是，期望在確保圖像的顯示尺寸的同時，允許用戶在如其所愿排列圖像之后查看圖像。
本發(fā)明的一個實施例，提供一種信息處理設(shè)備，包括顯示圖像的顯示裝置；接收用戶的操作輸入的操作輸入接收裝置；和顯示控制裝置，用于把一個或多個圖像排列在具有無限空間大小的虛擬桌面上，并在一部分桌面被設(shè)為顯示區(qū)的情況下，進行使顯示裝置顯示所述顯示區(qū)的顯示控制。當進行選擇排列在桌面上的一個或多個圖像中的預定圖像的選擇操作時，作為顯示控制，顯示控制裝置移動顯示區(qū)在桌面上的相對位置，以致預定圖像被包括在顯示區(qū)的中心。
當顯示在顯示區(qū)中并且不同于所述預定圖像的圖像被設(shè)為基礎(chǔ)圖像時，用戶使手指接觸所述基礎(chǔ)圖像、并且隨后在使手指與顯示裝置保持接觸的同時把手指移動到所述預定圖像的劃線操作被用作選擇操作。
當預定圖像也被包括在包括基礎(chǔ)圖像的顯示區(qū)中時，作為顯示控制，顯示控制裝置還禁止顯示區(qū)的移動。
當在顯示控制裝置禁止顯示區(qū)的移動之后，進行放大或縮小顯示區(qū)的操作時，作為顯示控制，顯示控制裝置還移動顯示區(qū)在桌面上的相對位置，以致所述預定圖像被包括在顯示區(qū)的中心，并使顯示裝置放大或縮小移動后的顯示區(qū)并進行顯示。
按照本發(fā)明的另 一實施例，提供一種與所述信息處理設(shè)備對應的信息處理方法和計算機程序。
在所述信息處理方法和計算機程序中， 一 個或多個圖像被排列在具有無限空間大小的虛擬桌面上，在一部分桌面祐^殳為顯示區(qū)的情況下，顯示圖像和接收用戶的操作輸入的信息處理設(shè)備執(zhí)行顯示所述顯示區(qū)的顯示控制。當進行選擇排列在桌面上的一個或多個圖像中的預定圖像的選擇操作時，作為顯示控制，顯示區(qū)在桌面上的相對位置被移動，以致所述預定圖像被包括在顯示區(qū)的中心。
如上所述，按照本發(fā)明的實施例，在確保圖像的顯示尺寸的同時，用戶能夠在如其所愿排列圖像之后查看圖像。


圖1是作為按照本發(fā)明的一個實施例的信息處理設(shè)備的一個例
子的成像設(shè)備的配置例子的方框圖；圖2A和2B是表示圖1中所示的成像設(shè)備的外部配置例子的立
體圖3A-3E是說明成像設(shè)備的相關(guān)圖像檢索操作方法的第一例子 的示圖4是說明第一相關(guān)圖像檢索處理的例子的流程圖； 圖5是說明第1A相關(guān)圖像檢索處理的例子的流程圖； 圖6是說明第1B相關(guān)圖像檢索處理的例子的流程圖； 圖7A-7E是說明成像設(shè)備的相關(guān)圖像檢索操作方法的第二例子 的示圖8是說明第二相關(guān)圖像檢索處理的例子的流程圖； 圖9A-9F是說明成像設(shè)備的相關(guān)圖像檢索操作方法的第三例子 的示圖IO是說明第三相關(guān)圖像檢索處理的例子的流程圖； 圖ll是說明作為表現(xiàn)分類項目的方法，使用縮略像的方法 的例子的示圖12A-12E是說明成像設(shè)備的相關(guān)圖像檢索操作方法的第四例 子的示圖13是說明第四相關(guān)圖像檢索處理的例子的流程圖14是說明第四關(guān)聯(lián)圖像檢索處理的步驟S65中的依據(jù)接觸區(qū)
的圖像分析處理的具體例子的流程圖15是說明第四關(guān)聯(lián)圖像檢索處理的步驟S66中的圖像分析和
檢索處理的具體例子的流程圖16是說明成像設(shè)備的關(guān)聯(lián)菜單檢索操作的例子的示圖； 圖n是說明成像設(shè)備的關(guān)聯(lián)菜單檢索操作的另一例子的示圖18A-18C是說明成像設(shè)備的關(guān)聯(lián)圖像檢索操作方法的第五例
子的示圖19是說明第五關(guān)聯(lián)圖像檢索處理的例子的流程圖20A-20C是說明放大/縮小成像顯示處理中涉及的操作方法的 例子的示圖；圖21是說明放大/縮小圖像顯示處理的例子的流程圖；以及 圖22是按照本發(fā)明的實施例的信息處理設(shè)備的配置例子的方框 圖，該配置例子不同于圖1中所示的配置例子。
具體實施例方式
下面參考附圖，詳細說明本發(fā)明的實施例。
圖1是作為按照本發(fā)明的實施例的圖像處理設(shè)備的例子的成像 設(shè)備的配置例子的方框圖。
在圖1中所示的例子中，成像設(shè)備包括從鏡頭單元11到觸摸面 板28的組件。
鏡頭單元ll包括成像透鏡、光圏和聚焦透鏡。成像器件12，例 如CCD(電荷耦合器件)被布置在經(jīng)鏡頭單元11入射的被攝體光的光 路上。
成像器件12、模擬信號處理單元13、 A/D(模擬/數(shù)字)轉(zhuǎn)換單元 14和數(shù)字信號處理單元15按照上述順序連接。
液晶面板17、記錄裝置19和觸摸面板28與數(shù)字信號處理單元 15連接。
用于調(diào)整包括在鏡頭單元11中的光圏和移動聚焦透鏡的致動器 20與鏡頭單元11連接。馬達驅(qū)動器21也與致動器20連接。馬達驅(qū) 動器21進行致動器20的驅(qū)動控制。
CPU(中央處理單元)23控制整個成像設(shè)備。于是，模擬信號處理 單元13、 A/D轉(zhuǎn)換單元14、數(shù)字信號處理單元15、馬達驅(qū)動器21、 TG(定時發(fā)生器)22、操作單元24、 EEPROM(電可擦除可編程 ROM)25、程序ROM(只讀存儲器)26、 RAM(隨機存取存儲器)27、觸 摸面板16和觸摸面板28與CPU 23連接。
觸摸屏18包括觸摸面板16和液晶面板17。觸摸面板28被布置 在成像設(shè)備的與觸摸屏18相反的表面上，即，成像透鏡一側(cè)的表面 上(參見后面提及的圖2A和2B)。
記錄裝置19包括光盤，例如DVD(數(shù)字多功能光盤)，半導體存儲器，例如存儲卡，或者其它可移除記錄介質(zhì)。記錄裝置19能夠可 移除地附加在成像設(shè)備主體上。
EEPROM25保存設(shè)定的各種信息。其它信息，例如即使當電源 狀態(tài)被i殳定為關(guān)閉時也應^C保存的信息被保存在EEPROM 25中。
程序ROM 26保存由CPU 23執(zhí)行的程序，和執(zhí)行所述程序所必 需的數(shù)據(jù)。
RAM27作為當CPU23執(zhí)行各種處理時的工作區(qū)，保存必需的 程序和數(shù)據(jù)。
下面概述具有圖1中所示配置的整個成像設(shè)備的操作。
CPU 23執(zhí)行保存在程序ROM 26中的程序，從而控制成像設(shè)備
的各個單元。CPU23按照來自觸摸面板16或者觸摸面板28的信號，
和來自操作單元24的信號，執(zhí)行預定處理。后面將參考流程圖說明
所述處理的具體例子。
操作單元24由用戶操作，并且向CPU 23提供與所述操作對應
的信號。
當使用戶的手指接觸觸摸屏18或者觸摸面板28，例如，手指接 觸觸摸屏18或者觸摸面板28上的任意位置時，即，當用戶進行預定 操作輸入時，觸摸屏18或者觸摸面板28檢測接觸位置的坐標。觸摸 屏18或者觸摸面板28把指示檢測的坐標的電信號(下面稱為坐標信號) 傳給CPU23。 CPU23根據(jù)坐標信號識別接觸位置的坐標，獲得與所 述坐標相關(guān)的預定信息，并根據(jù)所述信息執(zhí)行預定處理。
本說明書中，"接觸"不僅包括靜態(tài)接觸(只接觸 一 個預定區(qū)域)， 而且包括動態(tài)接觸(移動的同時畫出預定軌跡的接觸物體(例如手指) 的接觸)。例如，與紙張的翻動類似的手指在圖像上的劃線(stroking) 是一種形式的接觸。
按照致動器20的驅(qū)動，使鏡頭單元11從成像設(shè)備的外殼中伸出， 或者把鏡頭單元11縮回到所述外殼中。此外，按照致動器20的驅(qū)動， 進行包括在鏡頭單元ll中的光圏的調(diào)整和包括在鏡頭單元ll中的聚 焦透鏡的移動。根據(jù)CPU 23的控制，TG 22向成像器件12提供定時信號。按 照定時信號控制成像器件12中的啄光時間等。
成像器件12根據(jù)從TG22提供的定時信號進行工作，從而接收 經(jīng)鏡頭單元ll入射的被攝體光，并進行光電轉(zhuǎn)換。成像器件12把與 接收的光量對應的模擬圖像信號提供給模擬信號處理單元13。馬達驅(qū) 動器21根據(jù)CPU23的控制，驅(qū)動致動器20。
模擬信號處理單元13根據(jù)CPU 23的控制，對從成像器件12提 供的模擬圖像信號應用模擬信號處理，例如放大。模擬信號處理單元 13把通過模擬信號處理獲得的模擬圖像信號提供給A/D轉(zhuǎn)換單元14。
A/D轉(zhuǎn)換單元14根據(jù)CPU 23的控制，A/D轉(zhuǎn)換來自模擬信號 處理單元13的模擬圖像信號。A/D轉(zhuǎn)換單元14把通過A/D轉(zhuǎn)換獲得 的數(shù)字圖像信號提供給數(shù)字信號處理單元15。
數(shù)字信號處理單元15根據(jù)CPU 23的控制，對從A/D轉(zhuǎn)換單元 14提供的數(shù)字圖像信號進行數(shù)字信號處理，例如噪聲消除處理。數(shù)字 信號處理單元15使液晶面板17把與數(shù)字圖像信號對應的圖像顯示成 拍攝圖像。
數(shù)字信號處理單元15按照預定的壓縮編碼系統(tǒng)，例如JPEG(聯(lián) 合圖像專家組)，壓縮-編碼從A/D轉(zhuǎn)換單元14提供的數(shù)字圖像信號。 數(shù)字信號處理單元15使記錄裝置19記錄壓縮-編碼的數(shù)字圖像信號。
數(shù)字信號處理單元15從記錄裝置19讀取壓縮-編碼的數(shù)字圖像 信號，按照與預定的壓縮編碼系統(tǒng)對應的擴展解碼系統(tǒng)，對讀取的數(shù) 字圖像信號擴展解碼。數(shù)字信號處理單元15使液晶面板17把與數(shù)字 圖像信號對應的圖像顯示成記錄圖像。
另外，數(shù)字信號處理單元15根據(jù)CPU 23的控制，產(chǎn)生用于表 示AF(自動聚焦)功能的框圖像(下面稱為AF框)，并使液晶面板17顯 示該圖像。
成像器件12拾取的圖像(拍攝的圖像)被顯示在液晶面板17上。 這種情況下，AF框被設(shè)置于顯示在液晶面板17上的圖像上。根據(jù) AF框內(nèi)的圖像控制聚焦。如上所述，成像設(shè)備具有AF功能。除了聚焦控制功能之外，AF 功能還包括在顯示在液晶面板17上的圖像上的任意位置設(shè)置AF框的 功能。此外，AF功能包括僅僅按照包括液晶面板17和觸摸面板16 的觸摸屏18上的操作，控制AF框的位置、大小等的功能。
通過CPU 23讀取并執(zhí)行程序ROM 26中的程序，執(zhí)行用于實現(xiàn) AF功能的處理。另外，成像設(shè)備具有AE(自動曝光)功能和AWB(自 動白平衡)功能。這些功能也是通過CPU 23讀取程序ROM 26中的程 序?qū)崿F(xiàn)的。
另外，AF功能、AE功能和AWB功能僅僅是成像設(shè)備的功能的 例子。成像設(shè)備具有與拍攝相關(guān)的各種功能。在各種功能之中，與拍 攝相關(guān)的基本功能被稱為基本功能，與拍攝相關(guān)的應用功能被稱為應 用功能。除了AF功能，AE功能和AWB功能之外，例如，"拍攝模 式選擇功能"和"拍攝定時器設(shè)定功能"可被用作基本功能。例如，"像 素數(shù)目改變功能"和"色度調(diào)節(jié)功能"可被用作應用功能。
圖2A和2B是圖1中所示例子的成像i殳備的外部配置例子的立體圖。
在成像設(shè)備的各個表面中，當用戶拍攝被攝體的圖像時與被攝體 相對的表面，即，布置鏡頭單元11的表面,皮稱為正面。另一方面， 在成像設(shè)備的各個表面中，當用戶拍攝被^l體的圖像時與用戶相對的 表面，即，在正面的相反一側(cè)的表面被稱為背面。此外，在成像設(shè)備 的各個表面中，當用戶拍攝被攝體的圖像時，置于上側(cè)的表面和置于 下側(cè)的表面分別被稱為上表面和下表面。
圖2A是成像設(shè)備的正面的外部配置例子的立體圖。圖2B是成 像設(shè)備的背面的外部配置例子的立體圖。
成像設(shè)備的正面可被透鏡蓋47覆蓋。當在圖中向下打開正面上 的透鏡蓋47時，成像設(shè)備變成圖2A中所示的狀態(tài)。如圖2A中所示， 在其中移除透鏡蓋47的覆蓋的正面的上部中，包括在鏡頭單元ll中 的成像透鏡45和AF照明器46從所述上部的右側(cè)開始按該順序排列。 在覆蓋透鏡蓋47的正面的下部中，觸摸面板28被布置在成像設(shè)備中心附近的部分中，當用戶拍攝被攝體的圖像時，該部分不會被握住。
AF照明器46還用作自拍定時器燈。從圖2A中的左側(cè)開始，變 焦桿(長焦/廣角)41、快門按鈕42、播放按鈕43和電源按鈕44按該順 序排列在成像設(shè)備的上表面上。變焦桿41、快門按鈕42、播放按鈕 43和電源按鈕44包括在圖1中所示的操作單元24中。
如圖2B中所示，觸摸屏18被布置在成像設(shè)備的整個背面上。
如上所述，由于觸摸屏18被設(shè)置在成像設(shè)備的背面上，因此， 當用戶拍攝被攝體的圖像時，在保持成像設(shè)備的正面對著被攝體的時 候，用戶能夠利用觸摸屏18執(zhí)行GUI(圖形用戶界面)操作。
在本實施例中，例如，關(guān)于作為基礎(chǔ)的任意圖像(下面稱為基礎(chǔ) 圖像)，搜索和檢索與基礎(chǔ)圖像具有強關(guān)聯(lián)性的圖像(下面稱為關(guān)聯(lián)圖 像)的操作被用作利用觸摸屏18執(zhí)行的GUI操作。這種操作是不必為 其提供特殊的檢索屏幕等的操作，是通過使用觸摸屏18進行的直觀 操作。于是，該操作是允許用戶容易地找出關(guān)聯(lián)圖像的操作。于是， 下面把這種操作稱為關(guān)聯(lián)圖像檢索操作。
作為關(guān)聯(lián)圖像檢索操作的前提，假定可以是基礎(chǔ)圖像或者關(guān)聯(lián)圖 像的目標(下面稱為檢索目標圖像)是記錄在記錄裝置19中的所有圖 像。對于所有檢索目標圖像，假定已根據(jù)下面說明的附加信息，預先 在數(shù)據(jù)庫等檢索了關(guān)聯(lián)強度。
涉及關(guān)聯(lián)強度的檢索并不局限于上面說明的例子。每次進行關(guān)聯(lián) 圖像檢索操作時，都可檢索關(guān)聯(lián)強度。不過，為了簡化說明，在本說 明書中描述的所有實施例中，都假定已預先檢索了關(guān)聯(lián)強度。
在本實施例中，假定面部信息、位置/地點信息、時間信息和顏 色信息可被用作所述附加信息。面部信息意味關(guān)于人臉的信息和足以 識別某人的信息。位置/地點信息意味由GPS(全球定位系統(tǒng))等獲得的 綿度和經(jīng)度信息，或者能夠通過對圖像的圖像識別視為特定地點的信 息(地名)。時間信息意味關(guān)于拍攝時間的信息。顏色信息意味關(guān)于在 圖像中的最多數(shù)地方中使用的顏色的信息。
檢索目標圖像并不局限于靜止圖像，還包括運動圖像 不過，當200910168059.0
運動圖像是檢索目標圖像時，運動圖像的附加信息是從形成運動圖像 的各個單元圖像(場、幀等)獲得的信息組。
基礎(chǔ)圖像不同于其它圖像，被按照清楚地指示基礎(chǔ)圖像的方式顯 示。例如，基礎(chǔ)圖像可被顯示成大于其它圖《象，可被顯示成其它圖像 更明亮，或者可被邊框環(huán)繞。
下面參考圖3A-3E，說明關(guān)聯(lián)圖像檢索操作的第一例子。 首先，用戶選擇任意圖像作為基礎(chǔ)圖像Pl。選擇操作本身并不 特別受限。當選擇了基礎(chǔ)圖像P1時，觸摸屏18的顯示狀態(tài)變成圖3A 中所示的狀態(tài)。圖3A中表示了基礎(chǔ)圖像P1被顯示在觸摸屏18上的 狀態(tài)。
在觸摸屏18的顯示狀態(tài)為圖3A中所示的狀態(tài)的時候，用戶使 手指fl接觸基礎(chǔ)圖像Pl(觸摸屏18上顯示基礎(chǔ)圖像Pl的區(qū)域)，如 圖3B中所示。隨后，如圖3C中所示，在保持接觸觸摸屏18的同時， 用戶進行從基礎(chǔ)圖像Pl，沿預定方向把手指fl移動預定距離(在圖 3A-3E中所示的例子中，用虛線箭頭指示的距離)的操作。下面把這種 操作稱為劃線操作。
之后，當用戶松開手指fl時，觸摸屏18的顯示狀態(tài)變成圖3D 中所示的狀態(tài)。在觸摸屏18上，基礎(chǔ)圖像P1的關(guān)聯(lián)圖像P2被顯示 在松開手指fl的區(qū)域中，而基礎(chǔ)圖像P1被顯示在初始區(qū)域中。關(guān)聯(lián) 圖像P2可以是與基礎(chǔ)圖像P1相關(guān)的多個關(guān)聯(lián)圖像中的任意一個。不 過，在本實施例中，與基礎(chǔ)圖像Pl的關(guān)聯(lián)強度最高的圖像被顯示成 關(guān)聯(lián)圖像P2。
此外，當用戶在使手指fl接觸關(guān)聯(lián)圖像P2并進行劃線操作之后 松開手指fl時，如圖3E中所示，在松開手指fl的區(qū)域中顯示關(guān)聯(lián)圖 像P3。
在一些情況下，關(guān)聯(lián)圖像P3是基礎(chǔ)圖像P1的關(guān)聯(lián)圖像，在其 它情況下，關(guān)聯(lián)圖像P3是關(guān)聯(lián)圖像P2的關(guān)聯(lián)圖像。
當用戶從觸摸屏18松開手指fl時，這意味劃線操作的結(jié)束。于 是，每次進行劃線操作時，按照關(guān)聯(lián)圖像的關(guān)聯(lián)強度的順序，在觸摸屏18上結(jié)束劃線操作時的區(qū)域中依次顯示基礎(chǔ)圖像P1的關(guān)聯(lián)圖像。 換句話說，通過重復劃線操作，用戶能夠執(zhí)行好像用戶搜索關(guān)聯(lián)圖像 似的操作。
此外，還可對劃線操作的方向賦予含意。與基礎(chǔ)圖像P1的關(guān)系 的相應分類項目和劃線操作的相應方向相聯(lián)系。從而，當沿預定方向 反復執(zhí)行劃線操作時，按照與預定方向相關(guān)的分類項目的關(guān)聯(lián)強度的 順序，關(guān)聯(lián)圖像被依次顯示在觸摸屏18上。這種分類項目可被理解
為關(guān)聯(lián)圖像的檢索條件。于是，分類項目也^:酌情稱為限制條件。
具體地說，例如，在本實施例中，假定"人物"、"地點"、"時間" 和"顏色，，被用作限制條件(分類項目)。這種情況下，假定已分別利用 附加信息中的面部信息、位置/地點信息、時間信息和顏色信息，預先 檢索了"人物"、"地點"、"時間"和"顏色"的關(guān)聯(lián)強度。
例如，假定"時間，，與劃線操作的右斜上方向相關(guān)，"人物，，與劃線 操作的右斜下方向相關(guān)。
這種情況下，例如，圖3E中所示的關(guān)聯(lián)圖像P2，即，在執(zhí)行沿 右斜下方向的劃線操作之后顯示的關(guān)聯(lián)圖像P2是與基礎(chǔ)圖像P1具有 強的"人物，，關(guān)聯(lián)性的關(guān)聯(lián)圖像，例如和基礎(chǔ)圖《象P1包括相同人物的 關(guān)聯(lián)圖像。
另一方面，例如，圖3E中所示的關(guān)聯(lián)圖1象P4，即，在執(zhí)行沿右 斜上方向的劃線操作之后顯示的關(guān)聯(lián)圖像P4是與基礎(chǔ)圖像P1具有強 的"時間"關(guān)聯(lián)性的關(guān)聯(lián)圖像，例如，拍攝時間與基礎(chǔ)圖像Pl的拍攝 時間接近的關(guān)聯(lián)圖像。
下面說明響應按照圖3A-3E的操作例子，即，關(guān)聯(lián)圖像檢索操 作的第一例子的操作，由圖1中所示的成像i殳備執(zhí)行的處理。下面把 響應關(guān)聯(lián)圖像檢索操作，由成像設(shè)備執(zhí)行的處理稱為關(guān)聯(lián)圖像檢索處 理。特別地，響應按照本實施例的關(guān)聯(lián)圖像檢索操作的第K個例子(K 是等于或大于1的整數(shù))的操作的關(guān)聯(lián)圖像檢索處理被稱為第K個關(guān) 聯(lián)圖像檢索處理。
當關(guān)聯(lián)圖像檢索操作檢索的關(guān)聯(lián)圖像是基礎(chǔ)圖像(在圖3A-3E中所示的例子中，基礎(chǔ)圖像P1)的關(guān)聯(lián)圖像(在圖3A-3E中所示的例子中， 關(guān)聯(lián)圖像P2或P4)時，進行的第一關(guān)聯(lián)圖像檢索處理的詳細例子是第 1A關(guān)聯(lián)圖像檢索處理。當關(guān)聯(lián)圖像檢索操作檢索的關(guān)聯(lián)圖像是關(guān)聯(lián) 圖像(在圖3A-3E中所示的例子中，關(guān)聯(lián)圖像P2)的關(guān)聯(lián)圖像(在圖 3A-3E中所示的例子中，關(guān)聯(lián)圖像P3)時，進行的第一關(guān)聯(lián)圖像檢索 處理的詳細例子是第1B關(guān)聯(lián)圖像檢索處理。后面參考圖5和6說明 這些種類的處理。
圖4是說明第一關(guān)聯(lián)圖像檢索處理的例子的流程圖。
在步驟S1， CPU23確定是否選擇了基礎(chǔ)圖像。
當未選擇基礎(chǔ)圖像時，CPU 23在步驟Sl中確定未選擇基礎(chǔ)圖像 (步驟S1中"否")，并使處理返回步驟Sl。在選擇了基礎(chǔ)圖像之前， CPU 23反復執(zhí)行步驟Sl中的確定處理。
之后，當選擇了基礎(chǔ)圖像時，CPU23確定選擇了基礎(chǔ)圖像(步驟 Sl中"是，，)，處理進入步驟S2。
在步驟S2， CPU 23控制數(shù)字信號處理單元15把基礎(chǔ)圖像顯示 在觸摸屏18上?；A(chǔ)圖像可被顯示在觸摸屏18的任意區(qū)域中。不過， 可取的是把基礎(chǔ)圖像顯示在考慮到之后的劃線操作的便利性而確定 的區(qū)域中。例如，在圖3A-3E中所示的例子中，如圖3A中所示，考 慮到沿向右方向的劃線操作，基礎(chǔ)圖像Pl被顯示在位于觸摸屏18左 端的區(qū)域中。
在步驟S3， CPU 23確定觸摸屏18的基礎(chǔ)圖像中的區(qū)域是否被觸摸。
當沒有觸摸基礎(chǔ)圖像中的任何區(qū)域時，CPU 23在步驟S3中確定 基礎(chǔ)圖像中的區(qū)域未被觸摸(步驟S3中"否")，并使處理返回步驟S3。 在基礎(chǔ)圖像中的任意區(qū)域被觸摸之前，CPU 23反復執(zhí)行步驟S3中的 確定處理。
之后，當基礎(chǔ)圖像中的任意區(qū)域被觸摸時，CPU 23在步驟S3 確定基礎(chǔ)圖像中的一個區(qū)域被觸摸(步驟S3中"是")，處理進入步驟 S4。例如，如圖3B中所示，當手指fl觸摸基礎(chǔ)圖像Pl中的區(qū)域時， 從包括在觸摸屏18中的觸摸面板16把坐標信號輸入CPU 23中。
于是，當坐標信號被輸入CPU 23時，在步驟S3中的處理中， CPU 23確定基礎(chǔ)圖像中的區(qū)域被觸摸(步驟S3中"是")，并根據(jù)坐標 信號識別接觸地點(基礎(chǔ)圖像P1的坐標)。
當識別的接觸地點在基礎(chǔ)圖像Pl的顯示區(qū)之外時，CPU 23在 步驟S3中確定基礎(chǔ)圖像中的區(qū)域未被觸摸(步驟S3中"否")，使處理 返回步驟S3，并重復步驟S3和后續(xù)步驟中的處理。
另一方面，當識別的接觸地點在基礎(chǔ)圖像P1的顯示區(qū)之內(nèi)時， CPU 23在步驟S3確定基礎(chǔ)圖像中的區(qū)域被觸摸(步驟S3中"是，，)，處 理進入步驟S4。
在步驟S4， CPU 23確定是否從基礎(chǔ)圖^f象開始進行了劃線操作。
通過監(jiān)視來自包括在觸摸屏18中的觸摸面板16的坐標信號， CPU 23能夠確定是否進行了劃線操作。換句話說，根據(jù)坐標信號的 時序，CPU23能夠識別手指fl的軌跡。于是，根據(jù)識別結(jié)果，CPU 23檢測是否進行了劃線操作。
于是，當按照手指fl的軌跡的識別結(jié)果，未檢測到劃線操作時， CPU 23在步驟S4確定未進行劃線操作(步驟S4中"否")，使處理返回 步驟S4，并反復執(zhí)行步驟S4和后續(xù)步驟中的處理。換句話說，在檢 測到劃線操作之前，CPU 23反復執(zhí)行步驟S4中的確定處理。
之后，當按照手指fl的軌跡的識別結(jié)果，檢測到從基礎(chǔ)圖像開 始的劃線操作時，CPU23在步驟S4確定進行了劃線操作(步驟S4中 "是，，)，處理進入步驟S5。例如，在圖3A-3E中所示的例子中，當觸 摸屏18的顯示狀態(tài)變成圖3C中所示的狀態(tài)時，CPU 23在步驟S4 確定進行了劃線操作(步驟S4中"是")，處理進入步驟S5。
在步驟S5， CPU 23從記錄在記錄裝置19中的所有圖像中檢索 關(guān)聯(lián)圖像。在本實施例中，CPU 23檢索與基礎(chǔ)圖像具有最高關(guān)聯(lián)強 度的圖像作為關(guān)聯(lián)圖像。不過，當設(shè)定各種限制條件時，通過使用與 劃線操作的方向相關(guān)的限制條件來檢索關(guān)聯(lián)圖像。在步驟S6， CPU 23確定是否從觸摸屏18松開了手指fl，即， 劃線操作是否結(jié)束。具體地說，當不再從包括在觸摸屏18中的觸摸 面板16輸入坐標信號時，CPU 23能夠確定手指ft被松開。
于是，只要坐標信號被輸入，CPU 23就在步驟S6確定手指fl 未被松開(步驟S6中"否，，)，并使處理返回步驟S6。換句話說，只要 劃線操作被繼續(xù)，CPU 23就反復執(zhí)行步驟S6中的確定處理。
之后，當坐標信號的輸入停止時，即，當劃線操作結(jié)束時，CPU 23在步驟S6確定手指fl被;^開(步驟S6中"是，，)，處理進入步驟S7。
在步驟S7， CPU 23控制數(shù)字信號處理單元15在觸摸屏18上的 松開手指fl的位置顯示關(guān)聯(lián)圖像。
例如，在圖3A-3E中所示的例子中，當在觸摸屏18上，圖3D 中所示的位置松開手指fl時，關(guān)聯(lián)圖像P2被顯示在該位置。
在步驟S8， CPU23確定是否指示了處理的結(jié)束。
除非指示了處理的結(jié)束，否則CPU 23在步驟S8確定未指示處 理的結(jié)束(步驟S8中"否，，)，使處理返回步驟S3，重復步驟S3和后續(xù) 步驟中的處理。具體地說，每次進行從基礎(chǔ)圖4象(例如，圖3A-3E中 所示的基礎(chǔ)圖像P1)開始的劃線操作時，反復執(zhí)行步驟S3中的"是"， 步驟S4中的"是"，步驟S5，步驟S6中的"是"，步驟S7，和步驟S8 中的"否"的循環(huán)處理，并在松開手指fl的位置(結(jié)束劃線操作的位置) 顯示新的關(guān)聯(lián)圖像。從而，能夠關(guān)于基礎(chǔ)圖像(例如，圖3A-3E中所 示的基礎(chǔ)圖像Pl)顯示多個關(guān)聯(lián)圖像(例如，圖3D和3E中所示的關(guān) 聯(lián)圖像P2和P4)。換句話說，通過重復劃線操作，用戶能夠反復執(zhí)行 步驟S4中的"是"，步驟S5，步驟S6中的"是"，步驟S7和步驟S8 中的"否"的循環(huán)處理，好像用戶搜索基礎(chǔ)圖像的關(guān)聯(lián)圖像似的。
之后，當指示了處理的結(jié)束時，CPU23在步驟S8確定指示了處 理的結(jié)束(步驟S8中"是，，)，處理進入步驟S9。
在步驟S9，作為步驟S1-S8中的處理的結(jié)果，CPU23把顯示在 觸摸屏18上的基礎(chǔ)圖像和各個關(guān)聯(lián)圖像的歷史信息(下面稱為顯示圖 像歷史信息)保存在記錄裝置19中。從而，結(jié)束第一關(guān)聯(lián)圖像檢索處理。 盡管圖中未示出，不過，例如當檢測到用戶的手指fl等在基礎(chǔ)
圖像或關(guān)聯(lián)圖像上的觸摸操作時，CPU 23還能夠控制數(shù)字信號處理 單元15把保存在記錄裝置19中的顯示圖像歷史信息顯示在觸摸屏18 上。
盡管圖中未示出，不過，例如當檢測到用戶的手指fl等在包括 在顯示圖像歷史信息中的一個圖像上的觸摸操作時，CPU 23能夠檢 索被設(shè)為基礎(chǔ)圖像的該圖像的一個或多個關(guān)聯(lián)圖像，并使觸摸屏18 顯示關(guān)聯(lián)圖像。
上面參考圖3A-3E說明了關(guān)聯(lián)圖像檢索操作的第一例子。上面 參考圖4的流程圖說明了與第一例子對應的第一關(guān)聯(lián)圖像檢索處理的 例子。
下面參考圖5的流程圖，說明與第一例子對應的第1A關(guān)聯(lián)圖像 檢索處理的例子。該例子是當關(guān)聯(lián)圖像檢索操作檢索的關(guān)聯(lián)圖像是基 礎(chǔ)圖像(圖3A-3E中所示例子中的基礎(chǔ)圖像Pl)的關(guān)聯(lián)圖像時進行的第 一關(guān)聯(lián)圖像檢索處理的詳細例子。
圖5中的步驟S21-S27中的各類處理基本上和圖4中的步驟 Sl-S7中的各類處理相同。于是，這些種類的處理的描述被省略。
于是，說明在步驟S27中的處理中，CPU23控制數(shù)字信號處理 單元15把關(guān)聯(lián)圖像顯示在觸摸屏18上的松開手指的位置之后的處 理。當步驟S27中的這種處理結(jié)束時，處理進入步驟S28。
在步驟S28， CPU 23確定顯示在觸摸屏18上的關(guān)聯(lián)圖像中的區(qū) 域是否被觸摸。換句話說，CPU23確定在步驟S27顯示的關(guān)聯(lián)圖像 (在圖3A-3E中所示的例子中，關(guān)聯(lián)圖像P2)中的區(qū)域是否被觸摸。
當關(guān)聯(lián)圖像中的區(qū)域未被觸摸時，CPU 23在步驟S28確定關(guān)聯(lián) 圖像中的區(qū)域未被觸摸(步驟S28中"否")，并使處理返回步驟S28。 在關(guān)聯(lián)圖像中的任意區(qū)域被觸摸之前，CPU 23反復執(zhí)行步驟S28中 的確定處理。
之后，當關(guān)聯(lián)圖像中的任意區(qū)域被觸摸時，CPU23在步驟S28中的區(qū)域時， 從包括在觸摸屏18中的觸摸面板16向CPU 23輸入坐標信號。于是，當坐標信號被輸入CPU23時，在步驟S28中的處理中， CPU23確定基礎(chǔ)圖像中的區(qū)域被觸摸(步驟S28中"是")，并根據(jù)坐標 信號識別接觸地點(基礎(chǔ)圖像P2的坐標)。當識別的接觸地點在基礎(chǔ)圖像P2的顯示區(qū)之外時，CPU 23在 步驟S28中確定基礎(chǔ)圖像中的區(qū)域未被觸摸(步驟S28中"否")，處理 被返回到步驟S28，重復步驟S28和后續(xù)步驟中的處理。另一方面，當識別的接觸地點在基礎(chǔ)圖像P2的顯示區(qū)之內(nèi)時， CPU 23在步驟S28確定基礎(chǔ)圖像中的區(qū)域被觸摸(步驟S28中"是")， 處理進入步驟S29。在步驟S29 ， CPU 23確定是否從基礎(chǔ)圖像開始進行了劃線操作。通過監(jiān)視來自包括在觸摸屏18中的觸摸面板16的坐標信號， CPU 23能夠確定是否進行了劃線操作。換句話說，根據(jù)坐標信號的 時序，CPU23能夠識別手指fl的軌跡。于是，根據(jù)識別結(jié)果，CPU 23檢測是否進行了劃線操作。于是，當按照手指fl的軌跡的識別結(jié)果，未檢測到劃線操作時， CPU 23在步驟S29確定未進行劃線操作(步驟S29中"否")，使處理返 回步驟S29，并反復執(zhí)行步驟S29和后續(xù)步驟中的處理。換句話說， 在檢測到劃線操作之前，CPU 23反復執(zhí)行步驟S29中的確定處理。之后，當按照手指fl的軌跡的識別結(jié)果，檢測到從關(guān)聯(lián)圖像開 始的劃線操作時，CPU 23在步驟S29確定進行了劃線操作(步驟S29 中"是")，處理進入步驟S30。在步驟S30, CPU23從記錄在記錄裝置19中的所有圖像中檢索 關(guān)聯(lián)圖像。在本實施例中，CPU 23檢索與基礎(chǔ)圖像具有最高關(guān)聯(lián)強 度的圖像作為關(guān)聯(lián)圖像。不過，在基礎(chǔ)圖像的關(guān)聯(lián)圖像之中，除目前 顯示的關(guān)聯(lián)圖像(在圖3A-3E中所示的例子中，關(guān)聯(lián)圖像P2)之外的、與基礎(chǔ)圖像P1的關(guān)聯(lián)強度最高的圖像被顯示成關(guān)聯(lián)圖像P3。換句話 說，關(guān)聯(lián)圖像P3是僅次于關(guān)聯(lián)圖像P2、具有與基礎(chǔ)圖像P的第二高 關(guān)聯(lián)強度的圖像。當設(shè)定各種限制條件時，通過使用與劃線操作的方 向相關(guān)的限制條件來檢索關(guān)聯(lián)圖像。在步驟S31， CPU23確定是否從觸摸屏18松開了手指fl，即， 劃線操作是否結(jié)束。具體地說，當不再從包括在觸摸屏18中的觸摸 面板16輸入坐標信號時，CPU 23能夠確定手指fl被松開。于是，只要坐標信號被輸入，CPU23就在步驟S31確定手指fl 未被松開(步驟S31中"否，，)，并使處理返回步驟S31。換句話說，只 要劃線操作被繼續(xù)，CPU23就反復執(zhí)行步驟S31中的確定處理。之后，當坐標信號的輸入停止時，即，當劃線操作結(jié)束時，CPU 23在步驟S31確定手指fl被;^開(步驟S31中"是")，處理進入步驟 S32。在步驟S32， CPU 23控制數(shù)字信號處理單元15在觸摸屏18上 的松開手指fl的位置顯示關(guān)聯(lián)圖像。例如，在圖3A-3E中所示的例子中，當在觸摸屏18上圖3E中 所示的位置松開手指H時，關(guān)聯(lián)圖像P3被顯示在該位置。在步驟S33， CPU23確定是否指示了處理的結(jié)束。除非指示了處理的結(jié)束，否則CPU23在步驟S33確定未指示處 理的結(jié)束(步驟S33中"否")，使處理返回步驟S23，重復步驟S23和 后續(xù)步驟中的處理。具體地說，每次進行從基礎(chǔ)圖像(例如，圖3A-3E 中所示的基礎(chǔ)圖像Pl)開始的劃線操作時，反復執(zhí)行步驟S23-S33的 循環(huán)處理，并在松開手指fl的位置(結(jié)束劃線操作的位置)顯示新的關(guān) 聯(lián)圖像。從而，能夠關(guān)于基礎(chǔ)圖像(例如，圖3A-3E中所示的基礎(chǔ)圖 像P1)顯示多個關(guān)聯(lián)圖像(例如，圖3D和3E中所示的關(guān)聯(lián)圖像P2和 P4)。換句話說，通過重復劃線操作，用戶能夠反復執(zhí)行步驟S23-S33 的循環(huán)處理，好像用戶搜索基礎(chǔ)圖像的關(guān)聯(lián)圖像似的。之后，當指示了處理的結(jié)束時，CPU23在步驟S33確定指示了 處理的結(jié)束(步驟S33中"是")，處理進入步驟S34。從而，結(jié)束第1A關(guān)聯(lián)圖像檢索處理。下面參考圖6的流程圖，說明與第一例子對應的第1B關(guān)聯(lián)圖像 檢索處理的例子。該例子是當關(guān)聯(lián)圖像檢索操作檢索的關(guān)聯(lián)圖像是關(guān) 聯(lián)圖像(在圖3A-3E中所示的例子中，關(guān)聯(lián)圖像P2)的關(guān)聯(lián)圖像時，進 行的第一關(guān)聯(lián)圖像檢索處理的具體例子。圖6中的步驟S41-S47中的各類處理基本上和圖4中的步驟 Sl-S7中的各類處理相同。于是，這些種類的處理的描述被省略。于是，說明在步驟S47中的處理中，CPU23控制數(shù)字信號處理 單元15把關(guān)聯(lián)圖像顯示在觸摸屏18上的松開手指的位置之后的處 理。當步驟S47中的這種處理結(jié)束時，處理進入步驟S48。在步驟S48， CPU 23把該關(guān)聯(lián)圖像設(shè)為基礎(chǔ)圖像。具體地說， CPU 23把在步驟S47中顯示的關(guān)聯(lián)圖像(在圖3A-3E中所示的例子 中，關(guān)聯(lián)圖像P2)設(shè)為基礎(chǔ)圖像。在步驟S49, CPU23確定是否指示了處理的結(jié)束。除非指示了處理的結(jié)束，否則CPU23在步驟S49確定未指示處 理的結(jié)束(步驟S49中"否")，使處理返回步驟S43,重復步驟S43和 后續(xù)步驟中的處理。具體地說，每次進行從基礎(chǔ)圖像(例如，圖3A-3E 中所示的基礎(chǔ)圖像Pl或P2)開始的劃線操作時，反復執(zhí)行步驟 S43-S49的循環(huán)處理，并在松開手指fl的位置(結(jié)束劃線操作的位置) 顯示新的關(guān)聯(lián)圖像。從而，能夠關(guān)于基礎(chǔ)圖4象(例如，圖3A-3E中所 示的基礎(chǔ)圖像P1或P2)顯示多個關(guān)聯(lián)圖像(例如，圖3E中所示的關(guān)聯(lián) 圖像P3)。換句話說，通過重復劃線操作，用戶能夠反復執(zhí)行步驟 S43-S49的循環(huán)處理，好像用戶搜索基礎(chǔ)圖像的關(guān)聯(lián)圖像似的。之后，當指示了處理的結(jié)束時，CPU23在步驟S49確定指示了 處理的結(jié)束(步驟S49中"是")，處理進入步驟S50。在步驟S5 0，作為步驟S41-S49中的處理的結(jié)果，CPU 23把顯參考圖8 的流程圖說明與第二例子對應的第二關(guān)聯(lián)圖像檢索處理的例子。首先，用戶選擇任意圖像作為基礎(chǔ)圖像Pl。選擇操作本身并不 特別受限。當選擇了基礎(chǔ)圖像P1時，觸摸屏18的顯示狀態(tài)變成圖7A 中所示的狀態(tài)。圖7A是其中基礎(chǔ)圖像P1被顯示在觸摸屏18的中心 的狀態(tài)的示圖。當在圖7A中所示的狀態(tài)下，基礎(chǔ)圖像Pl被用戶的手指fl觸摸 時，觸摸屏18上的顯示轉(zhuǎn)變成圖7C中所示的狀態(tài)。如圖7C中所示， 其中顯示分類項目(限制條件)的圖像PA-PD被顯示在基礎(chǔ)圖像Pl的 四個角。下面把其中顯示分類項目的圖像PA-PD稱為分類標簽 PA-PD。當用戶用手指fl在分類標簽PA-PD之中，觸摸其中顯示希望用 于檢索關(guān)聯(lián)圖像的分類項目的分類標簽時，用戶能夠選擇該分類項 目。隨后，在基礎(chǔ)圖像Pl的關(guān)聯(lián)圖像之中，在選擇的分類項目方面 具有最高的關(guān)聯(lián)強度的圖像作為關(guān)聯(lián)圖像被顯示在觸摸屏18上。不 僅通過用手指fl觸摸分類標簽，而且通過手指fl沿分類標簽PA-PD 的一定方向的劃線操作，都能夠?qū)崿F(xiàn)分類項目的選擇。在本實施例中， 通過用手指fl觸摸分類標簽來選擇分類項目。具體地說，例如，在圖7A-7E中所示的例子中，如圖7D中所示， 由于其中顯示"人物"的分類標簽PA被手指fl觸摸，因此"人物，，被選 為分類項目。隨后，如圖7E中所示，關(guān)于"人物"與基礎(chǔ)圖像P1具有 強關(guān)聯(lián)性的圖像P2，例如和基礎(chǔ)圖像P1包括相同人物的圖像P2被 顯示成關(guān)聯(lián)圖像。當比較關(guān)聯(lián)圖像檢索操作的第一例子(圖3A-3E)和第二例子(圖 7A-7E)時，即使在第一例子中，用戶也能夠無特定目的地搜索關(guān)聯(lián)圖 像。不過，在第一例子中，由于未清楚表示與基礎(chǔ)圖像Pl的關(guān)系，因此當用戶僅僅搜索具有一定關(guān)系的圖像時，第一例子并不適宜。另一方面，在第二例子中，當基礎(chǔ)圖像被觸摸時，例如，圍繞基礎(chǔ)圖像顯示相應的分類項目。在圖7A-7E中所示的例子中，顯示分類 標簽PA-PD。于是，當用戶在分類項目中選擇所需的分類項目時，用 戶能夠把在選擇的分類項目方面，與基礎(chǔ)圖像具有最強關(guān)聯(lián)性的圖像 顯示成關(guān)聯(lián)圖像。通過這種方式采用第二例子，用戶能夠容易地只搜 索例如其中拍攝了特定人物的圖像。圖8是說明與參考圖7A-7E說明的關(guān)聯(lián)圖像檢索操作的第二例 子對應的關(guān)聯(lián)圖像檢索處理(即，第二關(guān)聯(lián)圖像檢索處理)的例子的 流程圖。在步驟S61， CPU23確定是否選擇了基礎(chǔ)圖像。當未選擇基礎(chǔ)圖像時，CPU 23在步驟S61確定未選擇基礎(chǔ)圖像 (步驟S61中"否")，并使處理返回步驟S61。換句話說，在選擇了基 礎(chǔ)圖像之前，CPU23反復執(zhí)行步驟S61中的確定處理。之后，當選擇了基礎(chǔ)圖像時，CPU23在步驟S61確定選擇了基 礎(chǔ)圖像(步驟S61中"是")，處理進入步驟S62。在步驟S62， CPU 23控制數(shù)字信號處理單元15把基礎(chǔ)圖像顯示 在觸摸屏18上?；A(chǔ)圖像可被顯示在觸摸屏18的任意區(qū)域中。不過， 可取的是把基礎(chǔ)圖像顯示在考慮到之后的分類項目的顯示而確定的 區(qū)域中。例如，在圖7A-7E中所示的例子中，如圖7A中所示，基礎(chǔ) 圖像P1被顯示在觸摸屏18的中心區(qū)域中。在步驟S63， CPU 23確定觸摸屏18上的基礎(chǔ)圖像中的區(qū)域是否 被觸摸。當沒有觸摸基礎(chǔ)圖像中的區(qū)域時，CPU23在步驟S63中確定基 礎(chǔ)圖像中的任意區(qū)域未被觸摸(步驟S63中"否，，)，并使處理返回步驟 S63。換句話說，在基礎(chǔ)圖像的任意區(qū)域被觸摸之前，CPU23反復執(zhí) 行步驟S63中的確定處理。之后，當基礎(chǔ)圖像中的任意區(qū)域被觸摸時，CPU23在步驟S63 確定基礎(chǔ)圖像中的一個區(qū)域被觸摸(步驟S63中"是")，處理進入步驟S64。
在步驟S64, CPU 23控制數(shù)字信號處理單元15在觸摸屏18上 的基礎(chǔ)圖像的四個角顯示分類標簽。例如，在圖7A-7E中所示的例子 中，如圖7C中所示，顯示分類標簽PA-PD。在參考圖8說明的例子 中，按照圖7A-7E中所示的例子，分類標簽的顯示位置被設(shè)在四個角。 不過，顯示位置并不局限于參考圖8說明的例子。顯示分類項目的形 式并不局限于分類標簽，只要能夠向用戶呈現(xiàn)分類項目即可。
在步驟S65, CPU23確定在顯示在觸摸屏18上的分類標簽中， 特定的分類標簽是否被觸摸。
當顯示在觸摸屏18上的分類標簽都未被觸摸時，CPU 23在步驟 S65中確定未觸摸分類標簽(步驟S65中"否，，)，并使處理返回步驟S65。 換句話說，在顯示在觸摸屏18上的任意分類標簽被觸摸之前，CPU 23 反復執(zhí)行步驟S65中的確定處理。
之后，當顯示在觸摸屏18上的分類標簽中的特定分類標簽被觸 摸時，CPU 23在步驟S65中確定分類標簽中的特定分類標簽被觸摸 (步驟S65中"是")，處理進入步驟S66。
在步驟S66， CPU 23利用與被觸摸的分類標簽對應的限制條件 (分類項目)，從記錄在記錄裝置19中的所有圖像中檢索關(guān)聯(lián)圖像。換 句話說，在本實施例中，在與被觸摸的分類標簽對應的限制條件(分類 項目)方面，與基礎(chǔ)圖像具有最高關(guān)聯(lián)強度的圖像被檢索為關(guān)聯(lián)圖像。
在步驟S67， CPU 23控制數(shù)字信號處理單元15把檢索的關(guān)聯(lián)圖 像顯示在觸摸屏18上。
例如，在圖7A-7E中所示的例子中，如圖7D中所示，當手指fl 觸摸分類標簽PA時，CPU 23在步驟S65中的處理中確定特定的分 類標簽被觸摸(步驟S65中"是，，)。在步驟S66的處理中，CPU 23檢索 關(guān)于"人物"與基礎(chǔ)圖像Pl具有最高關(guān)聯(lián)強度的圖像，作為關(guān)聯(lián)圖像 P2。在步驟S67的處理中，CPU23把關(guān)聯(lián)圖像P2顯示在顯示"人物，， 分類標簽PA的區(qū)域附近。關(guān)聯(lián)圖像P2的顯示位置并不特別局限于 圖7A-7E中所示的例子，可以是任意位置。不過，通過采用圖7A-7E中所示例子中的位置，用戶能夠容易地識別關(guān)聯(lián)圖像P2是關(guān)于分類 標簽PA指示的分類項目"人物"，具有高關(guān)聯(lián)性的圖像。
在步驟S68, CPU 23把顯示圖像歷史信息保存在記錄裝置19中。
從而，結(jié)束第二關(guān)聯(lián)圖像檢索處理。
和參考圖4說明的例子中一樣，在步驟S67和S68中的處理中， CPU 23可確定是否指示了處理的結(jié)束，除非指示了處理的結(jié)束，否 則使處理返回適當?shù)牟襟E，只有當指示了處理的結(jié)束時，才使處理進 入步驟S68
上面參考圖7A-7E說明了關(guān)聯(lián)圖像檢索操作的第二例子。上面 參考圖8的流程圖說明了與第二例子對應的第二關(guān)聯(lián)圖像檢索處理的 例子。
下面參考圖9A-9F說明關(guān)聯(lián)圖像檢索操作的第三例子。參考圖 10的流程圖說明與第三例子對應的第三關(guān)聯(lián)圖像檢索處理的例子。
首先，為了進行關(guān)聯(lián)圖像檢索操作，用戶把CPU23的操作狀態(tài) 設(shè)為其中能夠執(zhí)行關(guān)聯(lián)圖像檢索處理的操作狀態(tài)(下面稱為檢索模 式)。隨后，觸摸屏18的顯示狀態(tài)變成圖9A中所示的狀態(tài)。換句話 說，如圖9A中所示，用于選擇分類項目(限制條件)的圖像Pa-Pd被 顯示在觸摸屏18上。其中顯示分類項目的圖像Pa-Pd被稱為分類項 目選擇圖像Pa-Pd。
當用戶用手指fl觸摸分類項目圖像Pa-Pd中，顯示希望被用于 關(guān)聯(lián)圖像的檢索的分類項目的分類項目圖像時，用戶能夠選擇分類項 目。
之后，和第二例子中一樣，用戶選擇任意圖像作為基礎(chǔ)圖像P1。 選捧操作本身并不特別受限。當選擇了基礎(chǔ)圖像P1時，觸摸屏18的 顯示狀態(tài)變成圖9B中所示的狀態(tài)。圖9B表示了其中基礎(chǔ)圖像P1被 顯示在觸摸屏18的中心的狀態(tài)。
在圖9B中所示的狀態(tài)下，當顯示在觸摸屏18上的基礎(chǔ)圖像P1 被用戶的手指fl觸摸時，觸摸屏18上的顯示轉(zhuǎn)變成圖9D1或9D2中 所示的狀態(tài)。當與選擇的分類項目圖像對應的分類項目被表示成主分類項目(主關(guān)鍵字)，通過進一步細分主分類項目而獲得的分類項目(限 制條件)被表示成副分類項目(副關(guān)鍵字)時，關(guān)于副分類項目的分類標
簽PA1-PD1或者PA2-PD2 ^皮顯示在例如基礎(chǔ)圖1象P1的四個角。
在圖9A-9F中所示的例子中，由于手指fl在圖9A中所示的狀 態(tài)下，觸摸分類項目圖像Pa，因此主分類項目"人物，，被選擇。
例如，作為按照圖像中的面部的大小劃分的副分類項目，存在"極 大"、"大"、"中等"和"小"。于是，在圖9D1中圖解說明了其中指示"極 大，，的分類標簽PC1，指示"大，，的分類標簽PA1，指示"中等"的分類 標簽PB1，和指示"小"的分類標簽PD1被顯示在基礎(chǔ)圖像P1的四個 角的狀態(tài)。
就"人物，，來說，例如，作為按照包括在圖像中的人數(shù)劃分的副分 類項目，存在"一人"、"兩人"、"三人"和"四人或四人以上"。于是， 在圖9D2中例示了其中指示"一人，，的分類標簽PC2，指示"兩人，，的分 類標簽PA2，指示"三人"的分類標簽PB2，和指示"四人或四人以上" 的分類標簽PD2被顯示在基礎(chǔ)圖像Pl的四個角的狀態(tài)。
當用戶用手指fl觸摸分類標簽PA1-PD1或者PA2-PD2中，顯 示希望用于關(guān)聯(lián)圖像的檢索的副分類項目的分類標簽時，用戶能夠選 擇該副分類項目。隨后，就選擇的副分類項目方面，具有最高關(guān)聯(lián)強 度的圖像作為關(guān)聯(lián)圖像被顯示在觸摸屏18上。
具體地說，例如，在圖9A-9F中所示的例子中，如圖9E中所示， 其中顯示"人物"的"大"的分類標簽PA1被手指fl觸摸。于是，"大" 被選為副分類項目。隨后，如圖9F中所示，就"人物，，的"大，，來說， 與基礎(chǔ)圖像P1具有強關(guān)聯(lián)性的圖像P2，例如，就尺寸"大"來說，和 基礎(chǔ)圖像P1包括相同人物的面部的圖像P2被顯示成關(guān)聯(lián)圖像。
如上所述，例如，當通過使用主分類項目檢索關(guān)聯(lián)項目時，呈現(xiàn) 按照圖像中所示的"人物，，的面部大小、圖像中所示的"人物，，的數(shù)目等 設(shè)置的副分類項目。由于用戶能夠指定這些副分類項目，因此用戶能 夠在一定程度限制構(gòu)成的同時，搜索希望的一個圖像。
圖IO是說明與參考圖9A-9E說明的關(guān)聯(lián)圖像檢索操作的第三例子對應的關(guān)聯(lián)圖像檢索處理(即，第三關(guān)聯(lián)圖像檢索處理)的例子的 流程圖。
在步驟S81， CPU 23確定CPU 23的操作模式是否被設(shè)定在檢 索模式。
當未設(shè)定檢索模式時，CPU 23在步驟S81確定CPU 23的操作 模式未被設(shè)成檢索模式(步驟S81中"否")，并使處理返回步驟S81。 換句話說，在設(shè)定檢索模式之前，CPU 23反復執(zhí)行步驟S81中的確 定處理。
之后，當選擇了基礎(chǔ)圖像時，CPU23在步驟S81中確定CPU23 的操作模式被設(shè)成檢索模式(步驟S81中"是")，處理進入步驟S82。
在步驟S82, CPU 23控制數(shù)字信號處理單元15把分類項目選擇 圖像顯示在觸摸屏18上。例如，在圖9A-9F中所示的例子中，如圖 9A中所示，顯示分類項目選擇圖像Pa-Pd。
在步驟S83， CPU 23確定顯示在觸摸面板16上的分類項目選擇 圖像中的特定分類項目選擇圖像是否被觸摸。
當顯示在觸摸屏18上的分類項目選擇圖像都未被觸摸時，CPU 23在步驟S83確定沒有分類項目選擇屏幕^L觸摸(步驟S83中"否")， 并使處理返回步驟S83。換句話說，在顯示在觸摸屏18上的任意分類 項目選擇圖像被觸摸之前，CPU 23反復執(zhí)行步驟S83中的確定處理。
之后，當顯示在觸摸屏18上的分類項目選擇圖像中的特定分類 項目選擇圖像被觸摸時，CPU 23在步驟S83中確定特定的分類項目 選擇圖像被觸摸(步驟S83中"是，，)，處理進入步驟S84。
在步驟S84， CPU 23設(shè)定與觸摸的分類項目選擇圖像對應的主 分類項目。
例如，在圖9A-9F中所示的例子中，由于在圖9A中所示的狀態(tài) 下，使手指fl與分類項目圖像Pa接觸，因此，CPU23在步驟S83 中的處理中，確定特定的分類項目選擇圖像被觸摸(步驟SM中"是")。 在步驟S84中的處理中，CPU23選擇主分類項目"人物"。
在步驟S85, CPU23確定是否選擇了基礎(chǔ)圖像。當未選擇基礎(chǔ)圖像時，CPU23在步驟S85中確定未選擇基礎(chǔ)圖像(步驟S85中"否")，并使處理返回步驟S85。換句話說，在選擇了基礎(chǔ)圖像之前，CPU23反復執(zhí)行步驟S85中的確定處理。
之后，當選擇了基礎(chǔ)圖像時，CPU23在步驟S85中確定選擇了基礎(chǔ)圖像(步驟S85中"是，，)，處理進入步驟S86。
在步驟S86, CPU23控制數(shù)字信號處理單元15把基礎(chǔ)圖像顯示在觸摸屏18上?；A(chǔ)圖像可被顯示在觸摸屏18的任意區(qū)域中。不過，可取的是把基礎(chǔ)圖像顯示在考慮到之后的副分類項目的顯示而確定的區(qū)域中。例如，在圖9A-9F中所示的例子中，如圖9B中所示，基礎(chǔ)圖像P1被顯示在觸摸屏18的中心區(qū)域中。
在步驟S87, CPU23確定觸摸屏18上的基礎(chǔ)圖像中的區(qū)域是否
當沒有觸摸基礎(chǔ)圖像中的任何區(qū)域時，CPU23在步驟S87中確定基礎(chǔ)圖像中的區(qū)域未被觸摸(步驟S87中"否")，并使處理返回步驟
587。 換句話說，在基礎(chǔ)圖像的任意區(qū)域被觸摸之前，CPU23反復執(zhí)行步驟S87中的確定處理。
之后，當基礎(chǔ)圖像中的任意區(qū)域被觸摸時，CPU23在步驟S87確定基礎(chǔ)圖像中的一個區(qū)域被觸摸(步驟S87中"是")，處理進入步驟
588。
在步驟S88, CPU 23控制數(shù)字信號處理單元15把副分類項目的分類標簽顯示在觸摸屏18上的基礎(chǔ)圖像的四個角。例如，在圖9A-9F中所示的例子中，如圖9D1或9D2中所示，分類標簽PA1-PD1，或者分類標簽PA2或PD2被顯示成關(guān)于"人物"的副分類項目的分類標簽。在參考圖IO說明的例子中，按照圖9A-9F中所示的例子，分類標簽的顯示位置被設(shè)在四個角。不過，顯示位置并不局限于參考圖10說明的例子。顯示分類項目的形式并不局限于分類標簽，只要能夠向用戶呈現(xiàn)分類項目即可。
在步驟S89, CPU 23確定在顯示在觸摸屏18上的分類標簽中，特定的分類標簽是否被觸摸。
27當顯示在觸摸屏18上的分類標簽都未被觸摸時，CPU 23在步驟S89中確定分類標簽都未被觸摸(步驟S89中"否")，并使處理返回步驟S89。換句話說，在顯示在觸摸屏18上的任意分類標簽被觸摸之前，CPU 23反復執(zhí)行步驟S89中的確定處理。
之后，當顯示在觸摸屏18上的分類標簽中的特定分類標簽被觸摸時，CPU 23在步驟S89中確定分類標簽中的特定分類標簽被觸摸(步驟S89中"是，，)，處理進入步驟S卯。
在步驟S卯，CPU 23利用與被觸摸的分類標簽對應的限制條件(副分類項目)，從記錄在記錄裝置19中的所有圖像中檢索關(guān)聯(lián)圖像。換句話說，在本實施例中，在與被觸摸的分類標簽對應的限制條件(副分類項目)方面，與基礎(chǔ)圖像具有最高關(guān)聯(lián)強度的圖像被檢索為關(guān)聯(lián)圖像。
在步驟S91， CPU23控制數(shù)字信號處理單元15把檢索的關(guān)聯(lián)圖像顯示在觸摸屏18上。
例如，在圖9A-9F中所示的例子中，如圖9E中所示，當手指fl觸摸分類標簽PA1時，CPU23在步驟S89中的處理中確定特定的分類標簽被觸摸(步驟S89中"是")。在步驟S90的處理中，CPU23檢索就"人物"的面部的尺寸"大"方面，與基礎(chǔ)圖像Pl具有最高關(guān)聯(lián)強度的圖像，作為關(guān)聯(lián)圖像P2。在步驟S91的處理中，CPU23把關(guān)聯(lián)圖像P2顯示在顯示"大"分類標簽PA1的區(qū)域附近。關(guān)聯(lián)圖像P2的顯示位置并不特別局限于圖9A-9F中所示的例子，可以是任意位置。不過，通過采用圖9A-9F中所示例子中的位置，用戶能夠容易地識別關(guān)聯(lián)圖像P2是在分類標簽PA1指示的副分類項目"人物"面部的尺寸"大"方面，具有高關(guān)聯(lián)性的圖像。
在步驟S92， CPU 23把顯示圖像歷史信息保存在記錄裝置19中。
于是，第三關(guān)聯(lián)圖像檢索處理結(jié)束。
上面參考圖9A-9F說明了關(guān)聯(lián)圖像檢索操作的第三例子。參考圖10的流程圖說明了與第三例子對應的第三關(guān)聯(lián)圖像檢索處理的例子。在關(guān)聯(lián)圖像檢索操作的第二和第三例子中，分類項目被顯示在基礎(chǔ)圖像的四個角。不過，如上所述，分類項目的數(shù)目并不局限于四個。不必明確地把分類項目的顯示形式限制成顯示在圖像的四個角。例如，如圖11中所示，也可采用準備通過選擇分類項目而顯示的關(guān)聯(lián)
圖像的縮略像PS1-PS4，并顯示縮略像PS1-PS4的形式作為顯示形式，而不利用字符顯示分類項目。
下面參考圖12A-12E說明關(guān)聯(lián)圖像檢索操作的第四例子。參考圖13-15的流程圖，說明與第四例子對應的第四關(guān)聯(lián)圖像檢索處理的例子。
第二和第三例子是其中CPU 23在觸摸面板16上呈現(xiàn)分類項目并且用戶搜索希望的圖像組的例子。
另一方面，第四例子是其中對觸摸面板16上，用戶觸摸的地點(用戶的手指fl觸摸的地點)賦予含意的例子。
如圖12A中所示，當在基礎(chǔ)圖像Pl被顯示在觸摸屏18上的狀態(tài)下，手指fl觸摸基礎(chǔ)圖像P1的預定區(qū)域時，CPU 23分析預定區(qū)域中的圖像，根據(jù)圖像分析識別分類項目。
圖像分析本身的方法并不特別受限。不過，在本實施例中，假定采用下迷圖像分析方法。具體地說，假定多個分類項目被預先設(shè)為分析候選者，并且預先對多個分析候選者中的每一個賦予優(yōu)先級。從而，作為關(guān)于預定區(qū)域的圖像分析，按照優(yōu)先級的順序分析多個分析候選者(分類候選者)。具體地說，當圖像分析的分析結(jié)果是指示難以識別分析候選者的特定標識對象未被包括在預定區(qū)域中的結(jié)果時，通過利用下一優(yōu)先級的另一個分析候選者，再次進行圖像分析。所有圖像分析都難以識別其中包括特定標識對象的預定區(qū)域被看作不包括具有強關(guān)聯(lián)性的圖像。換句話說，獲得指示分析困難的分析結(jié)果。
例如，當基礎(chǔ)圖像P1中的包括面部的預定區(qū)域被觸摸時，CPU23分析所述預定區(qū)域的圖像，把"人物"識別成分類項目。隨后，CPU23檢索就"人物"來說，與基礎(chǔ)圖像P1具有高關(guān)聯(lián)強度的圖像，作為關(guān)聯(lián)圖像P2B和P3B。如圖12B中所示，CPU23控制數(shù)字信號處理單元15在觸摸屏18上顯示關(guān)聯(lián)圖像P2B和P3B。不言而喻，諸如關(guān) 聯(lián)圖像的顯示數(shù)目和顯示位置之類的顯示形式并不受限。
例如，當基礎(chǔ)圖像P1中與某一地點關(guān)聯(lián)的預定區(qū)域被觸摸時， CPU23分析所述預定區(qū)域的圖像，把"地點"識別成分類項目。從而， CPU23檢索就"地點"來說，與基礎(chǔ)圖像P1具有高關(guān)聯(lián)強度的圖像， 作為關(guān)聯(lián)圖像P2C和P3C。如圖12C中所示，CPU23控制數(shù)字信號 處理單元15在觸摸屏18上顯示關(guān)聯(lián)圖像P2C和P3C。不言而喻，諸 如關(guān)聯(lián)圖像的顯示數(shù)目和顯示位置之類的顯示形式并不受限。
例如，當基礎(chǔ)圖像P1中以特定顏色為主的預定區(qū)域被觸摸時， CPU23分析所述預定區(qū)域的圖像，把"顏色"識別成分類項目。從而， CPU 23檢索就"顏色"來說，與基礎(chǔ)圖像P1具有高關(guān)聯(lián)強度的圖像， 作為關(guān)聯(lián)圖像P2D和P3D。如圖12D中所示，CPU23控制數(shù)字信號 處理單元15在觸摸屏18上顯示關(guān)聯(lián)圖像P2D和P3D。不言而喻，諸 如關(guān)聯(lián)圖像的顯示數(shù)目和顯示位置之類的顯示形式并不受限。
當整個基礎(chǔ)圖像P1被觸摸時，CPU23分析整個基礎(chǔ)圖像P1的 圖像，根據(jù)分析結(jié)果檢索關(guān)聯(lián)圖像P2E和P3E。如圖12E中所示， CPU 23控制數(shù)字信號處理單元15在觸摸屏18上顯示關(guān)聯(lián)圖像P2E 和P3E。不言而喻，諸如關(guān)聯(lián)圖像的顯示數(shù)目和顯示位置之類的顯示 形式并不受限。作為觸摸整個基礎(chǔ)圖像的一種操作方法，可采用進行 劃線操作以圍繞基礎(chǔ)圖像Pl的方法，或者使多于一個的手指與基礎(chǔ) 圖像P1接觸的方法。
圖13是說明與參考圖12A-12E說明的關(guān)聯(lián)圖像檢索操作的第四 例子對應的關(guān)聯(lián)圖像檢索處理(即，第四關(guān)聯(lián)圖像檢索處理)的例子 的流程圖。
在步驟S101， CPU12確定是否選擇了基礎(chǔ)圖像。 當未選擇基礎(chǔ)圖像時，CPU 23在步驟S101確定未選擇基礎(chǔ)圖像 (步驟S101中"否")，并使處理返回步驟SlOl。換句話說，在選擇了 基礎(chǔ)圖像之前，CPU23反復執(zhí)行步驟S101中的確定處理。
之后，當選擇了基礎(chǔ)圖像時，CPU23在步驟S101確定選擇了基礎(chǔ)圖像(步驟S101中"是，，)，處理進入步驟S102。
在步驟S102， CPU 23控制數(shù)字信號處理單元15把基礎(chǔ)圖像顯 示在觸摸屏18上。基礎(chǔ)圖像可被顯示在觸摸屏18的任何區(qū)域中。不 過，可取的是把基礎(chǔ)圖像顯示在通過考慮到之后的圖像分析而確定的 區(qū)域中。例如，在圖12A-12E中所示的例子中，如圖12A所示，基 礎(chǔ)圖像P1以較大的尺寸被顯示觸摸屏18的中心的區(qū)域中，從而允許 用戶用手指fl觸摸基礎(chǔ)圖像Pl中的各個區(qū)域。
在步驟S103, CPU 23確定觸摸屏18上的基礎(chǔ)圖像中的區(qū)域是 否4皮觸4莫。
當未觸摸基礎(chǔ)圖像中的區(qū)域時，CPU 23在步驟S103中確定未觸 摸基礎(chǔ)圖像中的任意區(qū)域(步驟S103中"否")，并使處理返回步驟
5103。 換句話說，在觸摸了基礎(chǔ)圖像中的任意區(qū)域之前，CPU 23反 復執(zhí)行步驟S103中的確定處理。
之后，當觸摸了基礎(chǔ)圖像中的任意區(qū)域時，CPU23在步驟S103 中確定基礎(chǔ)圖像中的區(qū)域被觸摸(步驟S103中"是")，處理進入步驟
5104。
在步驟S104, CPU 23確定是否進行了觸摸整個基礎(chǔ)圖像的操作。 當進行了觸摸整個基礎(chǔ)圖像的操作時，CPU 23在步驟S104中確 定進行了觸摸整個基礎(chǔ)圖像的操作(步驟S104中"是")，處理進入步驟 S106。在步驟S106， CPU23分析整個基礎(chǔ)圖像，根據(jù)分析結(jié)果檢索 關(guān)聯(lián)圖像，并使觸摸屏18顯示關(guān)聯(lián)圖像。不過，當未檢索到關(guān)聯(lián)圖 像時，在觸摸屏18上顯示不存在關(guān)聯(lián)圖像的指示。下面把步驟S106 中的處理稱為圖像分析和檢索處理。后面參考圖15的流程圖說明圖 像分析和檢索處理的具體例子。當圖像分析和檢索處理結(jié)束時，處理 進入步驟Slll。在步驟Slll， CPU23把顯示圖像歷史信息保存在記 錄裝置19中。從而，結(jié)束第四關(guān)聯(lián)圖像檢索處理。
另一方面，當進行了觸摸基礎(chǔ)圖像的預定區(qū)域的操作時，CPU 23 在步驟S104中確定未進行觸摸整個基礎(chǔ)圖像的操作(步驟S104中 "否")，處理進入步驟S105。在步驟S105, CPU 23分析預定區(qū)域的圖像，并且作為分析的結(jié)果，輸出多個分析候選者之中的預定分析候 選者，作為分類項目。不過，當難以輸出多個分析候選者中的任意一
個時，CPU23輸出分析結(jié)果"無關(guān)聯(lián)圖像"。下面把步驟S105中的這 種處理稱為依據(jù)接觸區(qū)的圖像分析處理。后面參考圖14的流程圖， 說明依據(jù)接觸區(qū)的圖像分析處理的具體例子。
當步驟S105中的依據(jù)接觸區(qū)的圖像分析處理結(jié)束，并輸出分析 結(jié)果時，處理進入步驟S107。
在步驟Sl07， CPU 23確定分析結(jié)果是否是"無關(guān)聯(lián)圖像"。
當分析結(jié)果是"無關(guān)聯(lián)圖像"時，CPU 23在步驟S107中確定分析 結(jié)果是"無關(guān)聯(lián)圖像，，(步驟S107中"是，，)，處理進入步驟S108。在步 驟S108， CPU 23控制數(shù)字信號處理單元15在觸摸屏18上顯示無任 何關(guān)聯(lián)圖像的指示。從而，結(jié)束第四關(guān)聯(lián)圖像檢索處理。
另一方面，當分析結(jié)果是預定的分類項目時，CPU 23在步驟S107 中確定分析結(jié)果不是"無關(guān)聯(lián)圖像"(步驟S107中"否")，處理進入步驟 S109。
在步驟S109, CPU 23利用分析結(jié)果(預定分類項目)作為限制條 件來檢索關(guān)聯(lián)圖像。本實施例中，在分析結(jié)果(限制條件)方面，與基 礎(chǔ)圖像具有高關(guān)聯(lián)強度的圖像被檢索為關(guān)聯(lián)圖像。
在步驟SllO， CPU 23控制數(shù)字信號處理單元15把檢索到的關(guān) 聯(lián)圖像顯示在觸摸屏18上。
例如，在圖12A-12E中所示的例子中，當分析結(jié)果為"人物，，時， 在步驟S109中的處理中，CPU 23檢索就"人物，，來說，與基礎(chǔ)圖像 Pl具有高關(guān)聯(lián)強度的圖像作為關(guān)聯(lián)圖像P2B和P3B。在步驟S110中 的處理中，CPU23顯示關(guān)聯(lián)圖像P2B和P3B。
例如，當分析結(jié)果為"地點"時，在步驟S109中的處理中，CPU23 檢索就"地點"來說，與基礎(chǔ)圖像P1具有高關(guān)聯(lián)強度的圖像作為關(guān)聯(lián) 圖像P2C和P3C。在步驟S110中的處理中，CPU 23顯示關(guān)聯(lián)圖像 P2C和P3C。
例如，當分析結(jié)果為"顏色，，時，在步驟S109中的處理中，CPU23把就"顏色"來說，與基礎(chǔ)圖像Pl具有高關(guān)聯(lián)強度的圖像檢索為關(guān)聯(lián)
圖像P2D和P3D。在步驟S110中的處理中，CPU 23顯示關(guān)聯(lián)圖像 P2D和P3D。
在步驟Slll， CPU 23把顯示圖像歷史信息保存在記錄裝置19中。
從而，結(jié)束第四關(guān)聯(lián)圖像檢索處理。
下面參考圖14中的流程圖，說明第四關(guān)聯(lián)圖像檢索處理的步驟 S105中的依據(jù)接觸區(qū)的圖像分析處理的詳細例子。
如上所述，假定一個以上的分類項目A-Z被預先設(shè)為分析候選 者，并且預先按照A-Z的順序?qū)Χ鄠€分析候選者A-Z分別賦予優(yōu)先 級。分類項目A-Z并不意味如字母表所示，存在26種分類項目。分 類項目Z表示兩種或者更大的任意多種分類項目之中，優(yōu)先級最低的 一種分類項目。
分類項目A-Z并不特別受限。不過，如果分類項目A-Z與圖 12A-12E中所示的例子相關(guān)，那么假定至少"人物"、"地點"和"顏色，， 被包括在分類項目A-Z中。此外，特定對象，特定構(gòu)成等也可被包括 在分類項目A-Z中。
如上所述，當進行觸摸基礎(chǔ)圖像的預定區(qū)域的操作時，CPU 23 在步驟S104中確定未進行觸摸整個基礎(chǔ)圖像的操作(步驟S104中 "否，，)，并執(zhí)行下面說明的處理，作為步驟S105中的依據(jù)接觸區(qū)的圖 像分析處理。
在步驟S121， CPU23分析預定區(qū)域的圖像，以確定預定區(qū)域的 分類項目是否可被識別成"A"。
當CPU 23在步驟S121中確定預定區(qū)域的分類項目可被識別成 "A，，時，在步驟S122， CPU 23把分析結(jié)果設(shè)為"A"。從而，結(jié)束圖 13中的步驟S105中的依據(jù)接觸區(qū)的圖像分析處理，處理進入步驟 S107。
另一方面，當CPU 23在步驟S121中確定難以把預定區(qū)域的分 類項目識別成"A"時，CPU23進入步驟S123。在步驟S123， CPU23分析預定區(qū)域的圖像，以確定預定區(qū)域的 分類項目是否可被識別成"B"。
當CPU 23在步驟S123中確定預定區(qū)域的分類項目可被識別成 "B"時，在步驟S124， CPU23把分析結(jié)果設(shè)為"B"。從而，結(jié)束圖13 中的步驟S105中的依據(jù)接觸區(qū)的圖像分析處理，處理進入步驟S107。
另一方面，當CPU 23在步驟S123中確定難以把預定區(qū)域的分 類項目識別成"B"時，處理進入步驟S125。
在步驟S125, CPU23分析預定區(qū)域的圖l象，以確定預定區(qū)域的 分類項目是否可^皮識別成"C"。
當CPU 23在步驟S125中確定預定區(qū)域的分類項目可^f皮識別成 "C，，時，在步驟S126， CPU 23把分析結(jié)果設(shè)為"C"。從而，結(jié)束圖 13中的步驟S105中的依據(jù)接觸區(qū)的圖像分析處理，處理進入步驟 S107。
另一方面，當CPU 23在步驟S125中確定難以把預定區(qū)域的分 類項目識別成"C"時，處理進入步驟S127。
在步驟S127， CPU23分析預定區(qū)域的圖像，以確定預定區(qū)域的 分類項目是否可被識別成"D"。
當CPU 23在步驟S127中確定預定區(qū)域的分類項目可被識別成 "D，，時，在步驟S128， CPU 23把分析結(jié)果設(shè)為"D"。從而，結(jié)束圖 13中的步驟S105中的依據(jù)接觸區(qū)的圖像分析處理，處理進入步驟 S107o
另一方面，當CPU 23在步驟S127中確定難以把預定區(qū)域的分 類項目識別成"D"時，CPU23對"E"-"Y"重復相同的處理。具體地i兌， 當CPU 23確定預定區(qū)域的分類項目能被識別成"E"-"Y"中的預定一 個分析候選者時，CPU23把該分析候選者設(shè)為分析結(jié)果。
另一方面，當CPU 23確定難以把預定區(qū)域的分類項目識別成 "E"-"Y"任意之一時,處理進入步驟S129。在步驟S129， CPU 23分 析預定區(qū)域的圖像，以確定預定區(qū)域的分類項目是否可被識別成"Z"。
當CPU 23在步驟S129中確定預定區(qū)域的分類項目可被識別成"Z，，時，在步驟S130， CPU23把分析結(jié)果設(shè)為"Z"。從而，結(jié)束圖13 中的步驟S105中的依據(jù)接觸區(qū)的圖像分析處理，處理進入步驟S107。
另一方面，當CPU 23在步驟S129中確定難以把預定區(qū)域的分 類項目識別成"Z"時，在步驟S131， CPU23把分析結(jié)果設(shè)成"無關(guān)聯(lián) 圖像"。從而，結(jié)束圖13中的步驟S105中的依據(jù)接觸區(qū)的圖像分析 處理，處理進入步驟S107。
上面參考圖14的流程圖說明了第四關(guān)聯(lián)圖像檢索處理的步驟 S105中的依據(jù)接觸區(qū)的圖像分析處理的詳細例子。
下面參考圖15的流程圖說明第四關(guān)聯(lián)圖4象檢索處理的步驟S106 中的圖像分析和檢索處理的詳細例子。
作為參考圖15說明的例子的前提，使用圖像要素模式(pattern)。 圖像要素模式是形成圖像的要素的預定模式，是用于比較兩個圖像是 否是關(guān)聯(lián)圖像關(guān)系的索引。例如，各種模式，例如其中表示人的模式， 其中圖像中表示的人數(shù)相同的模式，其中只顯示風景的模式，和其中 圖像的拍攝月份和日期(年份除夕卜)相同的模式，可被用作圖像要素模 式。
這種情況下，CPU23分析基礎(chǔ)圖像和關(guān)聯(lián)圖像候選，確定它們 的圖像要素模式是否相互一致。對可以是關(guān)聯(lián)圖像候選的所有圖像進 行這種確定處理。CPU 23檢索其圖像要素模式與基礎(chǔ)圖像的圖像要 素模式一致的關(guān)聯(lián)圖像候選作為關(guān)聯(lián)圖像。下面把這樣的一系列處理 表示成"就圖像要素模式檢索關(guān)聯(lián)圖像"。
在參考圖15說明的例子中，預先設(shè)定多個圖像要素模式"a"-"z", 并且預先按照"a"-"z"的順序，對多個圖像要素模式"a"-"z"賦予優(yōu)先 級。圖像要素模式"a"-"z"并不意味如字母表所示那樣，存在26種圖 像要素模式。具體地說，圖像要素模式"z"表示兩種或者更大的任意 多種圖像要素模式之中，優(yōu)先級最低的一種圖像要素模式。
如上所述，當進行觸摸整個基礎(chǔ)圖像的操作時，CPU23在步驟 S104中確定進行了觸摸整個基礎(chǔ)圖像的操作(步驟S104中"是")，并 執(zhí)行下面說明的處理，作為步驟S106中的圖像分析和檢索處理。在步驟S141， CPU 23檢索關(guān)聯(lián)圖像作為圖像元素模式"a"。 在步驟S142， CPU23確定是否檢索到關(guān)聯(lián)圖像。 當在記錄裝置19中存在其圖像要素模式"a"與基礎(chǔ)圖像的圖像
要素模式一致的圖像時，該圖像被檢索為關(guān)聯(lián)圖像，CPU 23在步驟
S142中確定檢索到關(guān)聯(lián)圖像(步驟S142中"是")，處理進入步驟S143。 在步驟S143， CPU 23控制數(shù)字信號處理單元15把檢索的關(guān)聯(lián)
圖像顯示在觸摸屏18上。從而，結(jié)束圖13中的步驟S106中的圖像
分析和檢索處理，處理進入步驟Slll。
另一方面，當在記錄裝置19中不存在其圖像要素模式"a"與基礎(chǔ)
圖像的圖像要素模式一致的圖像時，CPU23在步驟S142中確定未檢
索到關(guān)聯(lián)圖像(步驟S142中"否，，)，處理進入步驟S144。
在步驟S144， CPU 23檢索關(guān)聯(lián)圖像作為圖像元素模式"b"。 在步驟S145， CPU23確定是否檢索到關(guān)聯(lián)圖像。 當在記錄裝置19中存在其圖像要素模式"b"與基礎(chǔ)圖像的圖像
要素模式一致的圖像時，該圖像被檢索為關(guān)聯(lián)圖像，CPU 23在步驟
S145中確定檢索到關(guān)聯(lián)圖像(步驟S145中"是")，處理進入步驟S143。 在步驟S143， CPU 23控制數(shù)字信號處理單元15把檢索到的關(guān)
聯(lián)圖像顯示在觸摸屏18上。從而，結(jié)束圖13中的步驟S106中的圖
像分析和檢索處理，處理進入步驟Slll。
另一方面，當在記錄裝置19中不存在其圖像要素模式"b"與基礎(chǔ)
圖像的圖像要素模式一致的圖像時，CPU23在步驟S145中確定未檢
索到關(guān)聯(lián)圖像(步驟S145中"否")。對圖像要素模式"c"-"y"重復相同
的處理。
當在記錄裝置19中存在其圖像要素模式"c"-"y"中的預定模式與 基礎(chǔ)圖像的圖像要素模式一致的圖像時，該圖像被檢索為關(guān)聯(lián)圖像， 處理進入步驟S143。
在步驟S143， CPU 23控制數(shù)字信號處理單元15把檢索的關(guān)聯(lián) 圖像顯示在觸摸屏18上。從而，結(jié)束圖13中的步驟S106中的圖像 分析和檢索處理，處理進入步驟Slll。另一方面，當在記錄裝置19中不存在其圖像要素模式"c，，-"y，，任 意之一與基礎(chǔ)圖像的圖像要素模式一致的圖像時，處理進入步驟 S146。
在步驟S146， CPU 23檢索關(guān)聯(lián)圖像作為圖像元素模式"z"。
在步驟S147， CPU23確定是否檢索到關(guān)聯(lián)圖像。
當在記錄裝置19中存在其圖像要素模式"z"與基礎(chǔ)圖像的圖像 要素模式一致的圖像時，該圖像被檢索為關(guān)聯(lián)圖像，CPU 23在步驟 S147中確定檢索到關(guān)聯(lián)圖像(步驟S147中"是")，處理進入步驟S143。
在步驟S143， CPU 23控制數(shù)字信號處理單元15把檢索到的關(guān) 聯(lián)圖像顯示在觸摸屏18上。從而，結(jié)束圖13中的步驟S106中的圖 像分析和檢索處理，處理進入步驟Slll。
另一方面，當在記錄裝置19中不存在其圖像要素模式"z，，與基礎(chǔ) 圖像的圖像要素模式一致的圖像時，CPU23在步驟S147中確定未檢 索到關(guān)聯(lián)圖像(步驟S147中"否")，處理進入步驟S148。
在步驟S148， CPU 23控制數(shù)字信號處理單元15在觸摸屏18上 顯示不存在關(guān)聯(lián)圖像的指示。從而，結(jié)束圖13中的步驟S106中的圖 像分析和檢索處理，處理進入步驟Slll。
上面參考圖12A-12E說明了按照本實施例的關(guān)聯(lián)圖像檢索操作 的第四實施例。上面參考圖13-15的流程圖，說明了與第四實施例對 應的第四關(guān)聯(lián)圖像檢索處理的例子。
在上面說明的例子中，基礎(chǔ)圖像(靜止圖像或者運動圖像)被用作 充當基礎(chǔ)的圖像。在與基礎(chǔ)圖像關(guān)聯(lián)的圖像被設(shè)為關(guān)聯(lián)圖像的情況 下，基于搜索關(guān)聯(lián)圖像的規(guī)則的操作被用作關(guān)聯(lián)圖像檢索操作。
除了關(guān)聯(lián)圖像檢索操作之外，遵守在某一圖像被設(shè)為基礎(chǔ)圖像的 情況下，搜索與基礎(chǔ)圖像關(guān)聯(lián)的圖像的規(guī)則的操作(下面稱為關(guān)聯(lián)檢索 操作)也可被應用于例如安裝在音樂播放器或者盤服務(wù)器設(shè)備中的 GUI語境菜單等的顯示操作。
例如，圖16是說明應用于安裝在音樂播放器中的GUI語境菜單 的顯示操作的關(guān)聯(lián)檢索操作的操作例子的示圖。具體地說，圖16是說明在顯示成"音樂集"的GUI語境菜單被設(shè)為基礎(chǔ)(下面稱為基礎(chǔ)菜 單)的情況下，搜索與基礎(chǔ)菜單關(guān)聯(lián)的GUI語境菜單(下面稱為關(guān)聯(lián)菜 單)的操作(下面稱為關(guān)聯(lián)菜單檢索操作)的例子的示圖。顯示成"曲調(diào)，， 的GIJI語境菜單被用于12音階曲調(diào)分析等等。顯示成"流派"的GUI 語境菜單被用于諸如ID3標簽之類的信息。
例如，圖17是說明應用于安裝在光盤服務(wù)器設(shè)備中的GUI語境 菜單的顯示操作的關(guān)聯(lián)檢索操作的操作例子的示圖。具體地說，圖17 是說明關(guān)于顯示的基礎(chǔ)菜單"盤服務(wù)器"，搜索基礎(chǔ)菜單的關(guān)聯(lián)菜單的 關(guān)聯(lián)菜單檢索操作的例子的示圖。
上面說明了各種關(guān)聯(lián)圖像檢索操作，和與之對應的相應各種關(guān)聯(lián) 圖像檢索處理。
如上所述，關(guān)聯(lián)圖像檢索操作是在不提供特殊的檢索手段的情況 下，允許用戶用直觀的操作， 一個接一個地搜索關(guān)聯(lián)圖像的操作。關(guān) 聯(lián)圖像檢索操作可被應用于無具體目的地搜索關(guān)聯(lián)圖像的操作，如第 一例子中那樣，并且可被應用于檢索所需的一個圖像的目的，如第二 到第四例子中那樣。特別地，在第三例子中，即使就如此抽象、以致 用戶不能容易地想象搜索詞的分類來說，也能夠容易地搜索和檢索關(guān) 聯(lián)圖像。還能夠?qū)崿F(xiàn)對搜索的關(guān)聯(lián)圖像的終點(最后搜索的關(guān)聯(lián)圖像) 應用任意操作，以檢查搜索歷史和檢索歷史的方法。借助這樣的方法， 能夠容易地實現(xiàn)關(guān)聯(lián)圖像的重新搜索和重新檢索。
下面參考圖18A-18C說明關(guān)聯(lián)圖像檢索操作的第五例子。并參 考圖19的流程圖，說明與第五例子對應的第五關(guān)聯(lián)圖像檢索處理的 例子。
如圖18A中所示，作為前提，假定所有圖像組是分散在具有無 限空間大小的桌面上的圖像，并且所述桌面的一部分通常被顯示在觸 摸屏18上。
假定基本上與第一例子相同的操作被用作關(guān)聯(lián)圖像檢索操作本 身。用多種劃線操作搜索多個關(guān)聯(lián)圖像。具體地說，如圖18B中所示， 當從基礎(chǔ)圖像P1開始首次進行劃線操作時，關(guān)聯(lián)圖像P2和P4在首次執(zhí)行的劃線操作結(jié)束的位置，即，松開手指fl的位置，被重新顯示
在觸摸屏18上。當用戶進一步從重新顯示的關(guān)聯(lián)圖像，例如關(guān)聯(lián)圖 像P2開始，第二次進行劃線操作時，關(guān)聯(lián)圖像P3在第二次進行的劃 線操作結(jié)束的位置，即，松開手指fl的位置，被重新顯示在觸摸屏 18上。
這種情況下，重新顯示的關(guān)聯(lián)圖像P3被顯示在觸摸屏18的右 端。如果用戶試圖進一步沿向右的方式，從關(guān)聯(lián)圖像P2開始第二次 進行劃線操作，那么劃線操作的終點位置在顯示區(qū)之外。于是，難以 在第二次進行的劃線操作結(jié)束的位置，即松開手指fl的位置顯示關(guān)聯(lián) 圖像P3。
不過，在第五例子中，如圖18A中所示，作為前提，所有圖像 組分散在具有無限空間大小的桌面上。于是，原本能夠在任意地點進 行劃線操作。不過，只是因為觸摸屏18的顯示大小有限，劃線操作 才變得困難。
于是，在第五實施例中，顯示在具有無限空間大小的桌面的觸摸 屏18上的區(qū)域被定義為顯示區(qū)。按照這種定義，CPU23把由搜索關(guān) 聯(lián)圖像的操作(多次地執(zhí)行的劃線操作)檢索到的新的關(guān)聯(lián)圖像顯示在 觸摸屏18上，CPU23執(zhí)行下面說明的處理。當CPU23確定新的關(guān) 聯(lián)圖像與目前顯示的顯示區(qū)不相適應時，CPU 23執(zhí)行自動移動顯示 區(qū)的移動處理，使得新的關(guān)聯(lián)圖像被顯示在觸摸屏18的中心。當CPU 23確定新的關(guān)聯(lián)圖像與目前顯示的顯示區(qū)相適應時，CPU 23禁止移 動處理。
按照這樣的移動處理，當用戶試圖從關(guān)聯(lián)圖像P2開始，超出顯 示區(qū)執(zhí)行第二次劃線操作時，如圖18C中所示，新的關(guān)聯(lián)圖像P3被 顯示在觸摸屏18的中心的位置(實線所示的位置)，而不是松開手指fl 的位置(虛線所示的位置)。
圖19是說明與參考圖18A-18C說明的關(guān)聯(lián)圖像檢索操作的第五 例子對應的關(guān)聯(lián)圖像檢索處理(即，第五關(guān)聯(lián)圖像檢索處理)的例子 的流程圖。
39在步驟S161， CPU23確定是否選擇了基礎(chǔ)圖像。
當未選擇基礎(chǔ)圖像時，CPU 23在步驟S161中確定未選擇基礎(chǔ)圖 像(步驟S161中"否")，并使處理返回步驟S161。換句話說，在選擇 了基礎(chǔ)圖像之前，CPU 23反復執(zhí)行步驟S161中的確定處理。
之后，當選擇了基礎(chǔ)圖像時，CPU23在步驟S161中確定選擇了 基礎(chǔ)圖像(步驟S161中"是，，)，處理進入步驟S162。
在步驟S162， CPU 23控制數(shù)字圖像處理單元15移動顯示區(qū)， 使得基礎(chǔ)圖像被顯示在觸摸屏18的中心。換句話說，基礎(chǔ)圖像被顯 示在觸摸屏18的中心。
在步驟S163， CPU 23確定觸摸屏18上的基礎(chǔ)圖像的區(qū)域是否
當基礎(chǔ)圖像中的區(qū)域未被觸摸時，CPU 23在步驟S163中確定未 觸摸基礎(chǔ)圖像中的區(qū)域(步驟S163中"否，，)，使處理返回步驟S163。 換句話說，在觸摸了基礎(chǔ)圖像中的任意區(qū)域之前，CPU 23反復執(zhí)行 步驟S163中的確定處理。
之后，當觸摸了基礎(chǔ)圖像中的任意區(qū)域時，CPU23在步驟S163 中確定觸摸了基礎(chǔ)圖像中的區(qū)域(步驟S163中"是，，)，處理進入步驟 S164。
在步驟S164， CPU 23確定是否從基礎(chǔ)圖像進行劃線操作。
當未進行劃線操作時，CPU 23在步驟S164中確定未進行劃線操 作(步驟S164中"否，，)，使處理返回步驟S164，反復執(zhí)行步驟S164和 后續(xù)步驟中的處理。換句話說，在執(zhí)行劃線操作之前，CPU 23反復 執(zhí)行步驟S164中的確定處理。
之后，當執(zhí)行劃線操作時，CPU23在步驟S164中確定執(zhí)行了劃 線操作(步驟S164中"是")，處理進入步驟S165。
在步驟S165， CPU 23從記錄在記錄裝置19中的所有圖像中檢 索關(guān)聯(lián)圖像。
在步驟S166， CPU 23確定是否從觸摸屏18松開手指fl，即， 是否結(jié)束劃線操作。當劃線操作未結(jié)束時，CPU 23在步驟S166中確定未從觸摸屏 18松開手指fl(步驟S166中"否")，使處理返回步驟S166，反復執(zhí)行 步驟S166和后續(xù)步驟中的處理。只要劃線操作在繼續(xù)，CPU23就反 復執(zhí)行步驟S166中的確定處理。
之后，當劃線操作結(jié)束時，CPU23在步驟S166中確定從觸摸屏 18松開了手指fl(步驟S166中"是，，)，處理進入步驟S167。
在步驟S167, CPU23把關(guān)聯(lián)圖像顯示在虛擬桌面上松開手指fl 的位置。
應注意的是關(guān)聯(lián)圖像被顯示在虛擬桌面上，而不是觸摸屏18上。 換句話說，當在虛擬桌面上松開手指fl的位置是在顯示區(qū)之外的位置 時，在步驟S167中的處理的時候，關(guān)聯(lián)圖像不被顯示在觸摸屏18上。
在步驟S168, CPU 23把顯示圖像歷史信息保存在記錄裝置19中。
在步驟S169, CPU 23確定關(guān)聯(lián)圖像是否能夠被顯示在觸摸屏18上。
如上所述，當在虛擬桌面上釋放手指fl的位置是在顯示區(qū)之外 的位置時，如果這種狀態(tài)不被改變，那么難以把關(guān)聯(lián)圖像顯示在觸摸 屏18上。于是，在這種情況下，CPU 23在步驟S169中確定關(guān)聯(lián)圖 像不能被顯示在觸摸屏18上(步驟S169中"否")，處理進入步驟S170。
在步驟S170， CPU 23控制數(shù)字信號處理單元15移動顯示區(qū)， 使得關(guān)聯(lián)圖像被顯示在觸摸屏18的中心。換句話說，關(guān)聯(lián)圖像被顯 示在觸摸屏18的中心。例如，在圖18A-18C中所示的例子中，如圖 18C中所示，關(guān)聯(lián)圖像P3被顯示在觸摸屏18的中心。之后，處理進 入步驟S171。不過，后面說明步驟S171和后續(xù)步驟中的處理。
另一方面，當在虛擬桌面上松開手指fl的位置是在顯示區(qū)內(nèi)的 位置時，能夠在不改變狀態(tài)的情況下把關(guān)聯(lián)圖像顯示在觸摸屏18上。 于是，在這種情況下，CPU23在步驟S169中確定關(guān)聯(lián)圖像能夠被顯 示在觸摸屏18上，不執(zhí)行步驟S170中的處理。處理進入步驟S171。
在步驟S171， CPU23確定是否指示了處理的結(jié)束。除非指示了處理的結(jié)束，否則CPU 23在步驟S171中確定未指 示處理的結(jié)束(步驟S171中"否，，)，使處理返回步驟S163,重復步驟 S163和后續(xù)步驟中的處理。具體地說，每次執(zhí)行劃線操作時，反復執(zhí) 行步驟S163中的"是"，步驟S164中的"是"，S165，步驟S166中的 "是"，S167， S168，步驟S169中的"是"/步驟S169中的"否"，S170, 和步驟S171中的"否"構(gòu)成的循環(huán)處理，新的關(guān)聯(lián)圖像被顯示在觸摸 屏18的中心。通過重復劃線操作，用戶能夠反復執(zhí)行該循環(huán)處理， 好像用戶搜索關(guān)聯(lián)圖像似的。這樣的關(guān)聯(lián)圖像一般被移動到觸摸屏18 的中心。
之后，當指示了處理的結(jié)束時，CPU23在步驟S171中確定指示 了處理的結(jié)束(步驟S171中"是")，結(jié)束第五關(guān)聯(lián)圖像檢索處理。
這樣，在第五關(guān)聯(lián)圖像檢索處理中，CPU23自動移動物理尺寸 有限的觸摸屏18中的顯示區(qū)，使得具有最高的用戶再現(xiàn)優(yōu)先級的圖 像(新的關(guān)聯(lián)圖像)總是被顯示在觸摸屏18的中心。從而，不管觸摸屏 18的顯示尺寸，總是能夠再現(xiàn)大量的圖像，而不損壞圖像的大小。還 能夠使用戶經(jīng)歷在具有無限大小的桌面上搜索關(guān)聯(lián)圖像的體驗。從 而，不僅能夠采用過去的把圖像排列成矩陣形式的圖像表現(xiàn)方法，而 且能夠采用允許用戶如其所愿地排列圖像，隨后查看圖像的圖像表現(xiàn) 方法。
上面參考圖18A-18C說明了關(guān)聯(lián)圖像檢索操作的第五例子。上 面參考圖19的流程圖說明了與第五實施例對應的第五關(guān)聯(lián)圖像檢索 處理的例子。
在第五實施例中，當由搜索關(guān)聯(lián)圖像的操作(多次地執(zhí)行的劃線 操作)檢索的新的關(guān)聯(lián)圖像被顯示在觸摸屏18上時，當確定關(guān)聯(lián)圖像 與目前顯示的顯示區(qū)相適應時，禁止顯示區(qū)中的移動處理。例如，在 圖20A-20C中所示的例子中，假定關(guān)聯(lián)圖像P4是新的關(guān)聯(lián)圖像。這 種情況下，如圖20A中所示，新的關(guān)聯(lián)圖像P4不被顯示在觸摸屏18 的中心，而是被顯示在松開手指fl的位置。
在圖20A中所示的狀態(tài)下，例如，當借助諸如GUI滑動條或收縮/擴張(Pinch In/Out)之類的操作，放大或縮小當前顯示區(qū)時，如 圖20B中所示，CPU23執(zhí)行自動移動顯示區(qū)，使得新的關(guān)聯(lián)圖像P4 被顯示在觸摸屏18的中心的移動處理。CPU23放大或縮小如圖20A 中所示的顯示區(qū)。下面把這樣的一系列處理稱為放大/縮小圖像顯示處 理。
圖21是說明參考圖20A-20C說明的放大/縮小圖像顯示處理的例 子的流程圖。
在步驟S181， CPU23確定是否執(zhí)行了放大/縮小操作。
當既沒有執(zhí)行放大操作，又沒有執(zhí)行縮小操作時，CPU23在步 驟S181中確定未執(zhí)行放大/縮小操作(步驟S181中"否")，并使處理返 回步驟S181。換句話說，在執(zhí)行放大操作或者縮小操作之前，CPU 23 反復執(zhí)行步驟S181中的確定處理。
之后，當執(zhí)行了放大操作或縮小操作時，CPU 23在步驟S181 中確定執(zhí)行了放大/縮小操作(步驟S181中"是，，)，處理進入步驟S182。
在步驟S182， CPU 23控制數(shù)字信號處理單元15移動顯示區(qū)， 使得新的關(guān)聯(lián)圖像被顯示在觸摸屏18的中心。換句話說，新的關(guān)聯(lián) 圖像被顯示在觸摸屏18的中心。例如，在圖20A-20C中所示的例子 中，如圖20B中所示，關(guān)聯(lián)圖像P4被顯示在觸摸屏18的中心。
在步驟S183, CPU 23控制數(shù)字信號處理單元15放大或縮小用 于顯示的顯示區(qū)。例如，在圖20A-20C中所示的例子中，如圖20C 中所示，顯示區(qū)被放大顯示。
從而，結(jié)束放大/縮小圖像顯示處理。
通過采用這樣的放大/縮小圖像顯示處理，能夠避免當用戶進行 放大操作時，用戶最有意查看的圖像(關(guān)聯(lián)圖像)的一部分被切除，或 者圖像被隱藏在顯示區(qū)之外的缺陷。
例如，CPU 23可控制數(shù)字信號處理單元15在觸摸屏18上顯示 滾動條，并且當用戶操作滾動條時，按照所述操作調(diào)整顯示區(qū)。
例如，CPU23可檢測用兩根手指的劃線操作，并按照劃線操作 的方向和移動距離調(diào)整顯示區(qū)。例如，當CPU23檢測到在觸摸屏18上的任意點的觸摸操作時， CPU23可使觸摸屏18在圍繞當前顯示區(qū)的區(qū)域中，以地圖的形式顯 示圖像的散布狀態(tài)。此外，例如，當CPU 23檢測到在地圖上的觸摸 操作時，CPU23可移動顯示區(qū)，以把地圖的范圍設(shè)為顯示區(qū)。 上面說明的一系列處理可由硬件執(zhí)行，或者可由軟件執(zhí)行。 這種情況下，不言而喻，所述一系列處理可由圖1中所示的成像 設(shè)備執(zhí)行。此外，例如，圖22中所示的個人計算機可執(zhí)行所述一系 列處理。
在圖22中，CPU 101按照記錄在ROM(只讀存儲器)102中的程 序，或者從存儲單元108裝入RAM(隨機存取存儲器)103的程序，執(zhí) 行各種處理。當CPU 101執(zhí)行各種處理時必需的數(shù)據(jù)等也酌情保存在 RAM 103中。
CPU 101、 ROM102和RAM103經(jīng)總線104相互連接。輸入和 輸出接口 105也與總線104連接。
包括鍵盤和鼠標的輸入單元106、輸出單元107、包括硬盤的存 儲單元108和包括調(diào)制解調(diào)器和終端適配器的通信單元109與輸入和 輸出接口 105連接。通信單元109控制經(jīng)包括因特網(wǎng)在內(nèi)的網(wǎng)絡(luò)在個 人計算機和另 一設(shè)備(未示出)之間進行的通信。
驅(qū)動器IIO也酌情與輸入和輸出接口 105連接?？梢瞥橘|(zhì)111， 例如磁盤、光盤、磁光盤或半導體存儲器被酌情插入驅(qū)動器110中。 當需要時，從可移除介質(zhì)111讀取的計算機程序被安裝到存儲單元108中。
當用軟件執(zhí)行所述一系列處理時，從網(wǎng)絡(luò)或者記錄介質(zhì)，把構(gòu)成 軟件的程序安裝到包含在專用硬件中的計算機，或者通過安裝各種程
序能夠?qū)崿F(xiàn)各種功能的通用個人計算機等中。
包括這種程序的記錄介質(zhì)并不局限于獨立于如圖1或22中所示 的設(shè)備主體分發(fā)的，從而向用戶提供程序的可移除介質(zhì)(封裝介 質(zhì))lll,例如磁盤(包括軟盤)、光盤(CD-ROM(壓縮盤只讀存儲器)和 DVD(數(shù)字多功能光盤))、磁光盤(包括MD(迷你盤))或者半導體存儲器。記錄介質(zhì)可以是包括在通過預先并入設(shè)備主體中而提供給用戶
的、并且其中記錄程序的圖1中所示的程序ROM 26，或者圖22中 所示的ROM 102或存儲單元108中的硬盤等。
在本說明書中，描述記錄在記錄介質(zhì)中的程序的步驟不僅包括按 照步驟的順序按時序執(zhí)行的處理，而且包括并不總是按時序處理的并 行或者單獨執(zhí)行的處理。
上面，諸如液晶顯示面板17之類的液晶顯示裝置被描述成由按 照實施例的信息處理設(shè)備控制以顯示圖像的顯示裝置。不過，本發(fā)明 不但可應用于液晶顯示面板，而且可應用于下述顯示裝置。本發(fā)明可
應用于指令每個單元(下面把這樣的單元稱為區(qū)段)，例如形成運動圖 像的幀或場的顯示，并且其中持續(xù)預定時間形成一個區(qū)段的多個像素 由顯示元件構(gòu)成，并且至少一部分的顯示元件的顯示可被保持的顯示 裝置。下面把這樣的顯示元件稱為保持型顯示元件。其中屏幕由所述 顯示元件構(gòu)成的顯示裝置被稱為保持型顯示裝置。換句話說，液晶顯 示裝置只是保持型顯示裝置的一個例子，本發(fā)明可應用于全部保持型 顯示裝置。
此外，本發(fā)明不僅可應用于保持型顯示裝置，而且可應用于利用 有機EL(電致發(fā)光)器件作為發(fā)光元件的平面自發(fā)光顯示裝置。本發(fā)明 適用于其中圖像由多于一個的像素構(gòu)成，并且包括顯示所述像素的顯
示元件的所有顯示裝置。這樣的顯示裝置被稱為像素型顯示裝置。在 像素型顯示裝置中， 一個顯示元件不必與一個像素關(guān)聯(lián)。
換句話說，由按照實施例的信息處理設(shè)備控制，以顯示圖像的顯 示裝置只需要是能夠執(zhí)行上述一 系列處理的顯示裝置。
本申請包含和于2008年8月28日在日本專利局提交的日本優(yōu)先 權(quán)專利申請JP 2008-219120中公開的主題相關(guān)的主題，該專利申請的 整個內(nèi)容在此引為參考。
本領(lǐng)域的技術(shù)人員應明白，根據(jù)設(shè)計要求和其它因素，可產(chǎn)生各 種修改、組合、子組合和變更，只要它們在附加的權(quán)利要求或其等同 物的范圍之內(nèi)。
4權(quán)利要求
1、一種信息處理設(shè)備，包括顯示圖像的顯示裝置；接收用戶的操作輸入的操作輸入接收裝置；和顯示控制裝置，用于把一個或多個圖像排列在具有無限空間大小的虛擬桌面上，并在一部分桌面被設(shè)為顯示區(qū)的情況下，進行使顯示裝置顯示所述顯示區(qū)的顯示控制，其中當進行選擇排列在桌面上的一個或多個圖像中的預定圖像的選擇操作時，作為顯示控制，顯示控制裝置移動顯示區(qū)在桌面上的相對位置，以致預定圖像被包括在顯示區(qū)的中心。
2、 按照權(quán)利要求1所述的信息處理設(shè)備，其中當顯示在顯示區(qū)中并且不同于所述預定圖像的圖像被設(shè)為基礎(chǔ)圖像時，用戶使手指接觸所述基礎(chǔ)圖像、并且隨后在使手指與顯示裝置保持接觸的同時把手指移動到所述預定圖像的劃線操作被用作選擇操作。
3、 按照權(quán)利要求1所述的信息處理設(shè)備，其中當預定圖像也被包括在包括基礎(chǔ)圖像的顯示區(qū)中時，作為顯示控制，顯示控制裝置還禁止顯示區(qū)的移動。
4、 按照權(quán)利要求3所述的信息處理設(shè)備，其中當在顯示控制裝置禁止顯示區(qū)的移動之后，進行放大或縮小顯示區(qū)的操作時，作為顯示控制，顯示控制裝置還移動顯示區(qū)在桌面上的相對位置，以致所述預定圖像被包括在顯示區(qū)的中心，并使顯示裝置放大或縮小移動后的顯示區(qū)并進行顯示。
5、 一種信息處理方法，包括下述步驟允許顯示圖像和接收用戶的操作輸入的信息處理設(shè)備把一個或多個圖像排列在具有無限空間大小的虛擬桌面上，并在一部分桌面被設(shè)為顯示區(qū)的情況下，執(zhí)行顯示所述顯示區(qū)的顯示控制，其中在進行顯示控制時，當進行選擇排列在桌面上的一個或多個圖像中的預定圖像的選擇操作時，作為顯示控制，顯示區(qū)在桌面上的相對位置被移動，以致所述預定圖像被包括在顯示區(qū)的中心。
6、 一種使控制接收用戶的操作輸入的信息處理設(shè)備的計算機執(zhí)行控制處理的計算機程序，所述控制處理包括把一個或多個圖像排列在具有無限空間大小的虛擬桌面上，并在一部分桌面被設(shè)為顯示區(qū)的情況下，執(zhí)行顯示所述顯示區(qū)的顯示控制的顯示控制步驟，其中在進行顯示控制時，當進行選擇排列在桌面上的一個或多個圖像中的預定圖像的選捧操作時，作為顯示控制，顯示區(qū)在桌面上的相對位置被移動，以致所述預定圖像被包括在顯示區(qū)的中心。
7、 一種信息處理設(shè)備，包括被配置為顯示圖像的顯示單元；接收用戶的操作輸入的操作輸入接收單元；和被配置為顯示控制單元，被配置為把一個或多個圖像排列在具有無限空間大小的虛擬桌面上，并在一部分桌面被設(shè)為顯示區(qū)的情況下，進行使顯示單元顯示所述顯示區(qū)的顯示控制，其中當進行選擇排列在桌面上的一個或多個圖像中的預定圖像的選擇操作時，作為顯示控制，顯示控制單元移動顯示區(qū)在桌面上的相對位置，以致預定圖傳J故包括在顯示區(qū)的中心。
全文摘要
一種信息處理設(shè)備，包括顯示圖像的顯示裝置；接收用戶的操作輸入的操作輸入接收裝置；和顯示控制裝置，用于把一個或多個圖像排列在具有無限空間大小的虛擬桌面上，并在一部分桌面被設(shè)為顯示區(qū)的情況下，進行使顯示裝置顯示所述顯示區(qū)的顯示控制，其中當進行選擇排列在桌面上的一個或多個圖像中的預定圖像的選擇操作時，作為顯示控制，顯示控制裝置移動顯示區(qū)在桌面上的相對位置，以致預定圖像被包括在顯示區(qū)的中心。
文檔編號G06F3/048GK101661370SQ200910168059
公開日2010年3月3日 申請日期2009年8月19日 優(yōu)先權(quán)日2008年8月28日
發(fā)明者古江伸樹, 小澤博之, 高岡綾 申請人:索尼株式會社