本發(fā)明涉及信息處理裝置和信息處理方法。

背景技術(shù)：

可以使用裝置主體與用戶接口彼此分離的系統(tǒng)。例如，日本專利no.5737906公開了一種在可從裝置主體上拆卸并能夠執(zhí)行無線通信的操作面板上顯示操作指導圖像的技術(shù)。

日本未審專利申請公開no.2014-10769公開了一種中繼裝置，其對客戶裝置與提供業(yè)務的業(yè)務提供裝置之間的數(shù)據(jù)進行中繼。

日本未審專利申請公開no.2014-48672公開了一種生成增強現(xiàn)實圖像的移動終端，在該增強現(xiàn)實圖像中，包含與圖像形成裝置有關的狀態(tài)信息的附加信息疊加到圖像捕捉單元捕捉的圖像上。

日本未審專利申請公開no.2014-238786公開了一種技術(shù)，在用于與多個云服務器通信的通信系統(tǒng)中在用戶操作登錄的設備的顯示器上顯示用戶對每個云服務器的使用狀態(tài)。

對于使用例如圖像形成裝置的環(huán)境，通常假設一個設備被多個用戶使用。另一方面，假設將來多個設備由多個用戶使用的環(huán)境。此外，例如觸摸屏之類的用戶接口可以從設備上移除，并且用戶可以在運動中臨時使用設備。在這種情況下，可以通過設備的功能之間的協(xié)作來執(zhí)行協(xié)作功能。然而，在該情況下，候選協(xié)作功能的數(shù)量可能很大，并且用戶希望使用的協(xié)作功能不一定被優(yōu)先顯示。

技術(shù)實現(xiàn)要素：

因而，本發(fā)明的一個目的是優(yōu)先顯示預期由用戶使用的協(xié)作功能。

根據(jù)本發(fā)明的第一方面，提供了一種包括控制器的信息處理裝置。該控制器根據(jù)與已經(jīng)識別的設備有關的圖像彼此鏈接的順序，改變對使用這些設備的功能的一個或多個協(xié)作功能進行顯示的優(yōu)先級順序。

根據(jù)本發(fā)明的第二方面，該信息處理裝置進一步包括接收器，用于接收所捕捉的設備的圖像。

根據(jù)本發(fā)明的第三方面，該信息處理裝置進一步包括圖像捕捉單元，用于捕捉設備的圖像。

根據(jù)本發(fā)明的第四方面，與所述設備有關的圖像是所述圖像捕捉單元捕捉的圖像。

根據(jù)本發(fā)明的第五方面，該信息處理裝置進一步包括存儲器，用于存儲所捕捉的圖像。

根據(jù)本發(fā)明的第六方面，所述控制器讀取存儲在所述存儲器中的所述圖像并使得顯示編輯畫面，所述編輯畫面用于將所述圖像彼此鏈接。

根據(jù)本發(fā)明的第七方面，如果針對預設時段指定了所述圖像中的一個，則所述控制器使得顯示與所指定的圖像有關的設備的功能列表。

根據(jù)本發(fā)明的第八方面，如果用戶以預設的接觸力觸摸了所述圖像中的一個，則所述控制器使得顯示與所觸摸的圖像有關的設備的功能列表。

根據(jù)本發(fā)明的第九方面，如果指定了所述圖像中的一個并且如果提供了對功能進行顯示的指令，則所述控制器使得顯示與所指定的圖像有關的設備的功能列表。

根據(jù)本發(fā)明的第十方面，從所述功能列表中選擇用于執(zhí)行所述一個或多個協(xié)作功能中的一個協(xié)作功能的功能。

根據(jù)本發(fā)明的第十一方面，提供了一種信息處理裝置，所述信息處理裝置包括控制器。所述控制器根據(jù)與已經(jīng)識別的功能有關的圖像彼此鏈接的順序，改變對使用所述功能的一個或多個協(xié)作功能進行顯示的優(yōu)先級順序。

根據(jù)本發(fā)明的第十二方面，所述控制器使得所述圖像以可識別的狀態(tài)進行顯示。

根據(jù)本發(fā)明的第十三方面，所述控制器使得所述圖像三維地進行顯示。

根據(jù)本發(fā)明的第十四方面，所述圖像彼此鏈接的順序是要使用的功能執(zhí)行所述一個或多個協(xié)作功能中的一個協(xié)作功能的順序。

根據(jù)本發(fā)明的第十五方面，所述圖像彼此鏈接的順序是在執(zhí)行所述一個或多個協(xié)作功能中的一個協(xié)作功能的情況下將數(shù)據(jù)從一個設備移動到另一個設備的順序。

根據(jù)本發(fā)明的第十六方面，所述控制器使得改變圖像捕捉單元的視野，并使得顯示改變后的視野同時使得顯示所述圖像中最后鏈接的圖像。

根據(jù)本發(fā)明的第十七方面，指派給所述一個或多個協(xié)作功能中的一個協(xié)作功能的功能根據(jù)所述圖像中的位置而改變。

根據(jù)本發(fā)明的第十八方面，所述控制器使得在所述圖像中與指派給所述協(xié)作功能的功能相對應的位置處疊置并顯示接觸區(qū)域圖像。

根據(jù)本發(fā)明的第十九方面，所述控制器使得所述接觸區(qū)域圖像以可識別的狀態(tài)進行顯示。

根據(jù)本發(fā)明的第二十方面，所述控制器使得所述接觸區(qū)域圖像三維地進行顯示。

根據(jù)本發(fā)明的第二十一方面，如果指定了所述接觸區(qū)域圖像中的一個，則所述控制器改變所指定的接觸區(qū)域圖像的顯示形式。

根據(jù)本發(fā)明的第二十二方面，所述顯示形式是所述接觸區(qū)域圖像的顏色和形狀中的至少一種。

根據(jù)本發(fā)明的第二十三方面，如果就鏈接順序而言指定了緊接在與要取消的目標功能相對應的圖像之前的圖像，則取消所述一個或多個協(xié)作功能中的、與所述目標功能所對應的圖像有關的一個協(xié)作功能。

根據(jù)本發(fā)明的第二十四方面，所述控制器使得顯示由用戶執(zhí)行的用于將所述圖像彼此鏈接的操作的軌跡。

根據(jù)本發(fā)明的第二十五方面，所述圖像根據(jù)用戶提供的語音指令而彼此鏈接。

根據(jù)本發(fā)明的第二十六方面，提供了一種信息處理方法，所述信息處理方法包括：根據(jù)與已經(jīng)識別的設備有關的圖像彼此鏈接的順序，改變對使用所述設備的功能的一個或多個協(xié)作功能進行顯示的優(yōu)先級順序。

根據(jù)本發(fā)明的第二十七方面，提供了一種信息處理方法，所述信息處理方法包括：根據(jù)與已經(jīng)識別的功能有關的圖像彼此鏈接的順序，改變對使用所述功能的一個或多個協(xié)作功能進行顯示的優(yōu)先級順序。。

根據(jù)本發(fā)明的第一、七、二十六或二十七方面，能夠優(yōu)先顯示預期由用戶使用的協(xié)作功能。

根據(jù)本發(fā)明的第二方面，能夠通過使用接收的圖像顯示協(xié)作功能。

根據(jù)本發(fā)明的第三方面，能夠顯示使用圖像被捕捉的設備的功能的協(xié)作功能。

根據(jù)本發(fā)明的第四方面，從可視的角度能夠容易地識別圖像被捕捉的設備與相同類型的另一個設備之間的區(qū)別。

根據(jù)本發(fā)明的第五或第六方面，能夠通過使用存儲在存儲器中的圖像顯示協(xié)作功能。

根據(jù)本發(fā)明的第七至第十方面中的一個，提供了表示設備的功能的信息。

根據(jù)本發(fā)明的第十二方面，以提高的可視性顯示了設備。

根據(jù)本發(fā)明的第十三方面，與二維顯示關于設備的圖像相比，提高了與設備有關的圖像的可視性。

根據(jù)本發(fā)明的第十四方面，在不執(zhí)行除了將圖像彼此鏈接的操作以外的特殊操作的情況下，能夠指定要使用的功能的順序。

根據(jù)本發(fā)明的第十五方面，在不執(zhí)行除了將圖像彼此鏈接的操作以外的特殊操作的情況下，能夠指定數(shù)據(jù)移動的順序。

根據(jù)本發(fā)明的第十六方面，能夠捕捉不位于包括與最后鏈接的圖像有關的設備的視野內(nèi)的設備的圖像。

根據(jù)本發(fā)明的第十七方面，能夠單獨指定多個功能中要用于協(xié)作功能的功能。

根據(jù)本發(fā)明的第十八方面，能夠以可識別的狀態(tài)顯示與各個位置相對應的功能。

根據(jù)本發(fā)明的第十九方面，以提高的可視性顯示了接觸區(qū)域圖像。

根據(jù)本發(fā)明的第二十方面，與二維顯示接觸區(qū)域圖像相比，提高了接觸區(qū)域圖像的可視性。

根據(jù)本發(fā)明的第二十一或第二十二方面，與不改變接觸區(qū)域圖像的顯示形式相比，能夠容易地確定是否已經(jīng)指定了接觸區(qū)域圖像。

根據(jù)本發(fā)明的第二十三方面，能夠在不執(zhí)行除了指定最后鏈接的圖像操作以外的特殊操作的情況下取消特定的協(xié)作功能。

根據(jù)本發(fā)明的第二十四方面，提供了表示彼此鏈接的圖像的信息。

根據(jù)本發(fā)明的第二十五方面，能夠在不執(zhí)行手動輸入操作的情況下將圖像彼此鏈接。

附圖說明

將基于以下附圖詳細描述本發(fā)明的實施方式，在附圖中：

圖1是例示根據(jù)本發(fā)明的第一示例性實施方式的圖像形成系統(tǒng)的框圖；

圖2是例示根據(jù)第一示例性實施方式的圖像形成裝置的框圖；

圖3是例示根據(jù)第一示例性實施方式的服務器的框圖；

圖4是例示根據(jù)第一示例性實施方式的終端裝置的框圖；

圖5是例示圖像形成裝置的外觀的示意圖；

圖6是例示設備功能管理表的一個例子的圖；

圖7是例示協(xié)作功能管理表的一個例子的圖；

圖8是例示在終端裝置上顯示的功能顯示畫面的一個例子的圖；

圖9是例示彼此協(xié)作的目標設備的圖；

圖10a和10b是例示根據(jù)第一示例性實施方式的在終端裝置上顯示的畫面的一個例子的圖；

圖11a和11b是例示根據(jù)第一示例性實施方式的在終端裝置上顯示的畫面的一個例子的圖；

圖12是例示根據(jù)第一修改例的設備功能管理表的一個例子的圖；

圖13a和13b是例示根據(jù)第一修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖14a和14b是例示根據(jù)第一修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖15a和15b是例示根據(jù)第一修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖16a至16c是例示根據(jù)第二修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖17a至17c是例示根據(jù)第二修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖18是例示根據(jù)第二修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖19a和19b是例示根據(jù)第三修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖20a和20b是例示根據(jù)第四修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖21是例示根據(jù)第一示例性實施方式的在圖像形成系統(tǒng)中執(zhí)行的連接過程的順序圖；

圖22是例示根據(jù)第二示例性實施方式的服務器的框圖；

圖23是例示協(xié)作功能管理表的一個例子的圖；

圖24a至24c是例示根據(jù)第二示例性實施方式的在終端裝置上顯示的畫面的一個例子的圖；

圖25a和25b是例示根據(jù)第二示例性實施方式的在終端裝置上顯示的畫面的一個例子的圖；

圖26a至26c是例示根據(jù)第五修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖27是例示根據(jù)第五修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖28是例示根據(jù)第五修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖29a和29b是例示根據(jù)第六修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖30a和30b是例示根據(jù)第六修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖31a至31c是例示根據(jù)第六修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖32a和32b是例示根據(jù)第七修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖33a和33b是例示根據(jù)第八修改例的在終端裝置上顯示的畫面的一個例子的圖；

圖34a和34b是例示根據(jù)第十修改例的在終端裝置上顯示的畫面的一個例子的圖；以及

圖35是例示在終端裝置上顯示的畫面的一個例子的圖。

具體實施方式

第一示例性實施方式

將參照圖1描述根據(jù)本發(fā)明的第一示例性實施方式的充當信息處理系統(tǒng)的圖像形成系統(tǒng)。圖1例示了根據(jù)第一示例性實施方式的圖像形成系統(tǒng)的一個例子。

根據(jù)第一示例性實施方式的圖像形成系統(tǒng)包括：作為設備一個例子的圖像形成裝置10；作為設備一個例子的終端裝置12；服務器14；以及作為信息處理裝置的一個例子的終端裝置16。圖像形成裝置10、終端裝置12和16以及服務器14通過例如網(wǎng)絡的通信路徑n彼此連接。當然，圖像形成裝置10、終端裝置12和16以及服務器14可以通過不同的通信路徑連接至其他裝置。在圖1所示的例子中，兩個設備(圖像形成裝置10和終端裝置12)包含在圖像形成系統(tǒng)中。圖像形成系統(tǒng)可以包括一個或更多個設備。此外，圖像形成系統(tǒng)可以包括多個服務器14和多個終端裝置16。

圖像形成裝置10是具有圖像形成功能的裝置。具體來說，圖像形成裝置10是具有掃描功能、打印功能、復印功能和傳真功能中至少一個的裝置。圖像形成裝置10還具有將數(shù)據(jù)發(fā)送到另一個裝置并從該另一個裝置接收數(shù)據(jù)的功能。

終端裝置12和16中的每一個是例如個人計算機(pc)、平板pc、智能電話或移動電話之類的終端，并且具有將數(shù)據(jù)發(fā)送到另一個裝置并從該另一個裝置接收數(shù)據(jù)的功能。當使用例如圖像形成裝置10的設備時，終端裝置16例如充當用戶接口單元(ui單元)。

服務器14是對各個設備的功能進行管理的裝置。例如，服務器14管理通過多個功能之間的協(xié)作而執(zhí)行的協(xié)作功能。服務器14還具有將數(shù)據(jù)發(fā)送到另一個裝置并從該另一個裝置接收數(shù)據(jù)的功能。

在圖1所示的例子中，圖像形成裝置10和終端12作為設備的例子而包含在圖像形成系統(tǒng)中，但這僅作為一個例子。其他裝置，例如，諸如投影儀之類顯示設備、電話、手表和監(jiān)視照相機可以作為設備包含在圖像形成系統(tǒng)中。當然，圖像形成裝置10和終端裝置12不一定包含在圖像形成系統(tǒng)中。

服務器14可以針對每個用戶管理對該用戶可用的功能。例如，用戶購買的功能是對該用戶可用的功能，并且服務器14可以管理每個用戶的功能購買歷史。當然，服務器14不僅可以管理是否購買的功能，而且可以管理免費使用的功能、附加更新功能和管理者管理的特殊功能。功能購買過程例如由服務器14執(zhí)行。當然，功能購買過程可以由另一個裝置執(zhí)行。

在根據(jù)第一示例性實施方式的圖像形成系統(tǒng)中，指定了通過多個功能之間的協(xié)作而執(zhí)行的多個協(xié)作功能，并且根據(jù)優(yōu)先級順序顯示與該多個協(xié)作功能有關的信息。

下面，將具體描述根據(jù)第一示例性實施方式的包含在圖像形成系統(tǒng)中的各個裝置。

首先，將參照圖2詳細描述圖像形成裝置10的構(gòu)成。圖2例示了圖像形成裝置10的構(gòu)成。

通信單元18是通信接口，并且具有將數(shù)據(jù)發(fā)送到另一個裝置的功能和從另一個裝置接收數(shù)據(jù)的功能。通信單元18可以是具有無線通信功能的通信接口，或者可以是具有有線通信功能的通信接口。

圖像形成單元20執(zhí)行與圖像形成有關的功能。具體來說，圖像形成裝置20執(zhí)行掃描功能、打印功能、復印功能和傳真功能中的至少一個。當執(zhí)行掃描功能時，讀取文檔并生成掃描數(shù)據(jù)(圖像數(shù)據(jù))。當執(zhí)行打印功能時，在例如紙張的記錄介質(zhì)上打印圖像。當執(zhí)行復印功能時，讀取文檔并將其打印在記錄介質(zhì)上。當執(zhí)行傳真功能時，通過傳真發(fā)送或接收圖像數(shù)據(jù)。此外，可以執(zhí)行包含多個功能的協(xié)作功能。例如，可以執(zhí)行作為掃描功能和發(fā)送(傳送)功能的組合的掃描并傳送功能。當執(zhí)行掃描并傳送功能時，讀取文檔，生成掃描數(shù)據(jù)(圖像數(shù)據(jù))，并將掃描數(shù)據(jù)發(fā)送到目的地(例如，諸如終端裝置16之類的外部裝置)。當然，該協(xié)作功能僅僅是作為一個例子，并且可以執(zhí)行另一種協(xié)作功能。

存儲器22是例如硬盤或固態(tài)驅(qū)動器(ssd)的存儲裝置。存儲器22存儲例如表示圖像形成指令的信息(例如作業(yè)信息)、要打印的圖像數(shù)據(jù)、通過執(zhí)行掃描功能而生成的掃描數(shù)據(jù)、表示另一個設備的地址的設備地址信息、表示服務器14的地址的服務器地址信息、各種控制信息以及各種程序。當然，這些信息和數(shù)據(jù)可以存儲在不同的存儲裝置中或者存儲在一個存儲裝置中。

ui單元24是用戶接口單元并且包括顯示器和操作單元。顯示器是例如液晶顯示器之類的顯示裝置。操作單元是例如觸摸屏或鍵盤的輸入裝置。圖像形成裝置10不一定包括ui單元24，并且可以包括作為硬件來代替顯示器的硬件用戶接口單元(硬件ui單元)。硬件ui單元例如是專用于輸入數(shù)字的硬件鍵盤(例如，數(shù)字鍵盤)或?qū)Ｓ糜谥甘痉较虻挠布I盤(例如，方向指示鍵盤)。

控制器26對圖像形成裝置10的各個單元的操作進行控制。

接下來，將參照圖3詳細描述服務器14的構(gòu)成。圖3例示了服務器14的構(gòu)成。

通信單元28是通信接口，并且具有將數(shù)據(jù)發(fā)送到另一個裝置的功能和從另一個裝置接收數(shù)據(jù)的功能。通信單元28可以是具有無線通信功能的通信接口，或者可以是具有有線通信功能的通信接口。

存儲器30是例如硬盤或ssd的存儲裝置。存儲器30例如存儲設備功能信息32、協(xié)作功能信息34、各種數(shù)據(jù)、各種程序、表示各個設備的地址的設備地址信息以及表示服務器14的地址的服務器地址信息。當然，這些信息和數(shù)據(jù)可以存儲在不同的存儲裝置中或者存儲在一個存儲裝置中。存儲在存儲器30中的設備功能信息32和協(xié)作功能信息34可以周期性地或者以預定的定時提供給終端裝置16，因而可以對存儲在終端裝置16中的信息進行更新。下面，將描述設備功能信息32和協(xié)作功能信息34。

設備功能信息32是表示包含在圖像形成系統(tǒng)中的各個設備(例如，圖像形成裝置10和終端裝置12)的功能的信息。例如，設備功能信息32是如下信息，其表示用于識別設備的設備識別信息與用于識別設備的一個或更多個功能的一條或更多條功能識別信息之間的對應性。設備識別信息例如包括設備id、設備的名稱、表示設備類型的信息、型號和位置信息。功能識別信息例如包括功能id和功能的名稱。例如，如果特定圖像形成裝置10具有掃描功能、打印功能、復印功能和掃描并傳送功能，則圖像形成裝置10的設備識別信息與表示掃描功能的功能識別信息、表示打印功能的功能識別信息、表示復印功能的功能識別信息、和表示掃描并傳送功能的功能識別信息相關聯(lián)。通過參照設備功能信息32來指定(識別)各個設備的功能。

協(xié)作功能信息34是表示協(xié)作功能的信息，每個協(xié)作功能通過多個功能之間的協(xié)作執(zhí)行。通過多個功能之間的協(xié)作執(zhí)行一個或更多個協(xié)作功能。每個協(xié)作功能可以通過一個設備(例如，圖像形成裝置10或終端裝置12)的多個功能之間的協(xié)作來執(zhí)行，或者可以通過多個設備(例如，圖像形成裝置10和終端裝置12)的多個功能之間的協(xié)作來執(zhí)行。提供操作指令的終端裝置(在本示例性實施方式中，為終端裝置16)可以包含在待識別的設備中，并且該終端裝置的功能可以用作協(xié)作功能的一部分。

協(xié)作功能信息34例如是表示如下信息之間的對應性的信息：表示用于識別彼此協(xié)作以執(zhí)行一個或更多個協(xié)作功能的各個功能的多條功能識別信息的組合的信息、用于識別該一個或多個協(xié)作功能的協(xié)作功能識別信息、表示用于該一個或多個協(xié)作功能的各個功能的鏈接順序的信息以及表示該一個或多個協(xié)作功能的顯示優(yōu)先級順序的信息。協(xié)作功能識別信息例如包括協(xié)作功能id和協(xié)作功能的名稱。顯示的優(yōu)先級順序是在終端裝置16上顯示與該一個或多個協(xié)作功能有關的信息(例如，協(xié)作功能識別信息)的順序。

在使得多個設備彼此協(xié)作的情況下，協(xié)作功能信息34是表示要通過多個設備的多個功能之間的協(xié)作而執(zhí)行的一個或多個協(xié)作功能的信息，并且是表示如下信息之間的對應性的信息：表示用于識別彼此協(xié)作以執(zhí)行一個或更多個協(xié)作功能的各個設備的多條設備識別信息的組合的信息、協(xié)作功能識別信息、表示用于該一個或多個協(xié)作功能的各個設備的鏈接順序的信息以及表示該一個或多個協(xié)作功能的顯示優(yōu)先級順序的信息。

協(xié)作功能可以是通過多個不同功能之間的協(xié)作執(zhí)行的功能，或者可以是通過相同功能的協(xié)作執(zhí)行的功能。協(xié)作功能可以是在不協(xié)作的情況下就不可用的功能。在不協(xié)作的情況下就不可用的功能可以是通過將彼此協(xié)作的目標設備的功能之中的相同功能或不同功能組合起來而變得可用的功能。例如，具有打印功能的設備(打印機)和具有掃描功能的設備(掃描儀)之間的協(xié)作實現(xiàn)了作為協(xié)作功能的復印功能。亦即，打印功能與掃描功能之間的協(xié)作實現(xiàn)了復印功能。在該情況下，復印功能與打印功能和掃描功能的組合相關聯(lián)。在協(xié)作功能信息34中，例如，用于識別作為協(xié)作功能的復印功能的協(xié)作功能識別信息與用于識別具有打印功能的設備的設備識別信息和用于識別具有掃描功能的設備的設備識別信息的組合相關聯(lián)。

存儲器30可以存儲功能購買歷史信息。功能購買歷史信息是表示各個用戶的功能購買歷史的信息，亦即，表示各個用戶購買的功能的信息。例如，功能購買歷史信息是表示用于識別用戶的用戶識別信息與表示用戶購買的功能的功能識別信息之間的對應性的信息。用戶識別信息例如是諸如用戶id和用戶名的用戶賬戶信息。用戶購買的功能是對用戶可用的功能。通過參考功能購買歷史信息而指定各個用戶購買的功能，即，對各個用戶可用的功能。例如每當用戶購買功能時更新功能購買歷史信息。

控制器36對服務器14的各個單元的操作進行控制?？刂破?6包括指定單元38。

指定單元38接收用于識別設備的設備識別信息，并指定存儲在存儲器30中的設備功能信息32中的與設備識別信息相關聯(lián)的一個或多個功能的一條或多條功能識別信息。因而，指定了該設備的該一個或多個功能。例如，設備識別信息從終端裝置16發(fā)送到服務器14，然后指定單元38指定與該設備識別信息相關聯(lián)的一個或多個功能的一條或多條功能識別信息。例如，與該一個或多個功能有關的信息(例如，功能識別信息和功能解釋信息)從服務器14發(fā)送到終端裝置16，并顯示在終端裝置16上。因而，與該設備識別信息指定的設備的該一個或多個功能有關的信息顯示在終端裝置16上。

此外，指定單元38接收用于識別彼此協(xié)作的目標設備的多條設備識別信息，并指定存儲在存儲器30中的協(xié)作功能信息34中的與該多條設備識別信息的組合相關聯(lián)的一個或多個協(xié)作功能的一條或多條協(xié)作功能識別信息。因而，指定了通過彼此協(xié)作的目標設備的功能之間的協(xié)作而執(zhí)行的該一個或多個協(xié)作功能。例如，多條設備識別信息從終端裝置16發(fā)送到服務器14，然后指定單元38指定與該多條設備識別信息相關聯(lián)的一個或多個協(xié)作功能的一條或多條協(xié)作功能識別信息。例如，與該一個或多個協(xié)作功能有關的信息(例如，協(xié)作功能識別信息和協(xié)作功能解釋信息)從服務器14發(fā)送到終端裝置16，并顯示在終端裝置16上。因而，與要由該多條設備識別信息所識別的多個設備執(zhí)行的該一個或多個協(xié)作功能有關的信息顯示在終端裝置16上。

此外，指定單元38參考該協(xié)作功能信息34，并基于用于協(xié)作功能的各個功能的鏈接順序而確定與該協(xié)作功能有關的信息的顯示的優(yōu)先級順序。例如，可以通過使得多個功能彼此協(xié)作而實現(xiàn)多個協(xié)作功能。在該情況下，基于各個功能的鏈接順序而確定顯示與該各個協(xié)作功能有關的信息的優(yōu)先級順序。根據(jù)該優(yōu)先級順序在終端裝置16上顯示與該協(xié)作功能有關的信息。例如，在終端裝置16上顯示與設備有關的圖像，并且由用戶將這些圖像彼此鏈接。在使得多個設備的多個功能彼此協(xié)作的情況下，用戶將與該多個設備有關的多個圖像彼此鏈接。這些圖像鏈接的順序?qū)谶@些功能的鏈接順序。指定單元38基于這些圖像的鏈接順序指定對與協(xié)作功能有關的信息進行顯示的優(yōu)先級順序。

在對功能購買歷史進行管理的情況下，指定單元38可以接收用于對用戶進行識別的用戶識別信息，并且可以指定存儲在存儲器30中的功能購買歷史信息中的與用戶識別信息相關聯(lián)的各個功能的多條功能識別信息。因而，指定(識別)了一組用戶購買的功能，亦即，一組對用戶可用的功能。例如，用戶識別信息從終端裝置16發(fā)送到服務器14，并且指定單元38指定與該用戶識別信息相關聯(lián)的各個功能的多條功能識別信息。例如，各個功能的這些功能識別信息(例如，表示功能的名稱的多條信息)從服務器14發(fā)送到終端裝置16，并顯示在終端裝置16上。因而，用于識別對該用戶識別信息所指定的用戶可用的功能的多條信息(功能識別信息)顯示在終端裝置16上。例如，指定單元38接收設備識別信息和用戶識別信息，指定設備功能信息32中的與設備識別信息相關聯(lián)的一個或多個功能的一條或多條功能識別信息，并且還指定功能購買歷史信息中的與用戶識別信息相關聯(lián)的一個或多個功能的一條或多條功能識別信息。因而，指定了設備識別信息所指定的設備具有的并且對該用戶識別信息指定的用戶可用的一個或多個功能。例如，表示該一個或多個功能的該一條或多條功能識別信息從服務器14發(fā)送到終端裝置16，并顯示在終端裝置16上。

控制器36可執(zhí)行功能購買處理并且可以管理購買的歷史。例如，如果用戶購買了支付功能，則控制器36對用戶應用收費過程，并創(chuàng)建表示該購買的歷史的功能購買歷史信息。

接下來，將參照圖4詳細描述終端裝置16的構(gòu)成。圖4例示了終端裝置16的構(gòu)成。

通信單元40是通信接口，并且具有將數(shù)據(jù)發(fā)送到另一個裝置的功能和從另一個裝置接收數(shù)據(jù)的功能。通信單元40可以是具有無線通信功能的通信接口，或者可以是具有有線通信功能的通信接口。

作為圖像捕捉單元的照相機42捕捉對象的圖像，并由此生成圖像數(shù)據(jù)(例如靜止圖像數(shù)據(jù)或運動圖像數(shù)據(jù))。另選地，作為使用終端裝置16的照相機42的替代，由連接到例如網(wǎng)絡之類通信路徑的外部照相機捕捉的圖像數(shù)據(jù)可以由通信單元40接收，并可顯示在ui單元46上，使得可以對圖像數(shù)據(jù)進行操作。

存儲器44是例如硬盤或ssd的存儲裝置。存儲器44存儲多種程序、多條數(shù)據(jù)、服務器14的地址信息、各個設備的多條地址信息(例如，圖像形成裝置10和終端裝置12的地址信息)、與識別出的彼此協(xié)作的目標設備有關的信息以及與協(xié)作功能有關的信息。

ui單元46是用戶接口單元并且包括顯示器和操作單元。顯示器是例如液晶顯示器之類的顯示裝置。操作單元是例如觸摸屏、鍵盤或鼠標的輸入裝置。當然，可以使用既作為顯示器又作為操作單元的用戶接口(例如，觸摸屏，或者顯示電子鍵盤等的顯示器)。

控制器48對終端裝置16的各個單元的操作進行控制。控制器48充當例如顯示控制器(控制器)，并使得ui單元46的顯示器顯示多種信息。

ui單元46的顯示器例如顯示照相機42捕捉的圖像、與識別為待使用的目標設備(例如，協(xié)作的目標設備)有關的圖像等。與設備有關的圖像可以是表示照相機42捕捉的該設備的圖像(靜止圖像或運動圖像)，或者可以是示意性表示該設備的圖像(例如，圖標)。示意性表示該設備的圖像的數(shù)據(jù)可以存儲在服務器14中，并且從服務器14提供到終端裝置16，或者可以預先存儲在終端設備16中。例如，在通過多個設備之間的協(xié)作執(zhí)行協(xié)作功能的情況下，由照相機42捕捉該多個設備的圖像，并且這些設備的圖像顯示在ui單元46的顯示器上。當用戶將與彼此協(xié)作的目標設備有關的圖像鏈接時，指定由目標設備執(zhí)行的一個或多個協(xié)作功能，并且根據(jù)基于鏈接順序的優(yōu)先級順序?qū)⑴c該協(xié)作功能有關的信息顯示在ui單元46的顯示器上。

充當設備的終端裝置12例如具有與終端裝置16類似的構(gòu)成。終端裝置12不一定包括照相機42。

上述設備功能信息32可以存儲在終端裝置16的存儲器44中。在該情況下，設備功能信息32不一定存儲在服務器14的存儲器30中。此外，上述協(xié)作功能信息34可以存儲在終端裝置16的存儲器44中。在該情況下，協(xié)作功能信息34不一定存儲在服務器14的存儲器30中。終端裝置16的控制器48可以包括上述指定單元38，該指定單元38可以通過基于設備識別信息識別出設備而指定該設備的功能，并且可以指定要通過多個功能之間的協(xié)作而執(zhí)行的協(xié)作功能。在該情況下，服務器14不一定包括指定單元38。在創(chuàng)建功能購買歷史信息的情況下，功能購買歷史信息可以存儲在終端裝置16的存儲器44中。在該情況下，功能購買歷史信息不一定存儲在服務器14的存儲器30中。終端裝置16的控制器48可以管理用戶的功能購買歷史。在該情況下，服務器14的控制器36不一定具有其管理功能。終端裝置16的控制器48可以基于用戶識別信息指定對用戶可用的功能。另選地，設備功能信息32和協(xié)作功能信息34可以存儲在例如圖像形成裝置10和終端裝置12的設備中，并且例如圖像形成裝置10和終端裝置12的設備可以包括指定單元38。亦即，服務器14的指定單元38的處理可以在服務器14中執(zhí)行，可以在終端裝置16中執(zhí)行，或者可以在例如圖像形成裝置10和終端裝置12的設備中執(zhí)行。

在該第一示例性實施方式中，例如，應用增強現(xiàn)實(ar)技術(shù)來獲得設備識別信息并識別要使用的目標設備。例如，應用ar技術(shù)獲得彼此協(xié)作的目標設備的多條設備識別信息并識別這些目標設備。使用根據(jù)相關技術(shù)的ar技術(shù)。例如，使用其中使用諸如二維條形碼之類標記的基于標記的ar技術(shù)、其中使用圖像識別技術(shù)的無標記ar技術(shù)、其中使用位置信息的位置信息ar技術(shù)等。當然，可以獲得設備識別信息并可以在不應用ar技術(shù)的情況下識別要使用的目標設備。例如，在連接至網(wǎng)絡的設備的情況下，可以基于其ip地址或者通過讀取其設備id來識別該設備。

下面，將參照圖5詳細描述獲得設備的設備識別信息的過程。作為一個例子，將描述獲得圖像形成裝置10的設備識別信息的情形。圖5示意性例示了圖像形成裝置10的外觀。這里，將描述通過應用基于標記的ar技術(shù)來獲得設備識別信息的處理。圖像形成裝置10的殼體附接有例如二維條形碼的標記50。標記50是通過對圖像形成裝置10的設備識別信息進行編碼而獲得的信息。用戶激活終端裝置16的照相機42，并利用照相機42捕捉附接至要使用的圖像形成裝置10的標記50的圖像。因而，生成表示標記50的圖像數(shù)據(jù)。該圖像數(shù)據(jù)例如從終端裝置16發(fā)送到服務器14。在服務器14中，控制器36對該圖像數(shù)據(jù)所表示的標記圖像執(zhí)行解碼處理，由此提取設備識別信息。因而，識別出要使用的圖像形成裝置10(附接有其圖像已被捕捉的標記50的圖像形成裝置10)。服務器14的指定單元38指定設備功能信息32中的與所提取的設備識別信息相關聯(lián)的功能的多條功能識別信息。因而，指定了要使用的圖像形成裝置10的功能。

另選地，終端裝置16的控制器48可以對表示標記50的圖像數(shù)據(jù)執(zhí)行解碼處理以提取設備識別信息。在該情況下，所提取的設備識別信息從終端裝置16發(fā)送到服務器14。服務器14的指定單元38指定設備功能信息32中與從終端裝置16發(fā)送的設備識別信息相關聯(lián)的功能的多條功能識別信息。在設備功能信息32存儲在終端裝置16的存儲器44中的情況下，終端裝置16的控制器48可以指定設備功能信息32中的與所提取的設備識別信息相關聯(lián)的功能的多條功能識別信息。

標記50可以包括圖像形成裝置10的功能的已編碼功能識別信息。在該情況下，通過對表示標記50的圖像數(shù)據(jù)執(zhí)行解碼處理來提取圖像形成裝置10的設備識別信息，并且還提取圖像形成裝置10的功能的多條功能識別信息。因而，指定了圖像形成裝置10，并且還指定了圖像形成裝置10的功能。該解碼處理可以由服務器14或終端裝置16執(zhí)行。

在通過多個設備之間的協(xié)作執(zhí)行協(xié)作功能的情況下，捕捉這些設備的標記的圖像以獲得這些設備的多條設備識別信息，由此指定協(xié)作功能。

例如在通過應用無標記ar技術(shù)獲得設備識別信息的情況下，用戶通過使用終端裝置16的照相機42捕捉要使用的設備(例如，圖像形成裝置10)的全部外觀或部分外觀的圖像。當然，有用的是，通過捕捉設備的外觀的圖像，獲得用于指定要使用的設備的信息，例如設備的名稱(例如，商業(yè)名稱)或型號。作為捕捉的結(jié)果，生成表示要使用的設備的全部外觀或部分外觀的外觀圖像數(shù)據(jù)。外觀圖像數(shù)據(jù)例如從終端裝置16發(fā)送到服務器14。在服務器14中，控制器36基于該外觀圖像數(shù)據(jù)識別要使用的設備。例如，服務器14的存儲器30針對每個設備存儲表示代表了設備的全部外觀或部分外觀的外觀圖像數(shù)據(jù)與設備的設備識別信息之間的對應性的外觀圖像對應性信息?？刂破?6例如將從終端裝置16接收的外觀圖像數(shù)據(jù)與包含在外觀圖像對應性信息中的每條外觀圖像數(shù)據(jù)進行比較，并基于比較結(jié)果指定要使用的設備的設備識別信息。例如，控制器36從外觀圖像數(shù)據(jù)(其是從終端裝置16接收的)中提取要使用的設備的外觀的特征，指定表示與包含在外觀圖像對應性信息中的外觀圖像數(shù)據(jù)組中的外觀的特征相同或相似的特征的外觀圖像數(shù)據(jù)，并指定與該外觀圖像數(shù)據(jù)相關聯(lián)的設備識別信息。因而，識別出要使用的設備(其圖像被照相機42捕捉的設備)。另選地，在捕捉了示出設備的名稱(例如，商業(yè)名稱)或型號的圖像并且生成表示該名稱或型號的外觀圖像數(shù)據(jù)的情況下，可以基于該外觀圖像數(shù)據(jù)所表示的名稱或型號來識別要使用的設備。服務器14的指定單元38指定設備功能信息32中與所指定的設備識別信息相關聯(lián)的各個功能的多條功能識別信息。因而，指定了要使用的設備(例如，圖像形成裝置10)的功能。

另選地，終端裝置16的控制器48可以將表示要使用的設備(例如，圖像形成裝置10)的全部外觀或部分外觀的外觀圖像數(shù)據(jù)與包含在外觀圖像對應性信息中的每條外觀圖像數(shù)據(jù)進行比較，并且可以基于比較結(jié)果指定要使用的設備的設備識別信息。外觀圖像對應性信息可以存儲在終端裝置16的存儲器44中。在該情況下，終端裝置16的控制器48參考存儲在終端裝置16的存儲器44中的外觀圖像對應性信息，由此指定要使用的設備的設備識別信息。另選地，終端裝置16的控制器48可以從服務器14獲得外觀圖像對應性信息，并且可以參考該外觀圖像對應性信息，以指定要使用的設備的設備識別信息。

在通過多個設備之間的協(xié)作執(zhí)行協(xié)作功能的情況下，通過捕捉彼此協(xié)作的各個設備的全部外觀或者部分外觀的圖像獲得各個設備的多條設備識別信息，由此指定協(xié)作功能。

例如，在通過應用位置信息ar技術(shù)獲得設備識別信息的情況下，通過使用全球定位系統(tǒng)(gps)功能獲得表示設備(例如，圖像形成裝置10)的位置的位置信息。例如，每個設備具有g(shù)ps功能，并獲得表示該設備的位置的設備位置信息。終端裝置16將表示獲得設備位置信息的請求的信息輸出到要使用的設備，并從設備接收該設備的設備位置信息作為對該請求的響應。例如，設備位置信息從終端裝置16發(fā)送到服務器14。在服務器14中，控制器36基于該設備位置信息識別要使用的設備。例如，服務器14的存儲器30針對每個設備存儲表示代表了設備的位置的設備位置信息與該設備的設備識別信息之間的對應性的位置對應性信息?？刂破?6在位置對應性信息中指定與從終端裝置16接收的設備位置信息相關聯(lián)的設備識別信息。因而，識別出要使用的設備。服務器14的指定單元38在設備功能信息32中指定與所指定的設備識別信息相關聯(lián)的各個功能的多條功能識別信息。因而，識別出要使用的設備(例如，圖像形成裝置10)的功能。

終端裝置16的控制器48可以在位置對應性信息中指定與要使用的設備的位置信息相關聯(lián)的設備識別信息。位置對應性信息可以存儲在終端裝置16的存儲器44中。在該情況下，終端裝置16的控制器48參考存儲在終端裝置16的存儲器44中的位置對應性信息，由此指定要使用的設備的設備識別信息。另選地，終端裝置16的控制器48可以從服務器14獲得位置對應性信息，并且可以參考該位置對應性信息，以指定要使用的設備的設備識別信息。

在通過多個設備之間的協(xié)作執(zhí)行協(xié)作功能的情況下，獲得這些設備的設備位置信息，并基于這些設備位置信息指定這些設備的設備識別信息。因而，指定了協(xié)作功能。

下面，將詳細描述根據(jù)第一示例性實施方式的圖像形成裝置。

首先，將參照圖6詳細描述設備功能信息32。圖6例示了作為設備功能信息32的設備功能管理表的一個例子。例如，在設備功能管理表中，設備id、表示設備的名稱(例如，設備的類型)的信息、表示設備的一個或多個功能的信息(功能識別信息)、和圖像id彼此關聯(lián)。設備id和設備的名稱對應于設備識別信息的一個例子。圖像id是用于識別示意性表示一個設備的圖像(例如，圖標)的圖像識別信息的一個例子。設備功能管理表不一定包括圖像id。例如，具有設備id“b”的設備是一種多功能外圍設備(mfp，具有多個圖像形成功能的圖像形成裝置)并具有打印功能、掃描功能等。用于識別示意性表示該設備的圖像的圖像id與該設備相關聯(lián)。示意性表示該設備的圖像的數(shù)據(jù)例如存儲在服務器14的存儲器30中。

例如，利用ar技術(shù)，獲得用于識別要使用的設備的設備id。服務器14的指定單元38通過參考設備功能管理表而指定設備的名稱、一個或多個功能、以及與該設備id相關聯(lián)的圖像id。因而，識別出要使用的設備。例如，表示設備的名稱的信息和示意性表示該設備的圖像的數(shù)據(jù)從服務器14發(fā)送到終端裝置16，然后它們顯示在終端裝置16的ui單元46上。示意性表示該設備的圖像顯示為與該設備有關的圖像。當然，作為示意性表示該設備的圖像的代替，由照相機42捕捉的圖像可以顯示在終端裝置16的ui單元46上。如果用戶在終端裝置16的ui單元46上指定了與該設備有關的圖像(例如，照相機42捕捉的圖像或者示意性表示該設備的圖像)，則與該設備的功能有關的信息(例如，功能識別信息或者功能解釋信息)可以從服務器14發(fā)送到終端裝置16，并且可以顯示在終端裝置16的ui單元46上。

接下來，將參照圖7詳細描述協(xié)作功能信息34。圖7例示了作為協(xié)作功能信息34的協(xié)作功能管理表的一個例子。例如，在協(xié)作功能管理表中，表示設備id的組合的信息、表示彼此協(xié)作的目標設備的名稱(類型)的信息、表示一個或多個協(xié)作功能的信息(協(xié)作功能識別信息)、表示鏈接順序的信息以及表示優(yōu)先級順序的信息彼此關聯(lián)。鏈接順序?qū)谂c設備有關的圖像鏈接的順序。優(yōu)先級順序是對與協(xié)作功能有關的信息進行顯示的優(yōu)先級順序。例如，具有設備id“a”的設備是個人計算機(pc)，具有設備id“b”的設備是mfp。pc(a)與mfp(b)之間的協(xié)作實現(xiàn)了例如作為協(xié)作功能的掃描并傳送功能和打印功能。掃描并傳送功能是將通過掃描由mfp(b)生成的圖像數(shù)據(jù)傳送到pc(a)的功能。打印功能是將存儲在pc(a)中的數(shù)據(jù)(例如，圖像數(shù)據(jù)或文檔數(shù)據(jù))發(fā)送到mfp(b)并由mfp(b)對該數(shù)據(jù)進行打印的功能。例如，如果鏈接是從mep(b)到pc(a)，亦即，如果鏈接是從關于mfp(b)的圖像到關于pc(a)的圖像，則掃描并傳送功能的優(yōu)先級順序為“1”，打印功能的優(yōu)先級順序為“2”。在該情況下，以高于與打印功能有關的信息的優(yōu)先級顯示與掃描并傳送功能有關的信息。另一方面，如果鏈接是從pc(a)到mep(b)，亦即，如果鏈接是從關于pc(a)的圖像到關于mfp(b)的圖像，則打印功能的優(yōu)先級順序為“1”，掃描并傳送功能的優(yōu)先級順序為“2”。在該情況下，以高于與掃描并傳送功能有關的信息的優(yōu)先級顯示與打印功能有關的信息。

接下來，將參照圖8詳細描述在終端裝置16的ui單元46上顯示的畫面。圖8例示了功能顯示畫面的一個例子。功能顯示畫面是在使用單個設備的情況下在終端裝置16的ui單元46上顯示的畫面。

例如，利用上述基于標記的ar技術(shù)、無標記ar技術(shù)和位置信息ar技術(shù)中的任意一種，獲得要使用的設備(例如，圖像形成裝置10)的設備識別信息并識別出設備，并且指定表示與設備識別信息相關聯(lián)的各個功能的多條功能識別信息，亦即，指定表示要使用的設備(識別出的設備)的各個功能的多條功能識別信息。另選地，可以指定表示與使用目標設備的用戶的用戶識別信息相關聯(lián)的各個功能的多條功能識別信息，亦即，可以指定表示對用戶可用的各個功能的多條功能識別信息。這些信息作為功能顯示畫面而顯示在終端裝置16的ui單元46上。另選地，由于指定了要使用的設備的功能，因此可以指定在銷售的功能中要使用的設備所不具有的功能。表示要使用的設備所不具有的各個功能的多條功能識別信息可以顯示在功能顯示畫面上。

在圖8中所示的功能顯示畫面52上，作為功能識別信息的一個例子而顯示了表示功能a的按鈕圖像54、表示功能b的按鈕圖像56和表示功能c的按鈕圖像58。功能a是要使用的設備(通過使用ar技術(shù)等識別出的設備)的功能，并且是對用戶可用的功能，亦即，該用戶購買的功能。功能b是要使用的設備的功能，并且是對用戶不可用的功能，亦即，該用戶未購買的功能。用戶通過購買功能b而變得能夠使用功能b。功能c是要使用的設備所不具有的功能，亦即，與要使用的設備不兼容的功能。根據(jù)按鈕圖像表示的功能是否為要使用的設備的功能，終端裝置16的控制器48可以改變按鈕圖像的顯示形式。此外，根據(jù)按鈕圖像表示的功能是否為對用戶可用的功能，控制器48可以改變按鈕圖像的顯示形式。例如，控制器48可以改變每個按鈕圖像的顏色或形狀。在圖8所示的例子中，按鈕圖像54、56和58以不同顏色顯示。例如，表示要使用的設備所具有的并且對用戶可用的功能的按鈕圖像(例如，表示功能a的按鈕圖像54)以藍色顯示。表示要使用的設備所具有的并且對用戶不可用的功能的按鈕圖像(例如，表示功能b的按鈕圖像56)以黃色顯示。表示要使用的設備所不具有的功能的按鈕圖像(例如，表示功能c的按鈕圖像58)以灰色顯示。另選地，控制器48可改變按鈕圖像54、56和58的形狀，或者可改變功能顯示名稱的字體。當然，可以用另一種方法改變顯示形式。因而，用戶能夠以增強的可視性識別每個功能的可用性。

例如，如果用戶通過使用終端裝置16指定了表示功能a的按鈕圖像54并提供指令執(zhí)行功能a，則表示執(zhí)行功能a的指令的執(zhí)行指令信息從終端裝置16發(fā)送到目標設備。執(zhí)行指令信息包括用于執(zhí)行功能a的控制數(shù)據(jù)、要經(jīng)受功能a的處理的圖像數(shù)據(jù)等。響應于對執(zhí)行指令信息的接收，目標設備根據(jù)該執(zhí)行指令信息執(zhí)行功能a。例如，如果目標設備是圖像形成裝置10并且如果功能a是掃描并傳送功能，則圖像形成裝置10的圖像形成單元20執(zhí)行掃描功能以生成掃描數(shù)據(jù)(圖像數(shù)據(jù))。隨后，掃描數(shù)據(jù)從圖像形成裝置10發(fā)送到所設置的目的地(例如，終端裝置16)。

如果用戶通過使用終端裝置16指定了表示功能b的按鈕圖像56并提供指令購買功能b，則執(zhí)行購買處理。如果購買處理由服務器14執(zhí)行，則終端裝置16訪問服務器14。因而，在終端裝置16的ui單元46上顯示作為使得用戶能夠使用功能b的信息的用于購買功能b的畫面(例如，網(wǎng)站)。通過在畫面上進行購買過程，用戶能夠使用功能b。例如，終端裝置16存儲網(wǎng)絡瀏覽器的程序。借助網(wǎng)絡瀏覽器，用戶能夠從終端裝置16訪問服務器14。當用戶通過使用網(wǎng)絡瀏覽器訪問服務器14時，在終端裝置16的ui單元46上顯示功能購買畫面(例如，網(wǎng)站)，并且用戶能夠通過該網(wǎng)站購買該功能。當然，可以由于服務器14不同的服務器執(zhí)行該購買處理。另選地，作為使得用戶能夠使用功能b的信息，用于向管理員等請求使用功能b的使用許可請求畫面(例如，網(wǎng)站)可以顯示在終端裝置16的ui單元46上。如果用戶通過使用許可請求畫面向管理員等請求使用功能b的許可并且如果獲得了該許可，則用戶能夠使用功能b。

下面，將詳細描述通過應用ar技術(shù)使多個功能彼此協(xié)作的方法。

參照圖9，將描述通過應用基于標記的ar技術(shù)或者無標記的ar技術(shù)而識別多個設備并使得多個設備的多個功能彼此協(xié)作的方法。圖9例示了彼此協(xié)作的目標設備的一個例子。例如，假設圖像形成裝置10和終端裝置12用作目標設備。例如，圖像形成裝置10是多功能外圍設備(mfp)，終端裝置12是個人計算機(pc)。圖像形成裝置10和終端裝置12是在真實空間存在的設備。終端裝置16是在真實空間存在并用于使多個功能彼此協(xié)作的裝置。例如，終端裝置16是諸如智能電話或移動電話的移動終端裝置。

例如，諸如二維條形碼的標記50附接至圖像形成裝置10的殼體，諸如二維條形碼的標記60附接至終端裝置12(pc)的殼體。標記60是通過對終端裝置12的設備識別信息進行編碼而獲得的信息。在使用基于標記的ar技術(shù)或者無標記的ar技術(shù)的情況下，用戶通過使用終端裝置16(例如，智能電話)的照相機42捕捉作為彼此協(xié)作的目標設備的圖像形成裝置10和終端裝置12的圖像。在圖9所示的例子中，在圖像形成裝置10和終端裝置12都處于照相機42的視野中的狀態(tài)下捕捉圖像形成裝置10和終端裝置12二者的圖像。因而，生成表示標記50和60的圖像數(shù)據(jù)并將該圖像數(shù)據(jù)從終端裝置16發(fā)送到服務器14。在服務器14中，控制器36對該圖像數(shù)據(jù)執(zhí)行解碼處理以提取圖像形成裝置10的設備識別信息和終端裝置12的設備識別信息，由此識別圖像形成裝置10和終端裝置12。另選地，可以生成表示圖像形成裝置10和終端裝置12二者外觀的外觀圖像數(shù)據(jù)，并可將該外觀圖像數(shù)據(jù)從終端裝置16發(fā)送到服務器14。在該情況下，在服務器14中，控制器36通過參考外觀圖像對應性信息指定圖像形成裝置10的設備識別信息和終端裝置12的設備識別信息。因而，識別出圖像形成裝置10和終端裝置12。當然，可以由終端裝置16執(zhí)行用于識別彼此協(xié)作的目標設備的處理。

設備顯示畫面62顯示在終端裝置16的ui單元46的顯示器上，并且與圖像形成裝置10有關的設備圖像64以及與終端裝置12有關的設備圖像66顯示在設備顯示畫面62上。設備圖像64和66可以是照相機42捕捉的設備(圖像形成裝置10和終端裝置12)的圖像(具有捕捉時的原始尺寸或者增大或減小的尺寸)，或者可以是與識別出的設備有關并且預先準備的圖像數(shù)據(jù)(并非通過捕捉而獲得的圖像而是示意圖像(例如，圖標))。如上所述，可以使用由外部照相機捕捉的表示設備的圖像。

例如，在使用通過捕捉設備的圖像獲得的圖像數(shù)據(jù)的情況下，在圖像中反映當前狀態(tài)下設備的外觀(例如，包括附接至設備的擦痕、便條、貼紙等的外觀)，因此用戶能夠更清楚地以可視方式識別出與相同類型的另一個設備的不同。

在使用示意圖像的情況下，例如將示意圖像的數(shù)據(jù)從服務器14發(fā)送到終端裝置16。例如，當識別出圖像形成裝置10時，服務器14的指定單元38通過參考圖6中所示的設備功能管理表(設備功能信息32)指定與圖像形成裝置10有關的示意圖像。示意圖像的數(shù)據(jù)從服務器14發(fā)送到終端裝置16，并且該示意圖像作為設備圖像64顯示在設備顯示畫面62上。這同樣適用于與終端裝置12有關的設備圖像66。作為示意圖像的設備圖像64和66的數(shù)據(jù)可以預先存儲在終端裝置16中。在該情況下，當識別出圖像形成裝置10時，存儲在終端裝置16中的設備圖像64顯示在設備顯示畫面62上。這同樣適用于終端裝置12。示意圖像的數(shù)據(jù)可以存儲在除了服務器14和終端裝置16以外的裝置中。

當識別出一個設備時，可以將表示該設備的名稱的信息從服務器14發(fā)送到終端裝置16，并且設備的名稱可以顯示在終端裝置16的設備顯示畫面62上。在圖9所示例子中，圖像形成裝置10是mfp，其名稱為“mfp(b)”。終端裝置12是pc，其名稱為“pc(a)”。

如果即使應用了ar技術(shù)等仍未能識別出作為圖像捕捉目標的設備，則表示目標設備的設備圖像不一定顯示在設備顯示畫面62上。因而，可以提高所識別的設備的可視性。例如，如果存在識別出的設備和未識別出的設備并且如果各個設備的圖像由照相機42捕捉，則不顯示表示未識別設備的設備圖像。因而，在將表示所識別出的設備的設備圖像與表示未識別出設備的設備圖像區(qū)分的同時進行顯示，因此，可以提高識別出設備的可視性。另選地，可以按高亮方式顯示表示識別出的設備的設備圖像(例如，設備圖像64和66)。例如，表示識別出的設備的設備圖像可以用特定顏色顯示，可以通過將設備圖像的邊緣高亮來顯示，可以通過將設備圖像放大來顯示，可以三維方式顯示，或者可以通過使設備圖像閃爍來顯示。因而，可以提高所識別出的設備的可視性。

利用用戶在設備顯示畫面62上對設備圖像64和66的操作，圖像形成裝置10和終端裝置12被指定為彼此協(xié)作的目標設備，并且指定了通過在圖像形成裝置10與終端裝置12之間的協(xié)作而執(zhí)行的協(xié)作功能。根據(jù)與對設備圖像的操作順序相對應的優(yōu)先級順序在終端裝置16的ui單元46上顯示與協(xié)作功能有關的信息。

下面，將參照圖10a至圖10b詳細描述指定協(xié)作功能的操作。

圖10a至圖10b例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。例如，假設圖像形成裝置10和終端裝置12被識別為彼此協(xié)作的目標設備。如圖10a所示，設備顯示畫面62顯示在終端裝置16的ui單元46上，并且設備圖像64和66顯示在設備顯示畫面62上。在該狀態(tài)下，用戶通過使用指示器(例如，用戶的手指、筆或觸筆(stylus))將表示目標設備的設備圖像彼此鏈接。終端裝置16的控制器48對指示器在設備顯示畫面62上的觸摸進行檢測，并對指示器在設備顯示畫面62上的移動進行檢測。例如，如箭頭68所示，用戶通過使用操作器在設備顯示畫面62上觸摸設備圖像64，并在設備顯示畫面62上將操作器移動到設備圖像66，由此將設備圖像64鏈接至設備圖像66。因而，與設備圖像64有關的圖像形成裝置10(mfp(b))以及與設備圖像66有關的終端裝置12(pc(a))被指定為彼此協(xié)作的目標設備，并且指定了鏈接順序。設備圖像鏈接的順序?qū)谠撴溄禹樞?。在圖10a所示的例子中，鏈接從設備圖像64到設備圖像66，亦即，從圖像形成裝置10(mfp(b))到終端裝置12(pc(a))。表示設備鏈接順序的信息從終端裝置16發(fā)送到服務器14。終端裝置16的控制器48可以使表示用戶執(zhí)行的操作器的移動軌跡的圖像顯示在設備顯示畫面62上。在將設備彼此鏈接后，終端裝置16的控制器48可以使表示該軌跡的預設的直線等顯示在設備顯示畫面62上。

當按上述方式指定了彼此協(xié)作的目標設備(例如，圖像形成裝置10和終端裝置12)時，服務器14的指定裝置38在圖7中所示的協(xié)作功能管理表(協(xié)作功能信息34)中指定與pc(a)和mfp(b)的組合相關聯(lián)的協(xié)作功能。因而，指定了通過pc(a)與mfp(b)之間的協(xié)作執(zhí)行的協(xié)作功能。當用戶指定了設備的鏈接順序時，指定單元38指定協(xié)作功能管理表中與鏈接順序相關聯(lián)的優(yōu)先級順序。具體而言，參照圖7，由于pc(a)和mfp(b)被指定為彼此協(xié)作的目標設備，因此由這些設備執(zhí)行的協(xié)作功能是掃描并傳送功能和打印功能。此外，由于鏈接是從mfp(b)到pc(a)(b→a)，因此掃描并傳送功能的優(yōu)先級順序是“1”，打印功能的優(yōu)先級順序是“2”。

與指定的協(xié)作功能有關的信息以及與指定的優(yōu)先級順序有關的信息從服務器14發(fā)送到終端裝置16。終端裝置16的控制器48根據(jù)優(yōu)先級順序使ui單元46顯示與協(xié)作功能有關的信息作為與候選協(xié)作功能有關的信息。

例如，如圖10b所示，終端裝置16的控制器48使ui單元46顯示協(xié)作功能顯示畫面70，并在協(xié)作功能顯示畫面70上顯示與候選協(xié)作功能有關的信息。由于掃描并傳送功能的優(yōu)先級順序是“1”，打印功能的優(yōu)先級順序是“2”，因此根據(jù)比與打印功能有關的信息更高(例如，之上)的優(yōu)先級顯示與掃描并傳送有關的信息。例如，作為與掃描并傳送功能有關的信息，顯示對掃描并傳送功能的解釋“將mfp(b)掃描的數(shù)據(jù)傳送到pc(a)”。此外，作為與打印功能有關的信息，顯示對打印功能的解釋“在pc(a)中打印數(shù)據(jù)”。

如果用戶指定了協(xié)作功能并且提供了執(zhí)行指令，則執(zhí)行所指定的協(xié)作功能。例如，如果用戶按下了“是”按鈕，則執(zhí)行與“是”按鈕有關的協(xié)作功能。此外，在協(xié)作功能顯示畫面70上顯示“后退”按鈕。如果用戶按下了“后退”按鈕，則停止對設備進行連接的處理。

指定協(xié)作功能的處理和指定優(yōu)先級順序的處理可以由終端裝置16執(zhí)行。

可以指定彼此協(xié)作的目標設備，并且可以通過圍繞設備圖像繪制圓圈而代替在設備圖像之間移動操作器來指定其鏈接順序。例如，繪制操作的順序?qū)阪溄禹樞颉Ａ磉x地，可以根據(jù)用戶提供的語音指令來指定彼此協(xié)作的目標設備及其鏈接順序。

圖11a和11b例示了另一個操作的一個例子。例如，如圖11a中所示，用戶通過使用操作器在設備顯示畫面62上觸摸設備圖像66，并沿著箭頭72所示的方向?qū)⒉僮髌饕苿拥皆O備圖像64，由此將設備圖像66鏈接至設備圖像64。因而，與設備圖像66有關的終端裝置12(pc(a))以及與設備圖像64有關的圖像形成裝置10(mfp(b))被指定為彼此協(xié)作的目標設備，并且還指定了鏈接順序。在該例子中，鏈接是從設備圖像66到設備圖像64，亦即，從終端裝置12(pc(a))到圖像形成裝置10(mfp(b))。參照圖7中所示的協(xié)作功能管理表，打印功能的優(yōu)先級順序是“1”，掃描并傳送功能的優(yōu)先級順序是“2”。在該情況下，如圖11b所示，在協(xié)作功能顯示畫面74上以比關于掃描并傳送功能的信息更高(例如，之上)的優(yōu)先級顯示關于打印功能的信息。

如上所述，根據(jù)第一示例性實施方式，與設備有關的設備圖像彼此鏈接，由此指定使用這些設備的功能的協(xié)作功能。根據(jù)圖像的鏈接順序，亦即，設備的鏈接順序，改變與協(xié)作功能有關的信息的顯示順序。設備的鏈接順序也視為要在各個設備中使用的功能的順序，或者彼此協(xié)作的設備之間數(shù)據(jù)的移動順序。對設備進行鏈接的操作(對圖像進行鏈接的操作)也視為對功能的順序或者數(shù)據(jù)的移動順序進行指定的操作。因此，作為根據(jù)鏈接順序改變與協(xié)作功能有關的信息的顯示順序的結(jié)果，優(yōu)先顯示與預期用戶要使用的協(xié)作功能有關的信息。換言之，優(yōu)先顯示與用戶更可能使用的協(xié)作功能有關的信息。例如，如果鏈接是從mfp(b)到pc(a)，則預期用戶將使用如下的協(xié)作功能：“先使用mfp(b)的功能然后將數(shù)據(jù)從mfp(b)傳送到pc(a)”。另一方面，如果鏈接是從pc(a)到mfp(b)，則預期用戶將使用如下的協(xié)作功能：“先使用pc(a)的功能然后將數(shù)據(jù)從pc(a)傳送到mfp(b)”。因此，作為根據(jù)圖像的鏈接順序改變與協(xié)作功能有關的信息的顯示順序的結(jié)果，優(yōu)先顯示與用戶更可能使用的協(xié)作功能有關的信息。此外，在除了對設備圖像進行鏈接的操作以外沒有特殊操作的情況下指定要使用的功能的順序和數(shù)據(jù)的移動順序，并且顯示與用戶預期使用的協(xié)作功能有關的信息。

下面，將描述第一示例性實施方式的修改例。

第一修改例

下面，將描述第一修改例。在第一修改例中，指派給協(xié)作功能的設備的功能根據(jù)與設備有關的設備圖像中的位置而變化。當用戶指定了設備圖像中的特定位置時，優(yōu)先顯示與使用該特定位置所對應功能的協(xié)作功能有關的信息。下面，將詳細描述第一修改例。

圖12例示了根據(jù)第一修改例的設備功能管理表的一個例子。根據(jù)第一修改例的設備功能管理表的數(shù)據(jù)作為設備功能信息32存儲在服務器14中。在根據(jù)第一修改例的設備功能管理表中，例如，設備id、表示設備的名稱(例如，類型)的信息、表示圖像中的位置的信息、表示與該位置相對應的功能的信息(功能識別信息)、以及圖像id彼此關聯(lián)。圖像中的位置是與設備有關的設備圖像中的特定位置(特定部分)，例如設備圖像中的示例性表示設備的特定位置或照相機捕捉的設備圖像中的特定位置。不同的功能與圖像中的各個特定位置相關聯(lián)。

圖13a和圖13b例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。例如，假設圖像形成裝置10(mfp(b))和終端裝置12(pc(a))被識別為彼此協(xié)作的目標設備。如圖13a所示，設備顯示畫面62顯示在終端裝置16的ui單元46上，并且設備圖像64和66顯示在設備顯示畫面62上。例如，在設備圖像64中，打印功能與mfp(b)的機體部分所對應的特定位置(局部圖像76)相關聯(lián)。在設備圖像64中，掃描功能與mfp(b)的文檔蓋、文檔玻璃和自動文檔饋送器所對應的特定位置(局部圖像78)相關聯(lián)。在設備圖像64中，裝訂(stapling)功能與后處理器所對應的特定位置(局部圖像80)相關聯(lián)。裝訂功能是裝訂輸出紙張的功能。在設備圖像66中，數(shù)據(jù)存儲功能與pc(a)的機體部分所對應的特定位置(局部圖像82)相關聯(lián)。在設備圖像66中，畫面顯示功能與pc(a)的顯示器所對應的特定位置(局部圖像84)相關聯(lián)。數(shù)據(jù)存儲功能是對從另一個裝置接收的數(shù)據(jù)在pc(a)中進行存儲的功能。畫面顯示功能是對從另一個裝置接收的數(shù)據(jù)在pc(a)中進行顯示的功能。

終端裝置16的控制器48可以使與設備圖像中的特定位置相關聯(lián)的功能(例如，打印，掃描等)的名稱顯示在設備顯示畫面62上。因而，向用戶提供了清楚地表示特定位置和功能之間的對應性的信息。當然，不一定要顯示功能的名稱。

在第一修改例中，如果用戶指定了與設備圖像中的功能相關聯(lián)的位置，則將與所指定的位置相關聯(lián)的功能指定為彼此協(xié)作的目標功能。用戶通過使用指示器來鏈接與表示彼此協(xié)作的目標設備的設備圖像中的功能相關聯(lián)的特定位置(局部圖像)。例如，如箭頭86所示，用戶通過使用操作器在設備顯示畫面62上觸摸局部圖像78，并將操作器移動到局部圖像84，由此將局部圖像78鏈接到局部圖像84。因而，將與包括局部圖像78的設備圖像64有關的mfp(b)以及與包括局部圖像84的設備圖像66有關的pc(a)指定為彼此協(xié)作的目標設備，指定與局部圖像78相對應的掃描功能以及與局部圖像84相對應的畫面顯示功能，并指定其鏈接順序。局部圖像鏈接的順序?qū)谠撴溄禹樞?。在圖13a所示的例子中，鏈接從局部圖像78到局部圖像84，亦即，從mfp(b)到pc(a)。掃描功能和畫面顯示功能指定為用于協(xié)作功能的功能。表示設備的鏈接順序的信息和表示用戶在設備圖像中指定的特定位置的信息從終端裝置16發(fā)送到服務器14。

當識別了彼此協(xié)作的目標設備(例如，pc(a)和mfp(b))時，服務器14的指定裝置38在圖7中所示的協(xié)作功能管理表中指定通過pc(a)與mfp(b)之間的協(xié)作而實現(xiàn)的協(xié)作功能。此外，指定單元38參考圖12中所示的設備功能管理表指定與用戶在設備圖像中指定的特定位置相關聯(lián)的功能。此外，在通過pc(a)與mfp(b)之間的協(xié)作實現(xiàn)的協(xié)作功能中，指定單元38將更高優(yōu)先級指派給使用與用戶指定的位置相關聯(lián)的功能的協(xié)作功能，并將更低優(yōu)先級指派給不使用這些功能的協(xié)作功能。

與按上述方式指定的協(xié)作功能有關的信息以及表示優(yōu)先級順序的信息從服務器14發(fā)送到終端裝置16。終端裝置16的控制器48根據(jù)優(yōu)先級順序使ui單元46顯示與協(xié)作功能有關的信息作為與候選協(xié)作功能有關的信息。

例如，如圖13b所示，終端裝置16的控制器48使ui單元46的顯示器顯示協(xié)作功能顯示畫面88，并在協(xié)作功能顯示畫面88上顯示與候選協(xié)作功能有關的信息。由于用戶按順序指定了掃描功能和畫面顯示功能，因此以比與其他協(xié)作功能有關的信息更高(例如，之上)的優(yōu)先級顯示與作為通過掃描功能和掃描顯示功能之間的協(xié)作而執(zhí)行的協(xié)作功能的掃描、傳送和顯示功能有關的信息。例如，按照比與掃描、傳送和存儲功能(其是通過掃描功能和數(shù)據(jù)存儲功能之間的協(xié)作執(zhí)行的協(xié)作功能)有關的信息更高的優(yōu)先級顯示掃描、傳送和顯示功能有關的信息。掃描、傳送和顯示功能是將mfp(b)通過掃描生成的數(shù)據(jù)傳送到pc(a)并在pc(a)的屏幕上顯示該數(shù)據(jù)的功能。掃描、傳送和存儲功能是將mfp(b)通過掃描生成的數(shù)據(jù)傳送到pc(a)并在pc(a)中存儲該數(shù)據(jù)的功能。在圖13b所示例子中，對各個協(xié)作功能的解釋被顯示為與各個協(xié)作功能有關的信息。

根據(jù)第一修改例，在彼此協(xié)作的目標設備中的每一個具有多個功能的情況下，單獨指定這些功能，并且優(yōu)先顯示與使用所指定的功能的協(xié)作功能有關的信息。因而，優(yōu)先顯示預期由用戶使用的協(xié)作功能。

圖14a和14b例示了第一修改例的另一個例子。圖14b和14b是例示在終端裝置16的ui單元46上顯示的畫面的一個例子的圖。終端裝置16的控制器48將可識別的接觸區(qū)域圖像疊置在設備圖像中被指派特定功能的特定位置(局部圖像)上。在圖14a所示例子中，接觸區(qū)域圖像90疊置在局部圖像76上，接觸區(qū)域圖像92疊置在局部圖像78上，接觸區(qū)域圖像94疊置在局部圖像80上。此外，接觸區(qū)域圖像96疊置在局部圖像82上，接觸區(qū)域圖像98疊置在局部圖像84上。例如，每個接觸區(qū)域圖像是半透明的或者不透明的圖像，并且具有圓形、橢圓或矩形的形狀。通過在被指派特定功能的位置顯示接觸區(qū)域圖像，這些位置高亮顯示，因此用戶可以容易地確定被指派功能的位置。亦即，用戶可以容易地確定將作為要用于協(xié)作功能的功能而作用的位置。

終端裝置16的控制器48可以改變與用于協(xié)作功能的功能相對應的接觸區(qū)域圖像或者用戶指定的接觸區(qū)域圖像的顯示形式(例如，顏色和形狀中的至少一個)，使得將該接觸區(qū)域圖像與其他接觸區(qū)域圖像區(qū)分開。例如，如圖14b所示，如果局部圖像78通過箭頭100指示的操作鏈接到局部圖像84，則與局部圖像78相對應的接觸區(qū)域圖像92以及與局部圖像84相對應的接觸區(qū)域圖像98以與其他接觸區(qū)域圖像的顏色不同的顏色顯示。

圖15a和15b例示了第一修改例的另一個例子。圖15a和15b是例示在終端裝置16的ui單元46上顯示的畫面的一個例子的圖。在識別出的設備具有多個功能的情況下，可以指定同一設備的多個功能以指定要通過該多個功能之間的協(xié)作執(zhí)行的協(xié)作功能。例如，如圖15a所示，假設用戶沿箭頭102、104和106所示的方向?qū)D像進行鏈接。在該情況下，局部圖像78、84、82和76按該順序鏈接。服務器14的指定單元38指定指派給局部圖像78、84、82和76的功能(掃描功能、畫面顯示功能、數(shù)據(jù)存儲功能和打印功能)、指定按鏈接順序使用這些功能的協(xié)作功能，并給予該協(xié)作功能高優(yōu)先級。因而，與該協(xié)作功能有關的信息以高于與其他協(xié)作功能有關的信息的優(yōu)先級顯示。圖15b例示了協(xié)作功能顯示畫面108，并且與該協(xié)作功能有關的信息優(yōu)先顯示在協(xié)作功能顯示畫面108上。給予優(yōu)先級的協(xié)作功能例如是如下功能：“將mfp(b)通過掃描生成的數(shù)據(jù)傳送到pc(a)、在pc(a)的屏幕上顯示數(shù)據(jù)、調(diào)整pc(a)中的顏色、將數(shù)據(jù)存儲在pc(a)中并將該數(shù)據(jù)傳送到mfp(b)、以及在mfp(b)中打印數(shù)據(jù)”。

第二修改例

下面，將參照圖16a至17c描述第二修改例。圖16a至圖17c例示了在終端裝置16上顯示的畫面的一個例子。在第二修改例中，如果保持按下設備圖像超過預定時段，則模式轉(zhuǎn)換到多功能選擇模式(用于指定多個功能的模式)。

同樣在第二修改例中，圖像形成裝置10(mfp(b))和終端裝置12(pc(a))被識別為彼此協(xié)作的目標設備，并且設備圖像64和66顯示在終端裝置16中的設備顯示畫面62上，如圖16a所示。例如，假設用戶通過使用操作器持續(xù)指定設備圖像64超過了預定時段。亦即，假設設備圖像64被長按。在圖16a所示的例子中，長按附圖標記110所示的部分。在該情況下，如圖16b所示，功能選擇畫面112顯示在終端裝置16的ui單元46上，mfp(b)的功能列表顯示在功能選擇畫面112上。在圖16b所示的例子中，顯示了各個功能(掃描、打印、裝訂和傳真發(fā)送)的名稱。例如，如果用戶指定了設備圖像64，則與設備圖像64有關的mfp(b)的設備識別信息從終端裝置16發(fā)送到服務器14。在服務器14中，參考設備功能管理表指定mfp(b)的功能。與這些功能有關的信息(例如，功能識別信息)從服務器14發(fā)送到終端裝置16，并顯示在終端裝置16上。當然，可以在終端裝置16中指定mfp(b)的功能。在終端裝置16的用戶接口能夠檢測在多個階段用戶執(zhí)行的操作的接觸力的情況下，可以響應于對更大接觸力的檢測(例如，檢測預定的接觸力)而顯示功能選擇畫面112。

在圖16b中所示的功能選擇畫面112上，用戶選擇用于協(xié)作功能的多個功能。例如，假設選擇了(1)掃描功能和(4)傳真發(fā)送功能。在該情況下，在終端裝置16的ui單元46上顯示確認畫面114，如圖16c所示。在確認畫面114上，顯示表示用戶選擇的功能的信息。如果用戶在確認畫面114上指定了協(xié)作的順序(使用的順序)，則在終端裝置16的ui單元46上顯示另一個確認畫面116，如圖17a所示。在圖17a中所示例子中，(1)掃描功能的順序是“1”，(4)傳真發(fā)送功能的順序是“2”。在圖16b中所示的功能選擇畫面112上，用戶可根據(jù)協(xié)作的順序選擇用于協(xié)作功能的多個功能。在該情況下，省略圖16c中所示的確認畫面114的顯示，并且在終端裝置16的ui單元46上顯示圖17a中所示的確認畫面116。

隨后，如果用戶在圖17a中所示的確認畫面116上按下了“是”按鈕，則確認要用于協(xié)作功能的mfp(b)的功能，并且畫面轉(zhuǎn)換到設備顯示畫面62，如圖17b所示。在設備顯示畫面62上，用戶將設備圖像64鏈接到設備圖像66，如箭頭118所示。因而，pc(a)被指定為要用于協(xié)作功能的設備，并且指定協(xié)作的順序(使用的順序)。服務器14的指定單元38指定按照協(xié)作的順序使用各個功能的協(xié)作功能，并給予該協(xié)作功能更高優(yōu)先級。因而，與該協(xié)作功能有關的信息以高于與其他協(xié)作功能有關的信息的優(yōu)先級顯示。與該協(xié)作功能有關的信息從服務器14發(fā)送到終端裝置16，并顯示在終端裝置16上。例如，如圖17c所示，協(xié)作功能設備顯示畫面120顯示在終端裝置16的ui單元46上，并且與協(xié)作功能有關的信息顯示在協(xié)作功能顯示畫面120上。優(yōu)先顯示與根據(jù)協(xié)作的順序使用各個功能的協(xié)作功能有關的信息。被給予優(yōu)先級的協(xié)作功能例如是如下功能：“通過傳真發(fā)送mfp(b)經(jīng)由掃描生成的圖像并將所發(fā)送數(shù)據(jù)的副本傳送到pc(a)”。

如果用戶按下圖17a中所示確認畫面116上的“否”按鈕，則取消選擇用于mfp(b)的協(xié)作功能的功能，并且畫面轉(zhuǎn)換到功能選擇畫面112。在功能選擇畫面112上顯示“取消”按鈕。如果用戶按下了“取消”按鈕，則畫面轉(zhuǎn)換到設備顯示畫面62。

根據(jù)第二修改例，顯示所指定設備的功能列表，因此，用戶可以容易地識別設備的功能。

圖18例示了第二修改例的另一個例子。在第二修改例中，用于選擇多個功能的按鈕圖像122顯示在設備顯示畫面62上。如果用戶在按下設備圖像的同時按下了按鈕圖像122，則模式轉(zhuǎn)換到多功能選擇模式。在圖18中所示例子中，在用戶按下與mfp(b)有關的設備圖像64的同時按下按鈕圖像122，如附圖標記124所示。在該情況下，畫面轉(zhuǎn)換到圖16b中所示的功能選擇畫面112。然后，執(zhí)行以上參照圖16a至17c描述的處理。

第三修改例

下面，將參照圖19a和圖19b描述第三修改例。圖19a和圖19b例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。

同樣在第三修改例中，圖像形成裝置10(mfp(b))和終端裝置12(pc(a))被識別為彼此協(xié)作的目標設備，并且設備圖像64和66顯示在終端裝置16中的設備顯示畫面62上，如圖19a所示。此外，局部圖像78、84、82和76按此順序鏈接，如箭頭126、128和130所示。亦即，按該順序指定了掃描功能、畫面顯示功能、數(shù)據(jù)存儲功能和打印功能。

在第三修改例中，如果指定了就鏈接順序而言緊接在要取消的目標圖像之前的圖像，則從協(xié)作功能中消除與要取消的目標圖像有關的功能。亦即，從彼此協(xié)作的目標功能中消除要取消的目標功能。例如，如果指定了就鏈接順序而言緊接在要取消的目標圖像之前的圖像，則表示該指定的信息從終端裝置16發(fā)送到服務器14，并且服務器14的指定單元38從彼此協(xié)作的目標功能中消除與要取消的目標圖像有關的功能。

參照圖19a中所示的例子，鏈接從局部圖像76到局部圖像82，如虛線箭頭132所示。亦即，指定了在鏈接順序上緊接在局部圖像76之前的局部圖像82。在該情況下，從彼此協(xié)作的目標功能中消除了與局部圖像76有關的功能(打印功能)。

然后，如圖19b所示，如果用戶在箭頭234所示的方向上做出從局部圖像82到局部圖像80的鏈接，則選擇與局部圖像80有關的功能(裝訂功能)作為與另一個功能協(xié)作的目標功能，并且優(yōu)先選擇使用與局部圖像80有關的功能的協(xié)作功能。

根據(jù)第三修改例，從彼此協(xié)作的目標功能中消除了要取消的目標功能，并且取消了使用要取消的目標功能的協(xié)作功能，而無需除了鏈接圖像的操作以外的特殊操作。例如，如果錯誤地指定了與另一個功能協(xié)作的目標功能，則通過指定在鏈接順序上緊接在與該功能有關的圖像之前的圖像而取消錯誤指定的功能，而無需執(zhí)行其他特殊操作。因而，與通過使用取消按鈕等消除功能的情形相比，利用簡單的操作消除了要取消的目標功能。

可以在設備顯示畫面62上顯示取消操作的軌跡(例如，箭頭132所示的軌跡)。在該情況下，可以按與鏈接操作的軌跡(例如，箭頭126、128和130所示的軌跡)不同的形式(例如，以不同的顏色或不同類型的線)顯示取消操作的軌跡。

另選地，在取消協(xié)作的情況下，用戶可以指定與要取消的目標設備有關的設備圖像或局部圖像，或者可以在設備顯示畫面62上按下協(xié)作取消按鈕。在并非協(xié)作的目標的設備顯示在設備顯示畫面62上的情況下，用戶可以通過指定在設備顯示畫面62上與該設備有關的設備圖像來從彼此協(xié)作的目標設備中消除該設備。另選地，如果執(zhí)行預設操作，例如，如果十字標記等附接至與要取消的目標設備有關的設備圖像，則可以從彼此協(xié)作的目標設備中消除該設備。

第四修改例

下面，將參照圖20a和圖20b描述第四修改例。圖20a和圖20b例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。

同樣在第四修改例中，圖像形成裝置10(mfp(b))和終端裝置12(pc(a))被識別為彼此協(xié)作的目標設備，并且設備圖像64和66顯示在終端裝置16中的設備顯示畫面62上，如圖20a所示。此外，局部圖像78和84(接觸區(qū)域圖像92和98)按此順序鏈接，如箭頭136所示。亦即，按該順序指定掃描功能和畫面顯示功能。

在第四修改例中，終端裝置16的控制器48使照相機42的視野改變，并使得改變后的視野顯示在設備顯示畫面62上，同時使得表示最后指定為協(xié)作的目標設備的設備的設備圖像顯示在設備顯示畫面62上。在該情況下，已被指定為彼此協(xié)作的目標設備(例如，mfp(b)和pc(a))的那些設備的識別信息存儲在終端裝置16或服務器14的存儲器中。

在圖20a所示的例子中，終端裝置12(pc(a))是被最后指定為協(xié)作的目標設備的設備，因此其設備圖像66保留在設備顯示畫面62上。如果用戶改變了終端裝置16的照相機42的視野，則在使設備圖像66顯示在設備顯示畫面62上的同時，終端裝置16的控制器48使照相機42捕捉的圖像顯示在設備顯示畫面62上。例如，在使用未處于如圖20a所示狀態(tài)下的視野內(nèi)的投影儀(c)作為協(xié)作的目標設備的情況下，用戶改變照相機42的方位，使得投影儀(c)包含在照相機42的視野內(nèi)，同時設備圖像66顯示在設備顯示畫面62上，如圖20b所示，然后捕捉投影儀(c)的圖像。因而，投影儀(c)的圖像由照相機42捕捉，并且與投影儀(c)有關的設備圖像138顯示在設備顯示畫面62上。投影儀(c)被識別，并且，例如投影儀(c)的功能名稱(例如，“投影”)顯示在設備顯示畫面62上。此外，接觸區(qū)域圖像140疊置在表示投影儀(c)的設備圖像138上。如箭頭142所示，如果用戶做出從局部圖像84(接觸區(qū)域圖像98)到設備圖像138(接觸區(qū)域圖像140)的鏈接，則將與設備圖像138有關的設備的功能(例如，投影功能)選擇為協(xié)作的目標功能，并且優(yōu)先顯示使用與設備圖像138有關的功能的協(xié)作功能。

根據(jù)第四修改例，即使一次并未捕捉彼此協(xié)作的多個目標設備的圖像，也能夠捕捉該多個設備的各個圖像，并且該多個設備可以彼此協(xié)作。亦即，彼此協(xié)作的目標設備的位置不一定彼此靠近。根據(jù)第四修改例，可以分別捕捉多個設備的圖像，并且即使在該情況下該多個設備也可以彼此協(xié)作。當然，可以改變照相機42的視角，或者可以增大或減小視野。如果這些操作仍不足夠，則可以執(zhí)行多次圖像捕捉以識別各個設備。

在上述例子中，與最后指定為協(xié)作的目標設備的設備有關的設備圖像保留在設備顯示畫面62上。另選地，用戶指定的設備圖像、與首先被捕捉圖像的設備有關的設備圖像、或者與預設基本設備有關的設備圖像可以保留在設備顯示畫面62上。同樣在該情況下，可以分別捕捉多個設備的圖像，并且這些設備可以彼此協(xié)作。

在上述第一示例性實施方式和第一至第四修改例中，表示識別出設備的設備圖像、接觸區(qū)域圖像、鏈接操作的軌跡(例如，移動軌跡)、以及取消操作的軌跡可以三維顯示以使得它們與背景圖像區(qū)分開。亦即，這些圖像可以顯示為三維圖像。例如，背景圖像可以二維顯示，而設備圖像、接觸區(qū)域圖像和操作軌跡可以三維顯示。因而，可以提高設備圖像、接觸區(qū)域圖像和操作軌跡的可視性。另選地，與未識別設備有關的設備圖像和背景圖像不顯示在設備顯示畫面62上，并且僅與識別出設備有關的設備圖像可以顯示在設備顯示畫面62上。

如上所述，當與目標設備有關的圖像彼此鏈接并且指定了協(xié)作功能時，連接請求從終端裝置16發(fā)送到彼此協(xié)作的目標設備，并且終端裝置16連接到目標設備。下面，將參照圖21描述連接處理。圖21是例示該處理的順序圖。

首先，用戶通過使用終端裝置16提供指令以啟動用于執(zhí)行協(xié)作功能的應用(程序)。響應于該指令，終端裝置16的控制器48啟動應用(s01)。該應用可以預先存儲在終端裝置16的存儲器44中，或者可以從服務器14等下載。

隨后，通過使用基于標記的ar技術(shù)、無標記ar技術(shù)或者位置信息ar技術(shù)識別彼此協(xié)作的目標設備(s02)。當然，可以通過使用除了ar技術(shù)以外的技術(shù)識別目標設備。在使用基于標記的ar技術(shù)或無標記ar技術(shù)的情況下，用戶通過使用終端裝置16的照相機42捕捉目標設備的圖像。例如，在使用圖像形成裝置10(mfp(b))和終端裝置12(pc(a))作為目標設備的情況下，用戶使用照相機42捕捉圖像形成裝置10和終端裝置12的圖像。因而，獲得圖像形成裝置10和終端裝置12的設備識別信息，并且將圖像形成裝置10和終端裝置12識別為目標設備。在使用位置信息ar技術(shù)的情況下，獲得圖像形成裝置10和終端裝置12的位置信息，并且基于這些位置信息指定圖像形成裝置10和終端裝置12的設備識別信息，并識別圖像形成裝置10和終端裝置12。

通過使用終端裝置16，用戶將與彼此協(xié)作的多個目標設備有關的多個設備圖像鏈接起來，由此指定協(xié)作功能并指定協(xié)作功能的優(yōu)先級順序。根據(jù)該優(yōu)先級順序在終端裝置16的ui單元46上顯示與協(xié)作功能有關的信息(s03)。指定協(xié)作功能的處理和指定優(yōu)先級順序地處理可以由服務器14或終端裝置16執(zhí)行。

隨后，如果用戶通過使用終端裝置16指定要執(zhí)行的目標協(xié)作功能，則終端裝置16將表示連接請求的信息發(fā)送到執(zhí)行協(xié)作功能的目標設備(例如，圖像形成裝置10和終端裝置12)(s04)。例如，如果表示彼此協(xié)作的目標設備的地址的地址信息存儲在服務器14中，則終端裝置16從服務器14獲得這些地址信息。如果這些地址信息包含在設備識別信息中，則終端裝置16可以從目標設備的設備識別信息中獲得這些地址信息。另選地，目標設備的這些地址信息可以存儲在終端裝置16中。當然，終端裝置16可以使用另外的方法獲得目標設備的地址信息。通過使用目標設備(例如，圖像形成裝置10和終端裝置12)的地址信息，終端裝置16將表示連接請求的信息發(fā)送到目標設備(例如，圖像形成裝置10和終端裝置12)。

接收到表示連接請求的信息的圖像形成裝置10和終端裝置12允許或者不允許到終端裝置16的連接(s05)。例如，如果圖像形成裝置10和終端裝置12是未被允許做出連接的設備或者如果請求連接的設備的數(shù)量超過了上限，則不允許連接。如果允許來自終端裝置16的連接，則可以禁止改變對圖像形成裝置10和終端裝置12而言唯一的設置信息的操作，使得設置信息不改變。例如，可以禁止圖像形成裝置10的顏色參數(shù)的改變或者用于轉(zhuǎn)換到節(jié)能模式的設置時間。因而，提高了用于彼此協(xié)作的目標設備的安全性。另選地，在使設備彼此協(xié)作的情況下，與單獨使用各個設備而不與其他設備協(xié)作的情形相比，可以限制設置信息的改變。例如，與單獨使用設備的情形相比，可以允許更少設置信息的改變。另選地，可以禁止觀看其他用戶的個人信息，例如操作歷史。因而，可以提高用戶的個人信息的安全性。

表示允許或不允許連接的結(jié)果信息從圖像形成裝置10和終端裝置12發(fā)送到終端裝置16(s06)。如果允許到從圖像形成裝置10和終端裝置12的連接，則在終端裝置16與圖像形成裝置10及終端裝置12中的每一個之間建立通信。

隨后，用戶通過使用終端裝置16提供指令以執(zhí)行協(xié)作功能(s07)。響應于該指令，表示用于執(zhí)行協(xié)作功能的指令的執(zhí)行指令信息從終端裝置16發(fā)送到圖像形成裝置10和終端裝置12(s08)。發(fā)送到圖像形成裝置10的執(zhí)行指令信息包括表示要在圖像形成裝置10中執(zhí)行的處理的信息(例如，作業(yè)信息)，并且發(fā)送到終端裝置12的執(zhí)行指令信息包括表示要在終端裝置12中執(zhí)行的處理的信息(例如，作業(yè)信息)。

響應于執(zhí)行指令信息，圖像形成裝置10和終端裝置12執(zhí)行各個功能(s09)。例如，如果協(xié)作功能包括在圖像形成裝置10與終端裝置12之間發(fā)送/接收數(shù)據(jù)的處理，如將掃描數(shù)據(jù)從圖像形成裝置10(mfp(b))傳送到終端裝置12(pc(a))的掃描并傳送功能中那樣，在圖像形成裝置10與終端裝置12之間建立通信。在該情況下，例如，發(fā)送到圖像形成裝置10的執(zhí)行指令信息包括終端裝置12的地址信息，發(fā)送到終端裝置12的執(zhí)行指令信息包括圖像形成裝置10的地址信息。通過使用這些地址信息建立圖像形成裝置10與終端裝置12之間的通信。

在完成協(xié)作功能的執(zhí)行后，表示協(xié)作功能執(zhí)行完成的信息從圖像形成裝置10和終端裝置12發(fā)送到終端裝置16(s10)。表示協(xié)作功能執(zhí)行完成的信息顯示在終端裝置16的ui單元46上(s11)。如果即使從提供執(zhí)行指令的時間點起經(jīng)過了預設時段仍未顯示表示協(xié)作功能執(zhí)行完成的信息，則終端裝置16的控制器48可以使ui單元46顯示表示錯誤的信息，并且可以將執(zhí)行指令信息或表示連接請求的信息再次發(fā)送到圖像形成裝置10和終端裝置12。

隨后，用戶確定是否取消圖像形成裝置10和終端裝置12的協(xié)作狀態(tài)(s12)，并根據(jù)確定結(jié)果執(zhí)行處理(s13)。在取消協(xié)作狀態(tài)的情況下，用戶通過使用終端裝置16提供取消指令。因而，停止終端裝置16與圖像形成裝置10和終端裝置12中每一個的通信。此外，停止圖像形成裝置10與終端裝置12之間的通信。在不取消協(xié)作狀態(tài)的情況下，可以連續(xù)地提供執(zhí)行指令。

此外，可以增加彼此協(xié)作的目標設備的數(shù)量。例如，可以獲得第三設備的設備識別信息，并且可以指定要通過包括圖像形成裝置10和終端裝置12的三個設備之間的協(xié)作執(zhí)行的協(xié)作功能。表示已經(jīng)將圖像形成裝置10和終端裝置12識別為彼此協(xié)作的目標設備的信息存儲在服務器14或終端裝置16中。

表示彼此協(xié)作的目標設備的設備識別信息和表示所執(zhí)行的協(xié)作功能的協(xié)作功能識別信息可以存儲在終端裝置16或服務器14中。例如，可以獲得使用終端裝置16的用戶的用戶賬戶信息(用戶識別信息)，表示用戶賬戶信息之間的對應性的歷史信息、表示彼此協(xié)作的目標設備的設備識別信息、以及表示所執(zhí)行的協(xié)作功能的協(xié)作功能識別信息可以創(chuàng)建并存儲在終端裝置16或服務器14中。該歷史信息可以由終端裝置16或服務器14創(chuàng)建。參考該歷史信息，指定已經(jīng)執(zhí)行的協(xié)作功能和用于該協(xié)作功能的設備。

彼此協(xié)作的目標設備(例如，圖像形成裝置10和終端裝置12)可以存儲已經(jīng)請求連接的用戶的用戶賬戶信息和表示已經(jīng)請求連接的終端裝置16的終端識別信息，作為歷史信息。參考該歷史信息，指定使用了這些設備的用戶。在例如指定當設備發(fā)生故障時正在使用該設備的用戶或者對消費品執(zhí)行收費處理等的情況下，可以通過使用歷史信息來指定用戶。歷史信息可以存儲在服務器14或終端裝置16中，或者可以存儲在另一個裝置中。

例如，用戶賬戶信息預先存儲在終端裝置16的存儲器44中。終端裝置16的控制器48作為用戶識別單元的一個例子，從存儲器44讀取用戶的用戶賬戶信息，并識別使用終端裝置16的用戶。如果多個用戶的用戶賬戶信息存儲在存儲器44中，則用戶通過使用終端裝置16指定他/她的用戶賬戶信息。因而，讀取了用戶的用戶賬戶信息并識別出用戶。另選地，終端裝置16的控制器48可以通過讀取登錄到終端裝置16中的用戶的用戶賬戶信息而識別用戶。另選地，如果僅有一條用戶賬戶信息存儲在同一個終端裝置16中，則終端裝置16的控制器48可以通過讀取該一條用戶賬戶信息而識別用戶。如果未設置用戶賬戶并且如果未創(chuàng)建用戶賬戶信息，則執(zhí)行初始設置并由此創(chuàng)建用戶賬戶信息。

可以針對各個用戶管理協(xié)作功能的使用歷史，并且表示所讀取的用戶賬戶信息代表的用戶先前使用的協(xié)作功能的信息可以顯示在終端裝置16的ui單元46上。表示使用歷史的信息可以存儲在終端裝置16或服務器14中。此外，可以顯示表示以預設或更高頻率使用的協(xié)作功能的信息。通過提供這種快捷功能，可以減少與協(xié)作功能有關的用戶操作。

第二示例性實施方式

下面，將描述根據(jù)本發(fā)明的第二示例性實施方式的充當信息處理系統(tǒng)的圖像形成系統(tǒng)。圖22例示了根據(jù)第二示例性實施方式的服務器14a。根據(jù)第二示例性實施方式的圖像形成系統(tǒng)包括服務器14a，以代替根據(jù)第一示例性實施方式的服務器14。除了服務器14a以外，根據(jù)第二示例性實施方式的圖像形成系統(tǒng)的構(gòu)成與圖1所示的根據(jù)第一示例性實施方式的圖像形成系統(tǒng)的構(gòu)成相同。

與根據(jù)第一示例性實施方式的服務器14類似，服務器14a管理協(xié)作功能，每個協(xié)作功能通過多個功能之間的協(xié)作執(zhí)行。接下來，將參照圖22詳細描述服務器14a的構(gòu)成。

服務器14a包括通信單元28、存儲器30a和控制器36a。通信單元28具有與根據(jù)第一示例性實施方式的通信單元28相同的構(gòu)成。

存儲器30a是例如硬盤或ssd的存儲裝置。存儲器30a例如存儲設備功能信息32、協(xié)作功能信息144、各種數(shù)據(jù)、各種程序、表示各個設備的地址的設備地址信息等。當然，這些信息和數(shù)據(jù)可以存儲在不同的存儲裝置中或者存儲在一個存儲裝置中。存儲在存儲器30a中的設備功能信息32和協(xié)作功能信息144可以周期性地或者以預定的定時提供給終端裝置16，因而可以對存儲在終端裝置16中的信息進行更新。

設備功能信息32是與根據(jù)第一示例性實施方式的設備功能信息32相同的信息。

協(xié)作功能信息144是表示要通過多個功能之間的協(xié)作執(zhí)行的協(xié)作功能的信息，并且例如是表示代表用于識別彼此協(xié)作以執(zhí)行協(xié)作功能的功能的功能識別信息的組合的信息與用于識別該協(xié)作功能的協(xié)作功能識別信息之間的對應性的信息。在多個設備彼此協(xié)作的情況下，協(xié)作功能信息144是表示要通過多個設備的多個功能之間的協(xié)作執(zhí)行的協(xié)作功能的信息，并且是表示代表用于識別彼此協(xié)作以執(zhí)行協(xié)作功能的設備的功能識別信息的組合的信息與協(xié)作功能識別信息之間的對應性的信息。

控制器36a對服務器14a的各個單元的操作進行控制?？刂破?6a包括指定單元38和協(xié)作功能登記單元146。

與根據(jù)第一示例性實施方式的指定單元38類似，指定單元38基于設備識別信息而識別設備，并指定該設備的功能。此外，指定單元38指定要通過彼此協(xié)作的目標設備的功能之間的協(xié)作而執(zhí)行的協(xié)作功能。同樣在第二示例性實施方式中，獲得設備識別信息，并使用ar技術(shù)識別設備。當然，可以獲得設備識別信息并可以使用除了ar技術(shù)以外的技術(shù)識別設備。

在第二示例性實施方式中，與彼此協(xié)作的目標設備有關的設備圖像顯示在終端裝置16的ui單元46上，通過將設備圖像彼此疊置而指定協(xié)作功能，并且與該協(xié)作功能有關的信息顯示在終端裝置16的ui單元46上。

協(xié)作功能登記單元146具有對協(xié)作功能進行登記的功能。例如，協(xié)作功能登記單元146將要登記的目標協(xié)作功能的登記信息與用于執(zhí)行協(xié)作功能的要顯示的圖像(例如，快捷方式圖像)彼此關聯(lián)。該圖像例如是通過將設備圖像彼此疊置而生成的圖像，或者是示意性表示疊置的目標設備的圖像。

下面，將詳細描述根據(jù)第二示例性實施方式的圖像形成系統(tǒng)。

首先，將參照圖23詳細描述協(xié)作功能信息144。圖23例示了作為協(xié)作功能信息144的協(xié)作功能管理表的一個例子。例如，在協(xié)作功能管理表中，表示設備id的組合的信息、表示彼此協(xié)作的目標設備的名稱(例如，類型)的信息、和表示協(xié)作功能的信息(例如，協(xié)作功能識別信息)彼此關聯(lián)。與圖7中所示的根據(jù)第一示例性實施方式的協(xié)作功能管理表不同，根據(jù)第二示例性實施方式的協(xié)作功能管理表不包括表示鏈接順序的信息和表示優(yōu)先級順序的信息。

下面，將參照圖24a至圖25b詳細描述指定協(xié)作功能的操作。圖24a至圖25b例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。

例如，與第一示例性實施方式中一樣，假設通過使用ar技術(shù)等將圖像形成裝置10(mfp(b))和終端裝置12(pc(a))識別為彼此協(xié)作的目標設備。如圖24a所示，設備顯示畫面62顯示在終端裝置16的ui單元46上，并且與識別出的設備(圖像形成裝置10和終端裝置12)有關的設備圖像64和66顯示在設備顯示畫面62上。在該狀態(tài)下，用戶通過使用指示器(例如，用戶的手指、筆或觸筆)將與目標設備中的一個有關的設備圖像疊置在與另一個目標設備有關的設備圖像上。例如，如圖24b所示，用戶通過使用操作器指定設備圖像64，并將設備圖像64疊置在設備圖像66上，如箭頭148所示。例如，用戶通過執(zhí)行拖放操作將設備圖像彼此疊置。具體而言，用戶拖動設備圖像64并將其放在設備圖像64疊置在設備圖像66之上的位置處。拖放操作是根據(jù)相關技術(shù)的一種技術(shù)。另選地，可以根據(jù)用戶提供的語音指令指定彼此疊置的設備圖像(與彼此協(xié)作的目標設備有關的圖像)。例如，根據(jù)用戶提供的語音指令，設備圖像64和66可以指定為目標設備圖像，并且可以彼此疊置。

作為設備圖像64和66彼此疊置的結(jié)果，與設備圖像64有關的圖像形成裝置10(mfp(b))以及與設備圖像66有關的終端裝置12(pc(a))被指定為彼此協(xié)作的目標設備。在圖24b所示的例子中，設備圖像64疊置在設備圖像66上。另選地，設備圖像66可以疊置在設備圖像64上。

終端裝置16的控制器48可以使正在被拖動的設備圖像以可識別的方式顯示在ui單元46上。例如，正在被拖動的設備圖像可以半透明地或者以特定顏色顯示。

當設備圖像64疊置在設備圖像66上時，確認畫面150顯示在終端裝置16的ui單元46上，如圖24c所示。確認畫面150是用于確認是否使得被指定的設備彼此協(xié)作的畫面。如果用戶在確認畫面150上提供了協(xié)作指令(例如，用戶按下了“是”按鈕)，則與協(xié)作功能有關的信息顯示在終端裝置16的ui單元46上。具體而言，如果指定了彼此協(xié)作的目標設備(例如，圖像形成裝置10和終端裝置12)并提供了協(xié)作指令，則服務器14a的指定裝置38在圖23中所示的協(xié)作功能管理表(協(xié)作功能信息144)中指定與pc(a)和mfp(b)的組合相關聯(lián)的協(xié)作功能。因而，指定了通過pc(a)與mfp(b)之間的協(xié)作執(zhí)行的協(xié)作功能。與按照該方式指定的協(xié)作功能有關的信息從服務器14發(fā)送到終端裝置16，并作為與候選協(xié)作功能有關的信息顯示在終端裝置16的ui單元46上。

例如，如圖25a所示，終端裝置16的控制器48使ui單元46顯示協(xié)作功能顯示畫面152，并在協(xié)作功能顯示畫面152上顯示與候選協(xié)作功能有關的信息。例如，通過使pc(a)與mfp(b)彼此協(xié)作，實現(xiàn)了掃描并傳送功能和打印功能。因此，與掃描并傳送功能有關的信息以及與打印功能有關的信息顯示在協(xié)作功能顯示畫面152上。

如果用戶指定了協(xié)作功能并且用戶提供了執(zhí)行指令，則將連接請求從終端裝置16發(fā)送到彼此協(xié)作的目標設備。如圖25b所示，在對連接請求進行處理的同時在終端裝置16的ui單元46上顯示等待畫面154。當成功建立了終端裝置16與目標設備之間的連接時，執(zhí)行所指定的協(xié)作功能。

如上所述，根據(jù)第二示例性實施方式，與設備有關的設備圖像彼此疊置，由此指定使用這些設備的功能的協(xié)作功能。因此，可以使這些功能彼此協(xié)作而無需除了圖像操作以外的特殊操作，并且可以利用簡單的操作使這些功能彼此協(xié)作。

下面，將描述第二示例性實施方式的修改例。

第五修改例

下面，將參照圖26a至27描述第五修改例。圖26a至圖27例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。在第五修改例中，多個設備圖像彼此疊置，然后生成并顯示表示疊置狀態(tài)的新圖像。下面，將詳細描述第五修改例。

同樣在第五修改例中，假設圖像形成裝置10(mfp(b))和終端裝置12(pc(a))被識別為彼此協(xié)作的目標設備，并且設備圖像64和66顯示在終端裝置16中的設備顯示畫面62上，如圖26a所示。例如，假設用戶通過使用操作器將設備圖像64疊置在設備圖像66上，如箭頭156所示。作為設備圖像64和66彼此疊置的結(jié)果，與設備圖像64有關的圖像形成裝置10(mfp(b))以及與設備圖像66有關的終端裝置12(pc(a))被指定為彼此協(xié)作的目標設備。

當設備圖像64疊置在設備圖像66上時，確認畫面158顯示在終端裝置16的ui單元46上，如圖26b所示。確認畫面158是用于確認是否使指定的設備彼此協(xié)作的畫面，并且是用于確認是否存在要使之協(xié)作的另一個設備的畫面。如果用戶提供了使得mfp(b)與pc(a)協(xié)作的指令(例如，如果用戶按下“是”按鈕以使mfp(b)與pc(a)協(xié)作)，則使得mfp(b)與pc(a)協(xié)作。如果存在要使之協(xié)作的另一個設備(例如，如果用戶按下“是”按鈕以使得另一個設備協(xié)作)，則顯示設備顯示畫面62，如圖26c所示。在設備顯示畫面62上，顯示通過將疊置的設備圖像64和66成組而生成的新的設備圖像160。例如可以由終端裝置16的控制器48或者服務器14a的控制器36a生成新的設備圖像160。設備圖像160是表示設備圖像64疊置在設備圖像66上的狀態(tài)的圖像。

在第五修改例中，終端裝置16的控制器48使新生成的設備圖像160保留在設備顯示畫面62上。如果用戶改變了終端裝置16的照相機42的視野，則在設備顯示屏62上顯示設備圖像160的同時，終端裝置16的控制器48使照相機42捕捉的圖像顯示在設備顯示畫面62上。在該情況下，已被指定為彼此協(xié)作的目標設備(例如，mfp(b)和pc(a))的那些設備的識別信息存儲在終端裝置16或服務器14a的存儲器中。

例如，在使用未處于如圖26a所示狀態(tài)下的視野內(nèi)的投影儀(c)作為協(xié)作的目標設備的情況下，用戶改變照相機42的方位，使得投影儀(c)包含在照相機42的視野內(nèi)，同時設備圖像160顯示在設備顯示畫面62上，如圖26c所示，然后捕捉投影儀(c)的圖像。因而，投影儀(c)的圖像由照相機42捕捉，并且與投影儀(c)有關的設備圖像138顯示在設備顯示畫面62上，并且識別出投影儀(c)。如箭頭162所示，如果用戶將新的設備圖像160疊置在設備圖像138上，則將與設備圖像138相關聯(lián)的設候選擇為協(xié)作的目標設備。如果不再存在要協(xié)作的設備，則由服務器14指定要通過已經(jīng)指定的目標設備之間的協(xié)作執(zhí)行的協(xié)作功能，并且與該協(xié)作功能有關的信息從服務器14發(fā)送到終端裝置16，并顯示在終端裝置16的ui單元46上。例如，如果用戶在圖26b所示的確認畫面158上按下了“否”按鈕以提供表示不存在要使之協(xié)作的設備的指令，則在終端裝置16的ui單元46上顯示與該協(xié)作功能有關的信息。

如上所述，根據(jù)第五修改例，通過彼此疊置設備圖像而生成的新設備圖像疊置在與協(xié)作的另一個候選設備有關的設備圖像上，因而增加了彼此協(xié)作的設備的數(shù)量。新設備圖像表示與彼此協(xié)作的目標設備有關的設備圖像彼此疊置的狀態(tài)。因此，作為顯示該新設備圖像的結(jié)果，從可視的觀點可以容易地識別出被指定為彼此協(xié)作的目標設備的那些設備。

可以省略顯示確認畫面158。在該情況下，如果在設備圖像彼此疊置后用戶提供了顯示協(xié)作功能的指令，則在終端裝置16的ui單元46上顯示與通過疊置所指定的彼此協(xié)作的目標設備執(zhí)行的協(xié)作功能有關的信息。

在第五修改例中，通過將彼此疊置的設備圖像成組而生成了新設備圖像。另選地，彼此疊置的設備圖像可以用另一個圖像代替，并且可以將該圖像顯示在設備顯示畫面62上。例如，如圖27所示，新設備圖像64顯示在設備顯示畫面62上以代替通過成組而生成的設備圖像160，并且如箭頭166所示地操作該新設備圖像164。設備圖像164是示意性表示mfp(b)和pc(a)的圖像，表示mfp(b)的功能和pc(a)的功能的圖像的圖像等。可以由終端裝置16的控制器48或者服務器14a的控制器36a生成設備圖像164。作為將表示功能的圖像顯示為新設備圖像的結(jié)果，從可視的觀點可以容易地識別出被指定為彼此協(xié)作的目標功能的功能。

在圖27所示的例子中，利用新設備圖像164自動代替設備圖像160。在進行該代替時，可以在終端裝置16的ui單元46上顯示確認畫面。圖28例示了確認畫面的一個例子。在多個設備圖像彼此疊置后，在終端裝置16的ui單元46上顯示確認畫面168。在確認畫面168上，顯示通過將多個設備圖像和示意設備圖像164成組而生成的設備圖像160。如果用戶提供了用于代替圖像的指令(例如，如果用戶按下了“是”按鈕)，則設備圖像160由示意設備圖像164代替，并且在設備顯示畫面62上顯示該示意設備圖像，如圖27所示。

第六修改例

下面，將參照圖29a至31c描述第六修改例。圖29a至圖31c例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。在第六修改例中，在上次協(xié)作生成的設備圖像用作當下次執(zhí)行協(xié)作功能時用于快捷按鈕的圖像。下面，將詳細描述第六修改例。

在第六修改例中，與第五修改例中一樣，假設設備圖像64和66彼此疊置，圖像形成裝置10(mfp(b))和終端裝置12(pc(a))被識別為彼此協(xié)作的目標設備，并且通過對設備圖像64和66成組而生成新設備圖像160。

如果用戶通過使用終端裝置16提供指令以將新設備圖像160登記為用于快捷按鈕的圖像，則在終端裝置16的ui單元46上顯示協(xié)作功能登記畫面170，如圖29a所示。在協(xié)作功能登記畫面170上，顯示新設備圖像160，并且還顯示要通過mfp(b)與pc(a)之間的協(xié)作執(zhí)行的協(xié)作功能的登記信息。例如，將協(xié)作功能的名稱、協(xié)作功能的概要和表示協(xié)作所需要的設備的信息顯示為登記信息。用戶可以通過使用終端裝置16對登記信息(例如，協(xié)作功能的名稱或概要)進行編輯。

如果用戶在協(xié)作功能登記畫面170上提供了不登記用于協(xié)作功能的快捷功能的指令(例如，用戶按下了“否”按鈕)，則在終端裝置16的ui單元46上顯示確認畫面172，如圖29b所示。如果用戶在確認畫面172上提供結(jié)束指令(例如，用戶按下用于結(jié)束登記的“是”按鈕)，則協(xié)作功能登記處理結(jié)束。如果用戶提供局部編輯指令(例如，如果用戶按下用于局部編輯的“是”按鈕)，則畫面轉(zhuǎn)換到協(xié)作功能登記畫面170。

另一方面，如果用戶在協(xié)作功能登記畫面170上提供登記用于協(xié)作功能的快捷功能的指令(例如，如果用戶按下了“是”按鈕)，則在終端裝置16的ui單元46上顯示確認畫面174，如圖30a所示。如果用戶在確認畫面174上提供創(chuàng)建快捷按鈕的指令(例如，如果用戶按下“是”按鈕)，則生成表示用于執(zhí)行協(xié)作功能的快捷按鈕的圖像(快捷按鈕圖像)。該快捷按鈕圖像可以由終端裝置16或服務器14a創(chuàng)建。例如，如圖30b所示，快捷按鈕圖像178顯示在終端裝置16的ui單元46的畫面176(例如，桌面畫面)上?？旖莅粹o圖像178包括設備圖像160。例如，服務器14a的協(xié)作功能登記單元146將目標協(xié)作功能的登記信息與快捷按鈕圖像178關聯(lián)起來。當然，該關聯(lián)可以由終端裝置16執(zhí)行。如果生成并登記多個快捷按鈕圖像，則在畫面176上顯示這些快捷按鈕圖像的列表。協(xié)作功能的登記信息和快捷按鈕圖像例如存儲在終端裝置16中。另選地，協(xié)作功能的登記信息和快捷按鈕圖像可以存儲在與用戶賬戶信息相關聯(lián)的服務器14a中。在該情況下，如果用戶賬戶信息從終端裝置16發(fā)送到服務器14a，則與用戶賬戶相關聯(lián)的信息(協(xié)作功能的登記信息和快捷按鈕圖像)從服務器14a發(fā)送到終端裝置16并顯示在終端裝置16上。

快捷按鈕圖像178包括狀況(status)圖像180和182。每個狀況圖像是表示協(xié)作的目標設備的狀況的圖像，亦即，表示目標圖像是否處于能夠執(zhí)行協(xié)作功能的狀態(tài)的圖像。例如，狀況圖像180是表示圖像形成裝置10(mfp(b))的狀況的圖像，狀況圖像182是表示終端裝置12(pc(a))的狀況的圖像。如果協(xié)作的目標設備處于能夠執(zhí)行協(xié)作功能的狀態(tài)，則以表示該狀態(tài)的特定顏色(例如，綠色或藍色)顯示該狀況圖像。如果協(xié)作的目標設備處于不能執(zhí)行協(xié)作功能的狀態(tài)，則以表示該狀態(tài)的特定顏色(例如，白色或紅色)顯示該狀況圖像。在圖30b所示的例子中，以綠色顯示狀況圖像180，并以白色顯示狀況圖像182。因此，圖像形成裝置10(mfp(b))處于能夠執(zhí)行協(xié)作功能的狀態(tài)，而終端裝置12(pc(a))處于不能執(zhí)行協(xié)作功能的狀態(tài)。當然，可以由除了顏色以外的信息表示彼此協(xié)作的目標設備的狀況。例如，可以顯示具有與狀況相對應的形狀的狀況圖像，或者可以顯示表示狀況的字符串。

能夠執(zhí)行協(xié)作功能的狀態(tài)例如是設備沒有正在被另一個用戶使用或者設備未發(fā)生故障的狀態(tài)。不能夠執(zhí)行協(xié)作功能的狀態(tài)例如是設備正在被另一個用戶使用或者設備發(fā)生故障的狀態(tài)。例如，終端裝置16從目標設備獲得表示目標設備的狀況的信息，并基于該信息以特定顏色顯示狀況圖像。另選地，服務器14a可以從目標設備獲得表示目標設備的狀況的信息，并且終端裝置16可以從服務器14a獲得該信息。

如上所述，彼此關聯(lián)地管理協(xié)作功能和快捷按鈕圖像。因而，可以減少用于下次執(zhí)行協(xié)作功能的操作。

圖31a至31c例示了用于協(xié)作功能的觀看并編輯畫面的一個例子。如果用戶通過使用終端裝置16提供指令以觀看與協(xié)作功能有關的登記信息，則在終端裝置16的ui單元46上顯示觀看并編輯畫面184，如圖31a所示。在觀看并編輯畫面184上，顯示作為顯示圖像的快捷圖像、協(xié)作功能的登記信息(例如，協(xié)作功能的名稱、協(xié)作功能的概要和要鏈接的設備的名稱)等。例如，如果用戶在觀看并編輯畫面184上指定與要編輯的協(xié)作功能有關的項目(例如，顯示圖像、協(xié)作功能的名稱、協(xié)作功能的概要或要鏈接的設備的名稱)，則在終端裝置16的ui單元46上顯示確認畫面186，如圖31b所示。例如，如果用戶指定了協(xié)作功能的名稱，則顯示用于確認是否對協(xié)作功能的名稱進行編輯的確認畫面186。如果用戶在確認畫面186上按下“是”按鈕，則在終端裝置16的ui單元46上顯示編輯畫面188，如圖31c所示。在編輯畫面188上，用戶對協(xié)作功能的名稱進行編輯，然后在編輯畫面188上顯示編輯之前的名稱和編輯之后的名稱。如果用戶提供反映該編輯的指令(例如，如果用戶按下“是”按鈕)，則反映該編輯。例如，連同快捷圖像一起在終端裝置16的ui單元46的桌面畫面上顯示編輯之后的名稱?？梢园搭愃频胤绞綄Τ藚f(xié)作功能的名稱以外的項目進行編輯。

第七修改例

下面，將參照圖32a和圖32b描述第七修改例。圖32a和圖32b例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。在第七修改例中，在選擇了彼此疊置的目標設備圖像后，如果在設備顯示畫面62上未顯示設備圖像的區(qū)域內(nèi)取消了該選擇，則取消協(xié)作功能。

例如，如圖32a所示，假設設備圖像64疊置在設備圖像66上，由此生成并顯示新設備圖像160。在該情況下，如果用戶選擇設備圖像160并隨后在設備顯示畫面62上未顯示設備圖像的區(qū)域內(nèi)取消了對設備圖像160的選擇，如箭頭190所示，則取消要通過mfp(b)與pc(a)之間的協(xié)作執(zhí)行的協(xié)作功能。亦即，作為將設備圖像160拖動到未顯示設備圖像的區(qū)域并將設備圖像160放在該區(qū)域中的結(jié)果，取消協(xié)作功能，并且狀態(tài)轉(zhuǎn)換到設備彼此協(xié)作之前的狀態(tài)。例如，表示拖放操作的信息從終端裝置16發(fā)送到服務器14a，并且服務器14a的指定單元38取消協(xié)作功能。當然，終端裝置16可以取消協(xié)作功能。

圖32b例示了在取消協(xié)作功能后的設備顯示畫面62。在設備不彼此協(xié)作的狀態(tài)中，設備圖像64、66和138分開顯示而未彼此疊置。

如上所述，根據(jù)第七修改例，作為取消選擇彼此疊置的設備圖像的結(jié)果，無需執(zhí)行另一個特殊操作就取消了相應的協(xié)作功能。因此，與需要除了取消選擇操作以外的特殊操作以取消協(xié)作功能的情形相比，可以容易地取消協(xié)作功能。

另選地，在取消協(xié)作的情況下，用戶可以在設備顯示畫面62上指定與目標設備有關的設備圖像，或者可以按下協(xié)作取消按鈕。如果在設備顯示畫面62上顯示除了彼此協(xié)作的目標設備以外的設備，則用戶可以在設備顯示畫面62上指定與該設備有關的設備圖像，以從彼此協(xié)作的目標設備中消除該設備。如果執(zhí)行預設操作以將十字標記等附接至與取消的目標設備有關的設備圖像，則可以從彼此協(xié)作的目標設備中消除該設備。

第八修改例

下面，將參照圖33a和圖33b描述第八修改例。圖33a和圖33b例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。

同樣在第八修改例中，圖像形成裝置10(mfp(b))和終端裝置12(pc(a))被識別為彼此協(xié)作的目標設備，并且設備圖像64和66顯示在終端裝置16中的設備顯示畫面62上，如圖33a所示。如箭頭192所示，設備圖像64疊置在設備圖像66上，因而生成并顯示新設備圖像160。圖像形成裝置10(mfp(b))和終端裝置12(pc(a))被指定為彼此協(xié)作的目標設備。

在第八修改例中，在使得通過疊置而最后生成的設備圖像顯示在設備顯示畫面62上的同時，終端裝置16的控制器48使照相機42的視野改變并使得改變后的視野顯示在設備顯示畫面62上。在該情況下，彼此協(xié)作的設備(與彼此疊置的設備圖像有關的設備)的識別信息存儲在終端裝置16或服務器14a中。

在圖33a所示例子中，顯示通過將設備圖像64疊置在設備圖像66上而生成的新設備圖像160，因此，在設備顯示畫面62上保持顯示設備圖像160。例如，在使用未處于如圖33a所示狀態(tài)下的視野內(nèi)的投影儀(c)的情況下，用戶改變照相機42的方位，使得投影儀(c)包含在照相機42的視野內(nèi)，同時設備圖像160顯示在設備顯示畫面62上，如圖33b所示，然后捕捉投影儀(c)的圖像。因而，投影儀(c)的圖像由照相機42捕捉，并且與投影儀(c)有關的設備圖像138顯示在設備顯示畫面62上。作為將設備圖像160疊置在設備圖像138上的結(jié)果，投影儀(c)被指定為協(xié)作的目標設備。

根據(jù)第八修改例，即使一次并未捕捉彼此協(xié)作的多個目標設備的圖像，也能夠分別捕捉該多個設備的圖像，并且該多個設備可以彼此協(xié)作。

在上述例子中，通過疊置而最后生成的設備圖像保持顯示在設備顯示畫面62上。另選地，用戶指定的設備圖像、與首先被捕捉圖像的設備有關的設備圖像、或者與預設基本設備有關的設備圖像可以保持顯示在設備顯示畫面62上。同樣在該情況下，可以分別捕捉多個設備的圖像，并且該多個設備可以彼此協(xié)作。

第九修改例

下面，將描述第九修改例。在第九修改例中，應用根據(jù)第一示例性實施方式的處理。亦即，根據(jù)設備圖像彼此疊置的順序，確定對與協(xié)作功能有關的信息進行顯示的優(yōu)先級順序。例如，如圖24b所示，如果設備圖像64被選擇并疊置在設備圖像66上，則做出從設備圖像64到設備圖像66的鏈接。因而，與設備圖像64有關的圖像形成裝置10(mfp(b))以及與設備圖像66有關的終端裝置12(pc(a))被指定為彼此協(xié)作的目標設備，并且還指定了其鏈接順序。設備圖像彼此疊置的順序?qū)阪溄禹樞?。在圖24b所示的例子中，鏈接從圖像形成裝置10(mfp(b))到終端裝置12(pc(a))。

在第九修改例中，服務器14a根據(jù)第一示例性實施方式存儲協(xié)作功能信息34(圖7中所示的協(xié)作功能管理表)。如上所述，當指定了彼此協(xié)作的目標設備(例如，圖像形成裝置10和終端裝置12)時，服務器14a的指定裝置38在圖7所示的協(xié)作功能管理表(協(xié)作功能信息34)中指定與pc(a)和mfp(b)相關聯(lián)的協(xié)作功能。因而，指定了通過pc(a)與mfp(b)之間的協(xié)作實現(xiàn)的協(xié)作功能。此外，當用戶指定了設備的鏈接順序時，指定單元38指定協(xié)作功能管理表中與鏈接順序相關聯(lián)的優(yōu)先級順序。

與協(xié)作功能有關的信息以及表示按上述方式指定的優(yōu)先級順序的信息從服務器14a發(fā)送到終端裝置16。終端裝置16的控制器48根據(jù)優(yōu)先級順序使ui單元46顯示與協(xié)作功能有關的信息作為與候選協(xié)作功能有關的信息。

如上所述，根據(jù)第九修改例，通過將設備圖像彼此疊置而指定使用設備的功能的協(xié)作功能。此外，通過改變將設備圖像彼此疊置的順序(亦即，設備彼此鏈接的順序)來改變與協(xié)作功能有關的信息的顯示順序。因此，優(yōu)先顯示與預期由用戶使用的協(xié)作功能有關的信息，而無需除了將設備圖像彼此疊置的操作以外的特殊操作。

第十修改例

下面，將參照圖34a和圖34b描述第十修改例。圖34b和圖34b例示了在終端裝置16的ui單元46上顯示的畫面的一個例子。

在第十修改例中，與第一示例性實施方式的第一修改例中一樣，指派給協(xié)作功能的設備的功能根據(jù)與設備有關的設備圖像中的位置而改變。在設備圖像中的特定局部圖像疊置在另一個設備圖像中的特定局部圖像上的情況下，指定使用與這些特定局部圖像有關的功能的協(xié)作功能。下面，將詳細描述第十修改例。

同樣在第十修改例中，假設識別出圖像形成裝置10(mfp(b))和終端裝置12(pa(a))。如圖34a所示，設備顯示畫面62顯示在終端裝置16的ui單元46上，并且設備圖像64和66顯示在設備顯示畫面62上。與第一示例性實施方式的第一修改例中一樣，打印功能與設備圖像64中的局部圖像76相關聯(lián)，掃描功能與設備圖像64中的局部圖像78相關聯(lián)，裝訂功能與設備圖像64中的局部圖像80相關聯(lián)。此外，數(shù)據(jù)存儲功能與設備圖像66中的局部圖像82相關聯(lián)，畫面顯示功能與設備圖像66中的局部圖像84相關聯(lián)。在第十修改例中，每個局部圖像顯示為能夠從另一個局部圖像單獨移動的圖像。

與第一示例性實施方式的第一修改例中一樣，可以在設備顯示畫面62上顯示各個功能(例如，打印、掃描等)的名稱，并且可以在設備顯示畫面62上顯示接觸區(qū)域圖像90。在該情況下，可以改變與用戶指定的局部圖像相對應的接觸區(qū)域圖像的顏色，或者可以改變與疊置的局部圖像相對應的接觸區(qū)域圖像的顏色。當然，不一定顯示功能和接觸區(qū)域圖像的名稱。

在第十修改例中，如果用戶指定了局部圖像，并且如果該局部圖像疊置于另一個局部圖像上，則指定使用與疊置的局部圖像有關的功能的協(xié)作功能，并且在終端裝置16的ui單元46上顯示與協(xié)作功能有關的信息。該指定處理可以由服務器14a的指定單元38或終端裝置16執(zhí)行。

例如，如圖34b中的箭頭194所示，如果用戶通過使用操作器拖動局部圖像78并將其放在局部圖像84上，則將與包括局部圖像78的設備圖像64有關的mfp(b)以及與包括局部圖像84的設備圖像66有關的pc(a)指定為彼此協(xié)作的目標設備，并且將與局部圖像78相對應的掃描功能以及與局部圖像84相對應的畫面顯示功能也指定為彼此協(xié)作的目標功能。

在服務器14a中，對與各個局部圖像相對應的功能進行管理。例如，用于識別局部圖像的識別信息、表示與局部圖像相關聯(lián)的功能的功能識別信息、以及表示通過功能之間的協(xié)作執(zhí)行的協(xié)作功能的協(xié)作功能識別信息彼此關聯(lián)地存儲在服務器14a中。如果在設備顯示畫面62上選擇了一個局部圖像并將其疊置在另一個局部圖像上，將表示彼此疊置的局部圖像的識別信息從終端裝置16發(fā)送到服務器14a。在圖34b所示的例子中，將表示局部圖像78和84的識別信息從終端裝置16發(fā)送到服務器14a。服務器14a的指定單元38基于這些識別信息指定與局部圖像78和84相對應的功能，并指定使用這些功能的協(xié)作功能。與該協(xié)作功能有關的信息從服務器14a發(fā)送到終端裝置16，并顯示在終端裝置16上。

如上所述，根據(jù)第十修改例，在彼此協(xié)作的目標設備中的每一個具有多個功能的情況下，在這些目標設備的每一個中選擇一個功能，并且優(yōu)先顯示與使用所指定的功能的協(xié)作功能有關的信息。因而，優(yōu)先顯示預期由用戶使用的協(xié)作功能。

同樣在第十修改例中，與第一示例性實施方式中一樣，可以根據(jù)局部圖像彼此疊置的順序來改變協(xié)作功能的顯示優(yōu)先級順序。在該情況下，優(yōu)先顯示與使用關于疊置局部圖像的功能的協(xié)作功能有關的信息。

第十一修改例

下面，將描述第十一修改例。在第十一修改例中，與第十修改例中一樣，指派給協(xié)作功能的設備的功能根據(jù)與該設備有關的設備圖像中的位置而改變。然而，與第十修改例中不同，局部圖像不能從另一個局部圖像單獨移動。在第十一修改例中，與圖24b中所示的例子一樣，用戶將整個設備圖像移動并疊置在另一個設備圖像上。此時，根據(jù)疊置的位置改變協(xié)作功能。將參照圖34a使用特定例子對此進行描述。例如，假設用戶對與mfp(b)有關的整個設備圖像64進行操作并將其疊置在與pc(a)有關的設備圖像66上。在該情況下，如果設備圖像64中的局部圖像78(與掃描功能有關的局部圖像)疊置在設備圖像66中的局部圖像84(與畫面顯示功能有關的局部圖像)上，則優(yōu)先顯示與使用掃描功能和畫面顯示功能的協(xié)作功能有關的信息。

同樣在上述第二示例性實施方式和第五至第十一修改例中，與第一示例性實施方式中一樣，根據(jù)圖21所示的順序?qū)⒈舜藚f(xié)作的目標設備彼此連接。

此外，在上述第二示例性實施方式和第五至第十一修改例中，與識別出的設備有關的設備圖像和彼此疊置的設備圖像可以三維顯示以與背景圖像區(qū)分開。亦即，這些圖像可以顯示為三維圖像。例如，背景圖像是二維顯示，設備圖像是三維顯示。因而，可以提高設備圖像的可視性。此外，可以改變用戶指定的設備圖像的顏色，或者指定的設備圖像可以閃爍，使得將指定的設備圖像與其他設備圖像區(qū)分開。

在上述第一和第二示例性實施方式和第一至第七修改例中，通過識別例如設備之類的硬件單元來實現(xiàn)協(xié)作功能。另選地，可以通過識別軟件單元來使軟件單元(應用程序)的功能彼此協(xié)作。例如，可以通過鏈接或疊置例如與顯示在智能電話主畫面上或者個人計算機的桌面畫面上的功能有關的圖標(對應于與功能有關的圖像的例子)的圖像來指定協(xié)作功能，并且可以顯示與協(xié)作功能有關的信息。在該情況下，可以根據(jù)圖像的鏈接或疊置順序來改變顯示協(xié)作功能的優(yōu)先級順序。

根據(jù)上述第一和第二示例性實施方式和第一至第十一修改例，通過應用ar技術(shù)指定使用彼此協(xié)作的目標設備的功能的協(xié)作功能，并顯示與該協(xié)作功能有關的信息。因而，即使用戶從設備的外觀并不知道哪個協(xié)作功能可以由彼此協(xié)作的目標設備執(zhí)行，也向用戶提供了與協(xié)作功能有關的信息。此外，通過使設備彼此協(xié)作，不能由單一設備執(zhí)行的功能變得可用，從而可以提供便利。此外，僅通過應用ar技術(shù)識別彼此協(xié)作的目標設備而使得協(xié)作功能變得可用。因此，與用戶手動執(zhí)行設置以執(zhí)行協(xié)作功能的情形相比，通過簡單操作就使得協(xié)作功能變得可用，因而可以減小用戶的勞動。

在多個設備由多個用戶使用的環(huán)境中，在每個用戶的終端裝置16上顯示與協(xié)作功能有關的信息。例如，即使從設備上移除了例如觸摸屏的用戶接口，終端裝置16也可以充當用戶接口，并在每個用戶的終端裝置16上顯示與協(xié)作功能有關的信息。在另一種情況下，例如，如果用戶在行動中臨時使用多個設備，則顯示適于用戶的用戶接口，即顯示與使用用戶指派并彼此協(xié)作的目標設備的功能的協(xié)作功能有關的信息的用戶接口。

在上述第一和第二示例性實施方式和第一至第十一修改例中執(zhí)行協(xié)作功能的操作中，如果通過預先捕捉設備的圖像或者通過接收借助另一個用戶的識別而獲得的設備識別信息和設備的圖像已經(jīng)識別出設備，則該設備識別信息和設備的圖像可以存儲在服務器14的存儲器或終端裝置16中，可以通過激活編輯畫面以執(zhí)行協(xié)作功能來從存儲器中讀取該設備識別信息和設備的圖像，設備的圖像可以彼此鏈接或彼此疊置，由此可以執(zhí)行協(xié)作功能。下面，將參照圖35描述具體例子。圖35例示了在終端裝置16上顯示的編輯畫面196。例如，在編輯畫面196上，顯示了與pc(a)有關的設備圖像66、與mfp(b)有關的設備圖像64、與投影儀(c)有關的設備圖像138、以及與照相機(d)有關的設備圖像198。如上所述，這些圖像是先前已經(jīng)獲得并存儲在服務器14的存儲器或者終端裝置16中的圖像。當執(zhí)行協(xié)作功能時，這些圖像從存儲器中讀取并顯示在編輯畫面196上。如上所述，通過在編輯畫面196上鏈接或疊置圖像而執(zhí)行協(xié)作功能。通過執(zhí)行這種處理，無需在每次執(zhí)行協(xié)作功能時都捕捉先前已經(jīng)識別的設備的圖像，并且可以有效地執(zhí)行協(xié)作功能。此外，僅顯示照相機捕捉的設備的圖像，因此可以提高要操作的設備的可視性。

例如，通過硬件資源和軟件資源之間的協(xié)作實現(xiàn)圖像形成裝置10、終端裝置12和16、以及服務器14和14a中的每個。具體而言，圖像形成裝置10、終端裝置12和16、以及服務器14和14a中的每一個包括一個或多個處理器，例如中央處理器(cpu)，未對此加以例示。該一個或多個處理器讀取并執(zhí)行存儲在存儲裝置(未示出)中的程序，由此實現(xiàn)圖像形成裝置10、終端裝置12和16、以及服務器14和14a的各個單元的功能。該程序通過例如壓縮盤(cd)或數(shù)字通用盤(dvd)的記錄介質(zhì)、或者通過例如網(wǎng)絡的通信路徑存儲在存儲裝置中。另選地，可以通過例如處理器或電子電路之類的硬件資源實現(xiàn)圖像形成裝置10、終端裝置12和16、以及服務器14和14a的各個單元?？梢詫⒗绱鎯ζ鞯难b置用于該實現(xiàn)。另選地，可以通過數(shù)字信號處理器(dsp)或現(xiàn)場可編程門陣列(fpga)實現(xiàn)圖像形成裝置10、終端裝置12和16、以及服務器14和14a的各個單元。

以上出于例示和說明的目的而描述了本發(fā)明的示例性實施方式。以上描述并非是窮盡的，也不是為了將本發(fā)明限于所公開的確切形式。顯然，對本領域技術(shù)人員而言，許多修改和變型是顯而易見的。所選取并描述的實施方式是為了最佳地說明本發(fā)明的原理和實際應用，由此使得本領域其他技術(shù)人員能夠理解本發(fā)明的各種示例性實施方式和各種修改適于所設想的特定用途。本發(fā)明的范圍由所附權(quán)利要求書及其等同物限定。