專利名稱:信息處理設備及其方法
技術領域:
本申請大體涉及圖像形成設備的管理。
背景技術:
圖像形成設備(例如,打印機)有時會出現(xiàn)一些錯誤和故障。修理圖像形成設備可能非常復雜,并且一些圖像形成設備太大以至于不易將這些圖像形成設備搬運至修理廠。
發(fā)明內(nèi)容
本發(fā)明的其中一方面涉及對圖像形成設備進行管理。此外,本發(fā)明的其中一方面涉及使用增強現(xiàn)實(augmented reality)來對圖像形成設備進行管理。在一些實施例中,一種信息處理設備,用于與客戶端設備和圖像形成設備進行通信,所述信息處理設備包括:接收單元,用于從所述圖像形成設備接收狀況信息;發(fā)送單元,用于將包括與所述圖像形成設備的第一操作有關的增強現(xiàn)實指導的增強現(xiàn)實信息發(fā)送至所述客戶端設備,其中所述增強現(xiàn)實信息將所述增強現(xiàn)實指導疊加在所述客戶端設備所捕獲的圖像上;獲得單元,用于獲得源自于所述圖像形成設備并且包括對所述圖像形成設備內(nèi)發(fā)生的錯誤的表示的信息,該信息源自于利用所述圖像形成設備進行的所述第一操作;判斷單元,用于基于所述獲得單元所獲得的信息來判斷所述錯誤;以及傳送單元,用于基于所判斷出的錯誤來傳送包括附加增強現(xiàn)實指導的增強現(xiàn)實信息。在一些實施例中,一種信息處理設備,用于與服務器設備和圖像形成設備進行通信,所述信息處理設備包括:接收單元,用于接收包括針對所述圖像形成設備的第一操作的增強現(xiàn)實指導的增強現(xiàn)實信息,其中所述增強現(xiàn)實信息將所述增強現(xiàn)實指導疊加在所述信息處理設備所捕獲的圖像上;顯示控制單元,用于命令所述信息處理設備顯示所述增強現(xiàn)實指導;以及獲得單元,用于獲得源自于利用所述圖像形成設備所進行的所述第一操作的信息,并且使用所獲得的信息來判斷所述圖像形成設備內(nèi)發(fā)生的錯誤,其中,所述接收單元還接收包括如下附加增強現(xiàn)實指導的增強現(xiàn)實信息,其中所述附加增強現(xiàn)實指導呈現(xiàn)用于從所述錯誤恢復的操作。在一些實施 例中,一種信息處理設備所進行的方法,所述信息處理設備用于與客戶端設備和圖像形成設備進行通信,所述方法包括:從所述圖像形成設備接收狀況信息;發(fā)送用于命令所述客戶端設備顯示針對所述圖像形成設備的第一操作的增強現(xiàn)實指導的第一增強現(xiàn)實信息,其中所述第一增強現(xiàn)實信息將所述增強現(xiàn)實指導疊加在所述客戶端設備所捕獲的圖像上;獲得源自于利用所述圖像形成設備進行的所述第一操作并且包括與所述圖像形成設備內(nèi)發(fā)生的錯誤有關的標記的信息;基于所獲得的信息來判斷所述錯誤;以及傳送第二增強現(xiàn)實信息,其中所述第二增強現(xiàn)實信息用于命令所述客戶端設備顯示用以從所判斷出的錯誤恢復的其它增強現(xiàn)實指導。在一些實施例中,一種信息處理設備所進行的方法,所述信息處理設備用于與服務器設備和圖像形成設備進行通信,所述方法包括:接收包括用以顯示針對所述圖像形成設備的第一操作的增強現(xiàn)實指導的命令的增強現(xiàn)實信息,其中所述增強現(xiàn)實信息將所述增強現(xiàn)實指導疊加在所述信息處理設備所捕獲的圖像上;顯示所述增強現(xiàn)實指導;獲得源自于利用所述圖像形成設備所進行的所述第一操作的信息;基于所獲得的信息來判斷所述圖像形成設備內(nèi)發(fā)生的錯誤;以及接收包括如下命令的其它增強現(xiàn)實信息,其中該命令用于顯示用以從所述錯誤恢復的其它增強現(xiàn)實指導。
圖1A例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖1B例示多功能外圍裝置的示例實施例。圖1C例示移動裝置的示例實施例。圖1D例示移動裝置的示例實施例。圖1E例示增強現(xiàn)實服務的示例實施例。圖1F例示裝置管理服務的示例實施例。圖1G例示裝置分析服務的示例實施例。圖1H例示消息服務的示例實施例。圖1I例示移動裝置的示例實施例。圖2A例示用于使裝置管理應用程序在MFP上運行的方法的示例實施例。圖2B例示用于識別 MFP中的錯誤的方法的示例實施例。圖3例示用于向移動裝置發(fā)送AR信息的示例實施例。圖4例示用于識別如何修復頻繁發(fā)生的錯誤的方法的示例實施例。圖5例示用于識別如何修復錯誤的方法的示例實施例。圖6例示用于顯示AR信息的方法的示例實施例。圖7例示用于顯示AR信息的方法的示例實施例。圖8例示用于選擇錯誤解決方案的方法的示例實施例。圖9例示用于選擇錯誤解決方案的方法的示例實施例。圖10例示用于獲得AR信息的方法的示例實施例。圖11例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖12例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖13例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖14例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖15例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖16例示AR移動應用程序所用的界面的示例實施例。圖17A例示AR移動應用程序所用的界面的示例實施例。圖17B例示AR移動應用程序所用的界面的示例實施例。圖18例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖19例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖20例示用戶移動應用程序所用的界面的示例實施例。圖21例示用戶移動應用程序所用的界面的示例實施例。圖22例示用戶移動應用程序所用的界面的示例實施例。
圖23例示移動裝置的示例實施例。圖24例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖25例示使用用于對圖像形成設備進行維修的系統(tǒng)的服務呼叫的概述的示例實施例。圖26例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。圖27例示用于通過AR指導來提供解決方案的方法的示例實施例。
具體實施例方式以下公開內(nèi)容描述特定的解釋性實施例。另外,這些解釋性實施例可以包括多個新穎特征,并且特定的特征對于實踐這里所述的系統(tǒng)和方法而言可能并非必不可少。以下將參考附圖來詳細說明各種示例實施例、特征和方面。圖1A例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。該系統(tǒng)包括增強現(xiàn)實(AR)服務1010、裝置管理服務1008、裝置分析服務1011、推薦服務1012、大數(shù)據(jù)分析服務1007、遞送服務1002和多功能外圍裝置(MFP) 1000。MFP 1000可以是多功能打印機、單功能打印機、傳真機等。這些服務可以作為云服務(cloud service)(例如,分布式計算服務)來實現(xiàn)。云服務可以在一個以上虛擬機上運行。虛擬機可以在一個以上物理處理器(例如,包括中央處理單元(CPU)、GPU和其它硬件電路)以及/或者一個以上物理計算裝置上運行。AR服務1010提供AR信息1013的數(shù)據(jù)庫內(nèi)的視頻和建模數(shù)據(jù)以進行容易的裝置操作指導。裝置分析服務1011例如基于一個以上算法來識別MFP 1011的裝置錯誤并判斷該錯誤的原因。裝置管理服務1008識別該裝置并提供用于對錯誤的原因進行分析的錯誤歷史記錄。例如,MFP 1000 可以經(jīng)由 HTTPS/REST (Representational State Transfer,表述性狀態(tài)轉移)(參見圖1B)、將MFP 1000的序列號/當前裝置配置信息發(fā)送至裝置管理服務1008。MFP 1000還將其的例如錯誤和卡紙的狀況和日志發(fā)送至裝置管理服務1008。移動裝置1001正執(zhí)行的移動應用程序可以將MFP 1000的序列號發(fā)送至裝置管理服務1008??梢越?jīng)由用戶界面(例如,參見圖11)、經(jīng)由光學字符識別(OCR)應用程序、或者經(jīng)由QR碼識別應用程序來輸入MFP 1000的序列號。OCR應用程序可以在從標簽或前面板捕獲到裝置信息之后讀取MFP 1000的序列號。QR碼識別應用程序可以在捕獲到QR碼之后識別序列號。將MFP1000的序列號發(fā)送至裝置管理服務1008。移動應用程序可以利用裝置分析服務1011登錄知識庫(KB) 1015,以提供用以解決錯誤的解決方案。此外,裝置分析服務1011可以在得知如何修復問題之后登錄KB 1015??梢岳醚b置管理服務1008來獲得位置、序列號、計數(shù)器和錯誤日志,并且裝置管理服務1008可以將該信息存儲在數(shù)據(jù)庫1009中。裝置分析服務1011可以經(jīng)由裝置管理服務1008訪問數(shù)據(jù)庫1009。數(shù)據(jù)分析服務1011可以經(jīng)由裝置管理服務1008參考KB 1015和(存儲有位置、序列號、計數(shù)器、錯誤日志的)數(shù)據(jù)庫1009中的一個或多個,以確定針對錯誤的解決方案,并且確定針對相應AR信息的AR標志。推薦服務1012在無法找到特定解決方案的情況下提供候選解決方案。裝置分析服務1011和/或推薦服務1012可以將這些候選解決方案和/或AR標志發(fā)送至AR服務1010。
由于如Exxx那樣的錯誤代碼與實際錯誤相對應,因此裝置分析服務1011可以選擇與特定錯誤相對應的AR標志。基于裝置分析服務1011所選擇的AR標志,AR服務1010從AR信息1013的數(shù)據(jù)庫獲得例如AR視頻和/或AR建模數(shù)據(jù)(例如,描述形狀、坐標等以進行AR圖示的三維數(shù)據(jù))的AR信息。此外,AR服務1010所提供的AR信息可以將AR指導與移動裝置1001的照相機所拍攝的實時視頻/圖像進行合成。AR服務1010將所獲得的AR信息經(jīng)由網(wǎng)絡發(fā)送至移動裝置1001。參考錯誤歷史記錄,裝置管理服務1008預測應當對裝置的哪部分進行修復、并且可以找到適當?shù)腁R信息以發(fā)送至并顯示在移動裝置1001上。在錯誤歷史記錄表示多次發(fā)生卡紙的情況下,可能存在針對錯誤的特定解決方案。以下提供針對錯誤歷史記錄的詳細解釋。推薦可以給出一些可能的解決方案,并且各解決方案可以關聯(lián)至AR信息。此外,該系統(tǒng)可以根據(jù)用于修復錯誤的處理來提供多個AR信息。有時用戶可能需要中斷包括AR信息的視頻(還稱為“AR視頻”)。例如,在用戶正在操作某物而無法觀看AR視頻的情況下,該用戶可以停止該AR視頻。例如通過按下按鈕或者“進入下一個”按鈕,AR視頻提供用以和用戶互動的界面,以提供逐步指導??梢蕴峁┘磿r消息(頂),并且頂可以與移動裝置1001上的應用程序互動。通過使用頂和消息服務1006,用戶/維修技術員可以與老板/服務中心的專家聊天。在大數(shù)據(jù)分析服務1007中使用諸如Mahout (開放源代碼機器學習系統(tǒng))等的可擴展機器學習技術。該大數(shù)據(jù)分析服務使用在各用戶/維修技術員之間的消息服務1006和維護社交網(wǎng)絡平臺1005的通信結果。圖11的裝置管理聊天1504示出使用維護社交網(wǎng)絡平臺1005和消息服務1006在各用戶/維修技術員之間的通信的一個示例。在需要訂購零部件的情況下,用戶或維修技術員可以通過使用用于與訂購服務1003和/或遞送服務1002進行通信的用戶移動應用程序(例如,參見圖1C)或維修技術員移動應用程序(例如,參見圖1D)來訂購該零部件。圖1B例示包括裝置維護應用程序的模塊結構的多功能外圍裝置1000的示例實施例。裝置維護應用程序在MFP 1000上運行并且包括以下組件:U1、管理、配置、日志處理程序、云客戶端服務、認證、HTTP、REST、專有命令(CPCA)和XML轉換器。用戶可以使用Π組件與裝置維護應用 程序進行互動。管理組件進行諸如設置密碼、設置裝置管理服務的URL和設置輪詢間隔等的管理處理。配置組件獲取諸如裝置ID、裝置名稱、序列號和位置等的裝置信息,并且可以經(jīng)由CPCA組件獲取這些信息。日志處理程序組件獲取諸如錯誤日志和狀況日志等的裝置的日志,并且可以經(jīng)由CPCA組件獲取這些日志。云客戶端服務組件以云的方式與裝置管理服務1008進行通信。關于協(xié)議,裝置維護應用程序可以使用例如REST和HTTP的任何適用的協(xié)議。XML轉換器組件對發(fā)送至裝置管理服務的數(shù)據(jù)進行處理。在以云的方式訪問裝置管理服務1008之前,裝置維護應用程序可以使用認證組件對裝置管理服務1008進行認證。圖1C例示包括用戶移動應用程序的模塊結構的移動裝置1001的示例實施例。該用戶移動應用程序包括以下組件:u1、AR處理程序、云服務處理程序、地理位置處理程序、AR庫、認證、REST和XMPP。終端用戶可以經(jīng)由UI組件與用戶移動應用程序進行互動。AR處理程序組件將AR信息從AR庫提供至Π組件。AR處理程序組件將識別出的對象與視頻進行合成。云服務處理程序組件例如經(jīng)由REST和/或XMPP協(xié)議來與AR服務1010、消息服務1006、推薦服務1012和/或裝置分析服務1011進行通信。云服務處理程序組件還與維護社交網(wǎng)絡平臺1005和消息服務1006進行通信從而與維修技術員進行通信。在需要訂購裝置的替換零部件的情況下,云服務處理程序組件可以訪問訂購服務1003和/或遞送服務1002。云服務處理程序組件可以將針對維修人員的消息發(fā)送至消息服務1006,從AR服務1010獲取AR信息,并且/或者從裝置分析服務1011獲取分析結果。在訪問這些服務之前,可能需要由認證組件進行認證。地理位置處理程序組件提供位置信息。圖1D例示包括維修技術員移動應用程序的模塊結構的移動裝置1001的示例實施例。該維修技術員移動應用程序包括以下組件:U1、云服務處理程序、地理位置處理程序、認證、REST和XMPP。維修技術員可以經(jīng)由UI組件與維修技術員移動應用程序進行互動。云服務處理程序組件例如經(jīng)由REST和/或XMPP協(xié)議來與維護社交網(wǎng)絡平臺1005、消息服務1006和裝置分析服務1011進行通信。在需要訂購裝置的替換零部件的情況下,云服務處理程序組件可以訪問訂購服務1003和/或遞送服務1002。云服務處理程序可以將終端用戶消息發(fā)送至消息服務,并從裝置分析服務1011獲取分析結果。在訪問這些服務之前,可能需要由認證組件進行認證。地理位置處理程序組件提供位置信息。圖1E例示包括AR服務1010的模塊結構的增強現(xiàn)實服務的示例實施例。AR服務1010包括以下組件:U1、管理、配置、DB訪問機、認證驗證機、訪問控制驗證機和REST。用戶可以經(jīng)由UI組件與AR服務1010進行互動。AR服務1010的管理員可以使用管理組件來管理如視頻和建模數(shù)據(jù)這樣的AR信息、管理誰可以訪問這些服務、以及管理該服務的證書。配置組件維護所處理請求的最大數(shù)量、用以訪問AR信息存儲器的密碼、以及用以接收REST請求的API密鑰。REST組件從例如用戶/維修技術員移動應用程序的客戶端接收請求。在REST組件接收到這些請求的情況下,在提供該服務之前,可以由認證驗證機組件和訪問控制驗證機組件分別進行認證和訪問控制。DB訪問機從AR信息存儲器中檢索或在AR信息存儲器內(nèi)存儲例如視頻和建模數(shù)據(jù)的AR信息。圖1F例示包括模塊結構的裝置管理服務1008的示例。裝置管理服務1008包括以下模塊:U1、管理、配置、DB訪問機、認證驗證機、訪問控制驗證機和REST/WS。用戶可以經(jīng)由UI組件與該服務進行互動。該服務的管理員可以通過使用管理組件來管理裝置信息、客戶信息、維修人員信息、針對該服務 的訪問權限和該服務的證書。配置組件維護所處理請求的最大數(shù)量、用以訪問各數(shù)據(jù)庫的密碼、以及用以接收REST/WS請求的API密鑰。REST/WS組件從例如裝置上的裝置管理應用程序和/或用戶/維修技術員移動應用程序的客戶端接收請求。在REST/WS組件接收到這些請求的情況下,在提供該服務之前,可以由認證驗證機組件和訪問控制驗證機組件進行認證和訪問控制。DB訪問機組件從裝置配置數(shù)據(jù)庫、裝置錯誤歷史記錄數(shù)據(jù)庫、客戶數(shù)據(jù)庫和維修人員信息數(shù)據(jù)庫檢索裝置配置、裝置錯誤歷史記錄、客戶信息和維修人員信息或者在這些數(shù)據(jù)庫內(nèi)存儲這些信息。圖1G例示包括模塊結構的裝置分析服務1011的示例實施例。裝置分析服務1011包括以下組件:U1、管理、配置、DB訪問機、認證驗證機、訪問控制驗證機、REST/WS和分析器。用戶可以經(jīng)由Π組件與裝置分析服務1011進行互動。該服務的管理員可以通過使用管理組件來管理知識數(shù)據(jù)庫、針對該服務的訪問權限以及該服務的證書。配置組件維護所處理請求的最大數(shù)量、用以訪問消息數(shù)據(jù)庫的密碼、以及用以接收REST或Web服務請求的API密鑰。REST/WS組件從客戶端、例如從用戶/維修技術員移動應用程序接收請求。在REST/WS接收到這些請求的情況下,在提供該服務之前,可以由認證驗證機組件和訪問控制驗證機組件進行認證和訪問控制。DB訪問機從知識數(shù)據(jù)庫或者在知識數(shù)據(jù)庫內(nèi)檢索和存儲知識。分析器組件具有如錯誤代碼組件、圖像質量組件和用戶操作組件那樣的可插入組件。為了分析MFP錯誤,可以進行不同的分析方法。錯誤代碼組件基于錯誤代碼來分析發(fā)生錯誤的原因。在知識庫數(shù)據(jù)庫中,將對如何解決錯誤的說明與各錯誤代碼相關聯(lián)。圖像質量組件分析圖像質量錯誤/問題。分析器組件基于裝置計數(shù)器信息和測量得到的圖像中的顏色來分析發(fā)生錯誤的原因。用戶操作組件分析用戶所進行的誤操作,并分析介質類型和裝置配置。圖1H例示包括模塊結構的消息服務1006的示例實施例。消息服務1006包括以下組件:U1、管理、配置、DB訪問機、認證驗證機、訪問控制驗證機和REST。用戶可以經(jīng)由UI組件與該服務進行互動。該服務的管理員可以通過使用管理組件來管理數(shù)據(jù)庫內(nèi)的消息、管理針對該服務的訪問權限、以及管理該服務的證書。配置組件管理所處理請求的最大數(shù)量、用以訪問消息數(shù)據(jù)庫的密碼、以及用以接收REST的API密鑰。REST組件從例如用戶/維修技術員移動應用程序的客戶端接收請求。在REST組件接收到這些請求的情況下,在提供該服務之前,可 以由認證驗證機組件和訪問控制驗證機組件進行認證和訪問控制。DB訪問機組件從消息數(shù)據(jù)庫檢索或者在消息數(shù)據(jù)庫內(nèi)存儲消息。圖1I例示移動裝置的示例實施例。如圖1I所示,用戶將移動裝置的照相機指向MFP IOOO0移動用戶應用程序將所拍攝動畫和如下的AR信息(例如,視頻和建模數(shù)據(jù))合并,其中該AR信息示出用于實現(xiàn)解決方案的指導。在一些實施例中,利用移動裝置(例如,參見圖23)將AR信息(例如,視頻和建模數(shù)據(jù))與所拍攝動畫及時地合并。圖23例示移動裝置的示例實施例。將各模塊(例如,圖1C和/或圖1D所示的各模塊)存儲在存儲器2303中。處理器2302(其可以包括一個以上微處理器以及其它硬件電路)執(zhí)行這些模塊中的指令并且/或者實現(xiàn)以流程圖示出的針對移動裝置1001的算法。處理器2302可以包括多個核、多個CPU和/或GPU。移動裝置1001包括發(fā)送/接收單元2301,其中發(fā)送/接收單元2301用于控制數(shù)據(jù)發(fā)送處理和數(shù)據(jù)接收處理??梢杂梢粋€以上處理器、計算機可讀介質(例如,RAM、閃速存儲器、磁性存儲器)、以及/或者其它電路(例如,集成電路、離散電路)來實現(xiàn)一個以上單元。處理器2302控制發(fā)送/接收單元2301、存儲器2303、傳感器2304和I/O單元2305。I/O單元2305包括揚聲器2309、包含顯示控制單元的顯示單元2307、鍵單元2308、麥克風2310以及一個以上照相機2306。用戶可以經(jīng)由鍵單元2308輸入數(shù)據(jù)和命令,并且圖11的顯示器1505可以包括用于接受用戶或維修技術員的輸入的觸摸面板功能。用戶或維修技術員可以經(jīng)由顯示在移動裝置1001的顯示單元上的用戶界面來提供各種輸入。移動裝置1001被配置為與主計算機2400和MFP 1000 (例如,參見圖24)進行通信。發(fā)送/接收單元2301被配置為接收如下的AR信息,其中該AR信息用于控制移動裝置1001,以通過將與MFP 1000的操作有關的AR指導疊加在移動裝置1001所拍攝的MFP 1000的圖像上來顯示該AR指導,并且該AR指導與接收到的AR信息相對應。顯示控制單元控制移動裝置1001從而顯示用以指導用戶對MFP 1000進行操作的AR指導。根據(jù)用戶基于顯示控制單元所顯示的AR指導而進行的操作,發(fā)送/接收單元2301獲得源自于MFP 1000的信息。發(fā)送/接收單元2301使用該信息來確定MFP 1000內(nèi)已發(fā)生錯誤。發(fā)送/接收單元2301接收AR信息,并且處理器2302控制移動裝置1001以顯示用以從該錯誤恢復的附加AR指導。
圖24例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。MFP 1000被配置為從主計算機2400接收打印數(shù)據(jù)并基于接收到的打印數(shù)據(jù)進行打印。例如主計算機2400的一個以上計算機進行圖1A的1002 1012所示的服務。MFP 1000將例如圖1B所示的各模塊的這些模塊存儲在外部存儲器14中、并將這些模塊載入RAM 19。CPU 12和主計算機2400的CPU I可以包括多個核、CPU和/或GPU。在主計算機2400中,CPU I根據(jù)存儲在RAM 2中的一個以上程序來控制連接至系統(tǒng)總線的各種裝置。RAM 2還用作主存儲器或CPU I的工作區(qū)域。ROM 3存儲例如圖1E 圖1H所示的各模塊的各種程序和數(shù)據(jù),并且ROM 3包括用于存儲各程序或數(shù)據(jù)的各種存儲區(qū)域。例如,ROM 3可以包括用于存儲各種字體數(shù)據(jù)的字體ROM 3a、用于存儲引導程序或BIOS的程序R0M3b、以及用于存儲數(shù)據(jù)的數(shù)據(jù)ROM 3c。鍵盤控制器(KBC)5控制經(jīng)由鍵盤(KB)9或指示裝置(鼠標)接收命令或數(shù)據(jù)。CRT控制器(CRTC) 6控制CRT顯示器(CRT) 10的顯示操作。盤控制器(DKC) 7控制針對諸如硬盤等的外部存儲器11的訪問。打印機控制器(PRTC)8經(jīng)由雙向接口連接至MFP 1000并且控制主計算機2400和MFP 1000之間的通信。PRTC 8和I/O單元18可以符合預定網(wǎng)絡協(xié)議和包括無線協(xié)議的其它通信協(xié)議。外部存儲器11可以包括硬盤(HD)、磁光盤(MO)、軟盤和/或光盤(例如,CD、藍光盤)??梢园ù鎯υ谀K中的自定義工具程序(以下簡稱為自定義工具)的應用程序從外部存儲器11被載入RAM 2內(nèi)并且由CPU I來執(zhí)行。CPU I還將打印數(shù)據(jù)轉換(光柵化)成輪廓字體數(shù)據(jù)并將由此得到的數(shù)據(jù)存儲在RAM 2中,使得可以將由此產(chǎn)生的數(shù)據(jù)以WYSIWYG (所見即所得)方式顯示在CRT 10上。在例如通過利用鼠標光標點擊CRT 10上的特定點發(fā)出命令的情況下,CPU I根據(jù)該命令打開相應窗口并進行數(shù)據(jù)處理。主計算機2400與移動裝置1001和MFP 1000進行通信。此外,PRTC 8被配置為接收狀況信息。PRTC 8還被配置為發(fā)送如下的AR信息,其中該AR信息用于命令移動裝置1001、以通過將與MFP 1000的操作有關的AR指導疊加在移動裝置1001所拍攝的圖像上來顯示該AR指導。該AR信 息與接收到的狀況信息相對應。PRTC 8被配置為獲得如下信息(例如,參見圖16,MFP1000所掃描的圖像),其中該信息是MFP 1000根據(jù)由顯示在移動裝置1001(或其它客戶端裝置)上的AR指導所指導的用戶操作所生成的(例如,打印輸出物、圖像),并且包括與MFP 1000內(nèi)所發(fā)生的錯誤有關的標記。此外,主計算機2400中的CPUI基于PRTC 8所獲得的信息來確定錯誤。并且,PRTC 8傳送如下的AR信息,其中該AR信息用于控制移動裝置1001以顯示用以從所確定的錯誤恢復的AR指導。現(xiàn)在,說明MFP 1000的結構。CPU 2通??刂芃FP 1000的操作。RAM 19不僅可用作主存儲器和CPU 12的工作區(qū)域,還可用作以輸出形式存儲有信息的區(qū)域、以及存儲有環(huán)境數(shù)據(jù)的區(qū)域。RAM 19還包括NVRAM(非易失性RAM)區(qū)域,并被設計成通過將可選RAM連接至擴展口(未示出)從而在存儲容量方面可擴展。ROM 13包括:字體ROM 13a,用于存儲各種字體數(shù)據(jù);程序ROM 13b,用于存儲CPU 12所執(zhí)行的控制程序;以及數(shù)據(jù)ROM 13c,用于存儲各種數(shù)據(jù)。I/O單元18將數(shù)據(jù)發(fā)送至主計算機2400或者從主計算機2400接收數(shù)據(jù),并且I/O單元18提供針對可以包括因特網(wǎng)的網(wǎng)絡的接口。掃描器21可以讀取紙張以生成圖像數(shù)據(jù)。針對外部存儲器14的訪問由存儲器控制器(MC) 20來控制。外部存儲器14例如可以包括HD、MO、軟盤(FD)或IC卡。外部存儲器14用于存儲字體數(shù)據(jù)、仿真程序、表單數(shù)據(jù)等。在沒有連接諸如硬盤等的外部存儲器14的情況下,將主計算機2400所使用的信息存儲在ROM 13的數(shù)據(jù)ROM 13c中。不特別限制外部存儲器14的數(shù)量。例如,還可以連接用于提供除了內(nèi)置字體數(shù)據(jù)以外的可選字體數(shù)據(jù)的可選字體卡、或者存儲有用于解釋附加打印機控制語言的程序的外部存儲器。操作單元1501具有用戶輸入命令或數(shù)據(jù)所經(jīng)由的操作面板。該操作面板例如包括開關和LED指示器。該操作面板還可以包括用于存儲經(jīng)由該操作面板接收到的打印機模式設置信息的NVRAM。根據(jù)存儲在ROM 13的程序ROM 13b中的控制程序,CPU12將圖像信號作為輸出信息經(jīng)由打印單元接口 16輸出至打印單元(打印機引擎)17。CPU 12能夠經(jīng)由I/O單元18與主計算機2400進行通信。例如,CPU 12能夠接收從主計算機2400發(fā)送來的打印數(shù)據(jù),以及將表示MFP 1000的狀況的信息發(fā)送至主計算機2400。此外,圖1E、圖1F和圖1H可以在云OS上實現(xiàn)。云OS包括分布式系統(tǒng)。云OS在一個以上計算機上運行。云OS管理成網(wǎng)絡的存儲器,并且該成網(wǎng)絡的存儲器存儲圖1E、圖1F和圖1H所述的各模塊。例如,一個以上CPU執(zhí)行圖1E、圖1F和圖1H所述的各模塊中的指示,以實現(xiàn)這里所述的各方法。圖2A例示用于使裝置維護應用程序在MFP上運行的方法的示例實施例。該方法至少一部分由MFP 100來進行。例如,當MFP 1000啟動時,在塊2001中開始裝置維護應用程序。在塊2002中,裝置維護應用程序將包括錯誤代碼的錯誤日志發(fā)送至裝置管理服務1008。例如,裝置維護應用程序周期性地將錯誤日志發(fā)送至裝置管理服務1008。當發(fā)生錯誤時,裝置管理應用程序將該錯誤的通知發(fā)送至裝置管理服務1008。在例示用于識別MFP中的錯誤的方法的示例實施例的圖2B中,在塊201中,在MFP1000上運行的裝置維護應用程序識別出已發(fā)生了一個以上錯誤。在塊202中,裝置維護應用程序判斷MFP的固件是 否可以生成QR碼(例如,該固件是否仍具有足以生成QR碼的功能性)。如果該固件可以生成QR碼(塊202= “是”),則該流程進入塊203,其中在塊203中,裝置維護應用程序(或MFP 1000的其它組件)生成可以包括錯誤代碼和其它裝置信息的QR碼。接著,在塊204中,MFP 1000將該QR碼顯示在顯示面板上。然而,如果在塊202中該固件無法生成QR碼(塊202= “否”),則該流程進入塊205,其中在塊205中MFP 1000將錯誤代碼顯示在顯示面板上。在裝置管理服務1008接收到錯誤代碼/QR碼之后,裝置管理服務1008將該錯誤代碼/QR碼發(fā)送至裝置分析服務1011,其中裝置分析服務1011基于該錯誤代碼來搜索特定解決方案。在頻繁發(fā)生錯誤的情況下,裝置分析服務1011分析修理/更換某些零部件的可能性。在解決方案是零部件修理或更換的情況下,裝置分析服務1011向移動裝置1001發(fā)送通知。在要使用圖1C的用戶移動應用程序來采購某些零部件的情況下,該流程進入采購處理。圖1C的用戶移動應用程序將針對該零部件的訂單發(fā)送至訂購服務1003。此外,在必須采購任一零部件的情況下,圖1C的用戶移動應用程序從AR服務1010獲取用于識別需要更換的零部件的AR信息。此外,該AR信息向用戶示出如何修復錯誤,這包括更換零部件。例如,該AR信息可以示出用于解決與廢調色劑滿(例如,廢調色劑容器已滿)有關的問題、以及關于對鏡進行清潔的問題的解決方案。
在用戶接收到新的/修理后的零部件的情況下,用戶的移動應用程序捕獲該零部件的QR碼,使用NFC (近場通信)來獲取零部件編號,或者通過手動輸入來接收該零部件編號。圖1C的用戶移動應用程序識別AR標志并從AR服務1010獲取AR信息。基于該AR信息,該移動應用程序示出AR指導(其向用戶示出如何修復錯誤)并識別要修復的零部件。例如,該AR信息可以在移動裝置1001的顯示器上示出用于更換定影器的過程。在多個解決方案與該錯誤相對應的情況下,用戶可以經(jīng)由用戶移動應用程序將消息經(jīng)由消息服務1006發(fā)送至服務聯(lián)系人。消息服務聯(lián)系人接收到該消息,確定哪個解決方案適當,并對用戶作出應答。在用戶從服務聯(lián)系人接收到解決方案的情況下,如果無需進行更換零部件采購,則該用戶也接收AR信息。如果需要進行采購,則該流程進入采購處理。圖3例示用于向移動裝置發(fā)送AR信息的方法的示例實施例。該方法可以由裝置分析服務1011來進行。該流程開始,并且在塊3001中,裝置分析服務1011接收來自裝置維護服務1008的通知。如果接收到的錯誤表示特定錯誤(塊3002= “是”),則在塊3004中,裝置分析服務1011將該錯誤提交至KB數(shù)據(jù)庫,并且該流程進入塊3005。如果接收到的錯誤不是特定錯誤(塊3002= “否”),則在塊3003中,裝置分析服務1011使用錯誤日志、裝置配置、掃描打印圖 像、錯誤的知識庫和/或服務信息來分析該錯誤,并且該流程進入塊3005。在塊3005中,裝置分析服務1011檢查解決方案是否是一個修復過程。如果該解決方案是一個修復過程,則在塊3006中,裝置分析服務1011基于與AR信息相對應的AR標志,針對用戶或維修技術員創(chuàng)建例如檢查紙倉的電源或檢查串行線纜的連接的解決方案信息(用以修復錯誤的裝置修理過程)。如果存在多個候選解決方案(塊3005= “否”),則在塊3007中,裝置分析服務1011在與推薦服務1012進行通信之后,利用AR標志創(chuàng)建推薦/可能的解決方案,并且該流程進入塊3008。在塊3008中,裝置分析服務1011確認移動裝置1001內(nèi)的用戶(或維修技術員)移動應用程序是否已開啟、連接并登錄。在用戶(或維修技術員)移動應用程序在線的情況下(塊3008#是”),在塊3009中,該應用程序向用戶/維修技術員通知解決方案或推薦,該用戶/維修技術員可以注冊到與發(fā)生該錯誤的裝置相關聯(lián)的(位于數(shù)據(jù)庫1009內(nèi)的)用戶數(shù)據(jù)庫或維修技術員數(shù)據(jù)庫中,然后該流程結束。在移動應用程序離線的情況下(塊3008= “否”),在塊3010中,將該通知存儲在移動裝置1001內(nèi)的用戶/維修技術員的收件箱中,并且該流程結束。圖4例示用于識別如何修復頻繁發(fā)生的錯誤的方法的示例實施例。圖4是圖3中的塊3003的一個示例。在該示例中,錯誤是卡紙。為了分析該卡紙錯誤,在塊4001中,裝置分析服務1011首先經(jīng)由裝置管理服務1008參考數(shù)據(jù)庫1009內(nèi)的錯誤日志/歷史記錄。如果裝置分析服務1011判斷為這些日志表示頻繁發(fā)生卡紙(塊4002= “是”),則在塊4003中,裝置分析服務1011參考KB1009內(nèi)的MFP 1000的裝置配置,從而獲取介質類型。然后,在塊4005中,裝置分析服務1011判斷出該錯誤的原因是裝置未選擇合適的介質類型,并且判斷出應當改變介質類型、例如從重磅紙改變?yōu)槠胀埢蛘邚钠胀埜淖優(yōu)橹匕跫垺T趬K4005中,裝置分析服務1011獲取向用戶/維修技術員示出如何改變介質類型的AR視頻標志,然后該流程結束。如果裝置分析服務1011判斷為最近發(fā)生卡紙不多(塊4002=“否”),則該流程進入塊4004中的其它分析方法,然后該流程結束。圖5例示用于識別如何修復錯誤的方法的示例實施例。該方法至少部分可以由裝置分析服務1011來進行。圖5是圖3中的塊3003的另一示例。該示例描述在接收到作為打印質量差的錯誤的情況下如何選擇AR標志。在裝置分析服務1011接收到表示打印質量問題的錯誤的情況下,該流程進入塊5001。裝置分析服務1011可以經(jīng)由裝置管理服務1008從MFP 1000接收錯誤。在接收到的錯誤代碼表示打印質量問題的情況下,在塊5002中,裝置分析服務1011獲得打印質量差的掃描打印數(shù)據(jù)。接著,在塊5003中,裝置分析服務1011還經(jīng)由裝置管理服務1008從數(shù)據(jù)庫1009獲得計數(shù)器信息??梢詫⒃撚嫈?shù)器信息周期性地Wmfpiooo發(fā)送至裝置管理服務loos,并且數(shù)據(jù)庫1009存儲該計數(shù)器信息。如果在塊5004中計數(shù)器值接近最大數(shù)量(例如,100,000),則塊5004= “是”,并且在塊5006中,裝置分析服務1011判斷為必須替換裝置內(nèi)的定影器。此外,裝置分析服務1011選擇與用于指導用戶替換定影器的AR信息相對應的AR標志,然后該流程結束。如果在塊5004中裝置分析服務1011判斷為當前計數(shù)器未接近最大數(shù)或者未超過最大數(shù)(塊5004= “否”),則該流程進入塊5005,其中在塊5005中,裝置分析服務1011將掃描打印數(shù)據(jù)與樣本圖像進行比較。接著,在塊5007中,裝置分析服務1011判斷在掃描打印數(shù)據(jù)的紙張邊緣中是否不存在青色。如果不存在青色(塊5007=“否”),則該流程進入塊5009,其中在塊5009中,裝置分析服務1011參考KB 1015。如果存在青色(塊5007^是”),則該流程進入塊5008,其中在塊5008中,裝置分析服務1011選擇與用于指導用戶對掃描鏡進行清潔的AR信息相對應的AR標志,并且裝置分析服務1011在選擇該AR標志之后通知AR 服務 1010。為了拍攝所掃描的打印數(shù)據(jù),例如,AR信息可以指示移動裝置1001的用戶拍攝一個以上照片。在一些實施例中,AR信息指導用戶對MFP 1000進行操作以打印紙張(例如,測試紙),并指導用戶掃描該紙或拍攝該測試紙的照片。如例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例的圖15所示,在移動裝置1001中的用戶移動應用程序接收到AR信息之后,例如如移動裝置1001的顯示器所示,移動裝置1001顯示AR指導。如圖15和圖16所示,該AR指導指示用戶/維修技術員拍攝從MFP 1000輸出的紙張的照片。該AR指導(其可以疊加在來自移動裝置1001的照相機的圖像的實時取景上)提示用戶使薄片的各邊適合虛線1600,以使 得裝置分析服務1011可以進行適當?shù)膱D像識別處理。在拍攝到圖像之后,用戶移動應用程序可以自動將打印薄片的所拍攝圖像(例如,所掃描的打印數(shù)據(jù))發(fā)送至裝置管理服務1008,然后將該所拍攝圖像傳遞至裝置分析服務1011。裝置分析服務1011將打印薄片的所拍攝圖像與樣本圖像進行比較。如果裝置分析服務1011判斷為例如如圖16的1601所示、紙張的邊緣被青色著色(塊5007=“是”),則裝置分析服務1011判斷為需要對MFP 1000進行針對鏡的清潔。然后,裝置分析服務1011指定適當?shù)腁R標志并將該AR標志發(fā)送至AR服務1010。AR服務1010獲得包括AR指導的相應AR信息,并將該AR信息發(fā)送至移動裝置1001(例如,在塊5008中)。移動裝置1001顯示示出如何定位清潔器(圖17A)以及如何對鏡進行清潔(圖17B)的AR指導。如果紙張的邊緣未被青色著色(塊5007= “否”),則(例如,在塊5009中)裝置分析服務1011參考 KB 1015。圖6例示用于顯示AR信息的方法的示例實施例。當指示了啟動用戶移動應用程序時,該流程開始。在塊6001中,用戶移動應用程序識別出MFP 1000存在錯誤。例如,用戶移動應用程序可以通過使用NFC通信,基于移動裝置1001的照相機所拍攝的顯示在MFP1000上的QR碼、或者基于顯示在MFP 1000的操作面板上的經(jīng)由移動裝置1001的I/O單元手動輸入的序列號,來獲取MFP 1000的識別信息。在塊6002中,該移動應用程序基于QR碼和/或手動輸入的錯誤代碼(其可能已顯示在MFP 1000的操作面板上或者可能已經(jīng)由NFC被發(fā)送至移動裝置1001)來識別錯誤。在塊6003中,用戶移動應用程序將MFP 1000的裝置信息、識別出的MFP 1000的錯誤以及其它錯誤信息發(fā)送至裝置分析服務1011。在塊6004中,用戶移動應用程序從裝置分析服務1011接收分析結果。在塊6005中,用戶移動應用程序從AR服務1010獲取包括AR標志的推薦解決方案。如果該解決方案包括用以解決錯誤的特定方式(塊6006=“是”),則在塊6007中,用戶移動應用程序向用戶詢問該用戶是否需要聯(lián)系服務中心。如果來自用戶的輸入表示無需與服務中心聯(lián)系(塊6007= “否”),則在塊6008中,用戶移動應用程序檢查是否需要采購處理。如果用戶移動應用程序判斷為需要采購處理(塊6008= “是”),則該流程進入塊6016,其中在塊6016中,用戶移動應用程序訪問網(wǎng)站以訂購零部件。如果用戶移動應用程序判斷為無需采購處理(塊6008=“否”),則該流程進入塊6009,其中在塊6009中,用戶移動應用程序檢索AR信息。然后,在塊6010中,用戶移動應用程序顯示用以向用戶示出如何識別要修理的零部件的AR指導。并且,在塊6011中,用戶移動應用程序可以等待用戶輸入以選擇是示出逐步AR指導(例如,用于在轉入下一節(jié)之前提示用戶的視頻和建模數(shù)據(jù))、還是連續(xù)AR指導(例如,在不等待用戶輸入的情況下播放的視頻和建模數(shù)據(jù))。如果該應用程序獲得表示逐步AR指導的輸入(塊6011= “是”),則在塊6012中,將該AR指導逐步地顯示在移動裝置1001的顯示器上。在替換了 MFP 1000上的零部件之后,例如通過按下按鈕,用戶可以與用戶移動應用程序的Π進行互動以前進到下一步。如果沒有選擇逐步AR指導(塊6011=“否”),則在塊6013中,將流AR指導從AR服務1010發(fā)送至移動裝置1001。接著,該流程到達塊6014,在塊6014中,用戶移動應用程序判斷是否要再次顯示AR指導。在接收到表示重復的輸入的情況下(塊6014= “是”),AR服務1010和/或用戶移動應用程序重放該AR指導。
`
如果不播放該重復,則流程進入塊6015,其中在塊6015中,用戶移動應用程序判斷所發(fā)生錯誤是否已被修復。如果MFP1000仍存在錯誤、例如盡管錯誤已被修復但還存在其它錯誤或者錯誤未被修復(塊6015= “否”),則該流程返回至塊6003,其中在塊6003中,將該錯誤信息經(jīng)由裝置管理服務1008發(fā)送至裝置分析服務1011。在用戶移動應用程序判斷為錯誤已被修復的情況下(塊6015= “是”),該流程進入塊6024,其中在塊6024中,用戶移動應用程序打開文本對話框并示出“喜歡”按鈕。在塊6024中接收到采用在文本框內(nèi)輸入的消息和/或通過按下“喜歡”或“不喜歡”按鈕的形式的用戶輸入。接著,在塊6025中,將反饋發(fā)送至維護社交網(wǎng)絡平臺1005,然后該流程結束。如果在塊6006中用戶移動應用程序發(fā)現(xiàn)不存在針對錯誤的特定解決方案(塊6006= “否”),則在塊6017中,用戶移動應用程序顯示從推薦服務1012接收到的推薦解決方案。接著,在塊6018中,用戶移動應用程序從裝置管理服務1008所維護的客戶信息(例如,其可能位于數(shù)據(jù)庫1009內(nèi)的客戶數(shù)據(jù)庫中)檢索服務聯(lián)系人信息。然后,在塊6019中,用戶移動應用程序示出消息對話框。在塊6020中將用戶所輸入的消息發(fā)送至消息服務1006,其中用戶移動應用程序從消息服務1006上傳該消息和解決方案ID。在塊6021中,用戶移動應用程序例如經(jīng)由消息服務1006來接收請求ID。接著,在塊6022中,用戶移動應用程序將該請求ID發(fā)送至消息服務1006。隨后,在塊6023中,用戶移動應用程序從消息服務1006接收至少一個解決方案,然后該流程進入塊6007。圖7例示用于顯示AR信息的方法的示例實施例。此外,用戶可能有替換零部件。在該流程開始之后,在塊7001中,在識別出MFP 1000中的要修復或更換的零部件的情況下,用戶移動應用程序經(jīng)由QR碼、NFC或手動輸入的清單號來獲取零部件信息。在塊7002中,用戶移動應用程序獲取AR標志,并且在塊7003中,從AR服務接收AR視頻。在塊7004中,用戶移動應用程序識別要修復的零部件,并且在塊7005中,用戶移動應用程序示出MFP和疊加在要修復的零部件上的AR信息。例如,在塊700Γ7005中,用戶移動應用程序通過使用所捕獲的包括錯誤代碼的QR碼來識別要修復的零部件。用戶移動應用程序將識別出的錯誤代碼發(fā)送至裝置分析服務1011,并且裝置分析服務1011識別相應AR信息的AR標志、并將該AR標志發(fā)送至AR服務1010。AR服務1010將與該AR標志相對應的AR信息發(fā)送至用戶移動應用程序,并且用戶移動應用程序顯示從AR服務1010接收到的AR信息(其例示如何修復零部件)??梢詫⒃揂R信息重疊/疊加在要修復的零部件的圖像上。如果判斷為需要重放AR指導(塊7006= “是”),則用戶移動應用程序重復AR信息的顯示(塊7005)。如果無需重放(塊7006=“否”),則在塊7007中,用戶移動應用程序打開文本框并示出“喜歡”按鈕,并且用戶移動應用程序獲得用戶所輸入的消息并獲得“喜歡”或“不喜歡”按鈕的輸入。最后,在塊7008中,將反饋發(fā)送至維護社交網(wǎng)絡平臺1005,然后該流程結束。圖8例示用于選擇錯誤解決方案的方法的示例實施例。該方法至少部分可以由圖1D的維修技術員移動應用程序或圖1C所示的用戶移動應用程序來進行。當維修技術員移動應用程序開始執(zhí) 行的情況下,該流程開始。在塊8001中,維修技術員移動應用程序從消息服務(例如,消息服務1006)接收消息。然后,在塊8002中,維修技術員移動應用程序利用請求ID獲取客戶錯誤信息。接著,在塊8003中,維修技術員移動應用程序使顯示器呈現(xiàn)該錯誤、推薦解決方案和用戶消息。在塊8004中,維修技術員移動應用程序從維修技術員接收所選擇的至少一個解決方案。最后,在塊8005中,維修技術員移動應用程序將該解決方案發(fā)送至消息服務1006,然后該流程結束。圖9例示用于選擇錯誤解決方案的方法的示例實施例。該方法至少部分可以由圖1C的用戶移動應用程序或圖1D的維修技術員移動應用程序來進行。在塊9001中,當用戶移動應用程序將他們的消息上傳至消息服務1006(例如,IM服務)時,服務中心內(nèi)的支持該用戶的維修技術員從消息服務1006接收到該消息。在塊9002中,維修技術員移動應用程序獲取請求ID和錯誤信息。在將該消息從消息服務1006發(fā)送至維修技術員移動應用程序的情況下,維修技術員移動應用程序可以利用請求ID檢索客戶錯誤信息。接著,在塊9003中,維修技術員移動應用程序將該錯誤、推薦(例如,推薦解決方案)和用戶消息顯示在維修技術員的移動裝置(例如,手機)的顯示器上。在塊9004中,維修技術員從推薦中選擇至少一個解決方案,并且維修技術員移動應用程序獲取該選擇輸入。在塊9005中,將所選擇的解決方案經(jīng)由消息服務1006(例如,IM服務)發(fā)送至用戶移動應用程序,然后該流程結束。
圖10例示用于獲得AR信息的方法的示例實施例。該方法至少部分可以由AR服務1010來進行。在該流程開始之后,在塊1001中,AR服務1010例如從裝置分析服務1011或用戶/維修技術員移動應用程序接收具有AR標志的請求。接著,在塊1002中,AR服務1010例如通過使用接收到的AR標志來從存儲器(例如,AR信息1013的數(shù)據(jù)庫)檢索與該標志相對應的AR信息。最后,在塊1003中,在發(fā)現(xiàn)和提取AR信息之后,AR服務1010將該AR信息傳送至正請求的用戶/維修技術員移動應用程序,然后該流程結束。圖11例示用于對圖像形成設備(例如,MFP 1000)進行維修的系統(tǒng)的示例實施例。在圖11中,MFP 1000內(nèi)發(fā)生了卡紙并且用戶需要修復該情況。在用戶將MFP 1000的裝置序列號1501輸入至顯不器1505上不出的用戶界面內(nèi)之后,移動裝置1001 (例如,電話、平板PC)將該序列號發(fā)送至裝置管理服務1008,并且裝置管理服務1008檢查根據(jù)該序列號可以管理的MFP的錯誤代碼。聊天窗口 1504允許用戶輸入消息并將該消息發(fā)送至消息服務1006。MFP 1000將識別出的錯誤代碼經(jīng)由裝置管理服務1008發(fā)送至裝置分析服務1011,并且裝置分析服務1011識別與該錯誤代碼相對應的AR標志并將該AR標志發(fā)送至AR服務1010。AR服務1010將與該AR標志相對應的AR信息發(fā)送至用戶移動裝置1001內(nèi)的
用戶移動應用程序。例如,例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例的圖12示出來自用于指導用戶移除紙張薄片的AR指導1201的截圖。(從AR服務1010接收到的)AR指導1201指導用戶打開抽屜(步驟I)并且移除紙張(步驟2)。例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例的圖13在用戶移動裝置1001的顯示器上示出移除紙張之后所顯示的AR信息1301(其包括疊加在MFP的圖像上的AR指導)的截圖。如圖13所示,用戶移動應用程序顯示關于被卡住的紙移除完成的確認。例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例的圖14示出在MFP 1000的紙張進給單元中紙張薄片再次卡紙的情況下呈現(xiàn)給用戶的AR信息(例如,AR指導)。用戶可以根據(jù)AR信息1013中的指示移除紙張薄片。然后,MFP 1000的狀況響應于紙張的移除而改變,并且MFP 1000將該狀況發(fā)送至裝置管理服務1008。裝置管理服務1008將更新后的狀況發(fā)送至AR服務1010。AR服務1010可以響應于經(jīng)由裝置管理服務1008接收到的MFP 1000的更新狀況(例如,圖13所示的AR信息)來將其它AR信息發(fā)送至用戶移動應用程序。否則,在MFP 1000的其它紙張?zhí)幚韱卧獌?nèi)存在紙張的情況下,用戶可能需要移除這些紙張??梢葬槍FP 1000內(nèi)所發(fā)生的各錯誤重復該流程,以獲得用以幫助用戶解決各錯誤的適用AR信息。在用戶修復了卡紙錯誤的情況下,該用戶可以嘗試操作MFP 1000以再次進行復制。但有時MFP 1000可能又發(fā)生卡紙錯誤。在裝置分析服務1011判斷為在預定時間段內(nèi)已發(fā)生了預定數(shù)量的錯誤的情況下,裝置管理服務1008和/或裝置分析服務1011可以選擇其它AR標志以提供針對該錯誤的解決方案。裝置管理服務1008在裝置管理服務1008已獲得的錯誤歷史記錄中識別出多個(超過預定數(shù)量的)卡紙錯誤。在裝置分析服務1011識別出多個(超過預定數(shù)量的)卡紙錯誤的情況下,裝置分析服務1011選擇A R標志以修復該錯誤。例如,AR服務1010選擇與這多個卡紙錯誤相對應的適用AR信息的AR標志。AR服務1010獲得如下的AR信息,其中該AR信息用于在MFP 1000的配置被設置為使用普通紙的情況下檢查在紙張托盤內(nèi)是否存在重磅紙。如果用戶在MFP 1000的配置被設置為使用普通紙的情況下識別出重磅紙存在于紙張托盤內(nèi),則用戶可以輸入表示重磅紙存在于紙張托盤內(nèi)而MFP 1000的配置被設置為使用普通紙的信息。然后,在輸入了表示重磅紙存在于紙張托盤內(nèi)而MFP 1000的配置被設置為使用普通紙的信息的情況下、或者在介質檢測單元檢測到重磅紙存在于紙張托盤內(nèi)而MFP 1000的配置被設置為使用普通紙的情況下,AR指導向用戶提示關于該用戶是否想要繼續(xù)使用當前介質類型。如果用戶的輸入表示答案為“否”,則例如如圖19所示,AR指導向用戶示出如何利用適當托盤內(nèi)的不同介質類型的薄片來更換這些薄片。如果用戶的輸入表示答案為“是”,則AR指導向用戶示出如何改變該托盤的介質類型的配置。響應于用戶改變了托盤的配置,MFP 1000將配置的改變發(fā)送至裝置管理服務1008。裝置管理服務1008向AR服務1010通知配置的改變。然后,AR服務1010向用戶移動裝置1001通知配置的改變。然后,用戶移動裝置1001響應于接收到更新的配置,示出表示配置改變成功的附加AR信息。此外,例如,用戶檢查紙張托盤,并且在抽屜中存在厚紙。用戶需要檢查MFP 100的前面板中的裝置配置。用戶僅需按下用戶移動裝置1001的顯示器上的按鈕“是,使用厚紙”。裝置分析服務1011接收和分析來自移動裝置1001的諸如“是,使用厚紙”的選擇等的用戶互動信息。裝置分析服務1011確定用于示出如何在前面板中配置介質類型的AR信息的AR標志。裝置分析服務1011將該AR標志發(fā)送至AR服務1010,并且AR服務1010將該AR信息發(fā)送至用戶移動裝置1001。用戶可以基于該AR信息中的指示來檢查前面板上的配置。用戶移動裝置1001還可以拍攝前面板的其它照片并將該照片發(fā)送至裝置分析服務1011?;蛘?,用戶移動裝置 1001可以發(fā)送“是,裝置配置中的介質類型是‘普通’”。裝置分析服務1011接收和分析從用戶移動裝置1001接收到的信息,并且確定用于示出如何在前面板上改變介質類型的AR信息的AR標志。用戶可以基于該AR信息中的指示來改變該配置。最后,用戶可以修復卡紙的突出問題。如果裝置分析服務1011判斷為存在打印質量問題,則圖15中的AR指導15001可以指導用戶拍攝托盤內(nèi)的紙張的照片并將所拍攝照片發(fā)送至裝置管理服務1008。在圖15中,該AR指導可以向用戶示出如何選出MFP 1000的托盤內(nèi)的紙張薄片并指導用戶(例如,利用移動裝置1001)拍攝適當照片,其中該照片將用于確定打印質量問題的原因。如圖18所示,移動裝置1001可以拍攝紙張的照片或者MFP 1000中的掃描器可以在平板上掃描該紙張。此外,AR信息可以指導用戶對MFP 1000的掃描器進行操作。在裝置管理服務1008接收到來自MFP 1000的掃描圖像或來自移動裝置1001的照片的情況下,裝置管理服務1008將該掃描圖像或照片發(fā)送至裝置分析服務1011。裝置分析服務1011檢查所拍攝圖像是否與預定的質量問題有關。如果裝置分析服務1011判斷為所拍攝圖像與預定的質量問題有關,則裝置分析服務1011獲得與用于向用戶提供解決方案的AR信息相對應的AR標志。將該AR標志發(fā)送至AR服務1010,并且AR服務1010將AR信息(例如,參見圖20 圖22)發(fā)送至用戶移動裝置1001。
圖20、圖21和圖22例示用戶移動應用程序所用的界面的示例實施例。這些例子例示用于示出如何替換定影器的AR指導。圖20中的顯示在用戶移動裝置1001上的界面包括表示如下的AR信息,其中該AR信息表示如何打開MFP 1000的側門(步驟I)以及如何定位定影器的螺釘(步驟2)。在圖21中,該界面示出包括在接收到的AR信息中的如下的AR指導,其中該AR指導示出如何移除定影器的螺釘(步驟3)。在圖22中,該界面包括如下的AR指導,其中該AR指導指導用戶移除定影器(步驟4)并且確認用戶所進行的移除完成(步驟5)。此外,例如,MFP 1000顯示表示打孔單元發(fā)生錯誤的Error#001。作為響應,選擇如下的AR視頻(或其它AR信息),其中該AR視頻(或其它AR信息)示出如何重新連接打孔單元的串行線纜、如何將該串行線纜插入MFP 1000的主體、以及/或者如何開啟或關閉打孔單元。在修復了Error#001 之后,接著,MFP 1000 顯示 Error#002。Error#002 表示顯影單元發(fā)生錯誤,這意味著在該顯影單元適當連接的情況下應當更換該顯影單元或者應當替換調色劑盒。選擇如下的AR視頻,其中該AR視頻示出如何在裝置內(nèi)安裝新的調色劑瓶或者如何插入顯影單元線纜。在修復了 Error#002之后,MFP 1000顯示Error#003。該錯誤表示POD紙倉進給馬達發(fā)生錯誤。所選擇的AR視頻示出如何使POD紙倉打開/關閉、如何從紙倉的控制器板將連接器連接至該馬達、如何更換進給馬達、以及/或者如何更換紙倉的控制器板。另外,在一些實施例中,MFP 1000內(nèi)的網(wǎng)絡物理(cyber-physical)監(jiān)視傳感器識別故障并且自動通知基于云的維護管理系統(tǒng)。然后,維護管理軟件可以在機器內(nèi)發(fā)起遠程診斷過程,以判斷是否需要由維修技術員進行修復拜訪。還可以向該系統(tǒng)發(fā)送自我修復程序,或者可以以網(wǎng)絡鏈接至指導性視 頻的電子郵件方式向客戶發(fā)送修復過程??梢宰詣佑嗁徲锌赡苄枰男蘩砹悴考赃f送至維修技術員,其中適當?shù)刈詣诱{度該維修技術員的服務呼叫以使其與所估計的零部件接收相一致。在零部件被發(fā)送至客戶的情況下,包裝上的QR碼可以鏈接到能夠在移動裝置上觀看的AR指導。通過GPS引導和經(jīng)由移動裝置中的增強現(xiàn)實瀏覽器可視的位置信息的組合,可以將維修技術員引導至MFP 1000所位于的街道地址。一旦進入客戶建筑物的內(nèi)部,室內(nèi)導航技術就可以指導維修技術員到達需要/請求修理的特定機器。將對機器的操作歷史記錄的分析總結從基于云的維護管理系統(tǒng)提供至維修技術員的移動裝置,以輔助進行維修診斷。可以針對三種不同等級的認證訪問對分析信息進行分類:1)雇員-機器的技術操作歷史記錄;2)經(jīng)銷商-消耗品歷史記錄以及機器利用;3)客戶-1)和2)中的所有信息、外加特定用戶使用數(shù)據(jù)。維修技術員可以使用移動裝置上的增強現(xiàn)實(AR)軟件,從如同維修技術員的前方觀看的角度、將逐步的修復過程從視覺上重疊到該機器上。AR軟件可以識別各零部件或線纜束內(nèi)的布線及其線路。AR軟件可以通過與剖視圖的內(nèi)視圖重疊來提供機器的人工“X射線”圖。該機器內(nèi)的可視標記/標簽可以通過提供AR重疊層所用的“空間基準”,提高依賴于一些智能手機和平板電腦中所使用的低端傳感器的AR體驗的質量和精度。還可以由維修技術員經(jīng)由移動裝置來訪問修復過程視頻和文獻。在修理期間遇到出乎意料的問題的情況下,維修技術員可以經(jīng)由專用維護網(wǎng)絡請求來自維修技術員同事的實時協(xié)助。在實時幫助/協(xié)助請求內(nèi)可以包括該出乎意料的問題的視頻和照片。一旦完成了修理,維修技術員可以從他的移動裝置無線地測試機器的打印性能,并且打印針對客戶的維修總結報告。維修技術員可以通過將該過程連同照片和視頻一起傳送至維護網(wǎng)絡,來共享針對出乎意料的問題的新設計的修復過程??梢詫υ撔逻^程及其相關視頻自動加標簽,從而使針對相同的出乎意料的問題正在搜索幫助的同事維修人員易于發(fā)現(xiàn)。此外,可以針對客戶生成基于AR的修復過程,以使這些客戶自己進行高級維護或修理。通過將來自安裝的所有機器的網(wǎng)絡傳感器數(shù)據(jù)制成表格,可以創(chuàng)建如下的分析,其中該分析用于I)確定各修理類型的頻率和持續(xù)時間、2)將不尋常故障的計數(shù)值與特定零售商的零部件相關聯(lián)、以及3)基于來自曾發(fā)生故障的機器的數(shù)據(jù)來預測故障。增強現(xiàn)實眼鏡可以替換手持式移動裝置,從而向維修技術員提供免提體驗。圖25例示使用用于對圖像形成設備進行維修的系統(tǒng)的服務呼叫的概述的示例實施例。該系統(tǒng)包括配備有多個傳感器的系統(tǒng),其中這些配備有多個傳感器的系統(tǒng)經(jīng)由它們的專用網(wǎng)絡連接來報告數(shù)據(jù)?;谠频募惺杰浖占治鰯?shù)據(jù)以生成可操作的結果,并且經(jīng)由移動裝置(例如,智能電話和平板裝置)來傳遞增強現(xiàn)實能力。在GPS信號不可用的地方,室內(nèi)導航技術可能可用。此外,專用企業(yè)網(wǎng)絡集成了實時通信、協(xié)作和社交性能。該系統(tǒng)還具有無線打印功能。在階段2501中,MFP內(nèi)的網(wǎng)絡物理傳感器發(fā)現(xiàn)問題并發(fā)起服務呼叫。在階段2502中,基于云的維護管理和調度系統(tǒng)判斷自我修復程序是否可以解決該問題。如果可以解決該問題,則在階段2503中,將診斷/自我修復程序發(fā)送至MFP。如果無法解決該問題,則向客戶(例如,MFP的所有者/操作員)自動通知該問題并且發(fā)送修復過程。接著,在階段2505中,選擇修復零部件的列表并且自動打印郵寄標簽。然后,在階段2506中,移動增強現(xiàn)實輔助維修技術員對客戶的建筑物進行定位。在階段2507中,室內(nèi)導航技術指導維修技術員到達MFP的位置。 隨后,在階段2508中,MFP的分析總結幫助維修技術員對問題進行診斷。在階段2509中,移動裝置上的增強現(xiàn)實指導該修復。如果該問題嚴重,則在階段2510中,從內(nèi)部維護網(wǎng)絡請求幫助。在完成了修復的情況下,在階段2511中,將維修報告從維修技術員的移動裝置無線地發(fā)送至MFP并進行打印。此外,如果使用新的修復過程,則在階段2512中,對該新的修復過程自動加標簽并且在維護網(wǎng)絡內(nèi)共享。圖26例示用于對圖像形成設備進行維修的系統(tǒng)的示例實施例。此外,圖26的實施例包括利用增強現(xiàn)實的動態(tài)裝置管理并且經(jīng)由增強現(xiàn)實進行裝置的故障查找和解決。該系統(tǒng)還可以允許用戶幫助在諸如自動整理器等裝置上安裝附加特征、或者更換現(xiàn)有選項。圖26的實施例包括裝置管理服務(DMS) 1008和增強現(xiàn)實服務(ARS) 1010。DMS 1008管理與各種圖像形成設備(例如,MFP 1000)的互動以及與這些圖像形成設備有關的信息,并且DMS 1008基于諸如SNMP等的不同協(xié)議(例如,裝置協(xié)議、遠程網(wǎng)絡協(xié)議)來從各種圖像形成設備(例如,MFP 1000)收集裝置信息。DMS 1008還從圖像形成設備(例如,MFP 1000)收集狀況信息。例如,DMS1008可以在每當裝置的狀況(其可能是最動態(tài)的屬性)改變時獲取該狀況,并且可以將該信息連同其它裝置信息一起發(fā)送至ARS 1010。另外,DMS 1008可以使用這些協(xié)議來控制這些裝置。此外,DMS 1008可以存在于MFP 1000上或服務器上(例如,DMS 1008可以在MFP 1000上本地運行或者可以相對于MFP1000遠程運行)。ARS 1010與DMS 1008進行通信以獲得與裝置或MFP 1000的狀況有關的信息,并且ARS 1010管理諸如AR眼鏡(例如,AR防護眼鏡)或平板電腦等的AR裝置1001,并與這些AR裝置1001進行通信。ARS 1010和DMS 1008之間的通信信道可以使用諸如TCP、HTTP等的各種協(xié)議。ARS 1010也可以在MFP 1000上運行或者相對于MFP 1000遠程運行。ARS 1010獲取裝置狀況和信息,生成AR圖像或視頻,并將該AR圖像或視頻發(fā)送至AR裝置1001 (AR眼鏡、平板電腦)?;谘b置上正發(fā)生的變化,給送至AR裝置1001的圖像或視頻可以實時地以流式傳播。ARS 1010可以基于所選擇的一個以上AR算法(例如,算法f算法η)以及將顯示圖像/視頻的AR裝置1001來生成圖像/視頻。ARS 1010接收來自互動模塊的輸入,其中該互動模塊用于獲得與MFP 1000的狀況有關的信息。在圖26中,網(wǎng)絡內(nèi)的MFP 1000需要以更加高效和連續(xù)的方式進行監(jiān)視、更新以及故障查找和解決。具有AR系統(tǒng)的DMS1008使得用戶(無論是訓練有素的技術員還是新手)可以針對MFP 1000高效地查找和解決問題或者安裝新選項。以下是提示用戶在MFP 1000處使用AR裝置1001的兩個示例情形。一個情形是在MFP 1000發(fā)生故障的 情況下發(fā)生的,并且另一情形是在MFP 1000需要更新或升級當前機器的情況下發(fā)生的。圖27例示用于通過AR指導來提供解決方案的方法的示例實施例,并且將說明在MFP 1000發(fā)生故障的情況下該方法的流程。在階段2701中,當發(fā)生故障時,DMS 1008獲得與該問題有關的通知。DMS 1008可以經(jīng)由諸如對MFP 1000進行輪詢、或者接收從MFP 1000自動發(fā)送來的通知等的不同機制來獲得該通知。例如,在DMS 1008正在MFP 1000上本地運行的情況下,DMS 1008和MFP 1000的其它組件可以使用處理呼叫或者與固件進行通信以發(fā)送該裝置的狀況,或者(例如,在DMS 1008相對于MFP 1000正遠程運行的情況下)DMS1008可以使用其它協(xié)議。一旦在階段2702中DMS 1008獲得了該狀況,該流程就進入階段2703。在階段2703中,DMS 1008將該信息連同MFP 1000的表示何處發(fā)生問題的裝置信息一起發(fā)送至預先配置的ARS1010。DMS 1008還可以將與該裝置有關的靜態(tài)信息存儲到數(shù)據(jù)庫內(nèi)用于進行快速檢索。DMS 1008和ARS 1010之間的通信依賴于這些服務存在于何處。在這兩者存在于同一裝置(例如,服務器)上的情況下,可以使用進程間通信來進行通信。但在DMS 1008和ARS 1010存在于不同裝置(例如,MFP 1000和服務器)上的情況下,可以使用諸如HTTP或直接TCP呼叫等的遠程通信協(xié)議來在這些模塊之間交換信息。在階段2703中ARS 1010接收到該狀況和與MFP 1000有關的信息之后,在可選階段2704中,基于系統(tǒng)配置,ARS 1010可以嘗試向AR裝置1001或用戶通知MFP狀況。在不存在針對該通知的配置設置的情況下,ARS 1010可以將該信息作為待定存儲在數(shù)據(jù)庫中。在階段2705中,用戶或維修技術員使AR裝置1001靠近存在問題的MFP 1000,并且在階段2706中,AR裝置1001使用NFC (近場通信)、藍牙、基于USB的連接或支持的任何其它近場通信協(xié)議來連接至MFP 1000。一旦AR裝置1001與MFP 1000相連接,在階段2707中,AR裝置1001從MFP 1000獲取裝置信息,并且在階段2708中,AR裝置1001將該信息發(fā)送至ARS 1010。接著,在階段2709中,ARS 1010基于裝置信息、錯誤和/或所選擇的AR算法來構建AR圖像或視頻。然后,在階段2710中,ARS 1010將該AR圖像/視頻發(fā)送至AR裝置1001,并且在階段2711中,AR裝置1001顯示該AR圖像/視頻。ARS 1010構建AR圖像可以使用的信息包括MFP 1000的位置、AR裝置1001與MFP1000之間的距離等。接著,在階段2712中,用戶/維修技術員實現(xiàn)AR圖像/視頻中的指示,然后在階段2713中,MFP 1000進行以下操作:i)檢測到問題已解決或該問題的一部分已解決;以及ii)利用狀況來更新DMS 1008。在階段2714中ARS 1010接收來自DMS 1008的更新,在階段2715中ARS 1010創(chuàng)建新的AR圖像/視頻,并且在階段2716中ARS 1010將該新的AR圖像/視頻發(fā)送至AR裝置。這些階段可以繼續(xù)(重復),直到該問題被修復并且MFP 1000恢復為正常狀態(tài)為止。在MFP 100 報告了需要多個步驟來修復的錯誤的情況下、以及在完成這些步驟之前MFP 1000保持處于錯誤狀態(tài)的情況下,在AR裝置1001和ARS 1010之間通信繼續(xù)。相應地,ARS1010在完成了各步驟之后獲得來自DMS 1008的信息并且生成接下來的步驟所用的AR圖像/視頻。該系統(tǒng)還可以將用于更換現(xiàn)有部件或用于添加額外部件/能力的AR指導提供至MFP 1000。在該方案中,用戶需要開始用于對MFP 1000更換選項或添加選項的處理。用戶可以通過向MFP 1000添加使得該用戶可以選擇要安裝的選項的應用程序來開始該處理,或者可以經(jīng)由AR裝置1001開始該處理。一旦用戶選擇了該選項,信息就被通信至DMS1008,然后該流程與階段270f 2716相同或類似。如上所述,可以基于錯誤代碼而不僅僅基于MFP 1000的物理外觀來動態(tài)地構建AR圖像/視頻。例如通過更新DMS 1008和/或ARS 1010,可以在無需對MFP 1000或AR裝置1001進行更新的情況下向該系統(tǒng)動態(tài)地添加附加裝置型號。此外,基于錯誤標準,可以在ARS 1010處使用不同的AR算法。還可以將與裝置問題有關的通知從ARS 1010發(fā)送至AR裝置1001。即使需要多個步驟來解決錯誤,一個用戶或維修技術員也可以進行這些步驟。此外,該系統(tǒng)可以提供用以在MFP 1000上安裝或更新選項的指導。上述的裝置、系統(tǒng)和方法可以通過以下來實現(xiàn):將其上存儲有用于實現(xiàn)上述操作的計算機可執(zhí)行指令的一個以上計算機可讀介質供給至被配置為讀取這些計算機可執(zhí)行指令并執(zhí)行這些指示的一個以上計算裝置。在這種情況下,這些系統(tǒng)和/或裝置在執(zhí)行這些計算機可讀指示的情況下進行上述實施例的操作。此外,一個以上系統(tǒng)和/或裝置上的操作系統(tǒng)可以實現(xiàn)上述實施例的操作。因而,計算機可執(zhí)行指令以及/或者存儲有這些計算機可執(zhí)行指令的一個以上計算機可讀介質構成實施例。作為針對計算機可執(zhí)行指令的計算機可讀介質,可以采用任何適用的計算機可讀介質(例如,磁盤(包括軟盤、硬盤))、光盤(包括CD、DVD、藍光盤)、磁光盤、磁帶和固態(tài)存儲器(包括閃速存儲器、DRAM、SRAM、固態(tài)驅動器)??梢詫⑦@些計算機可執(zhí)行指令寫入設置在插入至該裝置的功能擴展板上或連接至該裝置的功能擴展單元上的計算機可讀介質,并且設置在該功能擴展板或該功能擴展單元上的CPU可以實現(xiàn)上述實施例的操作。所附權利要求書的范圍不限于上述實施例,并且包括各種變形例和等同結構。
相關申請的交叉引用本申請要求2011年11月4日提交的美國臨時申請61/555,578和2011年11月4日提交的美國臨時申請 61/555,594的優(yōu)先權,在此通過引用包含這兩個申請的全部內(nèi)容。
權利要求
1.一種信息處理設備,用于與客戶端設備和圖像形成設備進行通信,所述信息處理設備包括: 接收單元,用于從所述圖像形成設備接收狀況信息; 發(fā)送單元,用于將包括與所述圖像形成設備的第一操作有關的增強現(xiàn)實指導的增強現(xiàn)實信息發(fā)送至所述客戶端設備,其中所述增強現(xiàn)實信息將所述增強現(xiàn)實指導疊加在所述客戶端設備所捕獲的圖像上; 獲得單元,用于獲得源自于所述圖像形成設備并且包括對所述圖像形成設備內(nèi)發(fā)生的錯誤的表示的信息,該信息源自于利用所述圖像形成設備進行的所述第一操作; 判斷單元,用于基于所述獲得單元所獲得的信息來判斷所述錯誤;以及 傳送單元,用于基于所判斷出的錯誤來傳送包括附加增強現(xiàn)實指導的增強現(xiàn)實信息。
2.根據(jù)權利要求1所述的信息處理設備,其中,所述獲得單元所獲得的信息包括源自于所述圖像形成設備所打印出的薄片的圖像,以及所述第一操作是打印所述薄片。
3.根據(jù)權利要求2所述的信息處理設備,其中,所述判斷單元通過判斷所獲得的圖像是否表示出所述薄片的邊緣被特定顏色著色來判斷所述錯誤,以及基于所判斷出的錯誤,所述傳送單元傳送包括如下增強現(xiàn)實指導的增強現(xiàn)實信息,其中該增強現(xiàn)實指導呈現(xiàn)用以使用戶對所述圖像形成設備內(nèi)的掃描鏡進行清潔的指示。
4.根據(jù)權利要求1所述的信息處理設備,其中,所述接收單元從所述客戶端設備接收與所述圖像形成設備相對應的裝置識別信息,以及所述發(fā)送單元發(fā)送與接收到的狀況信息和接收到的裝置識別信息這兩者相對應的增強現(xiàn)實信息。
5.根據(jù)權利要求1所述的信息處理設備,其中,在所述第一操作完成之后,所述發(fā)送單元響應于所述接收單元接 收到請求,來發(fā)送包括針對第二操作的增強現(xiàn)實指導的增強現(xiàn)實信息。
6.根據(jù)權利要求1所述的信息處理設備,其中,所述獲得單元還獲得序列號、錯誤日志和打印計數(shù)器中的一個或多個,以及所述判斷單元還基于所述序列號、所述錯誤日志和所述打印計數(shù)器中的所述一個或多個來判斷所述錯誤。
7.根據(jù)權利要求1所述的信息處理設備,其中,所述判斷單元還基于知識庫內(nèi)的數(shù)據(jù)來判斷所述錯誤。
8.一種信息處理設備,用于與服務器設備和圖像形成設備進行通信,所述信息處理設備包括: 接收單元,用于接收包括針對所述圖像形成設備的第一操作的增強現(xiàn)實指導的增強現(xiàn)實信息,其中所述增強現(xiàn)實信息將所述增強現(xiàn)實指導疊加在所述信息處理設備所捕獲的圖像上; 顯示控制單元,用于命令所述信息處理設備顯示所述增強現(xiàn)實指導;以及 獲得單元,用于獲得源自于利用所述圖像形成設備所進行的所述第一操作的信息,并且使用所獲得的信息來判斷所述圖像形成設備內(nèi)發(fā)生的錯誤, 其中,所述接收單元還接收包括如下附加增強現(xiàn)實指導的增強現(xiàn)實信息,其中所述附加增強現(xiàn)實指導呈現(xiàn)用于從所述錯誤恢復的操作。
9.根據(jù)權利要求8所述的信息處理設備,其中,所述獲得單元從所述圖像形成設備打印出的薄片獲得圖像。
10.根據(jù)權利要求8所述的信息處理設備,其中,所述接收單元接收用于命令所述信息處理設備顯示如下附加增強現(xiàn)實指導的增強現(xiàn)實信息,其中所述附加增強現(xiàn)實指導呈現(xiàn)用于使用戶對所述圖像形成設備內(nèi)的掃描鏡進行清潔的指示。
11.根據(jù)權利要求8所述的信息處理設備,其中,還包括用于將所述圖像形成設備的裝置識別信息發(fā)送至所述服務器設備的發(fā)送單元,并且所述接收單元接收與所述圖像形成設備的狀況信息和所述裝置識別信息相對應的增強現(xiàn)實信息。
12.一種信息處理設備所進行的方法,所述信息處理設備用于與客戶端設備和圖像形成設備進行通信,所述方法包括: 從所述圖像形 成設備接收狀況信息; 發(fā)送用于命令所述客戶端設備顯示針對所述圖像形成設備的第一操作的增強現(xiàn)實指導的第一增強現(xiàn)實信息,其中所述第一增強現(xiàn)實信息將所述增強現(xiàn)實指導疊加在所述客戶端設備所捕獲的圖像上; 獲得源自于利用所述圖像形成設備進行的所述第一操作并且包括與所述圖像形成設備內(nèi)發(fā)生的錯誤有關的標記的信息; 基于所獲得的信息來判斷所述錯誤;以及 傳送第二增強現(xiàn)實信息,其中所述第二增強現(xiàn)實信息用于命令所述客戶端設備顯示用以從所判斷出的錯誤恢復的其它增強現(xiàn)實指導。
13.根據(jù)權利要求12所述的方法,其中,所獲得的信息包括源自于所述圖像形成設備所打印出的薄片的圖像,以及所述薄片是所述圖像形成設備響應于所述第一操作的進行所打印出的。
14.根據(jù)權利要求13所述的方法,其中,所述錯誤的判斷是基于所獲得的圖像是否表示出所述薄片的邊緣被特定顏色著色,并且基于所述錯誤,所述其它增強現(xiàn)實指導呈現(xiàn)用于指導用戶對所述圖像形成設備內(nèi)的掃描鏡進行清潔的指示。
15.根據(jù)權利要求12所述的方法,其中,還包括:從所述客戶端設備接收所述圖像形成設備的裝置識別信息,以及將接收到的裝置識別信息連同所述第一增強現(xiàn)實信息一起發(fā)送。
16.根據(jù)權利要求12所述的方法,其中,還包括:在所述第一操作完成之后,響應于接收到請求來發(fā)送包括針對第二操作的增強現(xiàn)實指導的第三增強現(xiàn)實信息。
17.一種信息處理設備所進行的方法,所述信息處理設備用于與服務器設備和圖像形成設備進行通信,所述方法包括: 接收包括用以顯示針對所述圖像形成設備的第一操作的增強現(xiàn)實指導的命令的增強現(xiàn)實信息,其中所述增強現(xiàn)實信息將所述增強現(xiàn)實指導疊加在所述信息處理設備所捕獲的圖像上; 顯示所述增強現(xiàn)實指導; 獲得源自于利用所述圖像形成設備所進行的所述第一操作的信息; 基于所獲得的信息來判斷所述圖像形成設備內(nèi)發(fā)生的錯誤;以及 接收包括如下命令的其它增強現(xiàn)實信息,其中該命令用于顯示用以從所述錯誤恢復的其它增強現(xiàn)實指導。
18.根據(jù)權利要求17所述的方法,其中,所獲得的信息包括所述圖像形成設備響應于所述第一操作的進行所打印出的薄片的圖像。
19.根據(jù)權利要求17所述的方法,其中,所述其它增強現(xiàn)實指導指導用戶對所述圖像形成設備的掃描鏡進行清潔。
20.根據(jù)權利要求17所述的方法,其中,還包括:將與所述圖像形成設備相對應的裝置識別信息發(fā)送至所述服務器設備,其中所接收到的增強現(xiàn)實信息與所述圖像形成設備的狀況信息和所述裝置識別信息相對應。
21.根據(jù)權利要求17所述的方法,其中,所述其它增強現(xiàn)實指導顯示一系列指示,以及所述方法還包括:顯示所述一系列指示中的當前指示,直到接收到用以顯示所述一系列指示中的下一指示的命令 為止。
全文摘要
本發(fā)明涉及一種信息處理設備及其方法,所述信息處理設備用于與服務器設備和圖像形成設備進行通信,并包括接收單元,用于接收包括針對所述圖像形成設備的第一操作的AR指導的AR信息,其中所述AR信息將所述AR指導疊加在所述信息處理設備所捕獲的圖像上;顯示控制單元,用于命令所述信息處理設備顯示所述AR指導以指導用戶對所述圖像形成設備進行操作;以及獲得單元,用于獲得源自于利用所述圖像形成設備的所述第一操作的進行的信息,其中,所述接收單元還接收包括如下附加AR指導的AR信息,其中所述附加AR指導呈現(xiàn)用于從所述錯誤恢復的操作。
文檔編號H04L12/24GK103227726SQ20121043775
公開日2013年7月31日 申請日期2012年11月5日 優(yōu)先權日2011年11月4日
發(fā)明者鳥居稔, 杰里米瑟弗林, 佐東馬克俊明, 阿亞圖拉塞克, 埃德史密斯, 拉吉尼吉里德哈拉格保 申請人:佳能株式會社