專利名稱：信息處理裝置以及信息處理方法
信息處理裝置以及信息處理方法
背景技術(shù)：
本發(fā)明涉及信息處理裝置以及信息處理方法。 相關(guān)技術(shù)
已有的公知遠(yuǎn)程指示系統(tǒng)各自包括連接到攝像機(jī)和投影儀的服務(wù)器 (例如計(jì)算機(jī))和通過網(wǎng)絡(luò)連接到該服務(wù)器的遠(yuǎn)程客戶端(例如計(jì)算機(jī))
(例如，參見美國專利申請(qǐng)2004/0070674號(hào)公報(bào)和日本特開2005-33756 號(hào)公報(bào))。
在這種遠(yuǎn)程指示系統(tǒng)中，連接到服務(wù)器的攝像機(jī)捕捉物體的圖像， 并且該服務(wù)器將捕捉的圖像通過網(wǎng)絡(luò)發(fā)送給客戶端?？蛻舳藢⒉蹲降膱D 像顯示在顯示裝置的顯示畫面上。當(dāng)將注釋圖像寫在顯示畫面上時(shí)，客 戶端將該注釋圖像通過網(wǎng)絡(luò)發(fā)送到服務(wù)器。服務(wù)器將所接收到的注釋圖 像發(fā)送到投影儀，并且投影儀將該注釋圖像投影到包括三維物體的投影 區(qū)域中的(與客戶端在圖像捕捉區(qū)域內(nèi)寫入注釋圖像的位置對(duì)應(yīng)的)適 當(dāng)位置上。
在這種環(huán)境下，期望將在服務(wù)器與客戶端之間交換的所捕捉圖像的 數(shù)據(jù)存儲(chǔ)在服務(wù)器或者客戶端中的存儲(chǔ)介質(zhì)中。
當(dāng)重新使用物體的CAD數(shù)據(jù)來重新設(shè)計(jì)物體時(shí)，優(yōu)選地參照該物體 的所捕捉圖像的數(shù)據(jù)。然而，在產(chǎn)品包含大量物體的情況下，大量物體 的所捕捉圖像的數(shù)據(jù)存儲(chǔ)在存儲(chǔ)介質(zhì)中。因此，不容易找出并查看所需 要物體的所捕捉圖像的數(shù)據(jù)。

發(fā)明內(nèi)容
根據(jù)本發(fā)明的第一方面，提供了一種信息處理裝置，該信息處理裝 置連接到將從外部終端輸入的注釋圖像投影到包括物體的投影區(qū)域上的
7投影裝置，并連接到捕捉所述投影區(qū)域的圖像的圖像捕捉裝置。所述信 息處理裝置通過與所述外部終端的通信，獲取要向所述投影裝置和所述 圖像捕捉裝置輸入的圖像數(shù)據(jù)以及要從所述投影裝置和所述圖像捕捉裝 置輸出的圖像數(shù)據(jù)。該信息處理裝置包括存儲(chǔ)器，其存儲(chǔ)一數(shù)據(jù)庫，
該數(shù)據(jù)庫包括設(shè)計(jì)所述物體要使用的CAD數(shù)據(jù)和所述CAD數(shù)據(jù)的屬性信 息；獲取單元，其獲取所述物體的識(shí)別信息；識(shí)別單元，其基于所獲取 的所述物體的識(shí)別信息，識(shí)別所述數(shù)據(jù)庫中包括的所述物體的CAD數(shù)據(jù); 以及控制器，其將由所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)與由所述識(shí)別 單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像 的數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元 識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看所捕捉圖像的數(shù)據(jù)。
利用該配置，基于所述物體的CAD數(shù)據(jù)，可以容易地查看通過與外 部終端的通信而獲取的物體的所捕捉圖像的數(shù)據(jù)。
所述信息處理裝置可以設(shè)置成如下所述信息處理裝置連接到向所 述外部終端輸入聲音并從所述外部終端輸出聲音的音頻輸入和輸出裝 置，并通過與所述外部終端的通信而獲取所述聲音的數(shù)據(jù)。并且所述控 制器將所捕捉圖像的數(shù)據(jù)和所述音頻數(shù)據(jù)與由所述識(shí)別單元識(shí)別的所述 物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)和所述音 頻數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元 識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看并收聽所述圖像捕捉裝置 捕捉的圖像的數(shù)據(jù)和通過所述音頻輸入和輸出裝置輸入的音頻數(shù)據(jù)。
利用該配置，基于所述物體的CAD數(shù)據(jù)，可以容易地査看并收聽通 過與外部終端的通信而獲取的關(guān)于物體的所捕捉圖像的數(shù)據(jù)和音頻數(shù) 據(jù)。
所述信息處理裝置可以設(shè)置成如下所述信息處理裝置包括將所述 音頻數(shù)據(jù)轉(zhuǎn)換成文本數(shù)據(jù)的數(shù)據(jù)轉(zhuǎn)換器。并且所述控制器將所捕捉圖像
的數(shù)據(jù)和所述文本數(shù)據(jù)與由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)相 關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)和所述文本數(shù)據(jù)與所述CAD 數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)和由所
述數(shù)據(jù)轉(zhuǎn)換器轉(zhuǎn)換的文本數(shù)據(jù)。
利用該配置，基于所述物體的CAD數(shù)據(jù)，可以容易地查看通過與外 部終端的通信而獲取的物體的所捕捉圖像的數(shù)據(jù)和與物體的音頻數(shù)據(jù)相 對(duì)應(yīng)的文本數(shù)據(jù)。
根據(jù)本發(fā)明的第二方面，提供了一種信息處理裝置，該信息處理裝 置與服務(wù)器進(jìn)行通信，所述服務(wù)器連接到將注釋圖像投影到包括物體的 投影區(qū)域上的投影裝置并連接到捕捉所述投影區(qū)域的圖像的圖像捕捉裝 置，所述信息處理裝置通過與所述服務(wù)器的通信而獲取要向所述投影裝 置和所述圖像捕捉裝置輸入的圖像數(shù)據(jù)以及要從所述投影裝置和所述圖
像捕捉裝置輸出的圖像數(shù)據(jù)。該信息處理裝置包括存儲(chǔ)器，其存儲(chǔ)一 數(shù)據(jù)庫，該數(shù)據(jù)庫包括設(shè)計(jì)所述物體要使用的CAD數(shù)據(jù)及其屬性信息； 獲取單元，其獲取所述物體的識(shí)別信息；識(shí)別單元，其基于所獲取的所 述物體的識(shí)別信息，識(shí)別所述數(shù)據(jù)庫中包括的所述物體的CAD數(shù)據(jù)；以
及控制器，其將由所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)與由所述識(shí)別單
元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像的 數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元識(shí) 別的所述物體的CAD數(shù)據(jù)的屬性信息來査看所捕捉圖像的數(shù)據(jù)。
利用該配置，基于所述物體的CAD數(shù)據(jù)，可以容易地査看通過與服 務(wù)器的通信而獲取的物體的所捕捉圖像的數(shù)據(jù)。
所述信息處理裝置可以設(shè)置成如下輸入并輸出聲音的第一音頻輸 入和輸出裝置連接到所述信息處理裝置；輸入并輸出聲音的第二音頻輸 入和輸出裝置連接到所述服務(wù)器；通過所述信息處理裝置與所述服務(wù)器 之間的通信來獲取聲音的音頻數(shù)據(jù)；并且所述控制器將所捕捉圖像的數(shù) 據(jù)和所述音頻數(shù)據(jù)與由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)， 并使所述存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)和所述音頻數(shù)據(jù)與所述CAD數(shù)據(jù)相 關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù) 據(jù)的屬性信息來査看并收聽由所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)以及 由所述第一音頻輸入和輸出裝置而輸入或輸出的音頻數(shù)據(jù)。利用該配置，基于所述物體的CAD數(shù)據(jù)，可以容易地查看并收聽通 過與服務(wù)器的通信而獲取的物體的所捕捉圖像的數(shù)據(jù)和音頻數(shù)據(jù)。
所述信息處理裝置可以設(shè)置成如下所述信息處理裝置包括將通過 所述第一音頻輸入和輸出裝置輸入或輸出的音頻數(shù)據(jù)轉(zhuǎn)換成文本數(shù)據(jù)的 數(shù)據(jù)轉(zhuǎn)換器。并且所述控制器將所捕捉圖像的數(shù)據(jù)和所述文本數(shù)據(jù)與由
所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所 捕捉圖像的數(shù)據(jù)和所述文本數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得 可以基于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來査看 所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)和由所述數(shù)據(jù)轉(zhuǎn)換器轉(zhuǎn)換的文本數(shù) 據(jù)。
利用該配置，基于所述物體的CAD數(shù)據(jù)，可以容易地査看通過與服 務(wù)器的通信而獲取的物體的所捕捉圖像的數(shù)據(jù)和與物體的音頻數(shù)據(jù)相對(duì) 應(yīng)的文本數(shù)據(jù)。
所述信息處理裝置可以設(shè)置成如下當(dāng)逐一地捕捉多個(gè)物體的圖像 時(shí)，所述控制器將由所述圖像捕捉裝置捕捉的所述多個(gè)圖像的數(shù)據(jù)與由
所述識(shí)別單元最先或最后識(shí)別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ) 器將所捕捉圖像的數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于 由所述識(shí)別單元最先或最后識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查 看所捕捉圖像的數(shù)據(jù)。
利用該配置，基于最先或最后識(shí)別的預(yù)定物體的CAD數(shù)據(jù)，可以容 易地査看通過與外部終端或服務(wù)器的通信而獲取的包括所述預(yù)定物體的 多個(gè)物體的所捕捉圖像的數(shù)據(jù)。由于在處理過程中不必在其他部件與CAD 數(shù)據(jù)等之間設(shè)置關(guān)聯(lián)，所以減少了要處理的信息量，并且更容易對(duì)信息 進(jìn)行分類。
所述信息處理裝置可以設(shè)置成如下當(dāng)逐一地捕捉多個(gè)物體的圖像 并且在切換物體時(shí)切換音頻數(shù)據(jù)文件時(shí)，所述控制器將由所述圖像捕捉 裝置捕捉的所述多個(gè)圖像的數(shù)據(jù)和通過所述音頻輸入和輸出裝置輸入或 輸出的多組音頻數(shù)據(jù)與由所述識(shí)別單元最先或最后識(shí)別的物體的CAD數(shù) 據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)和所述音頻數(shù)據(jù)與所述
10CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元最先或最后識(shí)別 的所述物體的CAD數(shù)據(jù)的屬性信息來査看并收聽所捕捉圖像的數(shù)據(jù)和所 述多組音頻數(shù)據(jù)。
利用該配置，基于最先或最后識(shí)別的預(yù)定物體的CAD數(shù)據(jù)，可以容 易地查看并收聽通過與外部終端或者服務(wù)器的通信而獲取的包括所述預(yù) 定物體的多個(gè)物體的所捕捉圖像的數(shù)據(jù)和所述多個(gè)物體的音頻數(shù)據(jù)。由 于在處理過程中不必在其他部件與CAD數(shù)據(jù)等之間設(shè)置關(guān)聯(lián)，所以減少 了要處理的信息量，并且更容易對(duì)信息進(jìn)行分類。
所述信息處理裝置可以設(shè)置成如下所述信息處理裝置包括用于輸 入臨時(shí)存儲(chǔ)指令或最終存儲(chǔ)指令的輸入單元。當(dāng)通過所述輸入單元輸入 了所述臨時(shí)存儲(chǔ)指令時(shí)，所述控制器使得所述存儲(chǔ)器臨時(shí)存儲(chǔ)各個(gè)物體 的所捕捉圖像數(shù)據(jù)和各個(gè)物體的音頻數(shù)據(jù)；并且，當(dāng)通過所述輸入單元 輸入了所述最終存儲(chǔ)指令時(shí)，所述控制器將由所述圖像捕捉裝置捕捉的 所述多個(gè)圖像的數(shù)據(jù)和通過所述音頻輸入和輸出裝置輸入或輸出的所述 多組音頻數(shù)據(jù)與由所述識(shí)別單元最先或最后識(shí)別的物體的CAD數(shù)據(jù)相關(guān) 聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)和所述音頻數(shù)據(jù)與所述CAD數(shù) 據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元最先或最后識(shí)別的所 述物體的CAD數(shù)據(jù)的屬性信息來查看并收聽所捕捉圖像的數(shù)據(jù)和所述多 組音頻數(shù)據(jù)。
利用該配置，當(dāng)輸入了臨時(shí)存儲(chǔ)指令時(shí)，將各個(gè)物體的所捕捉圖像 和音頻數(shù)據(jù)臨時(shí)存儲(chǔ)在所述存儲(chǔ)器中。當(dāng)輸入了最終存儲(chǔ)指令時(shí)，將包 括臨時(shí)存儲(chǔ)的所捕捉圖像和音頻數(shù)據(jù)在內(nèi)的多個(gè)物體的所捕捉圖像和音 頻數(shù)據(jù)與最先或最后識(shí)別的預(yù)定物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并可以將其存 儲(chǔ)在所述存儲(chǔ)器中。
根據(jù)本發(fā)明的第三方面，提供了一種信息處理方法，該信息處理方 法使用計(jì)算機(jī)，所述計(jì)算機(jī)連接到將從外部終端輸入的注釋圖像投影到 包括物體的投影區(qū)域上的投影裝置，所述計(jì)算機(jī)還連接到捕捉所述投影 區(qū)域的圖像的圖像捕捉裝置，所述計(jì)算機(jī)通過與所述外部終端的通信而 獲取要向所述投影裝置和所述圖像捕捉裝置輸入的圖像數(shù)據(jù)以及要從所述投影裝置和所述圖像捕捉裝置輸出的圖像數(shù)據(jù)。所述信息處理方法包括以下步驟存儲(chǔ)一數(shù)據(jù)庫，該數(shù)據(jù)庫包括設(shè)計(jì)所述物體要使用的CAD數(shù)據(jù)及其屬性信息；獲取所述物體的標(biāo)識(shí)信息；基于所獲取的所述物體的標(biāo)識(shí)信息，識(shí)別所述數(shù)據(jù)庫中包括的所述物體的CAD數(shù)據(jù)；將由所述
圖像捕捉裝置捕捉的圖像的數(shù)據(jù)與由識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看所捕捉圖像的數(shù)據(jù)。
利用該配置，基于所述物體的CAD數(shù)據(jù)，可以容易地査看通過與外部終端的通信而獲取的物體的所捕捉圖像的數(shù)據(jù)。
根據(jù)本發(fā)明的第四方面，提供了一種信息處理方法，該信息處理方法使用計(jì)算機(jī)，所述計(jì)算機(jī)與服務(wù)器進(jìn)行通信，所述服務(wù)器連接到將注釋圖像投影到包括物體的投影區(qū)域上的投影裝置并連接到捕捉所述投影區(qū)域的圖像的圖像捕捉裝置，通過與所述服務(wù)器的通信而向所述投影裝置和所述圖像捕捉裝置輸入圖像數(shù)據(jù)并從所述投影裝置和所述圖像捕捉裝置輸出圖像數(shù)據(jù)。所述信息處理方法包括以下步驟存儲(chǔ)一數(shù)據(jù)庫，該數(shù)據(jù)庫包括設(shè)計(jì)所述物體要使用的CAD數(shù)據(jù)及其屬性信息；獲取所述物體的識(shí)別信息；基于所獲取的所述物體的識(shí)別信息，識(shí)別所述數(shù)據(jù)庫中包括的所述物體的CAD數(shù)據(jù)；將由所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)與由識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看所捕捉圖像的數(shù)據(jù)。
利用該配置，基于所述物體的CAD數(shù)據(jù)，可以容易地査看通過與服務(wù)器的通信而獲取的物體的所捕捉圖像的數(shù)據(jù)。


基于以下附圖詳細(xì)描述本發(fā)明的示例實(shí)施方式，在附圖中圖1是示出根據(jù)本發(fā)明第一示例性實(shí)施方式的遠(yuǎn)程指示系統(tǒng)的結(jié)構(gòu)的框12圖2是例示PC的功能結(jié)構(gòu)的框圖3A是例示一個(gè)PC的硬件結(jié)構(gòu)的框圖3B是例示另一個(gè)PC的硬件結(jié)構(gòu)的框圖4示出了存儲(chǔ)在至少一個(gè)存儲(chǔ)器中的CAD數(shù)據(jù)庫的示例；
圖5是要由一個(gè)PC執(zhí)行的操作流程圖6示出了 CAD數(shù)據(jù)與所捕捉圖像與音頻數(shù)據(jù)之間的關(guān)聯(lián)的示例；圖7A示出了具有物體ID "物體001"的捕捉圖像及其屬性信息；
圖7B示出了一個(gè)顯示器的畫面的變換；
圖8是根據(jù)第二示例性實(shí)施方式的另一個(gè)PC執(zhí)行的操作的流程圖；圖9是根據(jù)第三示例性實(shí)施方式的一個(gè)PC執(zhí)行的操作的流程圖；圖IOA示出了顯示存儲(chǔ)指令的對(duì)話框的顯示器的示例；圖IOB示出了顯示存儲(chǔ)指令的對(duì)話框的顯示器的示例；
圖11示出了將一組CAD數(shù)據(jù)與兩個(gè)或更多個(gè)所捕捉圖像和音頻數(shù)據(jù)相關(guān)聯(lián)的示例性情況；以及
圖12是根據(jù)第三示例性實(shí)施方式的另一個(gè)PC執(zhí)行的操作的流程圖。
具體實(shí)施例方式
以下是參照附圖對(duì)本發(fā)明示例性實(shí)施方式的描述。(第一示例性實(shí)施方式)
圖1是示出根據(jù)本發(fā)明示例性實(shí)施方式的遠(yuǎn)程指示系統(tǒng)的結(jié)構(gòu)的框圖。
圖1的遠(yuǎn)程指示系統(tǒng)包括用作服務(wù)器的個(gè)人計(jì)算機(jī)(PC) 1和用作客戶端的PC 2 (外部終端)。PC 1和PC 2通過網(wǎng)絡(luò)3彼此連接。PC 1連接有投影儀4 (投影裝置)和攝像機(jī)5 (圖像捕獲裝置)。
根據(jù)來自PC 1的控制命令，投影儀4經(jīng)由半鏡(half mirror) 6向物體8和屏幕12上發(fā)射光束或者投影注釋圖像等。注釋圖像可包括各種形式的圖像，例如，線條、字符、記號(hào)、圖形、顏色以及字體。
攝像機(jī)5由PTZ (搖攝-傾斜-變焦(Pan-Tilt-Zoom))攝像機(jī)、網(wǎng)絡(luò)攝像機(jī)或視頻攝像機(jī)構(gòu)成，并置于桌子上。攝像機(jī)5經(jīng)由半鏡6捕捉屏
13幕12以及物體8的反射圖像，并且向PC1輸出所捕捉的圖像。攝像機(jī)5捕捉物體8的整體圖像。投影儀4的光軸和視場角與攝像機(jī)5的光軸和視場角相同。攝像機(jī)5根據(jù)從PC 2輸入的指令或直接向PC 1輸入的指令、或者定期(例如，以0. 1秒的時(shí)間間隔)捕捉物體8的靜止圖像。包括物體8的ID (識(shí)別信息)的QR碼7貼附到物體8的表面。
PC 1經(jīng)由網(wǎng)絡(luò)3將由攝像機(jī)5捕捉的圖像輸出到PC 2。 PC 2連接到顯示器205，并且顯示器205具有顯示區(qū)域15和用戶接口 (UI) 14。從PC 1發(fā)送的所捕捉圖像顯示在顯示區(qū)域15中。PC 2可以是與顯示器205一體形成的個(gè)人計(jì)算機(jī)。
麥克風(fēng)10 ((第二)語音輸入/輸出裝置)接收PC 1的用戶的語音指令等，并向連接到PC2的揚(yáng)聲器19輸出該語音。揚(yáng)聲器ll ((第二)語音輸入/輸出裝置)輸出PC 2的用戶的語音指令等，所述語音指令等是通過連接到PC 2的麥克風(fēng)18而輸入的。
UI14包括一組按鈕(例如筆按鈕、文本按鈕和擦除按鈕)以及由線條和色彩限定的圖標(biāo)。在顯示區(qū)域15中顯示由攝像機(jī)5捕捉的圖像。在圖1中，在顯示區(qū)域15中顯示由攝像機(jī)5捕捉的包括物體8的屏幕12的圖像。
例如，當(dāng)按下UI 14的筆按鈕以在顯示區(qū)域15中的物體8上繪制圖形等時(shí)，將關(guān)于該圖形的信息(更具體地說，坐標(biāo)信息)從PC2輸出到PC 1。然后PC l對(duì)該圖形信息(坐標(biāo)信息)進(jìn)行解碼并將其轉(zhuǎn)換成將由投影儀4投影的圖像，并向投影儀輸出該圖像。然后投影儀4將該圖像投影到物體8上。
同時(shí)，PC 2將控制命令輸出到PC 1以便控制投影儀4和攝像機(jī)5的操作(諸如攝像機(jī)5的圖像捕捉角度和所捕捉圖像的亮度，以及投影儀4所投影的圖像的亮度)。
麥克風(fēng)18 ((第一)語音輸入/輸出裝置)接收PC2的用戶的語音指令等，并向連接到PC1的揚(yáng)聲器ll輸出該語音。揚(yáng)聲器19 ((第一)語音輸入/輸出裝置)輸出PC 1的用戶的語音指令等，所述語音指令等是通過連接到PC 1的麥克風(fēng)10輸入的。在圖1中，客戶端的數(shù)量只有一個(gè)(PC 2)，但是遠(yuǎn)程指示系統(tǒng)可以包括兩個(gè)或更多個(gè)客戶端(PC)。
在具有上述結(jié)構(gòu)的遠(yuǎn)程指示系統(tǒng)中，由攝像機(jī)5捕捉的圖像顯示在PC 2的顯示器205上，并通過投影儀4將寫在PC 2上的注釋圖像投影到物體8上。因此，PC1的用戶和PC2的用戶可以利用實(shí)物物體8彼此通信。PC 1的用戶和PC 2的用戶還可以通過麥克風(fēng)10、揚(yáng)聲器11、麥克風(fēng)18和揚(yáng)聲器19而在彼此之間進(jìn)行語音通信。
圖2是示出PC 1和PC 2的功能結(jié)構(gòu)的框圖。
PC1包括控制器101 (獲取單元、識(shí)別單元和控制器)，其控制投影儀4和攝像機(jī)5以及整個(gè)裝置的操作；發(fā)送和接收單元102，其經(jīng)由網(wǎng)絡(luò)3與PC 2交換信息；存儲(chǔ)器103 (存儲(chǔ)器)，其存儲(chǔ)控制程序、數(shù)據(jù)、信息等；以及接口單元104,其連接到投影儀4、攝像機(jī)5、麥克風(fēng)10和揚(yáng)聲器ll。 PC 1還可以包括顯示捕捉的圖像的顯示器105和由鼠標(biāo)、鍵盤等構(gòu)成的操作單元106 (輸入單元)?？刂破?01連接到發(fā)送和接收單元102、存儲(chǔ)器103、接口單元104、顯示部105和操作單元106?？刂破?01還經(jīng)由接口單元104連接到投影儀4、攝像機(jī)5、麥克風(fēng)10和揚(yáng)聲器ll。
PC2包括控制器201 (獲取單元、識(shí)別單元和控制器)，其控制整個(gè)裝置；發(fā)送和接收單元202，其經(jīng)由網(wǎng)絡(luò)3與PC l交換數(shù)據(jù)和信息；存儲(chǔ)器203 (存儲(chǔ)器)，其存儲(chǔ)控制程序、數(shù)據(jù)、信息等；操作單元204(輸入單元)，其由鼠標(biāo)、鍵盤等構(gòu)成；顯示器205;以及接口單元206控制器201連接到發(fā)送和接收單元202、存儲(chǔ)器203、操作單元204、顯示器205和接口單元206?？刂破?01還經(jīng)由接口單元206連接到麥克風(fēng)18和揚(yáng)聲器19。
圖3A是示出PC 1的硬件結(jié)構(gòu)的框圖，而圖3B是示出PC 2的硬件結(jié)構(gòu)的框圖。
PC 1包括CPU 21，其控制整個(gè)裝置；ROM 22，其存儲(chǔ)控制程序；RAM 23，其用作工作區(qū)；硬盤驅(qū)動(dòng)器(HDD) 24，其存儲(chǔ)各種信息和程序；網(wǎng)絡(luò)接口 26，其連接到另一計(jì)算機(jī)；以及USB (通用串行總線)接口 28，其連接到USB裝置(未示出)。CPU 21經(jīng)由系統(tǒng)總線29連接到R0M 22、 RAM 23、硬盤驅(qū)動(dòng)器(HDD) 24、網(wǎng)絡(luò)接口 26、以及USB接口 28。 PC 1 經(jīng)由USB接口 28連接到投影儀4、攝像機(jī)5、麥克風(fēng)lO和揚(yáng)聲器ll。 PC 1還可以包括鼠標(biāo)和鍵盤25以及顯示器27。
控制器101相當(dāng)于根據(jù)控制程序執(zhí)行各種操作的CPU 21。發(fā)送和接 收單元102相當(dāng)于網(wǎng)絡(luò)接口 26，而存儲(chǔ)器103相當(dāng)于硬盤驅(qū)動(dòng)器(HDD) 24。接口單元104相當(dāng)于USB接口 28。顯示器105相當(dāng)于顯示器27，操 作單元106相當(dāng)于鼠標(biāo)和鍵盤25。
PC 2包括CPU 31，其控制整個(gè)裝置；ROM 32，其存儲(chǔ)控制程序； RAM 33，其用作工作區(qū)；硬盤驅(qū)動(dòng)器(HDD) 34，其存儲(chǔ)各種信息和程序； 鼠標(biāo)和鍵盤35;網(wǎng)絡(luò)接口36，其連接到另一計(jì)算機(jī)；顯示器37，其由液 晶監(jiān)視器或CRT構(gòu)成；以及USB (通用串行總線)接口 38，其連接到USB 裝置(未示出)。CPU 31經(jīng)由系統(tǒng)總線39連接到R0M 32、 RAM 33、硬盤 驅(qū)動(dòng)器(HDD) 34、鼠標(biāo)和鍵盤35、網(wǎng)絡(luò)接口 36、顯示器37以及USB接 口 38。 PC 2經(jīng)由USB接口 38連接到麥克風(fēng)18和揚(yáng)聲器19。
控制器201相當(dāng)于根據(jù)控制程序執(zhí)行各種操作的CPU 31。發(fā)送和接 收單元202相當(dāng)于網(wǎng)絡(luò)接口 36，而存儲(chǔ)器203相當(dāng)于硬盤驅(qū)動(dòng)器(HDD) 34。操作單元204相當(dāng)于鼠標(biāo)和鍵盤35，顯示器205相當(dāng)于顯示器37。
圖4示出存儲(chǔ)在存儲(chǔ)器103和存儲(chǔ)器203中的至少一個(gè)中的CAD數(shù) 據(jù)庫的示例。
CAD數(shù)據(jù)庫存儲(chǔ)作為用于識(shí)別物體(例如物體8)的識(shí)別信息的物體 ID、 CAD數(shù)據(jù)(文件名)和屬性信息。屬性信息包括標(biāo)題、表示CAD數(shù)據(jù) 的創(chuàng)建者的用戶名稱、和關(guān)于CAD數(shù)據(jù)的創(chuàng)建時(shí)間和時(shí)期的日期數(shù)據(jù)。
圖5是示出由PC l執(zhí)行的操作的流程圖。
PC 1的控制器101向投影儀4輸出初始投影圖像(步驟S1)。該初 始投影圖像是黑色圖像。
然后控制器101經(jīng)由發(fā)送和接收單元102以及網(wǎng)絡(luò)3將由攝像機(jī)5 捕捉的圖像輸出到PC2 (步驟S2)，并開始記錄通過麥克風(fēng)10輸入的聲 音和從揚(yáng)聲器ll輸出的聲音(步驟S3)。然后控制器101確定攝像機(jī)5捕捉的圖像是否包括QR碼7(步驟S4)。
如果步驟S4的確定結(jié)果為"是"，則控制器101對(duì)QR碼7進(jìn)行解碼 以獲取物體8的物體ID (步驟S5)，并在存儲(chǔ)器103中存儲(chǔ)的CAD數(shù)據(jù) 庫中搜索與該物體ID對(duì)應(yīng)的CAD數(shù)據(jù)(步驟S6)。這樣，控制器101識(shí) 別出與物體ID對(duì)應(yīng)的CAD數(shù)據(jù)(步驟S7)。如果步驟S4的確定結(jié)果為"否"， 則操作進(jìn)入步驟S8。
一旦通過發(fā)送和接收單元102從PC 2接收到注釋圖像的坐標(biāo)數(shù)據(jù)(步 驟S8)，控制器101就根據(jù)該坐標(biāo)數(shù)據(jù)執(zhí)行對(duì)圖像進(jìn)行投影的處理(步驟 S9)。更具體地說，控制器101對(duì)注釋圖像的坐標(biāo)數(shù)據(jù)進(jìn)行解碼并將其轉(zhuǎn) 換成投影儀4的投影圖像?？刂破?01向投影儀4輸出該投影圖像。然 后投影儀4將該投影圖像或者注釋圖像投影到物體8和屏幕12上。
然后控制器101確定是否接收到存儲(chǔ)攝像機(jī)5捕捉的圖像、通過麥 克風(fēng)10輸入的聲音和通過揚(yáng)聲器11輸出的聲音的指令(步驟SIO)?？?以通過操作單元106或操作單元204輸入存儲(chǔ)所捕捉圖像和聲音的指令， 或者可以通過攝像機(jī)5捕捉包括存儲(chǔ)所捕捉圖像和聲音的指令的QR碼來
輸入存儲(chǔ)所捕捉圖像和聲音的指令。
如果步驟SIO的確定結(jié)果為"否"，則操作進(jìn)入步驟S12。如果步驟 S10的確定結(jié)果為"是"，則控制器101將攝像機(jī)5捕捉的圖像、通過麥 克風(fēng)10輸入的聲音和通過揚(yáng)聲器11輸出的聲音與在步驟S7中通過物體 8的物體ID識(shí)別的CAD數(shù)據(jù)相關(guān)聯(lián)，并將圖像和聲音與CAD數(shù)據(jù)相關(guān)聯(lián) 地存儲(chǔ)到存儲(chǔ)器103中(步驟Sll)。如果步驟S4的確定結(jié)果為"否"， 則沒有找到物體8的物體ID。因此，將攝像機(jī)5捕捉的圖像、通過麥克 風(fēng)10輸入的聲音和通過揚(yáng)聲器11輸出的聲音與在步驟S7中識(shí)別的CAD 數(shù)據(jù)分離地存儲(chǔ)到存儲(chǔ)器103中。
為減小要在步驟Sll中存儲(chǔ)的由攝像機(jī)5捕捉的圖像的大小，控制 器101可以將攝像機(jī)5捕捉的圖像(靜止圖像)與先前的捕捉圖像進(jìn)行 比較，并確定是否存在比預(yù)定閾值更大的差。在這種情況下，只有當(dāng)所 捕捉圖像相對(duì)于先前的捕捉圖像的差大于閾值時(shí)，控制器101才將攝像 機(jī)5捕捉的圖像存儲(chǔ)到存儲(chǔ)器103中。例如，在構(gòu)成攝像機(jī)5捕捉的圖像的點(diǎn)數(shù)比構(gòu)成先前的捕捉圖像的點(diǎn)數(shù)大或小100個(gè)點(diǎn)或者更多的情況
下，或者在構(gòu)成攝像機(jī)5捕捉的圖像的總點(diǎn)數(shù)比構(gòu)成先前的捕捉圖像的 總點(diǎn)數(shù)大或小3%或更多的情況下，控制器101確定存在大于預(yù)定閾值的 差，并將所捕捉圖像存儲(chǔ)到存儲(chǔ)器103中。
圖6示出CAD數(shù)據(jù)與所捕捉圖像和音頻數(shù)據(jù)之間的關(guān)聯(lián)的示例。在 圖6中，具有物體ID "物體001"的CAD數(shù)據(jù)與具有物體ID "物體001" 的所捕捉圖像和音頻數(shù)據(jù)彼此相關(guān)聯(lián)，并存儲(chǔ)在存儲(chǔ)器103中。圖6中 的關(guān)于具有物體ID "物體001"的CAD數(shù)據(jù)的屬性信息具有鏈接欄、以 及圖4中的關(guān)于具有物體ID "物體001"的所捕捉圖像和音頻數(shù)據(jù)的屬 性信息中包括的項(xiàng)目。鏈接欄中寫入了相關(guān)聯(lián)的所捕捉圖像和音頻數(shù)據(jù) 的文件名。如后面將描述的，當(dāng)點(diǎn)擊關(guān)于CAD數(shù)據(jù)的屬性信息中包括的 到所捕捉圖像和音頻數(shù)據(jù)的鏈接時(shí)，控制器101從存儲(chǔ)器103讀取并輸 出與CAD數(shù)據(jù)相關(guān)聯(lián)的所捕捉圖像和音頻數(shù)據(jù)。
圖6中所示的添加到所捕捉圖像和音頻數(shù)據(jù)的屬性信息是關(guān)于會(huì)議 的屬性信息，包括標(biāo)題、會(huì)議參與者的用戶名稱和會(huì)議日期。
在步驟S11之后，控制器101確定是否已經(jīng)執(zhí)行了所有處理，例如 投影處理以及圖像和聲音存儲(chǔ)處理(步驟S12)。如果步驟S12的確定結(jié) 果為"否"，則操作返回步驟S2。如果步驟S12的確定結(jié)果為"是"，則 操作結(jié)束。
盡管控制器101在步驟S4和S5中通過QR碼7獲取物體ID，但獲取 物體ID的處理并不限于此。例如，控制器101可以獲取通過操作單元106 或操作單元204輸入的物體ID。而且，連接到PC 1的RFID標(biāo)簽讀取器 或者條碼讀取器(未示出)可以讀取附著到物體8的RFID標(biāo)簽或條碼， 以使得控制器101獲取物體ID。
圖7A示出了具有物體ID "物體001"的所捕捉圖像及其屬性信息。 圖7B示出了顯示器105或205的畫面的變換。
通過圖5中示出的操作，將圖7A中示出的所捕捉圖像和音頻數(shù)據(jù)存 儲(chǔ)在存儲(chǔ)器103中。
當(dāng)啟動(dòng)了生成在存儲(chǔ)器103或203中存儲(chǔ)的CAD數(shù)據(jù)的應(yīng)用程序時(shí)，
18在通過操作單元106或204輸入了物體ID "物體001"時(shí)，控制器101 使顯示器105或205顯示與圖7B中左側(cè)示出的物體ID "物體001"對(duì)應(yīng) 的CAD數(shù)據(jù)。此外，當(dāng)輸入了顯示關(guān)于CAD數(shù)據(jù)的屬性信息的指令時(shí)， 控制器101使顯示器105或205顯示關(guān)于CAD數(shù)據(jù)的屬性信息，如圖7B 的中部所示。如果在這種情況下通過操作單元106或204點(diǎn)擊了到"圖 像001 — 025"和"聲音001"的鏈接，則控制器101使顯示器105或205 顯示在畫面上示出所捕捉圖像的窗口，如圖7B的右側(cè)所示，并且通過揚(yáng) 聲器11或19輸出"聲音001"的聲音。這樣，當(dāng)點(diǎn)擊關(guān)于CAD數(shù)據(jù)的屬 性信息中包含的到所捕捉圖像和音頻數(shù)據(jù)的鏈接時(shí)，控制器101從存儲(chǔ) 器103讀取并輸出與CAD數(shù)據(jù)相關(guān)聯(lián)的所捕捉圖像和音頻數(shù)據(jù)。
如上詳細(xì)所述，根據(jù)本示例性實(shí)施方式，存儲(chǔ)器103存儲(chǔ)包含用于 設(shè)計(jì)物體8的CAD數(shù)據(jù)及其屬性信息的數(shù)據(jù)庫，并且控制器101獲取物 體8的物體ID (識(shí)別信息)?；谖矬w8的物體ID，控制器101識(shí)別數(shù) 據(jù)庫中包含的關(guān)于物體8的CAD數(shù)據(jù)?？刂破?01將所捕捉的圖像數(shù)據(jù) 和音頻數(shù)據(jù)與關(guān)于物體8的CAD數(shù)據(jù)相關(guān)聯(lián)，并將所捕捉圖像數(shù)據(jù)和音 頻數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器103中，從而可以基于所識(shí)別 的關(guān)于物體8的CAD數(shù)據(jù)的屬性信息來查看并收聽由攝像機(jī)5捕捉的圖 像的數(shù)據(jù)以及通過麥克風(fēng)10和揚(yáng)聲器11輸入和輸出的音頻數(shù)據(jù)。
這樣，可以基于物體8的CAD數(shù)據(jù)容易地查看并收聽通過與PC 2的 通信而獲取的關(guān)于物體8的所捕捉圖像和音頻數(shù)據(jù)。
在第一示例性實(shí)施方式中，控制器101將所捕捉圖像數(shù)據(jù)和音頻數(shù) 據(jù)與所識(shí)別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器103存儲(chǔ)所捕捉圖像 數(shù)據(jù)和音頻數(shù)據(jù)與CAD數(shù)據(jù)。然而，也可以僅將所捕捉圖像數(shù)據(jù)與所識(shí) 別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器103將所捕捉圖像與CAD數(shù)據(jù) 相關(guān)聯(lián)地存儲(chǔ)。這樣，可以基于物體8的CAD數(shù)據(jù)容易地查看通過與PC 2 的通信而獲取的關(guān)于物體8的所捕捉圖像數(shù)據(jù)。此外，控制器101 (數(shù)據(jù) 轉(zhuǎn)換器)可以通過公知技術(shù)將音頻數(shù)據(jù)轉(zhuǎn)換成文本數(shù)據(jù)?？刂破?01然 后將所捕捉圖像數(shù)據(jù)和文本數(shù)據(jù)與所識(shí)別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并 使存儲(chǔ)器103將所捕捉圖像數(shù)據(jù)和文本數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)。
19這樣，可以基于物體8的CAD數(shù)據(jù)容易地查看通過與PC 2的通信而獲取 的關(guān)于物體8的所捕捉圖像和對(duì)應(yīng)于音頻數(shù)據(jù)的文本數(shù)據(jù)。
此外，在利用各種測量裝置(例如尺寸測量器、溫度計(jì)、液體比重 計(jì)(hydrometer)和安培計(jì))測量物體8的情況下，控制器101可以將 通過這些測量裝置獲取的數(shù)據(jù)與物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器103 存儲(chǔ)所述測量數(shù)量和CAD數(shù)據(jù)。 (第二示例性實(shí)施方式)
在第一示例性實(shí)施方式中，將CAD數(shù)據(jù)與所捕捉圖像和音頻數(shù)據(jù)相 關(guān)聯(lián)，并且將相關(guān)聯(lián)的圖像和數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器103中。另一方面，在 該示例性實(shí)施方式中，將CAD數(shù)據(jù)與所捕捉圖像和音頻數(shù)據(jù)相關(guān)聯(lián)，并 且將相關(guān)聯(lián)的圖像和數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器203中。
在第一示例性實(shí)施方式中，CAD數(shù)據(jù)預(yù)先存儲(chǔ)在存儲(chǔ)器103中。另一 方面，在該示例性實(shí)施方式中，圖4中所示的CAD數(shù)據(jù)庫預(yù)先存儲(chǔ)在存 儲(chǔ)器203中。
圖8是PC 2執(zhí)行的操作的流程圖。
控制器201從PC 1獲取捕捉的圖像(步驟S21)，并開始記錄通過麥 克風(fēng)18輸入的聲音和從揚(yáng)聲器19輸出的聲音(步驟S22)。
然后控制器201確定所捕捉圖像是否包含QR碼7 (步驟S23)。
如果步驟S23的確定結(jié)果為"是"，則控制器201對(duì)QR碼7進(jìn)行解 碼以獲取物體8的物體ID (步驟S24)，并在存儲(chǔ)器203中存儲(chǔ)的CAD數(shù) 據(jù)庫中搜索與該物體ID對(duì)應(yīng)的CAD數(shù)據(jù)(步驟S25)。這樣，控制器IOI 就識(shí)別出與該物體ID對(duì)應(yīng)的CAD數(shù)據(jù)(步驟S26)。如果步驟S23的確定 結(jié)果為"否"，則操作進(jìn)入步驟S27。
然后控制器201確定是否已經(jīng)通過操作單元204接收到繪制注釋圖 像的畫面處理命令(步驟S27)。
如果步驟S27的確定結(jié)果為"否"，則操作進(jìn)入步驟S30。如果步驟 S27的確定結(jié)果為"是"，則控制器101根據(jù)該畫面處理命令在顯示區(qū)域 15上繪制注釋圖像(步驟S28)，并將注釋圖像的坐標(biāo)數(shù)據(jù)通過發(fā)送和接 收單元202發(fā)送到PC 1 (步驟S29)。在圖5的步驟S8中，控制器101通過發(fā)送和接收單元202接收向PC l發(fā)送的坐標(biāo)數(shù)據(jù)。
然后控制器201確定是否接收到存儲(chǔ)所捕捉圖像、通過麥克風(fēng)18輸 入的聲音和通過揚(yáng)聲器18輸出的聲音的指令(步驟S30)?？梢酝ㄟ^操作 單元106或操作單元204輸入存儲(chǔ)所捕捉圖像和聲音的指令，或者可以 通過攝像機(jī)5捕捉包括存儲(chǔ)所捕捉圖像和聲音的指令的QR碼來輸入存儲(chǔ) 所捕捉圖像和聲音的指令。
如果步驟S30的確定結(jié)果為"否"，則操作進(jìn)入步驟S32。如果步驟 S30的確定結(jié)果為"是"，則控制器201將所捕捉圖像、通過麥克風(fēng)18輸 入的聲音和通過揚(yáng)聲器19輸出的聲音與在步驟S26中通過物體8的物體 ID識(shí)別的CAD數(shù)據(jù)相關(guān)聯(lián)，并將圖像和聲音與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)到 存儲(chǔ)器203中(步驟S31)。如果步驟S23的確定結(jié)果為"否"，則沒有找 到物體8的物體ID。因此，將所捕捉圖像、通過麥克風(fēng)18輸入的聲音和 通過揚(yáng)聲器19輸出的聲音與在步驟S26中識(shí)別的CAD數(shù)據(jù)分離地存儲(chǔ)到 存儲(chǔ)器203中。
為減小要在步驟S31中存儲(chǔ)的由攝像機(jī)5捕捉的圖像的大小，控制 器201可以將所捕捉圖像(靜止圖像)與先前的捕捉圖像進(jìn)行比較，并 確定是否存在比預(yù)定閾值更大的差。在這種情況下，只有當(dāng)所捕捉圖像 相對(duì)于先前的捕捉圖像的差大于閾值時(shí)，控制器201才將所捕捉圖像存 儲(chǔ)到存儲(chǔ)器203中。例如，在構(gòu)成所捕捉圖像的點(diǎn)數(shù)比構(gòu)成先前的捕捉 圖像的點(diǎn)數(shù)大或小100個(gè)點(diǎn)或者更多的情況下，或者在構(gòu)成所捕捉圖像 的總點(diǎn)數(shù)比構(gòu)成先前的捕捉圖像的總點(diǎn)數(shù)大或小3%或更多的情況下，控 制器201確定存在大于預(yù)定閾值的差，并將所捕捉圖像存儲(chǔ)到存儲(chǔ)器203 中。
在步驟S31之后，控制器201確定是否已經(jīng)執(zhí)行了所有處理，例如 注釋圖像的坐標(biāo)數(shù)據(jù)的發(fā)送處理以及圖像和聲音存儲(chǔ)處理(步驟S32)。 如果步驟S32的確定結(jié)果為"否"，則操作返回步驟S12。如果步驟S32 的確定結(jié)果為"是"，則操作結(jié)束。
盡管控制器201在步驟S23和S24中通過QR碼7獲取物體ID，但獲 取物體ID的處理并不限于此。例如，控制器201可以獲取通過操作單元
21106或操作單元204輸入的物體ID。此外，控制器201可以獲取直接從 PC 1輸入的物體ID。
與參照?qǐng)D7A和7B說明的控制器101 —樣，當(dāng)點(diǎn)擊了關(guān)于CAD數(shù)據(jù) 的屬性信息中包括的到所捕捉圖像和音頻數(shù)據(jù)的鏈接時(shí)，控制器201從 存儲(chǔ)器203讀取并輸出與CAD數(shù)據(jù)相關(guān)聯(lián)的所捕捉圖像和音頻數(shù)據(jù)。
如上詳細(xì)所述，根據(jù)本示例性實(shí)施方式，存儲(chǔ)器203存儲(chǔ)包含用于 設(shè)計(jì)物體8的CAD數(shù)據(jù)及其屬性信息的數(shù)據(jù)庫，并且控制器201獲取物 體8的物體ID (識(shí)別信息)。基于物體8的物體ID，控制器201識(shí)別數(shù) 據(jù)庫中包含的關(guān)于物體8的CAD數(shù)據(jù)?？刂破?01將所捕捉圖像數(shù)據(jù)和 音頻數(shù)據(jù)與關(guān)于物體8的CAD數(shù)據(jù)相關(guān)聯(lián)，并將所捕捉圖像數(shù)據(jù)和音頻 數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器203中，從而可以基于所識(shí)別的 關(guān)于物體8的CAD數(shù)據(jù)的屬性信息來查看并收聽由攝像機(jī)5捕捉的圖像 的數(shù)據(jù)以及通過麥克風(fēng)18和揚(yáng)聲器19輸入和輸出的音頻數(shù)據(jù)。
這樣，可以基于物體8的CAD數(shù)據(jù)容易地查看并收聽通過與PC 1的 通信而獲得的關(guān)于物體8的所捕捉圖像和音頻數(shù)據(jù)。
在第二示例性實(shí)施方式中，控制器201將所捕捉圖像數(shù)據(jù)和音頻數(shù) 據(jù)與所識(shí)別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器203存儲(chǔ)所捕捉圖像 數(shù)據(jù)和音頻數(shù)據(jù)與CAD數(shù)據(jù)。然而，也可以僅將所捕捉圖像數(shù)據(jù)與所識(shí) 別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器203將所捕捉圖像與CAD數(shù)據(jù) 相關(guān)聯(lián)地存儲(chǔ)。這樣，可以基于物體8的CAD數(shù)據(jù)容易地查看通過與PC 1 的通信而獲取的關(guān)于物體8的所捕捉圖像數(shù)據(jù)。此外，控制器201 (數(shù)據(jù) 轉(zhuǎn)換器)可以通過公知技術(shù)將音頻數(shù)據(jù)轉(zhuǎn)換成文本數(shù)據(jù)。然后控制器201 將所捕捉圖像數(shù)據(jù)和文本數(shù)據(jù)與所識(shí)別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使 存儲(chǔ)器203將所捕捉圖像數(shù)據(jù)和文本數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)。這 樣，可以基于物體8的CAD數(shù)據(jù)容易地查看通過與PC 1的通信而獲取的 關(guān)于物體8的所捕捉圖像和對(duì)應(yīng)于音頻數(shù)據(jù)的文本數(shù)據(jù)。
此外，在利用各種測量裝置(例如尺寸測量器、溫度計(jì)、液體比重 計(jì)和安培計(jì))測量物體8的情況下，控制器201可以將通過這些測量裝 置獲取的數(shù)據(jù)與物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器203存儲(chǔ)所述測量
22數(shù)量和CAD數(shù)據(jù)。
(第三示例性實(shí)施方式)
在第一示例性實(shí)施方式中，控制器101將與物體8的物體ID對(duì)應(yīng)的 CAD數(shù)據(jù)與物體8的所捕捉圖像和音頻數(shù)據(jù)相關(guān)聯(lián)，并將CAD數(shù)據(jù)與所捕 捉圖像和音頻數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)器103中。在物體8是己經(jīng)完成 的產(chǎn)品的部件并且利用CAD數(shù)據(jù)重新設(shè)計(jì)物體8的情況下，操作者可能 希望不僅參照關(guān)于物體8的所捕捉圖像和音頻數(shù)據(jù)，而且參照關(guān)于與物 體8相關(guān)的其他部件的所捕捉圖像和音頻數(shù)據(jù)。在該示例性實(shí)施方式中 考慮這種情況，控制器101將與物體8的物體ID對(duì)應(yīng)的CAD數(shù)據(jù)與物體 8和與物體8相關(guān)的其他物體的所捕捉圖像和音頻數(shù)據(jù)相關(guān)聯(lián)，并將CAD 數(shù)據(jù)與所捕捉圖像和音頻數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器103中。
圖9是PC l執(zhí)行的操作的流程圖。在圖9中，用與圖5中的步驟編 號(hào)相同的步驟編號(hào)表示與圖5中的處理相同的處理，并在此處省略其說 明。
在以下描述中，首先捕捉物體8的圖像，之后捕捉與物體8相關(guān)的 其他部件的圖像。
在步驟S9之后，控制器101在顯示器105或205上顯示存儲(chǔ)指令對(duì) 話框(步驟S41)。
圖10A示出了顯示存儲(chǔ)指令對(duì)話框61的顯示器105的示例。圖10B 示出了顯示存儲(chǔ)指令對(duì)話框61的顯示器205的示例。
存儲(chǔ)指令對(duì)話框61包括用于將各物體的所捕捉圖像和音頻數(shù)據(jù)臨 時(shí)存儲(chǔ)在存儲(chǔ)器103中的臨時(shí)存儲(chǔ)按鈕62;用于將物體8和與物體8相 關(guān)的其他物體的所捕捉圖像和音頻數(shù)據(jù)最終存儲(chǔ)在存儲(chǔ)器103中的最終 存儲(chǔ)按鈕63;以及取消按鈕64。
回到參照?qǐng)D9，控制器101確定是否通過操作單元106或者操作單元 204按下了臨時(shí)存儲(chǔ)按鈕62 (步驟S42)。
如果步驟S42的確定結(jié)果為"是"，則控制器101將所捕捉圖像和音 頻數(shù)據(jù)臨時(shí)存儲(chǔ)到存儲(chǔ)器103中(S32)，并返回到步驟S2。如果控制器 101從步驟S43返回到步驟S2，則控制器101切換到另一聲音記錄文件，并開始記錄聲音。如果控制器101從步驟S43返回到步驟S2，則可以捕 捉并非物體8的物體的圖像。
如果步驟S42的確定結(jié)果為"否"，則控制器101確定是否通過操作 單元106或者操作單元204按下了最終存儲(chǔ)按鈕63 (步驟S44)。
如果步驟S44的確定結(jié)果為"否"，或者當(dāng)按下了取消按鈕64時(shí)， 操作進(jìn)入步驟S46。
如果步驟S44的確定結(jié)果為"是"，則控制器101將當(dāng)前正在捕捉的 圖像和音頻數(shù)據(jù)以及臨時(shí)存儲(chǔ)在存儲(chǔ)器103中的所捕捉圖像和音頻數(shù)據(jù) 與在步驟S7中通過物體8的物體ID而最先識(shí)別的物體8的CAD數(shù)據(jù)相 關(guān)聯(lián)，并將這些圖像和音頻數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器103 中(步驟S45)。如果步驟S4的確定結(jié)果為"否"，則沒有找到物體8的 物體ID。因此，將所捕捉圖像和音頻數(shù)據(jù)與步驟S7中識(shí)別的物體8的 CAD數(shù)據(jù)分離地存儲(chǔ)到存儲(chǔ)器103中。
為減小將在步驟S43中臨時(shí)存儲(chǔ)的所捕捉圖像數(shù)據(jù)的量和在步驟S45 中最終存儲(chǔ)的所捕捉圖像數(shù)據(jù)的量，控制器101可以將攝像機(jī)5捕捉的 圖像(靜止圖像)與先前的捕捉圖像進(jìn)行比較，并確定是否存在比預(yù)定 閾值更大的差。在這種情況下，只有當(dāng)所捕捉圖像相對(duì)于先前的捕捉圖 像的差大于閾值時(shí)，控制器101才將所圖像存儲(chǔ)到存儲(chǔ)器103中。例如， 在構(gòu)成攝像機(jī)5捕捉的圖像的點(diǎn)數(shù)比構(gòu)成先前的捕捉圖像的點(diǎn)數(shù)大或小 100個(gè)點(diǎn)或者更多的情況下，或者在構(gòu)成攝像機(jī)5捕捉的圖像的總點(diǎn)數(shù)比 構(gòu)成先前的捕捉圖像的總點(diǎn)數(shù)大或小3%或更多的情況下，控制器101確 定存在大于預(yù)定閾值的差，并將所捕捉圖像存儲(chǔ)到存儲(chǔ)器103中。
圖11示出了將一組CAD數(shù)據(jù)與兩個(gè)或更多個(gè)所捕捉圖像和兩組或更 多組音頻數(shù)據(jù)相關(guān)聯(lián)的示例性情況。在圖11中，具有物體ID"物體001" 的CAD數(shù)據(jù)與兩個(gè)或更多個(gè)所捕捉圖像和兩組或更多組音頻數(shù)據(jù)相關(guān)聯(lián)， 并存儲(chǔ)在存儲(chǔ)器103中。圖11中的關(guān)于具有物體ID "物體001"的CAD 數(shù)據(jù)的屬性信息具有鏈接欄、以及圖4中的關(guān)于具有物體ID "物體001" 的CAD數(shù)據(jù)的屬性信息中包括的項(xiàng)目。鏈接欄中寫入了相關(guān)聯(lián)的所捕捉 圖像和音頻數(shù)據(jù)的文件名。當(dāng)點(diǎn)擊關(guān)于CAD數(shù)據(jù)的屬性信息中包括的到
24所捕捉圖像和音頻數(shù)據(jù)的鏈接時(shí)，控制器101從存儲(chǔ)器103讀取并輸出 與CAD數(shù)據(jù)相關(guān)聯(lián)的所捕捉圖像和音頻數(shù)據(jù)。
圖11中所示的添加到所捕捉圖像和音頻數(shù)據(jù)的屬性信息是關(guān)于會(huì)議 的屬性信息，包括標(biāo)題、會(huì)議參與者的用戶名稱和會(huì)議曰期。
在步驟S45之后，控制器101確定是否已經(jīng)執(zhí)行了所有處理，例如 投影處理以及圖像和聲音存儲(chǔ)處理(步驟S46)。如果步驟S46的確定結(jié) 果為"否"，則操作返回步驟S2。如果步驟S46的確定結(jié)果為"是"，則 操作結(jié)束。
在步驟S41到S45中，控制器101在顯示器105或205上顯示存儲(chǔ) 指令對(duì)話框，并確定是否按下了臨時(shí)存儲(chǔ)按鈕62或者最終存儲(chǔ)按鈕63。 然而，控制器101可以基于是否進(jìn)行了與臨時(shí)存儲(chǔ)按鈕62對(duì)應(yīng)的預(yù)定輸 入鍵(例如，Alt+Fl)或者與最終存儲(chǔ)按鈕63對(duì)應(yīng)的預(yù)定輸入鍵(例如， Alt+F2)來確定是否按下臨時(shí)存儲(chǔ)按鈕62或者最終存儲(chǔ)按鈕63。
在步驟S45中，控制器101將當(dāng)前正在捕捉的圖像和音頻數(shù)據(jù)以及 臨時(shí)存儲(chǔ)在存儲(chǔ)器103中的所捕捉圖像和音頻數(shù)據(jù)與在步驟S7中通過物 體8的物體ID而最先識(shí)別的物體8的CAD數(shù)據(jù)相關(guān)聯(lián)，并將這些圖像和 音頻數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器103中。然而，控制器 101可以將當(dāng)前正在捕捉的圖像和音頻數(shù)據(jù)以及臨時(shí)存儲(chǔ)在存儲(chǔ)器103中 的所捕捉圖像和音頻數(shù)據(jù)與在步驟S7中通過物體8的物體ID而最后識(shí) 別的物體8的CAD數(shù)據(jù)相關(guān)聯(lián)，并將這些圖像和音頻數(shù)據(jù)與所述CAD數(shù) 據(jù)相關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器103中。
如圖12所示，步驟S41到S46的處理可以添加到步驟S21到S29的 處理。這樣，PC2的控制器201可以將與物體8的物體ID對(duì)應(yīng)的CAD數(shù) 據(jù)與物體8和與物體8相關(guān)的其他物體的所捕捉圖像和音頻數(shù)據(jù)相關(guān)聯(lián)， 并將所捕捉圖像和音頻數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器203中。
如上詳細(xì)所述，根據(jù)本示例性實(shí)施方式，在捕捉各物體的圖像并且 在切換物體時(shí)切換音頻數(shù)據(jù)文件的情況下，控制器101將多個(gè)物體的所 捕捉圖像數(shù)據(jù)和音頻數(shù)據(jù)與最先或最后識(shí)別的關(guān)于物體8的CAD數(shù)據(jù)相 關(guān)聯(lián)，并將所捕捉圖像數(shù)據(jù)和音頻數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器103中，從而可以基于最先或最后識(shí)別的物體8的CAD數(shù)據(jù)的屬性信 息來査看并收聽由攝像機(jī)5捕捉的多個(gè)物體的圖像以及通過麥克風(fēng)10和 揚(yáng)聲器11輸入和輸出的兩組或更多組音頻數(shù)據(jù)。
這樣，可以基于最先或最后識(shí)別的關(guān)于物體8的CAD數(shù)據(jù)容易地查 看并收聽通過與PC 2的通信而獲取的關(guān)于包括物體8的多個(gè)物體的所捕 捉圖像和音頻數(shù)據(jù)。
同樣，在捕捉各物體的圖像并且在切換物體時(shí)切換音頻數(shù)據(jù)文件的 情況下，控制器201將多個(gè)物體的所捕捉圖像數(shù)據(jù)和音頻數(shù)據(jù)與最先或 最后識(shí)別的關(guān)于物體8的CAD數(shù)據(jù)相關(guān)聯(lián)，并將所捕捉圖像數(shù)據(jù)和音頻 數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)存儲(chǔ)地到存儲(chǔ)器203中，從而可以基于最先或最 后識(shí)別的物體8的CAD數(shù)據(jù)的屬性信息來查看并收聽由攝像機(jī)5捕捉的 多個(gè)物體的圖像以及通過麥克風(fēng)18和揚(yáng)聲器19輸入和輸出的兩組或更 多組音頻數(shù)據(jù)。
這樣，可以基于最先或最后識(shí)別的關(guān)于物體8的CAD數(shù)據(jù)容易地查 看并收聽通過與PC 1的通信而獲取的關(guān)于包括物體8的多個(gè)物體的所捕 捉圖像和音頻數(shù)據(jù)。
當(dāng)按下臨時(shí)存儲(chǔ)按鈕62時(shí)，控制器101或者控制器201使存儲(chǔ)器103 或存儲(chǔ)器203臨時(shí)存儲(chǔ)關(guān)于各物體的所捕捉圖像數(shù)據(jù)和關(guān)于各物體的音 頻數(shù)據(jù)。當(dāng)按下最終存儲(chǔ)按鈕63時(shí)，控制器101或者控制器201將多個(gè) 物體的所捕捉圖像數(shù)據(jù)和兩組或更多組音頻數(shù)據(jù)與最先或最后識(shí)別的物 體8的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器103或者存儲(chǔ)器203將多個(gè)物體的 所捕捉圖像數(shù)據(jù)和音頻數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，從而可以基于最 先或最后識(shí)別的物體8的CAD數(shù)據(jù)的屬性信息來査看并收聽由攝像機(jī)5 捕捉的多個(gè)物體的圖像以及通過麥克風(fēng)10和揚(yáng)聲器11或者麥克風(fēng)18和 揚(yáng)聲器19輸入和輸出的兩組或更多組音頻數(shù)據(jù)。
因此，當(dāng)按下了臨時(shí)存儲(chǔ)按鈕62時(shí)，將各物體的所捕捉圖像和音頻 數(shù)據(jù)臨時(shí)存儲(chǔ)到存儲(chǔ)器103或存儲(chǔ)器203中。當(dāng)按下了最終存儲(chǔ)按鈕63 時(shí)，將多個(gè)物體的包括臨時(shí)存儲(chǔ)的所捕捉圖像和音頻數(shù)據(jù)在內(nèi)的所捕捉 圖像和音頻數(shù)據(jù)與物體8的最先或最后識(shí)別的CAD數(shù)據(jù)相關(guān)聯(lián)，并可以將其存儲(chǔ)在存儲(chǔ)器103或者存儲(chǔ)器203中。
在第三示例性實(shí)施方式中，控制器101或者控制器201將所捕捉圖 像數(shù)據(jù)和音頻數(shù)據(jù)與所識(shí)別的物體8的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器103 或者存儲(chǔ)器203將所捕捉圖像數(shù)據(jù)和音頻數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)。 然而，也可以僅將所捕捉圖像數(shù)據(jù)與所識(shí)別的物體8的CAD數(shù)據(jù)相關(guān)聯(lián)， 并使存儲(chǔ)器103或者存儲(chǔ)器203將所捕捉圖像與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)。 這樣，可以基于物體8的CAD數(shù)據(jù)容易地查看通過與PC 2或者PC 1的 通信而獲取的關(guān)于物體8的所捕捉圖像數(shù)據(jù)。此外，控制器101或者控 制器201 (數(shù)據(jù)轉(zhuǎn)換器)可以通過公知技術(shù)將音頻數(shù)據(jù)轉(zhuǎn)換成文本數(shù)據(jù)。 控制器101或者控制器201然后將所捕捉圖像數(shù)據(jù)和文本數(shù)據(jù)與所識(shí)別 的物體8的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器103或者存儲(chǔ)器203將所捕捉 圖像數(shù)據(jù)和文本數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)。這樣，可以基于物體8 的CAD數(shù)據(jù)容易地査看通過與PC 2或者PC 1的通信而獲取的關(guān)于物體8 的所捕捉圖像和對(duì)應(yīng)于音頻數(shù)據(jù)的文本數(shù)據(jù)。
此外，在利用各種測量裝置(例如尺寸測量器、溫度計(jì)、液體比重 計(jì)和安培計(jì))測量物體8的情況下，控制器101或者控制器201可以將 通過這些測量裝置獲取的數(shù)據(jù)與物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器103 或者存儲(chǔ)器203存儲(chǔ)所述測量數(shù)量和CAD數(shù)據(jù)。
另選的是，可以向各PC提供其上記錄有用于實(shí)現(xiàn)PC 1和PC 2的功 能的軟件程序的記錄介質(zhì)，各PC的CPU可以讀取并執(zhí)行記錄在該記錄介 質(zhì)上的程序。以這種方式，可以實(shí)現(xiàn)與上述示例性實(shí)施方式的效果相同 的效果。提供該程序的記錄介質(zhì)可以是CD-ROM、 DVD、 SD卡等。
此外，各PC的CPU可以執(zhí)行用于實(shí)現(xiàn)各PC的功能的軟件程序。以 這種方式，也可以實(shí)現(xiàn)與上述示例性實(shí)施方式的效果相同的效果。
應(yīng)當(dāng)理解，本發(fā)明不限于上述示例性實(shí)施方式，可以在不偏離本發(fā) 明的范圍的情況下對(duì)它們作出各種修改。
2權(quán)利要求
1. 一種信息處理裝置，該信息處理裝置連接到將從外部終端輸入的注釋圖像投影到包括物體的投影區(qū)域上的投影裝置，并連接到捕捉所述投影區(qū)域的圖像的圖像捕捉裝置，所述信息處理裝置通過與所述外部終端的通信，獲取要向所述投影裝置和所述圖像捕捉裝置輸入的圖像數(shù)據(jù)以及要從所述投影裝置和所述圖像捕捉裝置輸出的圖像數(shù)據(jù)，所述信息處理裝置包括存儲(chǔ)器，其存儲(chǔ)一數(shù)據(jù)庫，該數(shù)據(jù)庫包括設(shè)計(jì)所述物體要使用的CAD數(shù)據(jù)及其屬性信息；獲取單元，其獲取所述物體的識(shí)別信息；識(shí)別單元，其基于所獲取的所述物體的識(shí)別信息，識(shí)別所述數(shù)據(jù)庫中包括的所述物體的CAD數(shù)據(jù)；以及控制器，其將由所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)與由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看所捕捉圖像的數(shù)據(jù)。
2. 根據(jù)權(quán)利要求l所述的信息處理裝置，其中 所述信息處理裝置連接到向所述外部終端輸入聲音并從所述外部終端輸出聲音的音頻輸入和輸出裝置，并通過與所述外部終端的通信而獲 取所述聲音的數(shù)據(jù)；并且所述控制器將所捕捉圖像的數(shù)據(jù)和所述音頻數(shù)據(jù)與由所述識(shí)別單元 識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像的數(shù) 據(jù)和所述音頻數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所 述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看并收聽由所述 圖像捕捉裝置捕捉的圖像的數(shù)據(jù)以及通過所述音頻輸入和輸出裝置輸入 的音頻數(shù)據(jù)。
3. 根據(jù)權(quán)利要求2所述的信息處理裝置，該信息處理裝置還包括 將所述音頻數(shù)據(jù)轉(zhuǎn)換成文本數(shù)據(jù)的數(shù)據(jù)轉(zhuǎn)換器，其中，所述控制器將所捕捉圖像的數(shù)據(jù)和所述文本數(shù)據(jù)與由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖 像的數(shù)據(jù)和所述文本數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基 于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來査看由所述 圖像捕捉裝置捕捉的圖像的數(shù)據(jù)和由所述數(shù)據(jù)轉(zhuǎn)換器轉(zhuǎn)換的文本數(shù)據(jù)。
4. 一種信息處理裝置，該信息處理裝置與服務(wù)器進(jìn)行通信，所述服 務(wù)器連接到將注釋圖像投影到包括物體的投影區(qū)域上的投影裝置并連接 到捕捉所述投影區(qū)域的圖像的圖像捕捉裝置，所述信息處理裝置通過與 所述服務(wù)器的通信，獲取要向所述投影裝置和所述圖像捕捉裝置輸入的 圖像數(shù)據(jù)以及要從所述投影裝置和所述圖像捕捉裝置輸出的圖像數(shù)據(jù)，所述信息處理裝置包括存儲(chǔ)器，其存儲(chǔ)一數(shù)據(jù)庫，該數(shù)據(jù)庫包括設(shè)計(jì)所述物體要使用的CAD數(shù)據(jù)及其屬性信息；獲取單元，其獲取所述物體的識(shí)別信息；識(shí)別單元，其基于所獲取的所述物體的識(shí)別信息，識(shí)別所述數(shù)據(jù)庫 中包括的所述物體的CAD數(shù)據(jù)；以及控制器，其將由所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)與由所述識(shí)別 單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像 的數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元 識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看所捕捉圖像的數(shù)據(jù)。
5. 根據(jù)權(quán)利要求4所述的信息處理裝置，其中 輸入并輸出聲音的第一音頻輸入和輸出裝置連接到所述信息處理裝置；輸入并輸出聲音的第二音頻輸入和輸出裝置連接到所述服務(wù)器； 通過所述信息處理裝置與所述服務(wù)器之間的通信來獲取所述聲音的 音頻數(shù)據(jù)；并且所述控制器將所捕捉圖像的數(shù)據(jù)和所述音頻數(shù)據(jù)與由所述識(shí)別單元 識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像的數(shù) 據(jù)和所述音頻數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看并收聽由所述 圖像捕捉裝置捕捉的圖像的數(shù)據(jù)以及通過所述第一音頻輸入和輸出裝置 而輸入或輸出的音頻數(shù)據(jù)。
6. 根據(jù)權(quán)利要求5所述的信息處理裝置，該信息處理裝置還包括 數(shù)據(jù)轉(zhuǎn)換器，其將通過所述第一音頻輸入和輸出裝置輸入或輸出的音頻數(shù)據(jù)轉(zhuǎn)換成文本數(shù)據(jù)，其中，所述控制器將所捕捉圖像的數(shù)據(jù)和所述文本數(shù)據(jù)與由所述識(shí) 別單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖 像的數(shù)據(jù)和所述文本數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基 于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看由所述 圖像捕捉裝置捕捉的圖像的數(shù)據(jù)和由所述數(shù)據(jù)轉(zhuǎn)換器轉(zhuǎn)換的文本數(shù)據(jù)。
7. 根據(jù)權(quán)利要求1或4所述的信息處理裝置，其中，當(dāng)逐一地捕捉多個(gè)物體的圖像時(shí)，所述控制器將由所述圖像捕捉裝置捕捉的所述多個(gè) 圖像的數(shù)據(jù)與由所述識(shí)別單元最先或最后識(shí)別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)， 并使所述存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以 使得可以基于由所述識(shí)別單元最先或最后識(shí)別的所述物體的CAD數(shù)據(jù)的 屬性信息來査看所捕捉圖像的數(shù)據(jù)。
8. 根據(jù)權(quán)利要求2或5所述的信息處理裝置，其中，當(dāng)逐一地捕捉多個(gè)物體的圖像并且在切換物體時(shí)切換音頻數(shù)據(jù)文件時(shí)，所述控制器將 由所述圖像捕捉裝置捕捉的所述多個(gè)圖像的數(shù)據(jù)和通過所述音頻輸入和 輸出裝置或所述第一音頻輸入和輸出裝置輸入或輸出的多組音頻數(shù)據(jù)與 由所述識(shí)別單元最先或最后識(shí)別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存 儲(chǔ)器將所捕捉圖像的數(shù)據(jù)和所述音頻數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)， 以使得可以基于由所述識(shí)別單元最先或最后識(shí)別的所述物體的CAD數(shù)據(jù) 的屬性信息來查看并收聽所捕捉圖像的數(shù)據(jù)和所述多組音頻數(shù)據(jù)。
9. 根據(jù)權(quán)利要求8所述的信息處理裝置，該信息處理裝置還包括輸入單元，其用于輸入臨時(shí)存儲(chǔ)指令或最終存儲(chǔ)指令， 其巾當(dāng)通過所述輸入單元輸入了所述臨時(shí)存儲(chǔ)指令時(shí)，所述控制器使得所述存儲(chǔ)器臨時(shí)存儲(chǔ)各個(gè)物體的所捕捉圖像數(shù)據(jù)和各個(gè)物體的音頻數(shù)據(jù)；并且當(dāng)通過所述輸入單元輸入了所述最終存儲(chǔ)指令時(shí)，所述控制器將由所述圖像捕捉裝置捕捉的所述多個(gè)圖像的數(shù)據(jù)和通過所述音頻輸入和輸出裝置或所述第一音頻輸入和輸出裝置輸入或輸出的所述多組音頻數(shù)據(jù)與由所述識(shí)別單元最先或最后識(shí)別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使所述存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)和所述音頻數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元最先或最后識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看并收聽所捕捉圖像的數(shù)據(jù)和所述多組音頻數(shù)據(jù)。
10. —種信息處理方法，該信息處理方法使用計(jì)算機(jī)，所述計(jì)算機(jī)連接到將從外部終端輸入的注釋圖像投影到包括物體的投影區(qū)域上的投影裝置，所述計(jì)算機(jī)還連接到捕捉所述投影區(qū)域的圖像的圖像捕捉裝置，所述計(jì)算機(jī)通過與所述外部終端的通信而獲取要向所述投影裝置和所述圖像捕捉裝置輸入的圖像數(shù)據(jù)以及要從所述投影裝置和所述圖像捕捉裝置輸出的圖像數(shù)據(jù)，所述信息處理方法包括以下步驟存儲(chǔ)一數(shù)據(jù)庫，該數(shù)據(jù)庫包括設(shè)計(jì)所述物體要使用的CAD數(shù)據(jù)及其屬性信息；獲取所述物體的標(biāo)識(shí)信息；基于所獲取的所述物體的標(biāo)識(shí)信息，識(shí)別所述數(shù)據(jù)庫中包括的所述物體的CAD數(shù)據(jù)；以及將由所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)與由識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看所捕捉圖像的數(shù)據(jù)。
11. 一種信息處理方法，該信息處理方法使用計(jì)算機(jī)，所述計(jì)算機(jī)與服務(wù)器進(jìn)行通信，所述服務(wù)器連接到將注釋圖像投影到包括物體的投影區(qū)域上的投影裝置并連接到捕捉所述投影區(qū)域的圖像的圖像捕捉裝置，通過與所述服務(wù)器的通信而向所述投影裝置和所述圖像捕捉裝置輸入圖像數(shù)據(jù)并從所述投影裝置和所述圖像捕捉裝置輸出圖像數(shù)據(jù)，所述信息處理方法包括以下步驟存儲(chǔ)一數(shù)據(jù)庫，該數(shù)據(jù)庫包括設(shè)計(jì)所述物體要使用的CAD數(shù)據(jù)及其屬性信息；獲取所述物體的識(shí)別信息；基于所獲取的所述物體的識(shí)別信息，識(shí)別所述數(shù)據(jù)庫中包括的所述物體的CAD數(shù)據(jù)；以及將由所述圖像捕捉裝置捕捉的圖像的數(shù)據(jù)與由識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)與所述CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于由所述識(shí)別單元識(shí)別的所述物體的CAD數(shù)據(jù)的屬性信息來查看所捕捉圖像的數(shù)據(jù)。
全文摘要
本發(fā)明提供信息處理裝置和信息處理方法。該裝置連接到將從外部終端輸入的注釋圖像投影到包括物體的投影區(qū)域上的投影裝置、和捕捉投影區(qū)域圖像的圖像捕捉裝置。該裝置通過與外部終端的通信來獲取向投影裝置和圖像捕捉裝置輸入和從其輸出的圖像數(shù)據(jù)。該裝置包括存儲(chǔ)器，存儲(chǔ)包括設(shè)計(jì)物體使用的CAD數(shù)據(jù)及該CAD數(shù)據(jù)的屬性信息的數(shù)據(jù)庫；獲取單元，獲取物體的識(shí)別信息；識(shí)別單元，基于獲取的物體識(shí)別信息識(shí)別數(shù)據(jù)庫包括的該物體的CAD數(shù)據(jù)；和控制器，將圖像捕捉裝置捕捉的圖像數(shù)據(jù)與識(shí)別單元識(shí)別的物體的CAD數(shù)據(jù)相關(guān)聯(lián)，并使存儲(chǔ)器將所捕捉圖像的數(shù)據(jù)與CAD數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)，以使得可以基于識(shí)別單元識(shí)別的物體的CAD數(shù)據(jù)的屬性信息來查看所捕捉圖像的數(shù)據(jù)。
文檔編號(hào)H04N5/74GK101489073SQ20081018713
公開日2009年7月22日 申請(qǐng)日期2008年12月17日 優(yōu)先權(quán)日2008年1月17日
發(fā)明者三宅弘之, 伊與田哲男 申請(qǐng)人:富士施樂株式會(huì)社