本申請(qǐng)基于并主張?jiān)谙鹊娜毡緦?zhuān)利申請(qǐng)第2015-256148號(hào)(申請(qǐng)日2015年12月28日)和在先的日本專(zhuān)利申請(qǐng)第2016-136253(申請(qǐng)日2016年7月8日)，參考將它們的內(nèi)容合并于此。

本發(fā)明涉及圖像處理裝置、測(cè)定裝置、圖像處理系統(tǒng)以及圖像處理方法。

背景技術(shù)：

為了解析體育運(yùn)動(dòng)、跳舞等運(yùn)動(dòng)，并進(jìn)行指導(dǎo)，用拍攝裝置來(lái)拍攝測(cè)定對(duì)象的動(dòng)態(tài)圖象。使用動(dòng)態(tài)圖象，具有即使專(zhuān)門(mén)知識(shí)不足也能容易地掌握運(yùn)動(dòng)的、易于獲知測(cè)定對(duì)象的周?chē)臓顩r的優(yōu)點(diǎn)。另一方面，還存在僅能掌握眼睛能看到的概略的運(yùn)動(dòng)、難以進(jìn)行定量的評(píng)價(jià)的缺點(diǎn)。

另外，與拍攝裝置同樣，還使用可穿戴傳感器。使用可穿戴傳感器有能容易地進(jìn)行眼睛看不到的信息的取得、運(yùn)動(dòng)的定量的評(píng)價(jià)的優(yōu)點(diǎn)。另一方面，也存在在數(shù)據(jù)的分析中需要專(zhuān)門(mén)知識(shí)、難以掌握測(cè)定對(duì)象的周?chē)臓顩r的缺點(diǎn)。

如此，拍攝裝置和可穿戴傳感器能補(bǔ)足相互的短處，能通過(guò)組合使用來(lái)實(shí)現(xiàn)有效果的運(yùn)動(dòng)的解析以及指導(dǎo)。特開(kāi)2009-106323號(hào)公報(bào)中記載了如下裝置：使被實(shí)驗(yàn)者裝備加速度傳感器，并用數(shù)字?jǐn)z像機(jī)拍攝示出被實(shí)驗(yàn)者的搖擺的樣子的動(dòng)態(tài)圖像，將動(dòng)態(tài)圖像和在加速度傳感器檢測(cè)到的加速度的時(shí)間波形的最大峰值標(biāo)注記號(hào)的圖像一起顯示在顯示器。

在特開(kāi)2009-106323號(hào)公報(bào)的裝置中，將拍攝裝置和可穿戴傳感器組合來(lái)進(jìn)行圖像處理并進(jìn)行顯示。在特開(kāi)2009-106323號(hào)公報(bào)的裝置中，存在圖像處理裝置必須使用無(wú)線(xiàn)發(fā)送機(jī)接收可穿戴傳感器所取得的數(shù)據(jù)這樣的課題。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明鑒于相關(guān)的課題而提出，目的在于，提供能不用無(wú)線(xiàn)發(fā)送機(jī)地實(shí)施數(shù)據(jù)的接收或發(fā)送的圖像處理裝置、測(cè)定裝置、圖像處理系統(tǒng)以及圖像處理方法。

本發(fā)明所涉及的圖像處理裝置的1個(gè)方式具備：獲取部，其獲得包含可見(jiàn)光信號(hào)和測(cè)定對(duì)象的影像的動(dòng)態(tài)圖象信息，其中可見(jiàn)光信號(hào)具有由安裝在所述測(cè)定對(duì)象的測(cè)定裝置測(cè)定的所述測(cè)定對(duì)象的測(cè)定信息，并由所述測(cè)定裝置發(fā)報(bào)；和取得部，其從由所述獲取部獲得的所述動(dòng)態(tài)圖象信息中所含的所述可見(jiàn)光信號(hào)取得所述測(cè)定信息。

另外，本發(fā)明所涉及的測(cè)定裝置的1個(gè)方式具備：測(cè)定部，其安裝在測(cè)定對(duì)象來(lái)測(cè)定所述測(cè)定對(duì)象的測(cè)定信息；和發(fā)光部，其發(fā)報(bào)具有所述測(cè)定部測(cè)定出的所述測(cè)定信息的可見(jiàn)光信號(hào)，所述測(cè)定部測(cè)定地磁來(lái)取得所述測(cè)定對(duì)象的角度位移，所述發(fā)光部在所述角度位移未超過(guò)閾值的情況下發(fā)報(bào)所述可見(jiàn)光信號(hào)，在所述角度位移超過(guò)所述閾值的情況下不發(fā)報(bào)所述可見(jiàn)光信號(hào)。

另外，本發(fā)明所涉及的圖像處理系統(tǒng)的1個(gè)方式具備：測(cè)定裝置，其安裝在測(cè)定對(duì)象來(lái)測(cè)定所述測(cè)定對(duì)象的測(cè)定信息，發(fā)報(bào)具有測(cè)定出的所述測(cè)定信息的可見(jiàn)光信號(hào)；和圖像處理裝置，其具有獲得包含所述可見(jiàn)光信號(hào)和所述測(cè)定對(duì)象的影像的動(dòng)態(tài)圖象信息的獲取部、和從由所述獲取部獲得的所述動(dòng)態(tài)圖象信息中所含的所述可見(jiàn)光信號(hào)取得所述測(cè)定信息的取得部。

另外，本發(fā)明所涉及的圖像處理方法的1個(gè)方式包含如下步驟：獲得包含可見(jiàn)光信號(hào)和測(cè)定對(duì)象的影像的動(dòng)態(tài)圖象信息，所述可見(jiàn)光信號(hào)具有由安裝在所述測(cè)定對(duì)象的測(cè)定裝置測(cè)定出的所述測(cè)定對(duì)象的測(cè)定信息，并由所述測(cè)定裝置發(fā)報(bào)；從獲得的所述動(dòng)態(tài)圖象信息中所含的所述可見(jiàn)光信號(hào)取得所述測(cè)定信息。

根據(jù)本發(fā)明，能不使用無(wú)線(xiàn)發(fā)送機(jī)地實(shí)施數(shù)據(jù)的接收或發(fā)送。

本發(fā)明的另外的目的和優(yōu)點(diǎn)將在以下所附的說(shuō)明中得以闡明，其中一部分將從說(shuō)明中顯而易見(jiàn)地獲得，或者通過(guò)本發(fā)明的實(shí)踐獲得。本發(fā)明的目的和優(yōu)點(diǎn)能通過(guò)下文特別指出的手段和組合來(lái)理解以及獲得。

附圖說(shuō)明

并入本發(fā)明并作為其一部分的附圖描述本發(fā)明的實(shí)施方式，與以上給出的一般說(shuō)明和以下給出的具體實(shí)施方式一起，用來(lái)說(shuō)明本發(fā)明的原理。

圖1是表示實(shí)施方式1所涉及的圖像處理系統(tǒng)的構(gòu)成的概略圖。

圖2是表示實(shí)施方式1所涉及的圖像處理系統(tǒng)的構(gòu)成的框圖。

圖3a是對(duì)實(shí)施方式1所涉及的取得部搜索信號(hào)的方法進(jìn)行說(shuō)明的圖。

圖3b是對(duì)實(shí)施方式1所涉及的取得部確定信號(hào)的方法進(jìn)行說(shuō)明的圖。

圖4是表示實(shí)施方式1所涉及的可見(jiàn)光信號(hào)的構(gòu)成的圖。

圖5是說(shuō)明實(shí)施方式1所涉及的取得部進(jìn)行的時(shí)間同步的圖。

圖6是表示實(shí)施方式1所涉及的同步處理的流程圖。

圖7是表示實(shí)施方式1所涉及的顯示部所顯示的畫(huà)面的圖。

圖8a是表示在實(shí)施方式1所涉及的顯示部所顯示的畫(huà)面中選擇測(cè)定對(duì)象的示例的圖。

圖8b是表示在實(shí)施方式1所涉及的顯示部所顯示的畫(huà)面中顯示評(píng)價(jià)值的示例的圖。

圖9a是表示在實(shí)施方式1所涉及的顯示部所顯示的畫(huà)面中選擇測(cè)定對(duì)象的示例的圖。

圖9b是表示在實(shí)施方式1所涉及的顯示部所顯示的畫(huà)面中顯示數(shù)據(jù)的示例的圖。

圖10a是說(shuō)明在實(shí)施方式2所涉及的圖像處理系統(tǒng)中測(cè)定開(kāi)始時(shí)的示例的圖。

圖10b是說(shuō)明在實(shí)施方式2所涉及的圖像處理系統(tǒng)中角度位移超過(guò)閾值的示例的圖。

圖11是表示變形例的圖像處理系統(tǒng)的構(gòu)成的概略圖。

具體實(shí)施方式

(實(shí)施方式1)

以下參考附圖來(lái)說(shuō)明本發(fā)明的實(shí)施方式1所涉及的圖像處理系統(tǒng)1。另外，對(duì)圖中相同或相當(dāng)?shù)牟糠謽?biāo)注相同標(biāo)號(hào)。

圖1是表示本發(fā)明的實(shí)施方式1所涉及的圖像處理系統(tǒng)1的構(gòu)成的概略圖，圖2是表示圖像處理系統(tǒng)1的構(gòu)成的框圖。如圖1以及圖2所示那樣，圖像處理系統(tǒng)1具備測(cè)定裝置100、拍攝裝置200和圖像處理裝置300。

測(cè)定裝置100是安裝在測(cè)定對(duì)象的可穿戴傳感器。測(cè)定裝置100具備控制部101、傳感器部102、解析部103、編碼部104、存儲(chǔ)部105、發(fā)光部106和通信部107。

控制部101是通過(guò)執(zhí)行程序來(lái)控制測(cè)定裝置100的處理裝置。控制部101能包含cpu(centralprocessingunit，中央處理器)。

傳感器部102是對(duì)測(cè)定對(duì)象的運(yùn)動(dòng)信息或生物體信息、或者測(cè)定對(duì)象的周?chē)沫h(huán)境信息進(jìn)行測(cè)定并取得數(shù)據(jù)(測(cè)定信息)的傳感器。傳感器部102能包含速度傳感器、加速度傳感器、角速度傳感器、心率傳感器、血壓傳感器、氣壓傳感器。傳感器部102作為測(cè)定部發(fā)揮功能。

解析部103對(duì)傳感器部102所取得的數(shù)據(jù)進(jìn)行解析，算出對(duì)測(cè)定對(duì)象的運(yùn)動(dòng)信息或生物體信息、或者測(cè)定對(duì)象的周?chē)沫h(huán)境信息進(jìn)行評(píng)價(jià)的評(píng)價(jià)值(運(yùn)動(dòng)信息的評(píng)價(jià)值、生物體信息的評(píng)價(jià)值、環(huán)境信息的評(píng)價(jià)值)。解析部103能包含cpu。在解析部103算出的運(yùn)動(dòng)信息的評(píng)價(jià)值能包含：根據(jù)測(cè)定對(duì)象的速度、測(cè)定對(duì)象的重量以及速度算出的活動(dòng)量(能量)；根據(jù)活動(dòng)量算出的消耗卡路里；表征速度或加速度的小的穩(wěn)定度。

編碼部104對(duì)信息編碼而生成信號(hào)。編碼部104能包含cpu。編碼部進(jìn)行編碼而生成的可見(jiàn)光信號(hào)400包含測(cè)定裝置100、傳感器部102所測(cè)定出的時(shí)間、解析部103所算出的評(píng)價(jià)值，詳細(xì)后述。

存儲(chǔ)部105是存儲(chǔ)傳感器部102所取得的數(shù)據(jù)、解析部103所算出的評(píng)價(jià)值、以及編碼部104所生成的信號(hào)的存儲(chǔ)裝置。另外，存儲(chǔ)部105還作為控制部101執(zhí)行處理時(shí)的存儲(chǔ)區(qū)發(fā)揮功能。存儲(chǔ)部105能包含ram(randomaccessmemory，隨機(jī)存取存儲(chǔ)器)、閃速存儲(chǔ)器、磁盤(pán)。

發(fā)光部106是成為可見(jiàn)光通信的發(fā)報(bào)器的可見(jiàn)光發(fā)光裝置。發(fā)光部106使用例如重復(fù)以可見(jiàn)光進(jìn)行的點(diǎn)亮、熄滅的閃爍型式來(lái)發(fā)報(bào)編碼部104所編碼的可見(jiàn)光信號(hào)400。發(fā)光部106能包含led(lightemittingdiode，發(fā)光二極管)。另外，發(fā)光部106也可以使用以不同的波長(zhǎng)發(fā)光的多個(gè)led來(lái)發(fā)報(bào)編碼部104編碼的可見(jiàn)光信號(hào)400。通過(guò)使用以不同的波長(zhǎng)發(fā)光的多個(gè)led，能增加發(fā)送的信息量。

通信部107是進(jìn)行與圖像處理裝置300的無(wú)線(xiàn)通信的通信裝置。通信部107進(jìn)行信號(hào)的發(fā)送，該信號(hào)包含傳感器部102測(cè)定出的數(shù)據(jù)，容量大且難以在經(jīng)由發(fā)光部106的可見(jiàn)光通信中發(fā)送。通信部107能包含bluetooth(注冊(cè)商標(biāo))模塊、無(wú)線(xiàn)lan(localareanetwork，局域網(wǎng))模塊以及用于控制它們的控制電路。

拍攝裝置200是拍攝測(cè)定對(duì)象并存儲(chǔ)動(dòng)態(tài)圖象信息的拍攝裝置。動(dòng)態(tài)圖象信息包含可見(jiàn)光信號(hào)400和測(cè)定對(duì)象的影像，其中可見(jiàn)光信號(hào)400具有由測(cè)定裝置100測(cè)定出的測(cè)定對(duì)象的測(cè)定信息并被測(cè)定裝置100發(fā)報(bào)。拍攝裝置200具備控制部201、拍攝部202、存儲(chǔ)部203和通信部204。拍攝裝置200能包含數(shù)字?jǐn)z像機(jī)、帶攝像機(jī)便攜電話(huà)。

控制部201通過(guò)執(zhí)行程序來(lái)控制拍攝裝置200?？刂撇?01能包含cpu。

拍攝部202拍攝測(cè)定對(duì)象而取得動(dòng)態(tài)圖象信息。拍攝部202能包含鏡頭、cmos(complementarymetaloxidesemiconductor，互補(bǔ)金屬氧化物半導(dǎo)體)圖像傳感器、ccd(charge-coupleddevice，電荷耦合器件)圖像傳感器、a/d(analog/digital，模擬/數(shù)字)變換器。在本說(shuō)明書(shū)中，作為一例，將拍攝部202所拍攝的動(dòng)態(tài)圖象信息的每1秒的幀數(shù)(fps)設(shè)為是30fps來(lái)進(jìn)行說(shuō)明。拍攝部202作為獲取部而發(fā)揮功能。

存儲(chǔ)部203是存儲(chǔ)包括拍攝部202所取得的動(dòng)態(tài)圖象信息在內(nèi)的數(shù)據(jù)的存儲(chǔ)裝置。另外，存儲(chǔ)部203還作為控制部201執(zhí)行處理時(shí)的存儲(chǔ)區(qū)發(fā)揮功能。存儲(chǔ)部203能包含ram、閃速存儲(chǔ)器、磁盤(pán)。

通信部204是進(jìn)行與圖像處理裝置300的無(wú)線(xiàn)通信的通信裝置。通信部204進(jìn)行數(shù)據(jù)的發(fā)送，該數(shù)據(jù)包含由拍攝部202取得、并由存儲(chǔ)部203存儲(chǔ)的動(dòng)態(tài)圖象信息。通信部204能包含bluetooth(注冊(cè)商標(biāo))模塊、無(wú)線(xiàn)lan模塊以及用于控制它們的控制電路。

圖像處理裝置300是使拍攝測(cè)定對(duì)象的動(dòng)態(tài)圖象信息以及測(cè)定到的數(shù)據(jù)時(shí)間同步并進(jìn)行顯示的裝置。圖像處理裝置300具備控制部301、通信部302、取得部303、存儲(chǔ)部304、顯示部305和接受部306。圖像處理裝置300能包含服務(wù)器、個(gè)人計(jì)算機(jī)、智能手機(jī)。

控制部301是通過(guò)執(zhí)行程序來(lái)控制圖像處理裝置300的處理裝置?？刂撇?01能包含cpu。

通信部302是進(jìn)行與測(cè)定裝置100以及拍攝裝置200的無(wú)線(xiàn)通信的通信裝置。通信部302接收測(cè)定裝置100的通信部107或拍攝裝置200的通信部204所發(fā)送的信號(hào)。通信部302能包含bluetooth(注冊(cè)商標(biāo))模塊、無(wú)線(xiàn)lan模塊以及用于控制它們的控制電路。通信部302作為獲取部或接收部發(fā)揮功能。

取得部303對(duì)記錄在動(dòng)態(tài)圖象信息中的可見(jiàn)光通信的信號(hào)進(jìn)行解碼(decode)，取得信息。另外，取得部303進(jìn)行時(shí)間同步。取得部303能包含cpu。取得部303從用拍攝裝置200拍攝并發(fā)送給圖像處理裝置300的動(dòng)態(tài)圖象信息確定測(cè)定裝置100的發(fā)光部106的發(fā)光型式，對(duì)該發(fā)光型式進(jìn)行解碼而取得數(shù)據(jù)。進(jìn)而，取得部303用后述的方法進(jìn)行時(shí)間同步。

對(duì)取得部303從動(dòng)態(tài)圖象信息確定發(fā)光部106所發(fā)報(bào)的信號(hào)的方法進(jìn)行說(shuō)明。圖3a以及圖3b是說(shuō)明取得部303確定信號(hào)的方法的圖。如圖3a所示那樣，取得部303從動(dòng)態(tài)圖象信息的某1幀的圖像整體搜索(掃描)相當(dāng)于發(fā)光部106的發(fā)光的顏色。發(fā)光部106的發(fā)光波長(zhǎng)、拍攝裝置200的白平衡以及靈敏度為已知，相當(dāng)于發(fā)光部106的發(fā)光的顏色從這些信息中唯一決定。

若發(fā)現(xiàn)相當(dāng)于發(fā)光部106的發(fā)光的顏色，如圖3b所示那樣，取得部303確定為發(fā)現(xiàn)該顏色的位置是測(cè)定裝置100的位置，對(duì)確定的全部測(cè)定裝置100的位置進(jìn)行追蹤。之后，對(duì)動(dòng)態(tài)圖象信息的每1幀取得各個(gè)測(cè)定裝置100的位置的發(fā)光的有無(wú)，將取得的發(fā)光的型式確定為測(cè)定裝置100的發(fā)光部106所發(fā)報(bào)的信號(hào)。

如上述那樣，為了對(duì)動(dòng)態(tài)圖象信息的每1幀取得發(fā)光部106的發(fā)光的有無(wú)，理想狀態(tài)下，動(dòng)態(tài)圖象信息的1幀與信號(hào)的1bit對(duì)應(yīng)。因此，圖像處理系統(tǒng)1進(jìn)行可見(jiàn)光通信的通信速度(bps)，理想狀態(tài)下是與拍攝裝置200所拍攝的動(dòng)態(tài)圖象信息的每1秒的幀數(shù)(fps)一致。在本說(shuō)明書(shū)的示例中，由于動(dòng)態(tài)圖象信息是30fps，因此可見(jiàn)光通信的通信速度是30bps。

存儲(chǔ)部304是存儲(chǔ)通信部302接收到的動(dòng)態(tài)圖象信息以及數(shù)據(jù)、和取得部303所解碼的數(shù)據(jù)的存儲(chǔ)裝置。另外，存儲(chǔ)部304還作為控制部301執(zhí)行處理時(shí)的存儲(chǔ)區(qū)發(fā)揮功能。存儲(chǔ)部304能包含ram、閃速存儲(chǔ)器。

顯示部305是對(duì)用戶(hù)顯示動(dòng)態(tài)圖象信息以及數(shù)據(jù)的顯示裝置。顯示部305顯示通信部302接收到的記錄了測(cè)定對(duì)象的運(yùn)動(dòng)的動(dòng)態(tài)圖象信息。另外，顯示部305顯示通信部302接收到或取得部303解碼的數(shù)據(jù)。進(jìn)而，顯示部305能在畫(huà)面上進(jìn)行特定的測(cè)定裝置100所位于的部分的強(qiáng)調(diào)顯示。顯示部305能包含液晶顯示器、布朗管顯示器。關(guān)于顯示部305所進(jìn)行的畫(huà)面顯示后述。

接受部306作為用戶(hù)界面發(fā)揮功能，是接受用戶(hù)的指示的接受裝置。用戶(hù)經(jīng)由接受部306在畫(huà)面上輸入選擇特定的測(cè)定裝置100的指示。接受部306能包含鼠標(biāo)、觸摸板、觸控面板。

參考附圖來(lái)說(shuō)明由編碼部104編碼并由發(fā)光部106發(fā)報(bào)的可見(jiàn)光信號(hào)400。

圖4是表示可見(jiàn)光信號(hào)400的構(gòu)成的圖。如圖4所示那樣，可見(jiàn)光信號(hào)400包含排頭標(biāo)記401、測(cè)定時(shí)間402、傳感器id403、解析數(shù)據(jù)404和警告標(biāo)記405。

排頭標(biāo)記401是表示可見(jiàn)光信號(hào)400的開(kāi)始的32bit的信號(hào)。排頭標(biāo)記401包含在可見(jiàn)光信號(hào)400的排頭，取得部303根據(jù)排頭標(biāo)記401存在而認(rèn)識(shí)到可見(jiàn)光信號(hào)400開(kāi)始。

測(cè)定時(shí)間402是表示發(fā)送可見(jiàn)光信號(hào)400的測(cè)定裝置100開(kāi)始測(cè)定起的經(jīng)過(guò)時(shí)間的32bit的信號(hào)(測(cè)定信號(hào))。更具體地，測(cè)定時(shí)間402表示測(cè)定裝置100開(kāi)始測(cè)定起到排頭標(biāo)記401的最初的發(fā)光為止的經(jīng)過(guò)時(shí)間。

圖5是說(shuō)明取得部303所進(jìn)行的同步的圖。取得部303根據(jù)記錄了發(fā)光的動(dòng)態(tài)圖象信息的幀和測(cè)定時(shí)間402所表示的時(shí)間來(lái)進(jìn)行由測(cè)定裝置100測(cè)定出的數(shù)據(jù)和由拍攝裝置200拍攝的動(dòng)態(tài)圖象信息的時(shí)間同步。

取得部303取得測(cè)定時(shí)間402。在圖5的示例中，測(cè)定時(shí)間402所表示的經(jīng)過(guò)時(shí)間是t秒。確定從記錄了包含測(cè)定時(shí)間402的可見(jiàn)光信號(hào)400的排頭標(biāo)記401的最初的發(fā)光的動(dòng)態(tài)圖象信息的幀的拍攝時(shí)刻(t1)起回溯了測(cè)定時(shí)間402所表示的經(jīng)過(guò)時(shí)間t秒的時(shí)刻(t2)。該時(shí)刻是測(cè)定裝置100開(kāi)始測(cè)定的時(shí)刻，通過(guò)確定在該時(shí)刻拍攝的幀來(lái)進(jìn)行時(shí)間同步。

返回圖4，傳感器id403是在發(fā)送可見(jiàn)光信號(hào)400的測(cè)定裝置100中固有的16bit的信號(hào)，是確定測(cè)定裝置100的確定信號(hào)。在多個(gè)測(cè)定裝置100分別裝備在測(cè)定對(duì)象的情況下，取得部303也根據(jù)傳感器id403來(lái)確定發(fā)送可見(jiàn)光信號(hào)400的測(cè)定裝置100。

解析數(shù)據(jù)404是表示測(cè)定裝置100的解析部103對(duì)數(shù)據(jù)進(jìn)行解析而得到的評(píng)價(jià)值的16bit的信號(hào)(評(píng)價(jià)信號(hào))。解析數(shù)據(jù)404在可見(jiàn)光信號(hào)400中包含多個(gè)，在圖4的示例中包含解析數(shù)據(jù)404a、404b、404c這3個(gè)。

警告標(biāo)記405是表示測(cè)定裝置100的解析部103進(jìn)行解析而得到的評(píng)價(jià)值超過(guò)閾值的情況下輸出的標(biāo)記的32bit的信號(hào)(警告信號(hào))。在警告標(biāo)記405中還包含表示多個(gè)評(píng)價(jià)值當(dāng)中的哪個(gè)超過(guò)閾值的信息。

可見(jiàn)光信號(hào)400作為整體是160bit的信號(hào)，在本實(shí)施方式的30bps的通信速度中，在5.3秒內(nèi)完成通信。

圖6是表示作為圖像處理的同步處理的流程圖。參考圖6的流程圖來(lái)說(shuō)明圖像處理系統(tǒng)1所執(zhí)行的同步處理。

對(duì)測(cè)定裝置100的動(dòng)作進(jìn)行說(shuō)明。由控制部101指示測(cè)定開(kāi)始后，傳感器部102開(kāi)始測(cè)定對(duì)象的測(cè)定(步驟s101)。測(cè)定的數(shù)據(jù)保存在存儲(chǔ)部105。

開(kāi)始數(shù)據(jù)的測(cè)定后，解析部103對(duì)數(shù)據(jù)進(jìn)行解析來(lái)算出評(píng)價(jià)值(步驟s102)。算出的評(píng)價(jià)值保存在存儲(chǔ)部105。

算出評(píng)價(jià)值后，編碼部104對(duì)信息進(jìn)行編碼而開(kāi)始可見(jiàn)光信號(hào)400的生成(步驟s103)。生成的可見(jiàn)光信號(hào)400保存在存儲(chǔ)部105。

生成可見(jiàn)光信號(hào)400后，發(fā)光部106通過(guò)進(jìn)行閃爍來(lái)發(fā)報(bào)可見(jiàn)光信號(hào)400(步驟s104)。

發(fā)報(bào)可見(jiàn)光信號(hào)400后，則通信部107將傳感器部102測(cè)定到的數(shù)據(jù)發(fā)送給圖像處理裝置300(步驟s105)。另外，執(zhí)行步驟s105的位置為任意，既可以在步驟s101之前進(jìn)行，也可以與步驟s101到步驟s104平行進(jìn)行。

從步驟s101到步驟s105完成后，測(cè)定裝置100結(jié)束動(dòng)作。

對(duì)拍攝裝置200的動(dòng)作進(jìn)行說(shuō)明。由控制部201指示拍攝開(kāi)始后，拍攝部202拍攝測(cè)定對(duì)象而取得動(dòng)態(tài)圖象信息(步驟s201)。還同時(shí)拍攝測(cè)定裝置100的發(fā)光部106所發(fā)報(bào)的可見(jiàn)光信號(hào)400。取得的動(dòng)態(tài)圖象信息保存在存儲(chǔ)部203。另外，步驟s201不需要在發(fā)光部106發(fā)報(bào)可見(jiàn)光信號(hào)400的步驟s104之后進(jìn)行，也可以在動(dòng)態(tài)圖象信息的拍攝的中途(即步驟s201的執(zhí)行中)開(kāi)始可見(jiàn)光信號(hào)400的發(fā)報(bào)(步驟s104)。

取得動(dòng)態(tài)圖象信息后，通信部204將拍攝部202取得的動(dòng)態(tài)圖象信息發(fā)送給圖像處理裝置300(步驟s202)。

步驟s201到步驟s202完成后，拍攝裝置200結(jié)束動(dòng)作。

對(duì)圖像處理裝置300的動(dòng)作進(jìn)行說(shuō)明。在步驟s105發(fā)送了數(shù)據(jù)后，通信部302接收發(fā)送的數(shù)據(jù)(步驟s301)。接收到的數(shù)據(jù)保存在存儲(chǔ)部304。

在步驟s202發(fā)送了動(dòng)態(tài)圖象后，通信部302接收發(fā)送的動(dòng)態(tài)圖象信息(步驟s302)。接收到的動(dòng)態(tài)圖象保存在存儲(chǔ)部304。

接收到動(dòng)態(tài)圖象后，取得部303確定記錄于動(dòng)態(tài)圖象的可見(jiàn)光信號(hào)400，進(jìn)行解碼(步驟s303)。通過(guò)進(jìn)行解碼而得到的信息保存在存儲(chǔ)部304。另外，步驟s302以及步驟s303既可以先于步驟s301進(jìn)行，也可以與步驟s301平行進(jìn)行。

接收到數(shù)據(jù)以及動(dòng)態(tài)圖象信息，對(duì)可見(jiàn)光信號(hào)400進(jìn)行解碼并得到信息后，取得部303進(jìn)行動(dòng)態(tài)圖象信息與數(shù)據(jù)或評(píng)價(jià)值的時(shí)間同步(步驟s304)。時(shí)間同步根據(jù)測(cè)定時(shí)間402和記錄表示該測(cè)定時(shí)間402的信號(hào)的動(dòng)態(tài)圖象信息的幀來(lái)進(jìn)行。同步的動(dòng)態(tài)圖象信息和數(shù)據(jù)或評(píng)價(jià)值建立對(duì)應(yīng)保存在存儲(chǔ)部304。

步驟s301到步驟s304完成后，圖像處理裝置300結(jié)束動(dòng)作。

測(cè)定裝置100、拍攝裝置200以及圖像處理裝置300結(jié)束動(dòng)作后，圖像處理系統(tǒng)1結(jié)束同步處理。

對(duì)顯示部305所進(jìn)行的畫(huà)面顯示詳細(xì)進(jìn)行說(shuō)明。

圖7、圖8a、圖8b、圖9a以及圖9b是表示顯示部305所顯示的畫(huà)面的圖。如圖7所示那樣，在測(cè)定裝置100發(fā)送的可見(jiàn)光信號(hào)400中包含警告標(biāo)記405的情況下，顯示部305在畫(huà)面上進(jìn)行該測(cè)定裝置100所位于的部分的強(qiáng)調(diào)顯示。強(qiáng)調(diào)顯示通過(guò)用橢圓包圍該測(cè)定裝置100所位于的部分來(lái)進(jìn)行。使用橢圓的強(qiáng)調(diào)顯示是一例，能用以箭頭表示、變更明度等種種方法進(jìn)行。

若設(shè)定閾值，使得在測(cè)定對(duì)象的運(yùn)動(dòng)信息超過(guò)合適的范圍的情況下、測(cè)定對(duì)象的生物體信息超過(guò)合適的范圍的情況下、或者測(cè)定對(duì)象的周?chē)沫h(huán)境信息超過(guò)合適的范圍的情況下，評(píng)價(jià)值超過(guò)閾值，則在測(cè)定對(duì)象的運(yùn)動(dòng)信息為不合適的情況下、測(cè)定對(duì)象的生物體信息為不合適的情況下、或者測(cè)定對(duì)象的周?chē)沫h(huán)境信息為不合適的情況下，強(qiáng)調(diào)顯示測(cè)定對(duì)象所裝備的測(cè)定裝置100。如此，能對(duì)用戶(hù)明示要從多個(gè)測(cè)定對(duì)象的中著眼的測(cè)定對(duì)象，能進(jìn)行有效率的指導(dǎo)。

如圖8a以及圖8b所示那樣，顯示部305在畫(huà)面中重疊或并排地同時(shí)顯示測(cè)定裝置100發(fā)送的解析數(shù)據(jù)404中所含的評(píng)價(jià)值、和拍攝裝置200發(fā)送的動(dòng)態(tài)圖象信息。如圖8a所示那樣，若用戶(hù)經(jīng)由接受部306選擇畫(huà)面上的測(cè)定裝置100、或裝備該測(cè)定裝置100的測(cè)定對(duì)象，取得部303從該測(cè)定裝置100發(fā)送的測(cè)定時(shí)間402取得經(jīng)過(guò)時(shí)間信息，從解析數(shù)據(jù)404取得評(píng)價(jià)值?？刂撇?01在進(jìn)行同步處理的基礎(chǔ)上控制顯示部305，來(lái)如圖8b所示那樣在畫(huà)面上重疊或并排同時(shí)顯示評(píng)價(jià)值和動(dòng)態(tài)圖象信息。

例如，運(yùn)動(dòng)信息的評(píng)價(jià)值是相比于數(shù)據(jù)本身更易于使用戶(hù)理解運(yùn)動(dòng)的效果的指標(biāo)，通過(guò)算出評(píng)價(jià)值，能對(duì)用戶(hù)進(jìn)行有效率的指導(dǎo)。另外，解析數(shù)據(jù)404由于能從畫(huà)面上的測(cè)定裝置100取得，因此測(cè)定裝置100和評(píng)價(jià)值的建立對(duì)應(yīng)容易。另外，評(píng)價(jià)值的顯示能僅通過(guò)可見(jiàn)光通信進(jìn)行，由于不需要經(jīng)由通信部107和通信部302的無(wú)線(xiàn)通信，因此數(shù)據(jù)管理變得容易。

如圖9a以及圖9b所示那樣，顯示部305在畫(huà)面重疊或并排地同時(shí)顯示測(cè)定裝置100經(jīng)由通信部107發(fā)送的數(shù)據(jù)、和拍攝裝置200經(jīng)由通信部204發(fā)送的動(dòng)態(tài)圖象。如圖9a所示那樣，若用戶(hù)經(jīng)由接受部306選擇了畫(huà)面上的測(cè)定裝置100或裝備該測(cè)定裝置100的測(cè)定對(duì)象，則取得部303從該測(cè)定裝置100發(fā)送的測(cè)定時(shí)間402取得經(jīng)過(guò)時(shí)間信息，從傳感器id403取得確定該測(cè)定裝置100的信息?？刂撇?01從存儲(chǔ)部304取得該測(cè)定裝置100經(jīng)由通信部107發(fā)送的數(shù)據(jù)，在進(jìn)行了同步處理的基礎(chǔ)上控制顯示部305，如圖9b所示那樣在畫(huà)面上重疊或并排地同時(shí)顯示數(shù)據(jù)和動(dòng)態(tài)圖象信息。與顯示的動(dòng)態(tài)圖象信息上的時(shí)刻對(duì)應(yīng)的數(shù)據(jù)上的時(shí)刻用線(xiàn)l明示。

通過(guò)進(jìn)行經(jīng)由通信部107和通信部302的無(wú)線(xiàn)通信，能進(jìn)行利用了可見(jiàn)光通信下的接收或發(fā)送困難的大容量的數(shù)據(jù)的、測(cè)定對(duì)象的運(yùn)動(dòng)的更詳細(xì)的評(píng)價(jià)。

如以上那樣，根據(jù)本實(shí)施方式所涉及的圖像處理系統(tǒng)1，圖像處理裝置300能通過(guò)接收拍攝裝置200所拍攝的動(dòng)態(tài)圖象信息來(lái)取得基于測(cè)定裝置100測(cè)定出的數(shù)據(jù)的測(cè)定信息(運(yùn)動(dòng)信息、生物體信息或環(huán)境信息)。由于能通過(guò)接收動(dòng)態(tài)圖象信息來(lái)取得測(cè)定信息，因此不用無(wú)線(xiàn)發(fā)送機(jī)就能實(shí)施實(shí)施數(shù)據(jù)的接收或發(fā)送。

根據(jù)圖像處理系統(tǒng)1，能以1幀為單位對(duì)測(cè)定裝置100測(cè)定出的數(shù)據(jù)、和拍攝裝置200所拍攝的動(dòng)態(tài)圖象信息進(jìn)行時(shí)間同步。通過(guò)以1幀為單位進(jìn)行時(shí)間同步，能使用戶(hù)正確地掌握測(cè)定對(duì)象的運(yùn)動(dòng)與數(shù)據(jù)(測(cè)定信息)的關(guān)聯(lián)。作為能進(jìn)行正確的時(shí)間同步的模塊的示例有g(shù)ps(globalpositioningsystem，全球定位系統(tǒng))，但這不僅有裝置的大型化以及成本的增大的課題，還有g(shù)ps在室內(nèi)不能取得當(dāng)前時(shí)刻、不能進(jìn)行時(shí)間同步的課題。根據(jù)圖像處理系統(tǒng)1，在室內(nèi)也能進(jìn)行正確的時(shí)間同步。

根據(jù)圖像處理系統(tǒng)1，能將動(dòng)態(tài)圖象和數(shù)據(jù)或評(píng)價(jià)值在進(jìn)行了時(shí)間同步的基礎(chǔ)上重疊或并排地同時(shí)顯示在畫(huà)面上。通過(guò)動(dòng)態(tài)圖象信息和數(shù)據(jù)或評(píng)價(jià)值同時(shí)重疊或并排顯示，能使用戶(hù)同時(shí)看到基于動(dòng)態(tài)圖象信息的測(cè)定對(duì)象的身體的運(yùn)動(dòng)和從測(cè)定對(duì)象得到的測(cè)定數(shù)據(jù)，能容易地讓用戶(hù)進(jìn)行測(cè)定對(duì)象的運(yùn)動(dòng)的評(píng)價(jià)以及指導(dǎo)。

根據(jù)圖像處理系統(tǒng)1，在使用多個(gè)測(cè)定裝置100的情況下，能通過(guò)可見(jiàn)光信號(hào)400中所含的傳感器id403來(lái)確定各個(gè)測(cè)定裝置100。由此，即使在例如多人分別裝備測(cè)定裝置100進(jìn)行運(yùn)動(dòng)的情況下，也能容易地確定數(shù)據(jù)是從哪個(gè)測(cè)定對(duì)象取得的，能容易地進(jìn)行多人的運(yùn)動(dòng)的指導(dǎo)。

(實(shí)施方式2)

以下參考附圖來(lái)說(shuō)明本發(fā)明的實(shí)施方式2所涉及的圖像處理系統(tǒng)1。另外，對(duì)圖中相同或相當(dāng)?shù)牟糠謽?biāo)注相同標(biāo)號(hào)。

測(cè)定裝置100的傳感器部102包含地磁傳感器。傳感器部102測(cè)定地磁，測(cè)定的數(shù)據(jù)存儲(chǔ)在存儲(chǔ)部105。

圖10a以及圖10b是說(shuō)明實(shí)施方式2所涉及的圖像處理系統(tǒng)1的動(dòng)作的圖。如圖10a所示那樣，傳感器部102開(kāi)始測(cè)定后，解析部103對(duì)測(cè)定出的地磁和測(cè)定開(kāi)始時(shí)的地磁進(jìn)行解析，算出測(cè)定對(duì)象的角度位移?？刂撇?01判斷算出的角度位移是否超過(guò)閾值。在本實(shí)施方式中，角度位移的閾值為±60度。

在判斷為測(cè)定對(duì)象的角度位移未超過(guò)閾值的情況下，繼續(xù)發(fā)光部106所進(jìn)行的可見(jiàn)光信號(hào)400的發(fā)送。在如圖10b的測(cè)定對(duì)象x那樣，判斷為超過(guò)閾值的情況下，控制部101控制發(fā)光部106來(lái)使可見(jiàn)光信號(hào)400的發(fā)送停止。另外，在判斷為超過(guò)閾值的情況之后、再度判斷為未超過(guò)閾值的情況下，控制部101控制發(fā)光部106來(lái)使停止的可見(jiàn)光信號(hào)400的發(fā)送重開(kāi)。

若測(cè)定裝置100的角度位移變大，則發(fā)光部106的發(fā)光會(huì)變得難以由拍攝裝置200拍攝到。在這樣的情況下，發(fā)光部106的發(fā)光變得無(wú)謂，導(dǎo)致能量的浪費(fèi)和壽命的縮短。另外，若從測(cè)定裝置100發(fā)報(bào)的可見(jiàn)光信號(hào)400未被拍攝裝置200拍攝到，則數(shù)據(jù)會(huì)丟失。

本實(shí)施方式所涉及的圖像處理系統(tǒng)1通過(guò)在測(cè)定裝置100的角度位移超過(guò)閾值的情況下停止發(fā)報(bào)，能防止無(wú)謂的發(fā)光，能防止能量的浪費(fèi)和壽命的縮短。另外，能防止可見(jiàn)光信號(hào)400未被拍攝裝置200拍攝到而導(dǎo)致數(shù)據(jù)丟失。

(變形例)

以上說(shuō)明了本發(fā)明的幾個(gè)實(shí)施方式，但實(shí)施方式1以及實(shí)施方式2是一例，本發(fā)明的適用范圍并不限于此。即，本發(fā)明的實(shí)施方式能有種種應(yīng)用，所有的實(shí)施方式都包含在本發(fā)明的范圍內(nèi)。

圖像處理系統(tǒng)1具備測(cè)定裝置100、拍攝裝置200和圖像處理裝置300，但并不限于此。圖11是表示變形例的圖像處理系統(tǒng)的構(gòu)成的概略圖。也可以如圖11所示那樣，圖像處理系統(tǒng)1不具備拍攝裝置200，圖像處理裝置300具備拍攝部202，圖像處理裝置300具備拍攝裝置200的功能。另外，也可以圖像處理系統(tǒng)1不具備圖像處理裝置300，拍攝裝置200具備圖像處理裝置300的功能。

發(fā)光部106設(shè)為是可見(jiàn)光發(fā)光裝置，但并不限于此。只要是產(chǎn)生的電磁波能被拍攝裝置200拍攝到的構(gòu)成即可，例如可以是紅外線(xiàn)發(fā)生裝置。同樣地，本說(shuō)明書(shū)中說(shuō)明為可見(jiàn)光通信或可見(jiàn)光信號(hào)，但并不限于使用可見(jiàn)光。

通信部107設(shè)為是進(jìn)行無(wú)線(xiàn)通信的通信裝置，但并不限于此。例如，也可以是具備usb(universalserialbus，通用串行總線(xiàn))模塊、進(jìn)行有線(xiàn)通信的通信裝置。另外，也可以將數(shù)據(jù)保存在能拆下的存儲(chǔ)裝置，使其他設(shè)備讀入來(lái)交換數(shù)據(jù)。關(guān)于通信部204、通信部302也同樣。在該情況下，動(dòng)態(tài)圖象信息從能拆下的存儲(chǔ)裝置獲得。

另外，測(cè)定裝置100也可以不具備通信部107。即使不具備通信部107，也能通過(guò)經(jīng)由發(fā)光部106發(fā)送測(cè)定信息，拍攝裝置200的拍攝部202對(duì)其進(jìn)行拍攝，來(lái)顯示動(dòng)態(tài)圖象信息和測(cè)定信息。

在可見(jiàn)光通信中，動(dòng)態(tài)圖象信息的1幀與信號(hào)的1bit對(duì)應(yīng)，但并不限于此。例如，也可以設(shè)定閃爍時(shí)間，使動(dòng)態(tài)圖象信息的2幀成為信號(hào)的1bit。若如此進(jìn)行設(shè)定，則雖然通信速度減半，但能防止閃爍未記錄在動(dòng)態(tài)圖象信息的幀而丟失。

可見(jiàn)光信號(hào)400包含排頭標(biāo)記401、測(cè)定時(shí)間402、傳感器id403、解析數(shù)據(jù)404和警告標(biāo)記405，但并不限于此。例如可見(jiàn)光信號(hào)400也可以?xún)H包含排頭標(biāo)記401以及測(cè)定時(shí)間402。另外，也可以不含測(cè)定時(shí)間402，包含傳感器id403、解析數(shù)據(jù)404、警告標(biāo)記405當(dāng)中的至少任意一者。只要在多次發(fā)送的可見(jiàn)光信號(hào)400當(dāng)中的至少1次包含測(cè)定時(shí)間402，圖像處理系統(tǒng)1就能進(jìn)行動(dòng)態(tài)圖象信息與測(cè)定數(shù)據(jù)的時(shí)間同步。

解析數(shù)據(jù)404表示測(cè)定裝置100的解析部103對(duì)數(shù)據(jù)進(jìn)行解析而得到的評(píng)價(jià)值，但并不限于此。例如，解析數(shù)據(jù)404也可以包含測(cè)定裝置100的傳感器部102測(cè)定出的數(shù)據(jù)本身，作為測(cè)定信息。

可見(jiàn)光信號(hào)400也可以在信號(hào)的末尾包含結(jié)束標(biāo)記。結(jié)束標(biāo)記是表示可見(jiàn)光信號(hào)400的結(jié)束的32bit的信號(hào)。取得部303通過(guò)結(jié)束標(biāo)記存在來(lái)認(rèn)識(shí)可見(jiàn)光信號(hào)400結(jié)束。

圖像處理系統(tǒng)1進(jìn)行作為圖像處理的同步處理，但并不限于此。例如，也可以是可見(jiàn)光信號(hào)400不含測(cè)定時(shí)間402，執(zhí)行不進(jìn)行時(shí)間同步的圖像處理。只要在可見(jiàn)光信號(hào)400中包含解析數(shù)據(jù)404，就能通過(guò)拍攝可見(jiàn)光信號(hào)400，接收動(dòng)態(tài)圖象信息來(lái)進(jìn)行測(cè)定信息和動(dòng)態(tài)圖象信息的顯示。

在實(shí)施方式2所涉及的圖像處理系統(tǒng)1中，在可見(jiàn)光信號(hào)400中包含結(jié)束標(biāo)記的情況下，發(fā)光部106從排頭標(biāo)記401重開(kāi)停止的可見(jiàn)光信號(hào)400的發(fā)送。通過(guò)從排頭標(biāo)記401重開(kāi)發(fā)送，能使取得部303確實(shí)地認(rèn)識(shí)可見(jiàn)光信號(hào)400。取得部303就算未接收到結(jié)束標(biāo)記，也在給定時(shí)間(例如1秒)以上未接收到可見(jiàn)光信號(hào)400的情況下判斷為發(fā)送中斷，準(zhǔn)備可見(jiàn)光信號(hào)400的再送。

另外，能作為預(yù)先具備用于實(shí)現(xiàn)本發(fā)明所涉及的功能的構(gòu)成的圖像處理系統(tǒng)來(lái)提供自不必說(shuō)，還能通過(guò)程序的運(yùn)用使已有的信息處理裝置等作為本發(fā)明所涉及的圖像處理系統(tǒng)發(fā)揮功能。即，能通過(guò)運(yùn)用用于實(shí)現(xiàn)實(shí)施方式1以及實(shí)施方式2中例示的圖像處理系統(tǒng)1的各功能構(gòu)成的程序，使得控制已有的信息處理裝置等的cpu等能執(zhí)行，來(lái)作為本發(fā)明所涉及的圖像處理系統(tǒng)發(fā)揮功能。另外，本發(fā)明所涉及的圖像處理方法能使用圖像處理系統(tǒng)實(shí)施。

另外，這樣的程序的運(yùn)用方法為任意的。能將程序存放在例如軟盤(pán)、cd(compactdisc，光盤(pán))-rom、dvd(digitalversatiledisc，數(shù)字多功能盤(pán))-rom、存儲(chǔ)卡等計(jì)算機(jī)可讀的存儲(chǔ)媒體中運(yùn)用。進(jìn)而，還能將程序疊加到載波，經(jīng)由因特網(wǎng)等通信媒體來(lái)運(yùn)用。例如在通信網(wǎng)絡(luò)上的公告板(bbs：bulletinboardsystem)公告發(fā)布程序。并且，也可以構(gòu)成為通過(guò)起動(dòng)該程序，在os(operatingsystem，操作系統(tǒng))的控制下與其他應(yīng)用程序同樣地執(zhí)行，由此能執(zhí)行上述的處理。

以上說(shuō)明了本發(fā)明的優(yōu)選的實(shí)施方式，但本發(fā)明并不限定于相關(guān)的特定的實(shí)施方式，在本發(fā)明中包含權(quán)利要求書(shū)所記載的發(fā)明和其等同的范圍。