停留狀態(tài)分析裝置、停留狀態(tài)分析系統(tǒng)和停留狀態(tài)分析方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及停留狀態(tài)分析裝置、停留狀態(tài)分析系統(tǒng)和停留狀態(tài)分析方法，用于測量目標(biāo)區(qū)域中的運動對象的停留頻率并且生成可視化停留頻率的分布狀態(tài)的熱圖，用于在顯示裝置上顯示。
【背景技術(shù)】
[0002]在商業(yè)機(jī)構(gòu)，諸如零售店中，當(dāng)希望付款的顧客人數(shù)增加到一定程度時，可能在收銀臺形成等待結(jié)賬的顧客隊列(隊)，這迫使顧客在隊列中等待他們的機(jī)會。如果能掌握收銀臺附近的顧客的停留狀態(tài)，即，顧客在收銀臺附近停留了多久，可以開發(fā)基于等待時間，改善商店的運行的措施，由此提高顧客滿意度和使商業(yè)機(jī)構(gòu)的運行合理化。
[0003]關(guān)于掌握人的停留狀態(tài)，通常已知一種技術(shù)，該技術(shù)生成可視化目標(biāo)區(qū)域中的人的活動量的分布狀態(tài)的熱圖(見JP2009-134688A)。通過使用這種熱圖，用戶能一眼掌握人的停留頻率的分布狀態(tài)(每單位時間所檢測的停留人數(shù))，即，有多少人正停留在目標(biāo)區(qū)域中的哪一區(qū)，這能提高用戶的便利。
[0004]為生成可視地顯示目標(biāo)區(qū)域中的人的停留頻率的分布狀態(tài)的熱圖，有必要獲得目標(biāo)區(qū)域的每一段中的停留頻率并且生成表示停留頻率的分布狀態(tài)的分布信息，以及獲得目標(biāo)區(qū)域的每一段的停留頻率，被考慮來計數(shù)每一段中的人的行進(jìn)線路，其中，通過按時間順序排列人的檢測位置，形成該人的行進(jìn)線路。
[0005]另一方面，在如上所述，在形成多人的隊列是狀態(tài)中，沿攝像機(jī)的視線，一些人可能相互重疊，使得“背景”人從視線被遮住。這種現(xiàn)象稱為遮擋。如果遮擋發(fā)生，人檢測精度下降并且人的行進(jìn)線路可能包括丟失部分。如果行進(jìn)線路包括丟失部分，應(yīng)當(dāng)視作單一線路的行進(jìn)線路在丟失部分被分成兩條行進(jìn)線路，這可能導(dǎo)致行進(jìn)線路的多次計數(shù)或丟失計數(shù)，由此使得不可能獲得準(zhǔn)確的停留頻率并且導(dǎo)致具有降低精度的熱圖。
[0006]然而，上述常規(guī)技術(shù)未提出用于解決這些問題的任何措施，由此，期望一種技術(shù)，即使在行進(jìn)線路可能包括丟失部分的情況下，也能通過進(jìn)行適當(dāng)?shù)男Ｕ齺肀苊庑羞M(jìn)線路的多次計數(shù)和丟失計數(shù)，生成高度準(zhǔn)確的熱圖。
[0007]做出了本發(fā)明來解決現(xiàn)有技術(shù)的上述問題，以及本發(fā)明的主要目的是提供一種停留狀態(tài)分析裝置、停留狀態(tài)分析系統(tǒng)和停留狀態(tài)分析方法，即使在行進(jìn)線路可能包括丟失部分的情況下，也能通過進(jìn)行適當(dāng)?shù)男Ｕ?，生成高度?zhǔn)確的熱圖。

【發(fā)明內(nèi)容】

[0008]為實現(xiàn)上述目的，本發(fā)明的第一方面提供一種停留狀態(tài)分析裝置，用于測量目標(biāo)區(qū)域中的運動對象的停留頻率，并且生成將停留頻率的分布狀態(tài)可視化以顯示在顯示裝置上的熱圖，該停留狀態(tài)分析裝置包括:位置信息分類單元，根據(jù)由于運動對象的行進(jìn)線路中可能產(chǎn)生的丟失部分、多條位置信息可能包括誤差的可能性程度，分類從運動對象檢測裝置獲得的運動對象的多條位置信息；丟失部分位置檢測單元，基于由位置信息分類單元分類的多條位置信息的至少兩組，檢測行進(jìn)線路中的丟失部分的位置；校正的分布信息生成單元，生成基于丟失部分位置檢測單元的檢測結(jié)果校正的、表示運動對象的停留頻率的校正的分布信息；以及熱圖生成單元，基于由校正的分布信息生成單元生成的校正的分布信息，生成熱圖。
[0009]根據(jù)該結(jié)構(gòu)，通過使用根據(jù)由于運動對象的行進(jìn)線路中可能包括的丟失部分、多條位置信息可能包括誤差的可能性程度分類的多條位置信息的兩組，能夠容易和高精度地檢測行進(jìn)線路中的丟失部分的位置。此外，通過基于檢測結(jié)果生成校正的分布信息，即使在行進(jìn)線路包括丟失部分的情況下，也能夠進(jìn)行適當(dāng)?shù)男Ｕ齺硐捎谛羞M(jìn)線路中的丟失部分的多次計數(shù)和丟失計數(shù)，由此生成高精度的熱圖。
[0010]在本發(fā)明的第二方面中，位置信息分類單元包括基于運動對象的多條位置信息、檢測可能導(dǎo)致在運動對象的行進(jìn)線路中產(chǎn)生丟失部分的顯著事件的顯著事件檢測單元，并且基于顯著事件檢測單元是否檢測到顯著事件，分類多條位置信息。
[0011]當(dāng)未檢測到顯著事件時獲得的位置信息具有包括誤差的低可能性，而當(dāng)檢測到顯著事件時獲得的位置信息具有包括誤差的高可能性，由此，通過根據(jù)顯著事件的檢測結(jié)果，執(zhí)行多條位置信息的分類，能容易地和以高精度實現(xiàn)根據(jù)多條位置信息可能包括誤差的可能性程度分類多條位置信息。
[0012]在本發(fā)明的第三方面中，顯著事件檢測單元將密集地出現(xiàn)多個運動對象的擁擠事件檢測為顯著事件。
[0013]在密集地出現(xiàn)多個運動對象的情況下，運動對象之間的遮擋趨于發(fā)生，使得運動對象檢測的精度趨于降低，因此，運動對象的行進(jìn)線路中通常包括丟失部分。在上述結(jié)構(gòu)中，通過基于是否檢測到擁擠事件，分類位置信息項，能夠以高精度檢測行進(jìn)線路中的丟失部分的位置。
[0014]在本發(fā)明的第四方面中，顯著事件檢測單元將多個運動對象站在隊列中的排隊事件檢測為顯著事件。
[0015]在隊列中出現(xiàn)多個運動對象的情況下，運動對象之間的遮擋趨于發(fā)生，使得運動對象檢測的精度趨于降低，因此，運動對象的行進(jìn)線路中通常包括丟失部分。在上述結(jié)構(gòu)中，通過基于是否檢測到排隊事件，分類位置信息項，能夠以高精度檢測行進(jìn)線路中的丟失部分的位置。
[0016]在本發(fā)明的第五方面中，停留狀態(tài)分析裝置進(jìn)一步包括分布信息比較單元，分別從由位置信息分類單元分類的多條位置信息的兩組，生成用于比較的兩個分布信息集合，其每一個表示運動對象的停留頻率的分布狀態(tài)，并且將用于比較的兩個分布信息集合相互比較，其中，分布信息比較單元生成作為用于比較的兩個分布信息集合之間的差的差別分布信息，以及其中，丟失部分位置檢測單元基于差別分布信息，檢測行進(jìn)線路中的丟失部分的位置。
[0017]根據(jù)該結(jié)構(gòu)，通過使兩個分布信息集合相互比較，能夠有效地檢測行進(jìn)線路中的丟失部分的位置。
[0018]在本發(fā)明的第六方面中，熱圖生成單元對于由分段目標(biāo)區(qū)域限定的多個分區(qū)的每一個生成表示運動對象的停留頻率的分段熱圖。
[0019]根據(jù)該結(jié)構(gòu)，用戶能一眼掌握目標(biāo)區(qū)域中的運動對象的停留頻率的分布狀態(tài)。
[0020]在本發(fā)明的第七方面中，熱圖生成單元改變包括色調(diào)、明暗度和模式圖像的熱圖的可視化元素的至少一個來將運動對象的停留頻率的分布狀態(tài)可視化。
[0021]根據(jù)該結(jié)構(gòu)，用戶能易于掌握運動對象的停留頻率的分布狀態(tài)。
[0022]在本發(fā)明的第八方面中，熱圖生成單元生成將目標(biāo)區(qū)域中的兩點之間的運動對象的運動頻率可視化的點對點熱圖。
[0023]根據(jù)該結(jié)構(gòu)，用戶能一眼掌握兩點之間的運動對象的運動狀態(tài)。
[0024]在本發(fā)明的第九方面中，提供一種停留狀態(tài)分析系統(tǒng)，用于測量目標(biāo)區(qū)域中的運動對象的停留頻率，并且生成將停留頻率的分布狀態(tài)可視化以顯示在顯示裝置上的熱圖，該系統(tǒng)包括:運動對象檢測裝置，檢測目標(biāo)區(qū)域中的運動對象并且輸出運動對象的多條位置信息；顯示熱圖的顯示裝置；以及多個信息處理裝置，其中，多個信息處理裝置共同包括:位置信息分類單元，根據(jù)由于運動對象的行進(jìn)線路中可能產(chǎn)生的丟失部分、多條位置信息可能包括誤差的可能性程度，分類從運動對象檢測裝置獲得的運動對象的多條位置信息；丟失部分位置檢測單元，基于由位置信息分類單元分類的多條位置信息的至少兩組，檢測行進(jìn)線路中的丟失部分的位置；校正的分布信息生成單元，生成基于丟失部分位置檢測單元的檢測結(jié)果校正的、表示運動對象的停留頻率的校正的分布信息；以及熱圖生成單元，基于由校正的分布信息生成單元生成的校正的分布信息，生成熱圖。
[0025]根據(jù)該結(jié)構(gòu)，與根據(jù)本發(fā)明的第一方面的結(jié)構(gòu)類似，即使在行進(jìn)線路包括丟失部分的情況下，也能夠通過適當(dāng)?shù)男Ｕ?，生成高精度熱圖。
[0026]在本發(fā)明的第十方面中，提供一種停留狀態(tài)分析方法，用于通過信息處理裝置，執(zhí)行測量目標(biāo)區(qū)域中的運動對象的停留頻率并且生成將停留頻率的分布狀態(tài)可視化以顯示在顯示裝置上的熱圖的處理，該方法包括:根據(jù)由于運動對象的行進(jìn)線路中可能產(chǎn)生的丟失部分、多條位置信息可能包括誤差的可能性程度，分類從運動對象檢測裝置獲得的運動對象的多條位置信息；基于通過分類所分類的多條位置信息的至少兩組，檢測行進(jìn)線路中的丟失部分的位置；生成基于檢測的結(jié)果校正的、表示運動對象的停留頻率的校正的分布信息；以及基于校正的分布信息，生成熱圖。
[0027]根據(jù)該結(jié)構(gòu)，與根據(jù)本發(fā)明的第一方面的結(jié)構(gòu)類似，即使在行進(jìn)線路可能包括丟失部分的情況下，也能夠通過適當(dāng)?shù)男Ｕ?，生成高精度熱圖。
【附圖說明】
[0028]現(xiàn)在，在下文中，參考附圖，按照優(yōu)選實施例，描述本發(fā)明，其中:
[0029]圖1是示出根據(jù)本發(fā)明的實施例的停留狀態(tài)分析系統(tǒng)的整體配置的圖；
[0030]圖2是示出商店中的攝像機(jī)I的示例性位置的平面圖；
[0031]圖3是示出由個人計算機(jī)(PC)3生成并且在監(jiān)視器7上顯示的分段熱圖的說明圖；
[0032]圖4是示意性地示出PC3的功能結(jié)構(gòu)的框圖；
[0033]圖5是用于說明由PC3執(zhí)行的停留狀態(tài)分析處理的概述的說明圖；
[0034]圖6是示出由PC3執(zhí)行的停留狀態(tài)分析處理中的步驟的流程圖；
[0035]圖7是示出由PC3執(zhí)行的停留狀態(tài)分析處理中的步驟的流程圖；
[0036]圖8是用于說明由顯著事件檢測單元31執(zhí)行的擁擠事件檢測處理的概述的說明圖；
[0037]圖9是示出由顯著事件檢測單元31執(zhí)行的擁擠事件檢測處理中的步驟的流程圖；
[0038]圖10是用于說明由顯著事件檢測單元31執(zhí)行的排隊事件檢測處理的概述的說明圖；
[0039]圖11是示出由顯著事件檢測單元31執(zhí)行的排隊事件檢測處理中的步驟的流程圖；
[0040]圖12是用于說明在行進(jìn)線路中產(chǎn)生丟失部分的行進(jìn)線路丟失圖案的示例的說明圖；
[0041]圖13是示出在導(dǎo)致多次計數(shù)的行進(jìn)線路丟失圖案的情況下，第一分布信息、第二分布信息和差別分布信息的說明圖；
[0042]圖14是示出在導(dǎo)致多次計數(shù)的行進(jìn)線路丟失圖案的情況下生成的熱圖的說明圖；
[0043]圖15是示出在導(dǎo)致丟失計數(shù)的行進(jìn)線路丟失圖案的情況下，第一分布信息、第二分布信息和差別分布信息的說明圖；
[0044]圖16是示出在導(dǎo)致丟失計數(shù)的行進(jìn)線路丟失圖案的情況下生成的熱圖的說明圖；以及
[0045]圖17是用于說明由PC3生成并且在監(jiān)視器7上顯示的點對點熱圖的說明圖。
【具體實施方式】
[0046]在下文中，將參考附圖，描述本發(fā)明的實施例。
[0047]圖1是示出根據(jù)本發(fā)明的實施例的停留狀態(tài)分析系統(tǒng)的整體配置的圖。該停留狀態(tài)分析系統(tǒng)設(shè)計用于零售店，諸如超市等等，以及包括攝像機(jī)1、記錄器(圖像存儲裝置)2、個人計算機(jī)(PC)(停留