滯留狀況分析裝置、滯留狀況分析系統(tǒng)及分析方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及取得與對象區(qū)域內(nèi)的移動體的滯留狀況相關(guān)的滯留信息、生成使該滯留信息可視化而得到的熱圖圖像并顯示于顯示裝置的滯留狀況分析裝置、滯留狀況分析系統(tǒng)及滯留狀況分析方法。
【背景技術(shù)】
[0002]在店鋪的收銀臺處，當(dāng)期望結(jié)賬的顧客增加時，就會形成等待結(jié)賬的隊列，從而致使顧客長時間等待，但是若能夠掌握收銀臺的周邊的顧客的滯留狀況、即在收銀臺的周邊滯留了多少顧客，則能夠基于該顧客的滯留狀況來考慮運(yùn)營店鋪時的改善策略，從而能夠?qū)崿F(xiàn)顧客滿足度的提高、店鋪高效的運(yùn)營。
[0003]作為與這樣的掌握人員的滯留狀況的要求相關(guān)的技術(shù)，以往已知有取得與對象區(qū)域內(nèi)的人員的滯留狀況相關(guān)的滯留信息、生成使該滯留信息可視化而得到的熱圖圖像并顯示于顯示裝置的技術(shù)(參照日本特開2009-134688號公報)。若使用這樣的熱圖圖像，則用戶能夠一目了然地掌握對象區(qū)域內(nèi)的人員的滯留狀況，即人員在哪個區(qū)域以何種程度滯留，因此能夠提高用戶的便利性。
[0004]但是，僅使用使滯留信息可視化而得到的熱圖圖像，難以使人員的滯留狀況與對象區(qū)域內(nèi)的位置對應(yīng)地進(jìn)行掌握，即用戶難以掌握人員在對象區(qū)域內(nèi)的哪個區(qū)域內(nèi)滯留，因此在上述現(xiàn)有技術(shù)中，將對象區(qū)域的俯視圖作為背景圖像，將熱圖圖像重疊于該背景圖像來進(jìn)行顯示。特別是在上述現(xiàn)有技術(shù)中，由于從由劃分對象區(qū)域而進(jìn)行拍攝的多臺相機(jī)拍攝到的拍攝圖像取得滯留信息，并根據(jù)該滯留信息生成一個熱圖圖像，因此需要將對象區(qū)域的俯視圖設(shè)為背景圖像，但是在根據(jù)以I臺相機(jī)拍攝對象區(qū)域而得到的拍攝圖像來生成熱圖圖像的情況下，將由I臺相機(jī)拍攝到的拍攝圖像作為背景圖像較為簡便。
[0005]然而，在如此將拍攝圖像設(shè)為背景圖像的情況下，背景圖像為某個時刻的拍攝圖像，與之相對，熱圖圖像由預(yù)定計測期間的多個時刻的拍攝圖像生成，因此存在有如下情況:背景圖像與熱圖圖像無法匹配，即被拍攝到背景圖像的實(shí)際人員滯留狀態(tài)與熱圖圖像所表示的滯留狀態(tài)之間區(qū)別較大，若如此背景圖像與熱圖圖像無法匹配，則存在有給用戶帶來不協(xié)調(diào)感的問題。

【發(fā)明內(nèi)容】

[0006]本發(fā)明的滯留狀況分析裝置取得與對象區(qū)域內(nèi)的移動體的滯留狀況相關(guān)的滯留信息，生成使該滯留信息可視化而得到的熱圖圖像并顯示于顯示裝置。該滯留狀況分析裝置具備:滯留信息取得部，基于根據(jù)上述對象區(qū)域的拍攝圖像所取得的移動體的位置信息，取得每個預(yù)定計測期間的上述滯留信息；熱圖圖像生成部，生成使由該滯留信息取得部取得的上述滯留信息可視化而得到的上述熱圖圖像；背景圖像生成部，根據(jù)上述拍攝圖像生成背景圖像；及顯示圖像生成部，在由該背景圖像生成部生成的上述背景圖像上重疊由上述熱圖圖像生成部生成的上述熱圖圖像，從而生成顯示圖像，上述背景圖像生成部對上述拍攝圖像進(jìn)行降低被拍攝到上述拍攝圖像中的移動體的識別性的圖像處理而生成上述背景圖像。
【附圖說明】
[0007]圖1是第一實(shí)施方式的滯留狀況分析系統(tǒng)的整體結(jié)構(gòu)圖。
[0008]圖2是表示店鋪中的相機(jī)I的設(shè)置狀況的俯視圖。
[0009]圖3是說明在由相機(jī)I拍攝到的拍攝圖像上設(shè)定的測定區(qū)域的說明圖。
[0010]圖4是說明由PC3生成并顯示于監(jiān)視器7的顯示圖像的說明圖。
[0011]圖5是表示PC3的概略結(jié)構(gòu)的功能框圖。
[0012]圖6是說明由背景圖像生成部36進(jìn)行的背景圖像生成處理的概要的說明圖。
[0013]圖7A、圖7B是表示背景圖像與熱圖圖像未匹配的例子的說明圖。
[0014]圖8A、圖8B是表示由背景圖像生成部36生成的背景圖像及由顯示圖像生成部37生成的顯示圖像的說明圖。
[0015]圖9A、圖9B是表示由背景圖像生成部36生成的背景圖像及由顯示圖像生成部37生成的顯示圖像的說明圖。
[0016]圖10是說明由第二實(shí)施方式的PC3的背景圖像生成部36進(jìn)行的背景圖像生成處理的概要的說明圖。
[0017]圖11A、圖1lB是表示由背景圖像生成部36生成的背景圖像及由顯示圖像生成部37生成的顯示圖像的說明圖。
[0018]圖12A、圖12B是表示由背景圖像生成部36生成的背景圖像及由顯示圖像生成部37生成的顯示圖像的說明圖。
[0019]圖13是表示第三實(shí)施方式的PC3的概略結(jié)構(gòu)的功能框圖。
[0020]圖14是說明由背景圖像生成部36進(jìn)行的背景圖像生成處理的概要的說明圖。
[0021]圖15A、圖15B是說明由類似度計算部51進(jìn)行的類似度計算處理的概要的說明圖。
[0022]圖16是表示第三實(shí)施方式的第一變形例的PC3的概略結(jié)構(gòu)的功能框圖。
[0023]圖17是說明由背景圖像生成部36進(jìn)行的背景圖像生成處理的概要的說明圖。
[0024]圖18是表示顯示于監(jiān)視器7的熱圖顯示畫面的說明圖。
[0025]圖19是說明由第三實(shí)施方式的第二變形例的PC3的背景圖像生成部36進(jìn)行的背景圖像生成處理的概要的說明圖。
[0026]圖20A、圖20B、圖20C、圖20D、圖20E是表示熱圖圖像23的其他例的說明圖。
[0027]圖21是表示區(qū)域分割熱圖圖像的說明圖。
[0028]圖22是說明由滯留信息取得部34進(jìn)行的滯留信息取得處理的其他例的說明圖。
【具體實(shí)施方式】
[0029]本發(fā)明是為了消除上述現(xiàn)有技術(shù)的問題而提出的，其主要目的在于提供滯留狀況分析裝置、滯留狀況分析系統(tǒng)及滯留狀況分析方法，構(gòu)成為在將使對象區(qū)域內(nèi)的移動體的滯留信息可視化而得到的熱圖圖像重疊于根據(jù)對象區(qū)域的拍攝圖像生成的背景圖像而進(jìn)行顯示的情況下，減少因背景圖像與熱圖圖像之間無法匹配而導(dǎo)致的不協(xié)調(diào)感，從而獲得自然的顯示圖像。
[0030]第I技術(shù)方案設(shè)為如下結(jié)構(gòu):一種滯留狀況分析裝置，取得與對象區(qū)域內(nèi)的移動體的滯留狀況相關(guān)的滯留信息，生成使該滯留信息可視化而得到的熱圖圖像并顯示于顯示裝置，該滯留狀況分析裝置具備:滯留信息取得部，基于根據(jù)上述對象區(qū)域的拍攝圖像所取得的移動體的位置信息，取得每個預(yù)定計測期間的上述滯留信息；熱圖圖像生成部，生成使由該滯留信息取得部取得的上述滯留信息可視化而得到的上述熱圖圖像；背景圖像生成部，根據(jù)上述拍攝圖像生成背景圖像；及顯示圖像生成部，在由該背景圖像生成部生成的上述背景圖像上重疊由上述熱圖圖像生成部生成的上述熱圖圖像，從而生成顯示圖像，上述背景圖像生成部對上述拍攝圖像進(jìn)行降低被拍攝到上述拍攝圖像中的移動體的識別性的圖像處理，生成上述背景圖像。
[0031]由此，通過對拍攝圖像進(jìn)行降低被拍攝到拍攝圖像中的移動體的識別性(可視性)的圖像處理，被拍攝到拍攝圖像中的移動體變得難以識別，因此統(tǒng)一從計測期間內(nèi)的拍攝圖像中選擇出背景圖像，例如將計測期間的結(jié)束時刻的拍攝圖像選擇為背景圖像，從而即使在背景圖像與熱圖圖像無法匹配的情況下，也能夠減少給用戶帶來的不協(xié)調(diào)感。
[0032]另外，第2技術(shù)方案設(shè)為如下結(jié)構(gòu):上述背景圖像生成部對上述拍攝圖像進(jìn)行模糊處理而生成上述背景圖像。
[0033]由此，背景圖像能保持能夠掌握對象區(qū)域的概觀的狀態(tài)并且使準(zhǔn)確的移動體的數(shù)量、位置等變得難以辨認(rèn)，因此能夠減輕因背景圖像與熱圖圖像之間無法匹配而產(chǎn)生的不協(xié)調(diào)感。
[0034]另外，第3技術(shù)方案設(shè)為如下結(jié)構(gòu):上述背景圖像生成部對上述拍攝圖像進(jìn)行重疊單一色的半透過圖像的處理而生成上述背景圖像。
[0035]由此，背景圖像能保持能夠掌握對象區(qū)域的概觀的狀態(tài)并且使準(zhǔn)確的移動體的數(shù)量、位置等變得難以辨認(rèn)，因此能夠減輕因背景圖像與熱圖圖像之間無法匹配而產(chǎn)生的不協(xié)調(diào)感。
[0036]另外，第4技術(shù)方案設(shè)為如下結(jié)構(gòu):一種滯留狀況分析裝置，取得與對象區(qū)域內(nèi)的移動體的滯留狀況相關(guān)的滯留信息，生成使該滯留信息可視化而得到的熱圖圖像并顯示于顯示裝置，該滯留狀況分析裝置具備:滯留信息取得部，基于根據(jù)上述對象區(qū)域的拍攝圖像所取得的移動體的位置信息，取得每個預(yù)定計測期間的上述滯留信息；熱圖圖像生成部，生成使由該滯留信息取得部取得的上述滯留信息可視化而得到的上述熱圖圖像；背景圖像生成部，根據(jù)上述拍攝圖像生成背景圖像；及顯示圖像生成部，在由該背景圖像生成部生成的上述背景圖像上重疊由上述熱圖圖像生成部生成的上述熱圖圖像，從而生成顯示圖像，上述背景圖像生成部根據(jù)在與上述滯留信息對應(yīng)的上述計測期間拍攝到的多個上述拍攝圖像生成摘要圖像，并將該摘要圖像設(shè)為上述背景圖像。
[0037]由此，摘要圖像反映出整個計測期間的對象區(qū)域的狀態(tài)，因此通過將該摘要圖像設(shè)為背景圖像，從而背景圖像與熱圖圖像匹配，能夠避免給用戶帶來不協(xié)調(diào)感。
[0038]另外，第5技術(shù)方案設(shè)為如下結(jié)構(gòu):上述背景圖像生成部按照各個像素求出多個上述拍攝圖像的像素值的平均值、生成將該平均值設(shè)為像素值的平均圖像作為上述摘要圖像，并將該平均圖像設(shè)為上述背景圖像。
[0039]由此，在平均圖像中，移動體的像變得不鮮明，另一方面，靜止的物體的像保持為比較鮮明的狀態(tài)，因此通過將該平均圖像設(shè)為背景圖像，能夠明確地掌握除了移動體以外的對象區(qū)域的狀態(tài)。
[0040]另外，第6技術(shù)方案設(shè)為如下結(jié)構(gòu):上述背景圖像生成部按照各個像素求出多個上述拍攝圖像的像素值的方差、生成將該方差設(shè)為像素值的方差圖像作為上述摘要圖像，并將該方差圖像設(shè)為上述背景圖像。
[0041]由此，在方差圖像中，移動體的像變得不鮮明，另一方面，靜止的物體的像保持為比較鮮明的狀態(tài)，因此通過將該方差圖像設(shè)為背景圖像，能夠明確地掌握除了移動體以外的對象區(qū)域的狀態(tài)。
[0042]另外，第7技術(shù)方案設(shè)為如下結(jié)構(gòu):上述背景圖像生成部生成將分別從上述計測期間內(nèi)的多個拍攝圖像中提取出的移動體的圖像重疊于一個上述拍攝圖像上而成的圖像作為上述摘要圖像，并將該圖像設(shè)為上述背景圖像。
[0043]由此，在摘要圖像中鮮明地顯示有出現(xiàn)于計測期間內(nèi)的拍攝圖像中的移動體的像，另外，除移動體以外的物體的像也被鮮明地顯示，因此能夠明確地掌握包含移動體在內(nèi)的對象區(qū)域的狀態(tài)。
[0044]另外，第8技術(shù)方案設(shè)為如下結(jié)構(gòu):一種滯留狀況分析裝置，取得與對象區(qū)域內(nèi)的移動體的滯留狀況相關(guān)的滯留信息，生成使該滯留信息可視化而得到的熱圖圖像并顯示于顯示裝置，該滯留狀況分析裝置具備:滯留信息取得部，基于根據(jù)上述對象區(qū)域的拍攝圖像所取得的移動體的位置信息，取得每個預(yù)定計測期間的上述滯留信息；熱圖圖像生成部，生成使由該滯留信息取得部取得的上述滯留信息可視化而得到的上述熱圖圖像；背景圖像生成部，根據(jù)上述拍攝圖像生成背景圖像；及顯示圖像生成部，在由該背景圖像生成部生成的上述背景圖像上重疊由上述熱圖圖像生成部生成的上述熱圖圖像，從而生成顯示圖像，上述背景圖像生成部具備:類似度計算部，算出上述拍攝圖像與上述滯留信息的類似度；及背景圖像選擇部，基于由該類似度計算部算出的上述類似度，選擇設(shè)為上述背景圖像的上述