專(zhuān)利名稱(chēng)：對(duì)象檢測(cè)裝置和對(duì)象檢測(cè)方法
技術(shù)領(lǐng)域：
本發(fā)明涉及使拍攝圖像內(nèi)檢測(cè)出的人物等的移動(dòng)物體和無(wú)線終端的識(shí)別符對(duì)應(yīng) 關(guān)聯(lián)的對(duì)象檢測(cè)裝置和對(duì)象檢測(cè)方法。
背景技術(shù)：
以往，作為在入口不明確而不存在出入口的開(kāi)放空間等的空間中，使拍攝到的人 物等的移動(dòng)物體和該移動(dòng)物體保持的無(wú)線終端的識(shí)別符對(duì)應(yīng)關(guān)聯(lián)的方法，已知有專(zhuān)利文獻(xiàn) 1中公開(kāi)的技術(shù)。在以往的移動(dòng)物體檢測(cè)系統(tǒng)中，在移動(dòng)物體的位置的檢測(cè)開(kāi)始時(shí)刻和無(wú)線終端的 識(shí)別符的接收開(kāi)始時(shí)刻之差在規(guī)定時(shí)間內(nèi)時(shí)，使移動(dòng)物體的位置歷史(以下，適當(dāng)?shù)胤Q(chēng)為 “位置歷史”)和無(wú)線終端的識(shí)別符(以下，適當(dāng)?shù)胤Q(chēng)為“識(shí)別符”)對(duì)應(yīng)關(guān)聯(lián)。位置歷史是 指，由攝像機(jī)等拍攝到的移動(dòng)物體的位置和其檢測(cè)開(kāi)始時(shí)刻的歷史。另外，在從識(shí)別符的接收開(kāi)始時(shí)刻起規(guī)定時(shí)間內(nèi)存在多個(gè)開(kāi)始檢測(cè)了的位置歷史 時(shí)，以往的移動(dòng)物體檢測(cè)系統(tǒng)使檢測(cè)開(kāi)始時(shí)刻最接近于識(shí)別符的接收開(kāi)始時(shí)刻的位置歷史 與識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。例如，如圖1所示，假設(shè)以往的移動(dòng)物體檢測(cè)系統(tǒng)獲取兩個(gè)位置歷史Pl和P2、以及 一個(gè)識(shí)別符IDl。此時(shí)，以往的移動(dòng)物體檢測(cè)系統(tǒng)計(jì)算各個(gè)位置歷史的檢測(cè)開(kāi)始時(shí)刻Tpi和 Tp2與識(shí)別符的接收開(kāi)始時(shí)刻Tidi之差|TP1-TID1|和|TP2-TID1|。在圖1的例子中，為ITpi-Tidi > ITp2-TidiI，所以以往的移動(dòng)物體檢測(cè)系統(tǒng)使位置歷史P2與識(shí)別符τι對(duì)應(yīng)關(guān)聯(lián)?，F(xiàn)有技術(shù)文獻(xiàn)專(zhuān)利文獻(xiàn)專(zhuān)利文獻(xiàn)1 特開(kāi)2006-98214號(hào)公報(bào)

發(fā)明內(nèi)容
發(fā)明需要解決的問(wèn)題然而，以往的移動(dòng)物體檢測(cè)系統(tǒng)，僅以時(shí)間差為基準(zhǔn)進(jìn)行對(duì)應(yīng)關(guān)聯(lián)，所以在以下的 (1)和( 時(shí)，無(wú)法準(zhǔn)確地進(jìn)行對(duì)應(yīng)關(guān)聯(lián)。(1)在短時(shí)間內(nèi)開(kāi)始接收了多個(gè)識(shí)別符時(shí)在多個(gè)移動(dòng)物體保持近距離而移動(dòng)時(shí)，各個(gè)移動(dòng)物體的檢測(cè)開(kāi)始時(shí)刻和各個(gè)移動(dòng) 物體所保持的無(wú)線終端的識(shí)別符的接收開(kāi)始時(shí)刻，分別幾乎為同時(shí)(誤差的范圍內(nèi))。例如，為兩個(gè)移動(dòng)物體A和B保持近距離而移動(dòng)的情況。如圖2所示，兩個(gè)位置歷 史Pl和P2的檢測(cè)開(kāi)始時(shí)刻Tpl和Tp2、與兩個(gè)識(shí)別符IDl和ID2的接收開(kāi)始時(shí)刻Tidi和Tid2， 分別幾乎為同時(shí)。這樣，在存在接收開(kāi)始時(shí)刻為同時(shí)的多個(gè)識(shí)別符時(shí)，以往的移動(dòng)物體檢測(cè) 系統(tǒng)無(wú)法使位置歷史與識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。(2)接收到的識(shí)別符的數(shù)多于檢測(cè)出的位置歷史的數(shù)時(shí)例如，存在移動(dòng)物體的位置的檢測(cè)范圍和識(shí)別符的接收范圍不同的情況。因此，例如，存在以下情況，即在兩個(gè)移動(dòng)物體A和B中，移動(dòng)物體A在位置檢測(cè)范圍外但在識(shí)別符 接收范圍內(nèi)的區(qū)域移動(dòng)，移動(dòng)物體B在位置檢測(cè)范圍和識(shí)別符接收范圍的雙方的范圍內(nèi)的 區(qū)域移動(dòng)。此時(shí)，如圖3所示，獲取一個(gè)位置歷史P1、以及兩個(gè)識(shí)別符IDl和ID2。以往的移 動(dòng)物體檢測(cè)系統(tǒng)在兩個(gè)識(shí)別符IDl和ID2的接收開(kāi)始時(shí)刻Tidi和Tid2的兩個(gè)時(shí)刻中都無(wú)法 進(jìn)行對(duì)應(yīng)關(guān)聯(lián)。其理由為，因?yàn)槲恢脷v史Pl的檢測(cè)開(kāi)始時(shí)刻Tpl最近，所以無(wú)法判別應(yīng)使位 置歷史Pl與哪一個(gè)識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。這樣，在以往技術(shù)中，存在以下問(wèn)題，S卩在短時(shí)間內(nèi)開(kāi)始接收了多個(gè)識(shí)別符時(shí)，或 者在接收到的識(shí)別符的數(shù)多于檢測(cè)出的位置歷史的數(shù)時(shí)，無(wú)法進(jìn)行拍攝圖像內(nèi)的移動(dòng)物體 和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)。本發(fā)明的目的在于，提供即使在短時(shí)間內(nèi)開(kāi)始接收了多個(gè)識(shí)別符時(shí)，或者在接收 到的識(shí)別符的數(shù)多于檢測(cè)出的位置歷史的數(shù)時(shí)，也能夠進(jìn)行拍攝圖像內(nèi)的移動(dòng)物體和識(shí)別 符的對(duì)應(yīng)關(guān)聯(lián)的對(duì)象檢測(cè)裝置和對(duì)象檢測(cè)方法。解決問(wèn)題的方案本發(fā)明的對(duì)象檢測(cè)裝置所采用的結(jié)構(gòu)包括特征信息提取單元，提取拍攝圖像中 拍攝到的至少一個(gè)移動(dòng)物體的特征信息；讀取單元，讀取所述移動(dòng)物體保持的無(wú)線終端的 識(shí)別符；歷史管理單元，使所述特征信息和所述識(shí)別符每個(gè)時(shí)刻關(guān)聯(lián)對(duì)應(yīng)保存；以及對(duì)應(yīng) 關(guān)聯(lián)單元，基于所述特征信息間的相似度、以及所述特征信息和所述識(shí)別符之間的所述關(guān) 聯(lián)對(duì)應(yīng)，使所述歷史管理單元中保存的所述特征信息和所述識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。本發(fā)明的對(duì)象檢測(cè)方法包括以下步驟特征信息提取步驟，提取拍攝圖像中拍攝 到的至少一個(gè)移動(dòng)物體的特征信息；讀取步驟，讀取所述移動(dòng)物體保持的無(wú)線終端的識(shí)別 符；歷史管理步驟，使所述特征信息和所述識(shí)別符每個(gè)時(shí)刻關(guān)聯(lián)對(duì)應(yīng)保存在存儲(chǔ)器中；以 及對(duì)應(yīng)關(guān)聯(lián)步驟，基于所述存儲(chǔ)器中保存的特征信息間的相似度、以及所述特征信息和所 述識(shí)別符之間的所述關(guān)聯(lián)對(duì)應(yīng)，使所述存儲(chǔ)器中保存的所述特征信息和所述識(shí)別符對(duì)應(yīng)關(guān) 聯(lián)。發(fā)明的效果根據(jù)本發(fā)明，通過(guò)基于特征信息間的相似度，求與特征信息對(duì)應(yīng)的識(shí)別符，從而即 使在短時(shí)間內(nèi)開(kāi)始接收了多個(gè)識(shí)別符時(shí)，或者在接收到的識(shí)別符的數(shù)多于檢測(cè)出的位置歷 史的數(shù)時(shí)，也能夠容易進(jìn)行拍攝圖像內(nèi)的移動(dòng)物體和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)。


圖1是用于說(shuō)明以往技術(shù)的位置歷史和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)的圖。圖2是用于說(shuō)明以往技術(shù)中的問(wèn)題的圖。圖3是用于說(shuō)明以往技術(shù)中的問(wèn)題的圖。圖4是表示本發(fā)明實(shí)施方式1的對(duì)象檢測(cè)裝置的結(jié)構(gòu)的方框圖。圖5是表示包含本發(fā)明實(shí)施方式1的對(duì)象檢測(cè)裝置的系統(tǒng)結(jié)構(gòu)的圖。圖6是表示一例本發(fā)明實(shí)施方式1的歷史管理單元所管理的歷史信息的圖。圖7是表示本發(fā)明實(shí)施方式1的對(duì)應(yīng)關(guān)聯(lián)單元的動(dòng)作步驟的流程圖。圖8是用于說(shuō)明本發(fā)明實(shí)施方式1的歸類(lèi)的圖。CN 102119343 A
說(shuō)明書(shū)
3/11 頁(yè)圖9是表示一例本發(fā)明實(shí)施方式1的歷史管理單元所管理的歷史信息的圖。圖10是表示一例本發(fā)明實(shí)施方式1的顯示圖像的圖。圖11是表示本發(fā)明實(shí)施方式1的對(duì)象檢測(cè)裝置的結(jié)構(gòu)的方框圖。圖12是表示本發(fā)明實(shí)施方式1的對(duì)象檢測(cè)裝置的結(jié)構(gòu)的方框圖。圖13是表示一例本發(fā)明實(shí)施方式1的歷史管理單元所管理的歷史信息的圖。圖14是表示本發(fā)明實(shí)施方式2的對(duì)象檢測(cè)裝置的結(jié)構(gòu)的方框圖。圖15是表示本發(fā)明實(shí)施方式2的對(duì)應(yīng)關(guān)聯(lián)單元的動(dòng)作步驟的流程圖。圖16是表示一例本發(fā)明實(shí)施方式2的顯示圖像的圖。圖17是表示本發(fā)明實(shí)施方式3的對(duì)象檢測(cè)裝置的結(jié)構(gòu)的方框圖。圖18是表示本發(fā)明實(shí)施方式3的對(duì)象檢測(cè)裝置的結(jié)構(gòu)的方框圖。圖19是表示包含本發(fā)明實(shí)施方式3的對(duì)象檢測(cè)裝置的系統(tǒng)結(jié)構(gòu)的圖。圖20是表示一例本發(fā)明實(shí)施方式3的歷史管理單元所管理的歷史信息的圖。標(biāo)號(hào)說(shuō)明100、300、400、500 對(duì)象檢測(cè)裝置101、1001、1003 拍攝單元102人物截出單元103特征信息提取單元104、1011、1013 讀取單元105歷史管理單元106、306對(duì)應(yīng)關(guān)聯(lián)單元107異常輸出單元108圖像存儲(chǔ)單元109顯示單元151、351對(duì)應(yīng)關(guān)聯(lián)判定單元152歸類(lèi)單元153相似度計(jì)算單元154類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元155類(lèi)數(shù)決定單元156相似度加權(quán)單元352相近特征信息追加單元
具體實(shí)施例方式以下，參照附圖詳細(xì)地說(shuō)明本發(fā)明的各個(gè)實(shí)施方式。另外，在各個(gè)實(shí)施方式中，說(shuō) 明移動(dòng)物體是人物的情況。另外，各個(gè)人物保持能夠通過(guò)無(wú)線發(fā)送固有的識(shí)別符的無(wú)線終 端。無(wú)線終端是RFID (Radio FrequencyIdentification，射頻識(shí)別)、非接觸IC卡、無(wú)線標(biāo) 簽、藍(lán)牙(Bluetooth)(注冊(cè)商標(biāo))、無(wú)線LAN(local area network，局域網(wǎng))和毫米波標(biāo)簽寸。(實(shí)施方式1)圖4是表示本發(fā)明實(shí)施方式1的對(duì)象檢測(cè)裝置的結(jié)構(gòu)的方框圖。圖5是表示包含本發(fā)明實(shí)施方式1的對(duì)象檢測(cè)裝置的系統(tǒng)結(jié)構(gòu)的圖。對(duì)象檢測(cè)裝置100主要包括拍攝單元101、人物截出單元102、特征信息提取單元 103、讀取單元104、歷史管理單元105、對(duì)應(yīng)關(guān)聯(lián)單元106、異常輸出單元107、圖像存儲(chǔ)單元
108、以及顯示單元109。另外，對(duì)應(yīng)關(guān)聯(lián)單元106具有對(duì)應(yīng)關(guān)聯(lián)判定單元151、歸類(lèi)單元 152、相似度計(jì)算單元153、以及類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元154。拍攝單元101使用攝像機(jī)拍攝規(guī)定的區(qū)域，并將拍攝圖像輸出到人物截出單元 102、特征信息提取單元103和圖像存儲(chǔ)單元108。人物截出單元102以規(guī)定的定時(shí)，在從拍攝單元101輸出的拍攝圖像中檢測(cè)拍攝 到人物201的區(qū)域(以下，稱(chēng)為“人物區(qū)域”)。然后，在拍攝圖像中拍攝到的人物201的數(shù) 增加或減少了時(shí)，人物截出單元102將表示該增加或減少的信息通知給讀取單元104。另 外，人物截出單元102將表示人物區(qū)域的位置的信息輸出到特征信息提取單元103。另外， 通過(guò)使用現(xiàn)有的方法，實(shí)現(xiàn)人物區(qū)域的檢測(cè)。例如，人物截出單元102使用輸入的拍攝圖 像，基于先前幀的圖像信息(背景信息)和當(dāng)前幀的圖像信息之間的差分，檢測(cè)人物區(qū)域。特征信息提取單元103參照從人物截出單元102輸出的信息，提取從拍攝單元101 輸出的拍攝圖像中拍攝到的人物201的所有特征信息，并將提取出的特征信息輸出到歷史 管理單元105。作為特征信息的表示方法，例如有使用了顏色特征量或亮度梯度特征量等的 N維數(shù)據(jù)。在圖像識(shí)別的領(lǐng)域中，一般而言，將對(duì)有數(shù)百維構(gòu)成的特征矢量進(jìn)行主成分分析 而縮減到百維左右的矢量用作特征信息。但是，在本實(shí)施方式中，假設(shè)特征矢量為二維(例 如，對(duì)N維矢量進(jìn)行主成分分析所得的第1主成分和第2主成分)進(jìn)行說(shuō)明。特征信息是 例如表示人物的臉部的特征的特征信息，或者表示人物的形狀的特征的特征信息。讀取單元104具有接收天線，并以來(lái)自人物截出單元102的通知的定時(shí)，接收從人 物201保持的無(wú)線終端202發(fā)送的電波。來(lái)自人物截出單元102的通知是指，如上所述，表 示拍攝圖像中拍攝到的人物201的數(shù)增加或減少的信息的通知。此時(shí)，讀取單元104也可 以接收來(lái)自人物截出單元102的通知后，對(duì)無(wú)線終端202查詢識(shí)別符。具體而言，讀取單元 104對(duì)無(wú)線終端202發(fā)送查詢信號(hào)，接收由無(wú)線終端202發(fā)送的電波作為對(duì)于該查詢信號(hào)的 響應(yīng)，并讀取被重疊在接收到的電波上的識(shí)別符即可。讀取單元104將獲取的所有識(shí)別符 輸出到歷史管理單元105。另外，如圖5所示，例如，讀取單元104的接收范圍203被設(shè)定為 等于或大于拍攝單元101的拍攝范圍204。歷史管理單元105輸入由特征信息提取單元103提取的特征信息、以及由讀取單 元104讀取的識(shí)別符，使特征信息和識(shí)別符每個(gè)時(shí)刻對(duì)應(yīng)關(guān)聯(lián)，并將其作為歷史信息進(jìn)行管理。對(duì)應(yīng)關(guān)聯(lián)單元106進(jìn)行歷史管理單元105中作為歷史信息被管理的特征信息和識(shí) 別符的對(duì)應(yīng)關(guān)聯(lián)。然后，對(duì)應(yīng)關(guān)聯(lián)單元106將表示對(duì)應(yīng)關(guān)聯(lián)的結(jié)果的信息輸出到顯示單元
109。在對(duì)應(yīng)關(guān)聯(lián)單元106判斷為異常時(shí)，異常輸出單元107將表示該結(jié)果的信息輸出 到顯示單元109。圖像存儲(chǔ)單元108對(duì)從拍攝單元101輸出的拍攝圖像賦予時(shí)刻信息而存儲(chǔ)。顯示 單元109以重疊了與拍攝圖像內(nèi)拍攝到的人物的特征信息對(duì)應(yīng)的識(shí)別符的狀態(tài)，顯示圖像 存儲(chǔ)單元108中存儲(chǔ)的拍攝圖像。另外，在從異常輸出單元107輸入了表示異常的信息時(shí)，
7顯示單元109也可以將該表示異常的信息重疊顯示在拍攝圖像上。對(duì)應(yīng)關(guān)聯(lián)判定單元151判定是否能夠使歷史信息的特征信息和識(shí)別符一對(duì)一地 對(duì)應(yīng)關(guān)聯(lián)。具體而言，在規(guī)定的時(shí)刻中歷史信息的特征信息的數(shù)和識(shí)別符的數(shù)分別為一個(gè) 時(shí)，對(duì)應(yīng)關(guān)聯(lián)判定單元151使特征信息和識(shí)別符一對(duì)一地對(duì)應(yīng)關(guān)聯(lián)。另一方面，在規(guī)定的時(shí) 刻中歷史信息的特征信息的數(shù)或識(shí)別符的數(shù)的至少一方為多個(gè)時(shí)，對(duì)應(yīng)關(guān)聯(lián)判定單元151 判定為無(wú)法使特征信息和識(shí)別符一對(duì)一地對(duì)應(yīng)關(guān)聯(lián)。另外，對(duì)應(yīng)關(guān)聯(lián)判定單元151對(duì)歸類(lèi) 單元152發(fā)出觸發(fā)，以使其進(jìn)行歸類(lèi)處理。另外，在先前的歸類(lèi)處理(分類(lèi)為部分集合的處 理)中，獲得了對(duì)象的特征信息的對(duì)應(yīng)關(guān)聯(lián)時(shí)，對(duì)應(yīng)關(guān)聯(lián)判定單元151也可以利用該結(jié)果， 使特征信息和識(shí)別符一對(duì)一地對(duì)應(yīng)關(guān)聯(lián)。另外，在類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元154中，使類(lèi)和識(shí)別符一對(duì)一地對(duì)應(yīng)關(guān)聯(lián)時(shí)，對(duì)應(yīng)關(guān)聯(lián)判 定單元151基于該結(jié)果，使特征信息和識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。然后，對(duì)應(yīng)關(guān)聯(lián)判定單元151將表示對(duì)應(yīng)關(guān)聯(lián)的結(jié)果的信息輸出到顯示單元109。歸類(lèi)單元152在從對(duì)應(yīng)關(guān)聯(lián)判定單元151接受觸發(fā)后，輸入由歷史管理單元105 管理的歷史信息的特征信息，并基于特征信息的相似度進(jìn)行歸類(lèi)。另外，在后面敘述歸類(lèi)單 元152的具體的處理。相似度計(jì)算單元153在歸類(lèi)單元152進(jìn)行歸類(lèi)時(shí)，計(jì)算特征信息之間的相似度。在 本實(shí)施方式中，使用矢量間距離作為相似度。另外，在本發(fā)明中，對(duì)相似度的計(jì)算方法并無(wú) 特別限定。類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元IM進(jìn)行由歸類(lèi)單元152生成的類(lèi)和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)。然后， 在使類(lèi)和識(shí)別符一對(duì)一地對(duì)應(yīng)關(guān)聯(lián)時(shí)，類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元1 將表示該結(jié)果的信息輸出到判 定單元151。另一方面，在沒(méi)有使類(lèi)和識(shí)別符一對(duì)一地對(duì)應(yīng)關(guān)聯(lián)時(shí)，類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元IM將 表示該結(jié)果的信息輸出到異常輸出單元107。接著，使用圖6的例子，具體說(shuō)明對(duì)應(yīng)關(guān)聯(lián)單元106進(jìn)行歷史管理單元105中管理 的特征信息和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)的處理。圖6是表示一例歷史管理單元105中管理的歷史 信息的圖。在本例子中，假設(shè)在時(shí)刻tl中，檢測(cè)出兩位人物，各個(gè)人物的特征信息為(100、 10)和(15、150)，此時(shí)探測(cè)出的無(wú)線終端的識(shí)別符為IDll和ID22。另外，假設(shè)在時(shí)刻t2中， 檢測(cè)出兩位人物，各個(gè)人物的特征信息為(95、1幻和(80、90)，此時(shí)探測(cè)出的無(wú)線終端的識(shí) 別符為ID22和ID33。在同一時(shí)刻探測(cè)出多個(gè)人物的特征信息和識(shí)別符時(shí)，對(duì)應(yīng)關(guān)聯(lián)單元106無(wú)法僅通 過(guò)該時(shí)刻中的歷史信息，使特征信息和識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。因此，在圖6的情況下，對(duì)應(yīng)關(guān)聯(lián) 單元106使用時(shí)刻tl和時(shí)刻t2的雙方的歷史信息，根據(jù)圖7所示的動(dòng)作步驟，進(jìn)行特征信 息和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)。圖7是表示本實(shí)施方式的對(duì)應(yīng)關(guān)聯(lián)單元106的動(dòng)作步驟的流程圖。步驟11 將特征信息進(jìn)行歸類(lèi)。歸類(lèi)單元152將由相似度計(jì)算單元153計(jì)算出的矢量間距離短于規(guī)定的閾值的特 征信息進(jìn)行歸類(lèi)，以使其分類(lèi)為同一類(lèi)。另外，在本實(shí)施方式中，使用將在一定的閾值以下 的距離的特征信息分類(lèi)為一個(gè)類(lèi)的方法，但在本發(fā)明中，歸類(lèi)的方法并不限于該方法。作 為其他的歸類(lèi)的方法，已知最短距離法等的分層方法或聚類(lèi)(k-means)法等的劃分優(yōu)化方法。在本例子中，如圖8所示，時(shí)刻tl中的特征信息(100、10)和時(shí)刻t2中的特征信 息(95、15)的矢量間距離短于規(guī)定的閾值。因此，歸類(lèi)單元152將這些特征信息分類(lèi)為類(lèi) 1。另外，歸類(lèi)單元152將時(shí)刻tl中的特征信息(15、150)分類(lèi)為類(lèi)2，將時(shí)刻t2中的特征 信息(80,90)分類(lèi)為類(lèi)3。步驟12 生成邏輯式。類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元IM將類(lèi)作為變量，生成表示各個(gè)類(lèi)和各個(gè)時(shí)刻中的識(shí)別符的分 配狀況的邏輯式。在本例子中，類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元巧4從下式(1)生成式(4)。時(shí)刻tl中的特征信息(100、10)屬于類(lèi)1，有可能是IDll和ID22。能夠?qū)⑵浔硎?為下式(1)。類(lèi)1 = {ID11、ID22}· · · (1)另外，時(shí)刻tl中的特征信息(15、150)屬于類(lèi)2，有可能是IDll和ID22。能夠?qū)?其表示為下式(2)。類(lèi)2 = {ID11、ID22}· · “2)同樣地，時(shí)刻t2中的特征信息(95、15)屬于類(lèi)1，有可能是ID22和ID33，特征信 息(80、90)屬于類(lèi)3，有可能是ID22和ID33。能夠?qū)⑵浔硎緸橄率?3)和式(4)。類(lèi)1 = {ID22、ID33}. . · (3)類(lèi)3 = {ID22、ID33}. . . (4)步驟13 解邏輯式。類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元IM利用邏輯式的變換，解在步驟12中生成的邏輯式。另外，本發(fā) 明對(duì)解邏輯式的方法并無(wú)特別限制。作為解邏輯式的方法，已知約束滿足問(wèn)題(constraint satisfaction problem)的解法(反向跟蹤法等)、該邏輯式的近似算法、以及全搜索(full search)等。在本例子中，類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元巧4解上述式(1)至式(4)而求與各個(gè)類(lèi)對(duì)應(yīng)的識(shí)
別符。首先，基于式(1)和式(3)，類(lèi)1可獲取的識(shí)別符限定于ID22。能夠?qū)⑵浔硎緸橄率?⑶。類(lèi)1 = {ID22}· · · (5)接著，從式⑵和式(5)，類(lèi)2可獲取的識(shí)別符限定于ID11。另外，從式⑷和式 (5)，類(lèi)3可獲取的識(shí)別符限定于ID33。步驟14 使類(lèi)和識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元IM基于解出邏輯式的結(jié)果，進(jìn)行類(lèi)和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)。在本例子中，如步驟13中說(shuō)明那樣，各個(gè)類(lèi)可獲取的識(shí)別符限定于一個(gè)，所以能 夠使類(lèi)和識(shí)別符一對(duì)一地對(duì)應(yīng)關(guān)聯(lián)(步驟14 ；“是”)。另一方面，在不攜帶無(wú)線終端的人物進(jìn)入拍攝范圍時(shí)，或者交換了無(wú)線終端時(shí)，從 歷史信息生成的邏輯式存在矛盾。此時(shí)，在解出邏輯式時(shí)，無(wú)法使識(shí)別符與類(lèi)對(duì)應(yīng)關(guān)聯(lián)(步 驟 14; “否”))。步驟15 使特征信息和識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。在步驟14中，在使類(lèi)和識(shí)別符一對(duì)一地對(duì)應(yīng)關(guān)聯(lián)時(shí)(步驟14 ；“是”)，對(duì)應(yīng)關(guān)聯(lián)判
9定單元151從類(lèi)和識(shí)別符的對(duì)應(yīng)關(guān)系，使識(shí)別符和特征信息對(duì)應(yīng)關(guān)聯(lián)。另外，對(duì)應(yīng)關(guān)聯(lián)判定 單元151將表示對(duì)應(yīng)關(guān)聯(lián)的結(jié)果的信息輸出到顯示單元109。在本例子中，根據(jù)步驟13的結(jié)果，類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元IM使ID22與屬于類(lèi)1的特征 信息(100、10)和特征信息(95、15)對(duì)應(yīng)關(guān)聯(lián)。另外，類(lèi)對(duì)應(yīng)關(guān)聯(lián)單元154使IDll和屬于 類(lèi)2的特征信息(15、150)對(duì)應(yīng)關(guān)聯(lián)，使ID33和屬于類(lèi)3的特征信息(80、90)對(duì)應(yīng)關(guān)聯(lián)。步驟16 進(jìn)行異常發(fā)生時(shí)的處理。在步驟14中，在無(wú)法使識(shí)別符和類(lèi)對(duì)應(yīng)關(guān)聯(lián)時(shí)(步驟14 ； “否”)，異常輸出單元 107判斷為異常，并將判斷結(jié)果輸出到顯示單元109。由此，能夠探測(cè)未攜帶無(wú)線終端或交 換的異常。接著，說(shuō)明用于進(jìn)行特定的特征信息的顯示的方法。在從拍攝圖像中提取人物對(duì)象的特征信息時(shí)，特征信息提取單元103除了提取特 征矢量以外，還提取圖像內(nèi)的對(duì)象的位置。然后，特征信息提取單元103將特征矢量和對(duì)象 的位置注冊(cè)到歷史管理單元105。圖9是表示一例包含圖像內(nèi)的對(duì)象位置信息的特征信息 的圖。在圖9的例子中，表示從時(shí)刻tl中的拍攝圖像，探測(cè)出特征信息((100，10)，(300， 400))和特征信息((15，150)，(600,450))的兩個(gè)對(duì)象。另外，特征信息((100，10)，(300， 400))意味著，(100,10)為對(duì)象的特征矢量，(300,400)為圖像內(nèi)的對(duì)象位置。顯示單元109在進(jìn)行特定的特征信息的顯示時(shí)進(jìn)行以下的處理。(1)顯示單元109 從圖像存儲(chǔ)單元108獲取與特征信息對(duì)應(yīng)的時(shí)刻的圖像。( 顯示單元109將從圖像存儲(chǔ) 單元108獲取的圖像重疊顯示在從特征信息獲取的對(duì)象的位置坐標(biāo)信息上。圖10是表示一例將識(shí)別符重疊顯示在圖6的時(shí)刻tl的拍攝圖像上的顯示圖像的 圖。顯示單元109使用由對(duì)應(yīng)關(guān)聯(lián)單元106求得的結(jié)果，在拍攝圖像內(nèi)拍攝到的人物區(qū)域 的周?chē)?，進(jìn)行能夠識(shí)別該人物所保持的無(wú)線終端的識(shí)別符的顯示。在圖10的例子中，顯示 單元109在與特征信息(15、150)對(duì)應(yīng)的人物區(qū)域的周?chē)@示“ID11”和箭頭，在與特征信 息(100、10)對(duì)應(yīng)的人物區(qū)域的周?chē)@示“ID22”和箭頭。如上所述，在本實(shí)施方式中，將特征信息進(jìn)行歸類(lèi)，求與各個(gè)類(lèi)對(duì)應(yīng)的識(shí)別符。由 此，即使在同一時(shí)刻開(kāi)始接收了多個(gè)識(shí)別符時(shí)，或者在接收到的識(shí)別符的數(shù)多于檢測(cè)出的 位置歷史的數(shù)時(shí)，也能夠容易進(jìn)行移動(dòng)物體和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)。另外，在以往技術(shù)中，存在以下的問(wèn)題，S卩為了掌握位置歷史，無(wú)線終端必須不斷 地發(fā)送電波，導(dǎo)致功耗的增大。但是，在本實(shí)施方式中，只要在人物截出單元102檢測(cè)出拍 攝圖像內(nèi)拍攝到的人數(shù)的增減時(shí)，讀取單元104與無(wú)線終端202進(jìn)行通信即可，所以無(wú)線 終端202不需要不斷地發(fā)送電波。因此，無(wú)線終端202通常不與讀取單元104進(jìn)行通信， 而在接收來(lái)自讀取單元104的電波后起動(dòng)。因此，就無(wú)線終端202來(lái)說(shuō)，能夠使用在起動(dòng) 后使用自身的電力，將識(shí)別符重疊在電波上發(fā)送的半無(wú)源型無(wú)線終端(半無(wú)源電子標(biāo)簽， Semi-Passive Tag)?；蛘撸鳛闊o(wú)線終端202，能夠使用將識(shí)別符重疊在使來(lái)自讀取單元 104的電波的一部分反射所得的電波上的、無(wú)源型無(wú)線終端(無(wú)源標(biāo)簽，Passive Tag)。由 此，與以往技術(shù)相比，能夠抑制無(wú)線終端的功耗。另外，如圖11所示，在本實(shí)施方式中，對(duì)應(yīng)關(guān)聯(lián)單元106也可以采用在對(duì)應(yīng)關(guān)聯(lián)單 元106的內(nèi)部具有類(lèi)數(shù)決定單元155的結(jié)構(gòu)。類(lèi)數(shù)決定單元155求由歷史管理單元105管理的歷史信息的識(shí)別符的總數(shù)，并將其結(jié)果輸出到歸類(lèi)單元152作為最大類(lèi)數(shù)。在圖6的例 子中，識(shí)別符為ID11、ID22和ID33的三個(gè)，所以最大類(lèi)數(shù)被設(shè)定為“3”。另外，也可以在僅 將由歷史管理單元105管理的歷史信息的部分期間作為歸類(lèi)的對(duì)象時(shí)，類(lèi)數(shù)決定單元155 求該期間內(nèi)檢測(cè)出的識(shí)別符的總數(shù)，并將求得的總數(shù)輸出到歸類(lèi)單元152作為最大類(lèi)數(shù)。此時(shí)，在圖7的步驟11中的歸類(lèi)時(shí)，歸類(lèi)單元152將類(lèi)數(shù)的上限設(shè)定為最大類(lèi)數(shù)。 由此，能夠削減歸類(lèi)處理時(shí)的搜索范圍，削減歸類(lèi)的計(jì)算量，能夠提高歸類(lèi)的精度。另外，如圖12所示，對(duì)于人物截出單元102，也可以使用識(shí)別符變化探測(cè)單元111， 代替人物截出單元102。識(shí)別符變化探測(cè)單元111監(jiān)視讀取單元104的讀取結(jié)果，在識(shí)別 符的數(shù)增加或減少了時(shí)，對(duì)特征信息提取單元103和讀取單元104發(fā)出指示，以將特征信息 和識(shí)別符注冊(cè)到歷史管理單元105。此時(shí)，在拍攝單元101不一直進(jìn)行拍攝時(shí)，識(shí)別符變化 探測(cè)單元111對(duì)拍攝單元101也發(fā)出拍攝開(kāi)始的指示。但是，在發(fā)出對(duì)特征信息提取單元 103的指示前，識(shí)別符變化探測(cè)單元111發(fā)出拍攝開(kāi)始的指示。另外，在本實(shí)施方式中，對(duì)應(yīng)關(guān)聯(lián)單元106也可以將對(duì)應(yīng)關(guān)聯(lián)的結(jié)果輸出到歷史 管理單元105作為對(duì)應(yīng)關(guān)聯(lián)信息，并管理對(duì)應(yīng)關(guān)聯(lián)信息。由此，在進(jìn)行第二次以后的對(duì)應(yīng)關(guān) 聯(lián)時(shí)，對(duì)應(yīng)關(guān)聯(lián)單元106能夠通過(guò)利用對(duì)應(yīng)關(guān)聯(lián)信息，減少歸類(lèi)或?qū)?yīng)關(guān)聯(lián)的計(jì)算量。以 下，說(shuō)明該情況。圖13是表示一例歷史管理單元105中管理的歷史數(shù)據(jù)的圖。在本例子中，歷史數(shù) 據(jù)是反映了由對(duì)應(yīng)關(guān)聯(lián)單元106進(jìn)行對(duì)應(yīng)關(guān)聯(lián)的結(jié)果的數(shù)據(jù)。數(shù)據(jù)表的第一行表示使特征 信息(100，10)和ID22對(duì)應(yīng)關(guān)聯(lián)。同樣地，表示使特征信息(15、150)和IDll對(duì)應(yīng)關(guān)聯(lián)，使 特征信息(95、15)和ID22對(duì)應(yīng)關(guān)聯(lián)，使特征信息(80，90)和ID33對(duì)應(yīng)關(guān)聯(lián)。由此，例如，在請(qǐng)求了求與時(shí)刻tl中的特征信息(100，10)對(duì)應(yīng)的識(shí)別符時(shí)，對(duì)應(yīng) 關(guān)聯(lián)判定單元151已經(jīng)知道時(shí)刻tl中的特征信息(100，10)與ID22對(duì)應(yīng)關(guān)聯(lián)。因此，能夠 導(dǎo)出識(shí)別符是ID22的對(duì)應(yīng)關(guān)聯(lián)結(jié)果，而不進(jìn)行歸類(lèi)單元152以后的處理。另外，即使在歸類(lèi)單元152以后的處理中，由于邏輯式被簡(jiǎn)化，所以計(jì)算量很少即 可完成。另外，在本實(shí)施方式中，說(shuō)明了對(duì)應(yīng)關(guān)聯(lián)判定單元151首先判定是否能夠在單一 的時(shí)間使特征信息和識(shí)別符對(duì)應(yīng)關(guān)聯(lián)的情況。但是，本發(fā)明并不限于此，也可以從圖4中刪 除對(duì)應(yīng)關(guān)聯(lián)判定單元151，在所有情況下進(jìn)行歸類(lèi)。(實(shí)施方式2)圖14是表示本發(fā)明實(shí)施方式2的對(duì)象檢測(cè)裝置的結(jié)構(gòu)的方框圖。另外，在圖14 所示的對(duì)象檢測(cè)裝置300中，對(duì)與圖4所示的對(duì)象檢測(cè)裝置100共用的結(jié)構(gòu)部分附加與圖 4相同的標(biāo)號(hào)，并省略詳細(xì)的說(shuō)明。實(shí)施方式2與實(shí)施方式1的不同之處在于，特定信息和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)的步驟。 圖14所示的對(duì)象檢測(cè)裝置300與圖4所示的對(duì)象檢測(cè)裝置100相比，對(duì)應(yīng)關(guān)聯(lián)單元306的 內(nèi)部結(jié)構(gòu)與對(duì)應(yīng)關(guān)聯(lián)單元106不同。對(duì)應(yīng)關(guān)聯(lián)單元306具有對(duì)應(yīng)關(guān)聯(lián)判定單元351、相近特征信息追加單元352和相似 度計(jì)算單元153，求與指定的特征信息對(duì)應(yīng)關(guān)聯(lián)的識(shí)別符。對(duì)應(yīng)關(guān)聯(lián)判定單元351判定使作為判定的對(duì)象的一個(gè)以上的特征信息有可能共 同地對(duì)應(yīng)關(guān)聯(lián)的識(shí)別符是否能夠限定為一個(gè)識(shí)別符，并輸出其結(jié)果。
相近特征信息追加單元352對(duì)于指定的特征信息，求相似度相近的特征信息，并 將其輸出到對(duì)應(yīng)關(guān)聯(lián)判定單元351。接著，具體地說(shuō)明對(duì)應(yīng)關(guān)聯(lián)單元306從歷史管理單元105管理的特征信息中求與 指定的特征信息對(duì)應(yīng)關(guān)聯(lián)的識(shí)別符的情況。這里，假設(shè)歷史管理單元105中管理的歷史信息與實(shí)施方式1中舉例的圖6相同， 請(qǐng)求了對(duì)應(yīng)關(guān)聯(lián)單元306求特征信息(100、10)的識(shí)別符。此時(shí)，對(duì)應(yīng)關(guān)聯(lián)單元306根據(jù)圖15所示的動(dòng)作步驟，進(jìn)行被指定的特征信息(100、 10)和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)。圖15是表示本實(shí)施方式的對(duì)應(yīng)關(guān)聯(lián)單元306的動(dòng)作步驟的流程 圖。步驟21 判定可否進(jìn)行對(duì)應(yīng)關(guān)聯(lián)。對(duì)應(yīng)關(guān)聯(lián)判定單元351判斷使特征信息有可能對(duì)應(yīng)關(guān)聯(lián)的識(shí)別符的數(shù)是否能夠 限定為一個(gè)。在本例子中，有可能與特征信息(100、10)對(duì)應(yīng)的識(shí)別符是IDll和ID22的兩個(gè)， 對(duì)應(yīng)關(guān)聯(lián)判定單元351無(wú)法將識(shí)別符限定為一個(gè)(步驟21 ；“否”)。步驟22 選擇相近特征信息。在步驟21中，在無(wú)法將識(shí)別符限定為一個(gè)時(shí)(步驟21 ； “否”)，相近特征信息追加 單元352選擇基于由相似度計(jì)算單元153計(jì)算出的相似度的相近的特征信息。在本例子中，相近特征信息追加單元352選擇特征信息(100、10)的最相近的特征 信息(95、15)。步驟23 判定可否進(jìn)行對(duì)應(yīng)關(guān)聯(lián)。對(duì)應(yīng)關(guān)聯(lián)判定單元351追加相近特征信息追加單元352選擇出的特征信息作為判 定的對(duì)象，判斷作為判定的對(duì)象的所有特征信息共用的識(shí)別符是否能夠限定為一個(gè)。在本例子中，有可能與特征信息(95、1 對(duì)應(yīng)的識(shí)別符是ID22和ID33。因此，有 可能與特征信息(100、10)和特征信息(95、1幻都對(duì)應(yīng)的識(shí)別符僅是ID22，所以對(duì)應(yīng)關(guān)聯(lián)判 定單元351能夠?qū)⒆R(shí)別符限定為一個(gè)(步驟23 ；“是”)。步驟M 使特征信息和識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。在步驟21或步驟23中，在能夠?qū)⒆R(shí)別符限定為一個(gè)時(shí)(步驟21 ；“是”，步驟23 ； “是”)，對(duì)應(yīng)關(guān)聯(lián)判定單元351使求得的識(shí)別符和指定的特征信息對(duì)應(yīng)關(guān)聯(lián)。另外，對(duì)應(yīng)關(guān) 聯(lián)判定單元351將表示對(duì)應(yīng)關(guān)聯(lián)的結(jié)果的信息輸出到顯示單元109。在本例子中，對(duì)應(yīng)關(guān)聯(lián)判定單元351使ID22分別與特征信息(100、10)和特征信 息(95、15)對(duì)應(yīng)關(guān)聯(lián)。步驟25 進(jìn)行異常判定。在步驟23中，在無(wú)法將識(shí)別符限定為一個(gè)時(shí)(步驟23 ；“否”)，對(duì)應(yīng)關(guān)聯(lián)判定單元 351在步驟5中判斷一個(gè)以上的特征信息共用的識(shí)別符是否為0個(gè)。然后，在共用的識(shí)別符不是0個(gè)時(shí)，相近特征信息追加單元352和對(duì)應(yīng)關(guān)聯(lián)判定單 元351反復(fù)步驟22和步驟23的處理(步驟25 ；“否”)。步驟沈進(jìn)行異常發(fā)生時(shí)的處理。在不攜帶無(wú)線終端的人物進(jìn)入拍攝范圍時(shí)，或者在交換了無(wú)線終端時(shí)，有時(shí)不存 在共用的識(shí)別符(步驟25; “是”)。此時(shí)，異常輸出單元107判斷為異常，并將判斷結(jié)果輸出到顯示單元109。由此，能夠探測(cè)未攜帶無(wú)線終端或交換的異常。圖16是表示一例將指定的特征信息的識(shí)別符重疊顯示在圖6的時(shí)刻tl的拍攝圖 像上的顯示圖像的圖。顯示單元109使用由對(duì)應(yīng)關(guān)聯(lián)單元306求得的結(jié)果，在拍攝圖像內(nèi) 拍攝到的、指定的特征信息的人物區(qū)域的周?chē)?，進(jìn)行能夠識(shí)別該人物保持的無(wú)線終端的識(shí) 別符的顯示。在圖16的例子中，顯示單元109在與特征信息(100、10)對(duì)應(yīng)的人物區(qū)域的 周?chē)?，顯示“ID22”和箭頭。如上所述，根據(jù)本實(shí)施方式，能夠求僅與特定的特征信息對(duì)應(yīng)的識(shí)別符。由此，與 實(shí)施方式1中表示的、一并使特征信息和識(shí)別符對(duì)應(yīng)關(guān)聯(lián)的方法相比，能夠減低計(jì)算量。另 外，能夠根據(jù)狀況，區(qū)分使用實(shí)施方式1和實(shí)施方式2的方法。另外，在本發(fā)明中，也可以適當(dāng)?shù)厍袚Q而使用實(shí)施方式1或?qū)嵤┓绞?中舉出的、 特征信息和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)的方法。(實(shí)施方式3)圖17和圖18是表示本發(fā)明實(shí)施方式3的對(duì)象檢測(cè)裝置的結(jié)構(gòu)的方框圖。圖19 是表示包含本發(fā)明實(shí)施方式3的對(duì)象檢測(cè)裝置的系統(tǒng)結(jié)構(gòu)的圖。另外，在圖17所示的對(duì)象 檢測(cè)裝置400中，對(duì)與圖4所示的對(duì)象檢測(cè)裝置100共用的結(jié)構(gòu)部分附加與圖4相同的標(biāo) 號(hào)，并省略詳細(xì)的說(shuō)明。另外，在圖18所示的對(duì)象檢測(cè)裝置500中，對(duì)與圖14所示的對(duì)象 檢測(cè)裝置300共用的結(jié)構(gòu)部分附加與圖14相同的標(biāo)號(hào)，并省略詳細(xì)的說(shuō)明。在圖19中，表 示一個(gè)對(duì)象檢測(cè)裝置400具有多個(gè)拍攝單元1001 1003、多個(gè)讀取單元1011 1013、以 及對(duì)象檢測(cè)裝置100的結(jié)構(gòu)。對(duì)象檢測(cè)裝置100進(jìn)行來(lái)自多個(gè)拍攝單元1001 1003和多 個(gè)讀取單元1011 1013的特征信息與識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)。圖17所示的對(duì)象檢測(cè)裝置400與圖4所示的對(duì)象檢測(cè)裝置100相比，采用在對(duì)應(yīng) 關(guān)聯(lián)單元106的內(nèi)部追加了相似度加權(quán)單元156的結(jié)構(gòu)。圖18所示的對(duì)象檢測(cè)裝置500 與圖14所示的對(duì)象檢測(cè)裝置300相比，采用在對(duì)應(yīng)關(guān)聯(lián)單元306的內(nèi)部追加了相似度加權(quán) 單元156的結(jié)構(gòu)。相似度加權(quán)單元156計(jì)算加權(quán)系數(shù)，并將其輸出到相似度計(jì)算單元153。相似度計(jì)算單元153通過(guò)將從相似度加權(quán)單元156輸出的加權(quán)系數(shù)與計(jì)算出的特 征信息的矢量間距離相乘，校正矢量間距離。以下，舉出一例說(shuō)明相似度加權(quán)單元156中的加權(quán)系數(shù)的計(jì)算方法。在不同的時(shí)間段拍攝出的圖像中，光的照射狀況或服裝、發(fā)型的變化等拍攝條件 不同。因此，即使是同一人物的特征信息，但其是從不同的時(shí)間段的拍攝圖像中提取出的特 征信息時(shí)，有時(shí)矢量間距離增大。因此，相似度加權(quán)單元156計(jì)算加權(quán)系數(shù)，以使拍攝出作為矢量間距離的計(jì)算的 對(duì)象的特征信息的時(shí)間段越拉大，矢量間距離越小。由此，能夠更準(zhǔn)確地判定從在不同的時(shí)間段拍攝出的圖像中提取出的同一人物的 特征信息的相似度。另外，對(duì)于以不同的攝像機(jī)拍攝出的拍攝圖像，光的照射狀況的變化等拍攝條件 不同。因此，即使是同一人物的特征信息，但其是從不同的攝像機(jī)的拍攝圖像中提取出的特 征信息時(shí)，有時(shí)矢量間距離增大。因此，相似度加權(quán)單元156基于拍攝條件，計(jì)算加權(quán)系數(shù)。拍攝條件例如有攝像機(jī)
13ID或拍攝時(shí)的白平衡信息等。此時(shí)，特征信息提取單元103從拍攝單元101獲取攝像機(jī)ID 或白平衡信息，并將其與特征信息一起注冊(cè)到歷史管理單元105。圖20表示包含攝像機(jī)ID 或白平衡信息而由歷史管理單元105管理的數(shù)據(jù)形式的例子。由此，能夠更準(zhǔn)確地判定從以不同的攝像機(jī)拍攝出的圖像中提取出的同一人物的 特征信息的相似度。另外，在經(jīng)過(guò)了幾天時(shí)，有時(shí)人物的外表大幅變化，特征信息的矢量間距離增大。因此，假設(shè)相似度加權(quán)單元156能夠僅使用人物的外表未大幅變化的一定的時(shí)間 段的歷史信息，進(jìn)行推測(cè)。為此，在拍攝出作為矢量間距離的計(jì)算的對(duì)象的特征信息的時(shí)間 之差大于規(guī)定的閾值時(shí)，相似度加權(quán)單元156將加權(quán)系數(shù)設(shè)定為最大。由此，能夠防止起因于同一人物的外表大幅變化而使相似度的精度下降。另外，在上述各個(gè)實(shí)施方式中，也可以使用多組拍攝單元101和讀取單元104，該 讀取單元104在包含該拍攝單元101的拍攝范圍的范圍內(nèi)接收電波。此時(shí)，歷史管理單元 105附加基于拍攝相同范圍并接收的拍攝單元101和讀取單元104的數(shù)據(jù)作為附加信息后， 管理一個(gè)以上的特征信息和一個(gè)以上的識(shí)別符作為歷史信息。另外，在上述各個(gè)實(shí)施方式中，說(shuō)明了移動(dòng)物體是人物的情況，但本發(fā)明并不限于 此，也能夠適用于人物以外的移動(dòng)物體。另外，本發(fā)明能夠適用于數(shù)碼相機(jī)。此時(shí)，通過(guò)使數(shù)碼相機(jī)兼具上述各個(gè)實(shí)施方式 中使用的對(duì)象檢測(cè)裝置的功能，能夠確定拍攝照片時(shí)拍攝到的人物的ID。由此，本發(fā)明通過(guò) 與將拍攝到的照片自動(dòng)地發(fā)送到與所拍攝的人物的ID對(duì)應(yīng)的地址的應(yīng)用組合，能夠提高 數(shù)碼相機(jī)的附加值。另外，本發(fā)明也能夠適用于超市或百貨公司等的營(yíng)銷(xiāo)活動(dòng)中利用的營(yíng)銷(xiāo)應(yīng)用。作 為營(yíng)銷(xiāo)應(yīng)用的適用例，例如，在店內(nèi)配置使用戶的ID和其行動(dòng)歷史對(duì)應(yīng)關(guān)聯(lián)而進(jìn)行檢測(cè)的 對(duì)象檢測(cè)裝置。另外，通過(guò)個(gè)人電腦等的通用計(jì)算機(jī)，能夠?qū)嵤┥鲜龈鱾€(gè)實(shí)施方式中使用的對(duì)象 檢測(cè)裝置。此時(shí)，例如，通過(guò)CPU讀出計(jì)算機(jī)的存儲(chǔ)器中存儲(chǔ)的對(duì)應(yīng)的軟件程序而進(jìn)行執(zhí)行 處理，實(shí)現(xiàn)包含對(duì)應(yīng)關(guān)聯(lián)單元的處理的各個(gè)處理。另外，也可以通過(guò)搭載了對(duì)應(yīng)的LSI芯片 的專(zhuān)用設(shè)備，實(shí)現(xiàn)包含對(duì)應(yīng)關(guān)聯(lián)單元的處理的各個(gè)處理。2008年8月8日提交的第2008-206111號(hào)的日本專(zhuān)利申請(qǐng)所包含的說(shuō)明書(shū)、附圖 以及說(shuō)明書(shū)摘要的公開(kāi)內(nèi)容，全部引用于本申請(qǐng)。工業(yè)實(shí)用性本發(fā)明適合用于使攝影圖像內(nèi)檢測(cè)出的人物等的移動(dòng)物體和無(wú)線終端的識(shí)別符 對(duì)應(yīng)關(guān)聯(lián)的對(duì)象檢測(cè)裝置。
權(quán)利要求
1.對(duì)象檢測(cè)裝置，包括特征信息提取單元，提取拍攝圖像中拍攝到的至少一個(gè)移動(dòng)物體的特征信息；讀取單元，讀取所述移動(dòng)物體保持的無(wú)線終端的識(shí)別符；歷史管理單元，使所述特征信息和所述識(shí)別符每個(gè)時(shí)刻關(guān)聯(lián)對(duì)應(yīng)保存；以及對(duì)應(yīng)關(guān)聯(lián)單元，基于所述特征信息間的相似度、以及所述特征信息和所述識(shí)別符之間 的所述關(guān)聯(lián)對(duì)應(yīng)，使所述歷史管理單元中保存的所述特征信息和所述識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。
2.如權(quán)利要求1所述的對(duì)象檢測(cè)裝置，所述對(duì)應(yīng)關(guān)聯(lián)單元基于所述特征信息間的相似度，將所述歷史管理單元中保存的多個(gè)所述特征信息分類(lèi) 為部分集合，基于所述特征信息和所述識(shí)別符之間的所述關(guān)聯(lián)對(duì)應(yīng)，使所述部分集合和所述識(shí)別符 對(duì)應(yīng)關(guān)聯(lián)。
3.如權(quán)利要求2所述的對(duì)象檢測(cè)裝置，在與所述部分集合對(duì)應(yīng)關(guān)聯(lián)的識(shí)別符是一個(gè)時(shí)，所述對(duì)應(yīng)關(guān)聯(lián)單元使作為所述部分集 合的元素的所有特征信息和所述識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。
4.如權(quán)利要求2所述的對(duì)象檢測(cè)裝置，存在與多個(gè)識(shí)別符對(duì)應(yīng)關(guān)聯(lián)的部分集合時(shí)，或者存在不與任一個(gè)識(shí)別符對(duì)應(yīng)關(guān)聯(lián)的部 分集合時(shí)，所述對(duì)應(yīng)關(guān)聯(lián)單元判定為異常。
5.如權(quán)利要求2所述的對(duì)象檢測(cè)裝置，還包括部分集合數(shù)決定單元，將所述歷史管理單元中保存的不同的識(shí)別符的數(shù)設(shè)定為所述部 分集合的數(shù)的上限。
6.如權(quán)利要求1所述的對(duì)象檢測(cè)裝置，所述對(duì)應(yīng)關(guān)聯(lián)單元在與指定的特征信息所屬的所述部分集合對(duì)應(yīng)關(guān)聯(lián)的識(shí)別符是一個(gè)時(shí)，使所述指定的 特征信息和所述識(shí)別符對(duì)應(yīng)關(guān)聯(lián)，在與所述指定的特征信息所屬的所述部分集合對(duì)應(yīng)關(guān)聯(lián)的識(shí)別符存在多個(gè)時(shí)，從所述 歷史管理單元中保存的其他的特征信息中，提取與所述指定的特征信息的相似度最高的特 征信息，通過(guò)求所述指定的特征信息和所述提取出的特征信息之間共用的識(shí)別符，確定與所述 指定的特征信息對(duì)應(yīng)的識(shí)別符。
7.如權(quán)利要求6所述的對(duì)象檢測(cè)裝置，所述對(duì)應(yīng)關(guān)聯(lián)單元在求得了與所述提取出的特征信息包含的一個(gè)以上的識(shí)別符共用 的識(shí)別符時(shí)，在所述共用的識(shí)別符不存在的情況下，判定為異常。
8.如權(quán)利要求1所述的對(duì)象檢測(cè)裝置，在計(jì)算特征信息間的相似度時(shí)，所述對(duì)應(yīng)關(guān)聯(lián)單元對(duì)相似度進(jìn)行加權(quán)，以使拍攝到與 特征信息對(duì)應(yīng)的移動(dòng)物體的時(shí)刻之差越大，相似度越小。
9.如權(quán)利要求1所述的對(duì)象檢測(cè)裝置，在計(jì)算特征信息之間的相似度時(shí)，所述對(duì)應(yīng)關(guān)聯(lián)單元根據(jù)表示拍攝到與特征信息對(duì)應(yīng) 的移動(dòng)物體的拍攝單元的拍攝狀況或拍攝環(huán)境的拍攝參數(shù)之差，對(duì)相似度進(jìn)行加權(quán)。
10.如權(quán)利要求1所述的對(duì)象檢測(cè)裝置，所述對(duì)應(yīng)關(guān)聯(lián)單元僅使用所述歷史管理單元中保存的所有所述特征信息和所述識(shí)別 符中的、特定的時(shí)間段的所述特征信息和所述識(shí)別符，進(jìn)行對(duì)應(yīng)關(guān)聯(lián)。
11.如權(quán)利要求1所述的對(duì)象檢測(cè)裝置，還包括圖像狀況探測(cè)單元，探測(cè)所述拍攝圖像中拍攝到的移動(dòng)物體的數(shù)， 在所述圖像狀況探測(cè)單元探測(cè)出所述拍攝圖像中拍攝到的移動(dòng)物體的增加或減少時(shí)， 所述讀取單元進(jìn)行讀取。
12.如權(quán)利要求1所述的對(duì)象檢測(cè)裝置，還包括識(shí)別符狀況探測(cè)單元，探測(cè)由所述讀取單元讀取的識(shí)別符的數(shù)， 在所述識(shí)別符狀況探測(cè)單元探測(cè)出識(shí)別符的增加或減少時(shí)，所述特征信息提取單元進(jìn) 行特征信息的提取。
13.如權(quán)利要求1所述的對(duì)象檢測(cè)裝置，還包括顯示單元，將與所述拍攝單元拍攝在拍攝圖像內(nèi)的移動(dòng)物體的特征信息對(duì)應(yīng)的識(shí)別 符，重疊顯示在所述拍攝圖像內(nèi)。
14.如權(quán)利要求1所述的對(duì)象檢測(cè)裝置，所述特征信息通過(guò)由表示圖像中的移動(dòng)物體的特征的η個(gè)分量值構(gòu)成的η維矢量表示，所述對(duì)應(yīng)關(guān)聯(lián)單元計(jì)算所述特征信息間的相似度作為表示為η維矢量的特征信息的 矢量間距離。
15.對(duì)象檢測(cè)方法，包括以下步驟特征信息提取步驟，提取拍攝圖像中拍攝到的至少一個(gè)移動(dòng)物體的特征信息； 讀取步驟，讀取所述移動(dòng)物體保持的無(wú)線終端的識(shí)別符；歷史管理步驟，使所述特征信息和所述識(shí)別符每個(gè)時(shí)刻關(guān)聯(lián)對(duì)應(yīng)保存在存儲(chǔ)器中；以及對(duì)應(yīng)關(guān)聯(lián)步驟，基于所述存儲(chǔ)器中保存的特征信息間的相似度、以及所述特征信息和 所述識(shí)別符之間的所述關(guān)聯(lián)對(duì)應(yīng)，使所述存儲(chǔ)器中保存的所述特征信息和所述識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。
全文摘要
公開(kāi)了即使在短時(shí)間內(nèi)開(kāi)始接收了多個(gè)識(shí)別符時(shí)，或者在接收到的識(shí)別符的數(shù)多于檢測(cè)出的位置歷史的數(shù)時(shí)，也能夠進(jìn)行拍攝圖像內(nèi)的移動(dòng)物體和識(shí)別符的對(duì)應(yīng)關(guān)聯(lián)的對(duì)象檢測(cè)裝置。該裝置(100)包括特征信息提取單元(103)，提取拍攝圖像中拍攝到的至少一個(gè)移動(dòng)物體的特征信息；讀取單元(104)，讀取移動(dòng)物體保持的無(wú)線終端的識(shí)別符；歷史管理單元(105)，使特征信息和識(shí)別符每個(gè)時(shí)刻關(guān)聯(lián)對(duì)應(yīng)保存；以及對(duì)應(yīng)關(guān)聯(lián)單元(106)，基于歷史管理單元(105)中保存的特征信息間的相似度、以及特征信息和識(shí)別符之間的關(guān)聯(lián)對(duì)應(yīng)，使歷史管理單元(105)中保存的特征信息和識(shí)別符對(duì)應(yīng)關(guān)聯(lián)。
文檔編號(hào)G01V11/00GK102119343SQ20098013050
公開(kāi)日2011年7月6日 申請(qǐng)日期2009年5月26日 優(yōu)先權(quán)日2008年8月8日
發(fā)明者杉浦雅貴, 森岡干夫 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社