專利名稱：用于測量陳列情況的系統(tǒng)和方法
技術(shù)領(lǐng)域：
本發(fā)明 一 般涉及消費品銷售領(lǐng)域，尤其涉及用于通過自動的數(shù)字 圖像捕獲和分析測量零售商品陳列情況的方法和系統(tǒng)。
背景技術(shù)：
已經(jīng)證明，與直接從主貨架位置銷售產(chǎn)品相比，借助于在零售商 店中的高流量區(qū)域中的二級位置設(shè)置的大型陳列(display),同樣的消 費品的銷售額會顯著增加。因此，生產(chǎn)商每年花費上億美元購買零售 商店中的陳列空間，例如，以走道末端陳列、獨立陳列、銷售點陳列、 貨盤陳列等的形式。在某些情況下，生產(chǎn)商可向零售商支付費用，用 于在食品雜貨店或超市內(nèi)使其產(chǎn)品在指定的時間段占據(jù)最好的位置 (例如在視線較好或走道末端陳列處的貨架)以促進產(chǎn)品銷售。為確保零售商充分地陳列出其產(chǎn)品和陳列，生產(chǎn)商通常派遣其員 工或獨立檢查員視察零售位置。檢查員檢驗陳列是否以生產(chǎn)商滿意并 由其支付的形式建立。然而，這種檢查的問題在于其通常基于采樣完 成， 一般少于全部市場的10%。檢查的頻率也非常有限，不高于每周 一次。例如，有規(guī)律地4企查零售商店的好幾百個連鎖店昂貴且困難， 尤其是如果它們位于遍及世界各地。然后基于這種小的采樣預(yù)計出用 于連鎖店或市場的結(jié)果。因為例如食品雜貨店內(nèi)的物品變動速率高， 所以陳列每天都不相同，這使得目前的報告方法并不能合理地表征實 際的商店狀況。生產(chǎn)商經(jīng)常發(fā)現(xiàn)他們支付上億美元用于零售陳列空間，而并不能 確保零售商店事實上在根據(jù)其支付確定的位置和時間內(nèi)對其促銷商品 進行促銷。因此，需要一種可靠并有效的方法檢查零售商店的陳列情 況。發(fā)明內(nèi)容根據(jù)本發(fā)明的 一 個實施方式，用于測量零售商店陳列情況的方法包括捕獲一個或多個零售商店狀況的一個或多個圖像；將所述一個 或多個捕獲圖像與相關(guān)信息聯(lián)合；將所述一個或多個捕獲圖像和所述 相關(guān)信息發(fā)送到處理單元用于存儲和處理；在處理單元接收所述一個 或多個捕獲圖像和所述相關(guān)信息并將所述一個或多個捕獲圖像和所述 相關(guān)信息存儲到儲存庫；處理所述一個或多個捕獲圖像；將所述一個 或多個捕獲圖像中的所述一個或多個零售商店狀況與信息庫進行比 較，以識別所述一個或多個零售商店狀況并獲得關(guān)于所述一個或多個 零售商店狀況的識別信息；將所述一個或多個識別的捕獲圖像和所述 一個或多個零售商店狀況的識別信息存儲到所述儲存庫；分析所述一 個或多個捕獲圖像中的所述一個或多個零售商店狀況和識別信息；以 及基于所述分析產(chǎn)生一個或多個概要報告或一個或多個警報。根據(jù)本發(fā)明的 一 個實施方式，用于測量零售商店陳列情況的系統(tǒng) 包括用于捕獲一個或多個零售商店狀況的一個或多個圖像的圖像捕 獲單元；用于將一個或多個捕獲圖像與相關(guān)信息結(jié)合的裝置；用于發(fā) 送一個或多個捕獲圖像和相關(guān)信息的裝置；以及處理單元，包括用于 接收一個或多個捕獲圖像以及相關(guān)信息的裝置、用于處理一個或多個 捕獲圖像的裝置、用于將一個或多個捕獲圖像中的一個或多個零售商 店狀況與信息庫比較以識別一個或多個零售商店狀況并獲得關(guān)于一個 或多個零售商店狀況的識別信息的圖像識別模塊、用于存儲一個或多 個識別的捕獲圖像和識別信息的儲存庫、以及報告引擎，用于分析一 個或捕獲圖像中的一個或多個零售商店狀況和識別信息并基于所述分 析產(chǎn)生 一 個或多個概要報告或 一個或多個警報的代碼。
根據(jù)本發(fā)明的 一個實施方式，包括用于測量零售商店陳列情況的計算機可執(zhí)行代碼的計算機存儲媒質(zhì)包括用于捕獲一個或多個零售 商店狀況的一個或多個圖像的代碼、用于將一個或多個捕獲圖像與相 關(guān)信息結(jié)合的代碼、用于將一個或多個捕獲圖像和相關(guān)信息發(fā)送到處 理單元用于存儲和處理的代碼、用于在處理單元接收一個或多個捕獲 圖像以及相關(guān)信息并將其存儲到儲存庫的代碼、用于處理一個或多個 捕獲圖像的代碼、用于將一個或多個捕獲圖像中的一個或多個零售商 店狀況與信息庫進行比較以識別一個或多個零售商店狀況并獲得關(guān)于 一個或多個零售商店狀況的識別信息的代碼、用于將一個或多個識別 的捕獲圖像和用于一個或多個零售商店狀況的識別信息存儲到儲存庫 中的代碼、用于分析一個或捕獲圖像中的一個或多個零售商店狀況和 識別信息的代碼、以及用于基于所述分析產(chǎn)生一個或多個概要報告或 一個或多個警報的代碼。根據(jù)本發(fā)明的一個實施方式，包括用于測量零售商店陳列情況的 計算機可執(zhí)行代碼的計算機存儲媒質(zhì)包括用于識別并檢驗裝置的位 置的代碼、用于捕獲一個或多個零售商店狀況的一個或多個圖像的代 碼、用于存儲一個或多個零售商店狀況的一個或多個捕獲圖像的代碼、 用于處理一個或多個零售商店狀況的一個或多個捕獲圖像的代碼、用 于將一個或多個零售商店狀況的 一個或多個捕獲圖像發(fā)送到處理單元 的代碼、以及用于產(chǎn)生指示一個或多個零售商店狀況的一個或多個捕 獲圖像是否成功發(fā)送到處理單元的確認的代碼。


根據(jù)下文中參照以下附圖進行的詳細描述，可更容易地理解本發(fā) 明的特征。圖1是能實現(xiàn)本發(fā)明的方法和系統(tǒng)的示例性計算機系統(tǒng)的框圖； 圖2A是示出根據(jù)本發(fā)明的一個實施方式的、用于測量零售商店陳列情況的系統(tǒng)的框圖；圖2B是示出本發(fā)明的一個實施方式的、用于測量零售商店陳列情況的方法的流程圖； 圖3A是示出根據(jù)本發(fā)明的一個實施方式的移動捕獲單元的框圖； 圖3B是示出根據(jù)本發(fā)明的一個實施方式的、捕獲一個或多個圖像的方法的流程圖；圖4是示出根據(jù)本發(fā)明的一個實施方式的、所述移動捕獲單元的主屏幕的框圖；圖5是示出根據(jù)本發(fā)明的一個實施方式的、所述移動捕獲單元的 詳細屏幕的框圖；圖6是示出根據(jù)本發(fā)明的一個實施方式的、所述圖像識別模塊的 處理步驟的流程圖；圖7是根據(jù)本發(fā)明的一個實施方式的通過使用用于測量零售商店 陳列情況的方法產(chǎn)生的采樣報告；圖8是根據(jù)本發(fā)明的一個實施方式的通過使用用于測量零售商店 陳列情況的方法產(chǎn)生的、表現(xiàn)商店的陳列情況的采樣報告；圖9是根據(jù)本發(fā)明的一個實施方式的通過使用用于測量零售商店 陳列情況的方法產(chǎn)生的、表現(xiàn)區(qū)域級的陳列情況的采樣報告；圖10是根據(jù)本發(fā)明的一個實施方式的通過使用用于測量零售商 店陳列情況的方法產(chǎn)生的、表現(xiàn)部門級的陳列情況的采樣報告；圖11是根據(jù)本發(fā)明的一個實施方式的通過使用用于測量零售商 店陳列情況的方法產(chǎn)生的、表現(xiàn)零售商級的陳列情況的采樣報告；以 及圖12是根據(jù)本發(fā)明的一個實施方式的通過使用用于測量零售商 店陳列情況的方法產(chǎn)生的、表現(xiàn)竟爭品牌級的陳列情況的采樣報告。
具體實施方式
本發(fā)明(以方法學(xué)和系統(tǒng)的形式)提供了用于通過自動化的數(shù)字 圖像捕獲和分析測量零售商店陳列情況的工具。圖l示出了可實現(xiàn)本 發(fā)明的方法和系統(tǒng)的計算才幾系統(tǒng)100的實施例。本發(fā)明的系統(tǒng)和方法 可以在例如主機、個人計算機(PC)、手持式計算機或服務(wù)器的計算 機系統(tǒng)上運行的軟件應(yīng)用程序的形式實現(xiàn)。該軟件應(yīng)用程序可存儲在 可由該計算機系統(tǒng)本地訪問的例如軟盤、光盤、或石更盤的記錄々某質(zhì)上， 或可遠離所述計算機系統(tǒng)并通過到網(wǎng)絡(luò)(例如，局域網(wǎng)或因特網(wǎng))的 硬線或無線連接或其它傳輸媒質(zhì)訪問。計算機系統(tǒng)100可包括中央處理器(CPU) 102、程序和數(shù)據(jù)存儲 裝置104、打印才幾4秦口 106、顯示單元108、局域網(wǎng)(LAN)數(shù)據(jù)傳輸 控制器110、 LAN接口 112、網(wǎng)絡(luò)控制器114、內(nèi)部總線116、以及一 個或多個輸入裝置118 (例如，鍵盤或鼠標)。如圖所示，系統(tǒng)100可 通過鏈路122與數(shù)據(jù)庫120相連。使用圖像捕獲單元提供了 一種在全天都有規(guī)律地掃描并監(jiān)視設(shè)置 在零售商店內(nèi)的陳列的手段。本公開的方法和系統(tǒng)可捕獲并存儲零售 商店狀況(condition)的數(shù)字圖像，例如，多個零售出口處的陳列和 貨架狀況的圖像。在將這些捕獲圖像電子地發(fā)送(例如，通過因特網(wǎng)) 給處理單元之前，可用日期、時間和位置信息對其標記，所述處理單 元可為中央處理器。然后可將捕獲圖像與信息庫中的記栽條目匹配， 以識別陳列的產(chǎn)品。不僅可識別產(chǎn)品，而且可近似得到陳列中展出的 產(chǎn)品的數(shù)量?？衫缫噪娮踊驁蟾娴母袷綄㈥惲谢顒?display activity ) 概括在報告中，并使得生產(chǎn)商參與者或零售商可以得到該報告。例如， 生產(chǎn)商可對報告進行研究以查看發(fā)布報告的陳列的照片。下面將參照圖2A介紹根據(jù)本發(fā)明的一個實施方式的、用于通過 自動化的數(shù)字圖像捕獲和分析測量零售商店陳列情況的系統(tǒng)。系統(tǒng)20 包括圖像捕獲單元21、產(chǎn)品陳列單元22、產(chǎn)品陳列單元22a、圖像識 別模塊23、信息庫24、儲存庫25、以及報告引擎26?？稍诎粋€ 或多個陳列22的零售商店l使用圖像捕獲單元21。處理單元2包括 圖像識別模塊23、信息庫24、儲存庫25、報告引擎26、外部數(shù)據(jù)儲 存庫27、以及異常審核裝置28。報告引擎26可與外部數(shù)據(jù)儲存庫27 和異常審核裝置28結(jié)合使用，以產(chǎn)生一個或多個報告和/或警報。例 如，報告可以品牌角度29、銷售小組角度30、推銷角度31、存儲操 作角度32、和/或標準電子數(shù)據(jù)供應(yīng)33的形式。下面將參照圖2A和2B介紹根據(jù)本發(fā)明的一個實施方式的、用于 測量零售商店陳列情況的方法。圖像捕獲單元21捕獲例如生產(chǎn)商的產(chǎn) 品陳列22、 22a以及零售商店1內(nèi)的其它零售商店狀況的圖像(步驟 S201)。圖l象捕獲單元21可包括下文中將進一步介紹的以下裝置店 內(nèi)安全照相沖幾、照相才幾電話、固定的3見頻或其它數(shù)字照相機、移動的 視頻或其它數(shù)字照相機(例如，安裝于移動軌道內(nèi)的、從店內(nèi)的一個 區(qū)域移動到另一個區(qū)域的照相機)、網(wǎng)絡(luò)照相機、移動捕獲單元、移動 推車、和/或自動的機器人。將所述一個或多個捕獲圖像與例如曰期、 時間和位置信息的相關(guān)信息相關(guān)聯(lián)(步驟S202)(例如，商店名稱、 商店位置、陳列位置、陳列類型、圖像捕獲日期和時間)，并從圖像捕 獲單元21將捕獲圖像和相關(guān)信息發(fā)送到處理單元2用于存儲和處理 (步驟S203 )。這可通過從圖像捕獲單元21的硬線或無線連接實現(xiàn)。 處理單元2接收所述一個或多個捕獲圖像和相關(guān)信息，并將接收 到的 一個和多個捕獲圖像存儲到儲存庫25中(步驟S204 )。圖像識別 模塊23處理一個或多個捕獲圖像，確定所述圖像的質(zhì)量是否符合要求 以及其是否包含足夠的內(nèi)容(步驟S205 )。為識別一個或多個捕獲圖 像中的一個或多個零售商店狀況，圖像識別^t塊23將所述一個或多個 零售商店狀況與信息庫24進行比較，并將每一個零售商店狀況例如與 產(chǎn)品進行匹配。圖像識別單元23還獲得關(guān)于每個零售商店狀況的識別 信息(步驟S206)。例如，識別信息可包括商店名稱、商店位置、陳 列位置、陳列類型、圖像捕獲日期和時間、陳列數(shù)量、通用產(chǎn)品代碼 ("UPC")、品牌、介紹、大小、種類等。然后將一個或多個識別的捕 獲圖像和識別信息存儲到儲存庫25中(步驟S207 )。報告引擎26對存儲在儲存庫25和其它外部數(shù)據(jù)儲存庫27內(nèi)的信 息(例如，銷售信息、庫存信息)進行分析和編譯，并生成信息概要 和/或一個或多個警報(步驟S208和S209)?？梢詧蟾娓袷胶?或電子 數(shù)據(jù)供應(yīng)格式將概要提供給生產(chǎn)商或零售商的內(nèi)部報告系統(tǒng)。例如， 可提供一個或多個零售商店狀況的原始圖像供應(yīng)和/或原始數(shù)據(jù)供應(yīng)。 報告引擎26還可在滿足或超出一個或多個零售商店狀況時提供自動 警報。這些警報可通過遠程通信鏈路發(fā)送，例如通過電子郵件。例如， 如果零售商店的貨架上僅剩有確定數(shù)量的具體產(chǎn)品，報告引擎則可產(chǎn) 生電子郵件警報，并將其發(fā)送到例如生產(chǎn)商。報告引擎26還可為不同 的用戶以不同的角度編譯信息。例如，品牌角度29、銷售小組角度30、
推銷角度31、和/或存儲操作角度32。此外，報告引擎26可提供到任 何零售商店內(nèi)任何位置在任何給定時間任意捕獲的圖像的訪問。圖像捕獲單元a) Ad-Hoc方法根據(jù)本發(fā)明的實施方式，可通過使用ad-hoc方法捕獲圖像，所述 方法包括使用以下裝置中的一個或多個店內(nèi)安全照相機、照相機電 話、網(wǎng)絡(luò)照相才幾、固定的—見頻或其它數(shù)字照相機、以及移動的^L頻或 其它數(shù)字照相機。例如，可用數(shù)字照相機和/或照相機電話獲取零售商 店的圖像(例如陳列和貨架)，并可用電子郵件將其發(fā)送到處理單元用 于存儲和處理。使用ad-hoc方法獲取的圖像可存儲在儲存庫25內(nèi)用 于ad-hoc查看。處理單元2可包括例如用于更新由蜂窩電話獲取的圖 像的網(wǎng)全各入口 。網(wǎng)絡(luò)入口可包^舌用于防止未經(jīng)認可的訪問的用戶標識 和密碼、用于獲取用于每個圖像的報告的關(guān)鍵數(shù)據(jù)(包括商店、位置、 介紹等)的數(shù)據(jù)輸入屏幕、以及用于上傳圖像并將其排列用于處理和 存儲的能力。當傳輸這些圖像時，其應(yīng)該包括相關(guān)信息，例如零售商 店標識、零售商店內(nèi)的圖像位置的文本介紹等。根據(jù)本發(fā)明的實施方 式，在傳輸使用ad-hoc圖像捕獲方法捕獲的圖像時，應(yīng)該對所述圖像 掃描可能的計算機病毒、蠕蟲等。b) 移動捕獲單元根據(jù)本公開的另一個實施方式，圖像捕獲單元21是移動捕獲單 元。移動捕獲單元可為例如容易運送、并且用戶能將其從一個商店帶 到另一個商店的便攜式便攜式單元，或其可為更基本的單元，例如能 使用戶通過在商店內(nèi)容易地將其推過走道捕獲圖像的帶輪推車(大小 與購物車相當)。例如，在形式上大小與購物車相當?shù)囊苿硬东@單元可 在不使用推車的商店內(nèi)使用，而便攜式便攜式單元可在具有不能使用 推車的狹窄過道的商店內(nèi)使用。移動捕獲單元可為自推進的 (self-propelled )(例如通過使用電機)，并應(yīng)該為可充電的且包含備 用的蓄電池電源。當不使用時，便攜式移動捕獲單元進入待機模式。
當移動捕獲單元完成對零售商店狀況的圖像捕獲之后，可從揚聲器發(fā) 出聲音作為提醒，以將該單元插入電源，以對其電池進行再充電。移動捕獲單元可包括觸摸屏PC,并可通過上電的USB集線器 (hub)鏈接到多個通用串行總線("USB")并對其進行控制。根據(jù)實 施方式，PC上的軟件可控制電機的速度和每個電機的方向，這就允許 PC控制人們用來驅(qū)動移動捕獲單元穿過零售商店的接口 。該軟件還可 追蹤并記錄移動捕獲單元穿過商店的移動。照相機起動輪可使PC測 量移動捕獲單元向前或向后的移動，例如通過計算輪的旋轉(zhuǎn)。對于圖 像縫合(stitching )， PC可計算移動捕獲單元在捕獲下一個圖像之前可 需要移動的適當距離。例如，可通過最佳的水平和垂直重疊確定這種 計算，所述最佳的水平和垂直重疊是將圖像縫合在一起以由零售商店 狀況的多個圖像創(chuàng)建全景視圖所必需的。 一個或多個USB照相機可與 移動捕獲單元一起使用。根據(jù)實施方式，移動捕獲單元可用燈光照亮 陳列，以提高圖像質(zhì)量。移動捕獲單元可用多個USB紅外裝置測量并記錄每個商店內(nèi)移 動捕獲單元和陳列、貨架、和/或其它物體之間的距離。根據(jù)本發(fā)明可選的實施方式，移動捕獲單元可為能夠通過人工智能自動并獨立地在零售商店內(nèi)行走以捕獲一個或多個零售商店狀況的 圖像的自動機器人。為了不引起人們對機器人真正使命的注意，機器人外形可為零售商的銷售運載工具。例如，其外形可為商店吉祥物和/ 或可包含可顯示或廣播廣告的視頻屏幕。購物者還可使用屏幕提問例 如產(chǎn)品位置、價格核對、烹飪方法等。除了能知道商店的哪些區(qū)域必 須捕獲之外，機器人還必須能自動地使其自己停放，以對其電池再充 電。自推進的機器人可需要店內(nèi)導(dǎo)航系統(tǒng)，例如，全球定位系統(tǒng) ("GPS")類型的技術(shù)、或機器人觀察其環(huán)境并對輪的旋轉(zhuǎn)計數(shù)以"學(xué) 習(xí)(learn)"商店并知道走道的位置的技術(shù)。機器人可使用歷史圖像數(shù) 據(jù)和X-Y坐標，不僅學(xué)到走道在哪里，還學(xué)到例如面包走道或奶制品 走道的具體位置。例如，可由機器人創(chuàng)建這兩種數(shù)據(jù)集，然后將其鏈 接到處理單元2,以使得系統(tǒng)可知道商店中的具體位置是例如面包走 道。當找到商店內(nèi)此位置的許多面包商品時，機器人可通過將X-Y坐
標映射到其在圖像中找到的UPC，知道面包區(qū)的位置和邊界。信息庫 24內(nèi)的產(chǎn)品分級結(jié)構(gòu)允許不輸入任何數(shù)據(jù)就識別這些區(qū)域。例如，如 果圖像中全部UPC中的90%都在信息庫24中的面包區(qū)，則可將商店 內(nèi)的該位置編碼為"面包"，直到實際數(shù)據(jù)與此映射相矛盾。根據(jù)本發(fā)明的實施方式，移動捕獲單元30可利用射頻識別 ("RFID")自動對商店導(dǎo)航。根據(jù)本發(fā)明公開的實施方式，下面將參照圖3A和3B介紹移動捕 獲單元。移動捕獲單元30可包括識別和驗i正裝置31、捕獲裝置32、 存儲裝置33、處理裝置34、以及發(fā)送裝置35。識別和驗證裝置31識 別并驗證移動捕獲單元30的位置(步驟S301 )。例如，當在零售商店 之外時，移動捕獲單元30可使用GPS技術(shù)識別并確i人零售商店的位 置。移動捕獲單元30可從處理單元接收和/或更新信息(步驟S302)。 捕獲裝置32捕獲一個或多個零售商店狀況的一個或多個圖像(步驟 S303 )。存儲裝置33在預(yù)定時間暫時存儲所述一個或多個零售商店狀 況的一個或多個捕獲圖像(步驟S304)。處理裝置34處理所述一個或 多個零售商店狀況的一個或多個捕獲圖像(步驟S305 )。發(fā)送單元35 將一個或多個存儲的所述一個或多個零售商店狀況的捕獲圖像發(fā)送到 處理單元2(步驟S306)。接著產(chǎn)生指示所述一個或多個捕獲圖像是否 成功發(fā)送到處理單元2的確認(步驟S307 )。移動捕獲單元的捕獲裝置32可包括一個或多個數(shù)字照相機、視頻 照相才幾、網(wǎng)絡(luò)照相才幾等。例如，可將多個^f氐成本的網(wǎng)絡(luò)照相機安裝在 移動捕獲單元的高的和/或低的位置，以得到貨架的平面的和完整的圖 像捕獲。可設(shè)置照相才幾的位置以獲取例如端架陳列(end-cap display )、 走道內(nèi)陳列、以及標準無蓋貨車(從地面起具有8英尺的高度)的適 當角度的圖像。還可使用魚眼鏡頭以在走道非常狹窄時捕獲整個陳列 和貨架的圖像。移動捕獲單元30還可包括未固定于例如便攜式單元或 推車上的照相機。這將為使用照相機拍攝用安裝于推車上的照相機難 以捕獲的鏡頭提供了靈活性。例如，罐式冷藏拒、門上具有標志圖樣 或霜的冷藏拒、貨架前方的具有陳列的貨架圖(planogram)區(qū)域等是 難以捕獲的。根據(jù)本公開的實施方式，移動捕獲單元可利用運動檢測 器技術(shù)啟動和停止圖像捕獲。移動捕獲單元可包含用于連接到因特網(wǎng)(例如無線因特網(wǎng)連接) 的裝置。根據(jù)因特網(wǎng)連接的可用性以不同的方式將一個或多個捕獲圖 像發(fā)送到處理單元2。如果在使用移動捕獲單元的零售商店內(nèi)因特網(wǎng)連接不可用，移動捕獲單元30則可通過高速因特網(wǎng)連接以批處理的形 式將一個或多個捕獲圖像一起發(fā)送。如果在發(fā)送一個或多個捕獲圖像 期間加載過程被中斷，則在中斷處重新開始。例如，如果加載過程在 400個圖^f象中的中的第350個圖^^處出現(xiàn)故障，則加載應(yīng)該在第351 個圖像處重新開始。同樣，如果與處理單元2失去連接，移動捕獲單 元30應(yīng)該能自動重新建立連接。根據(jù)本公開的實施方式，可在圖像傳 輸中使用壓縮技術(shù)以使需要加載的數(shù)據(jù)量最小化，并在傳輸之前應(yīng)該 對圖像掃描可能的計算機病毒、蠕蟲等。然而，如果商店內(nèi)的因特網(wǎng)連接可用，例如，如果移動捕獲單元 30是永久設(shè)置于店內(nèi)的推車，移動捕獲單元30則可自動地將捕獲圖 像發(fā)送到處理單元2。例如，移動捕獲單元30可啟動將一個或多個捕 獲圖像發(fā)送到處理單元2，或處理單元2可請求移動捕獲單元30向其 發(fā)送一個或多個捕獲圖像。如果發(fā)送過程中斷，系統(tǒng)則應(yīng)該能自動修 復(fù)，例如，移動捕獲單元30應(yīng)該自動重發(fā)由于發(fā)送錯誤而不可用的任 何圖像。為使移動捕獲單元被盜的風險達到最小，尤其是對于上文介紹的 推車，如果將移動捕獲單元帶到距出口確定的英尺數(shù)之內(nèi)，則可向商 店經(jīng)理發(fā)送聽得見的警報和/或電子郵件警報。移動捕獲單元還可請求 操作者輸入用戶標識和/或密碼，并可拍下推車人的照片。根據(jù)本公開的實施方式，例如推車的移動捕獲單元可控制圖像的 捕獲，以確保用于虛擬漫游瀏覽器(walk through viewer )特性的重疊 (overlap),其將在下文進一步介紹。通過使用推車單元，可從相同高 度足夠重疊地得到全部圖像，以使得可以正確的順序?qū)ζ溥M行處理。 例如，通過網(wǎng)絡(luò)照相機技術(shù)，系統(tǒng)可控制圖像捕獲的定時(timing)。通過移動捕獲單元30為每個商店捕獲零售商店狀況的一個或多 個圖像， 一個或多個檢查員可按照每天的商店檢查日程檢查一個或多
個零售商店。可將每天的商店檢查日程從處理單元2發(fā)送給移動捕獲 單元30，并將其可顯示在移動捕獲單元30的屏幕上。圖4是示出移動捕獲單元的主屏幕的框圖。在待檢查的商店的外面，檢查員給移動捕獲單元30上電，并觸摸或點擊位于移動捕獲單元 的主屏幕40上的"Log In/Log Out (登錄/退出)，，41。檢查員可輸入 他的用戶名和密碼以訪問系統(tǒng)。每天的4企查日程上的4壬何改變或任何 其它信息可立即發(fā)送并由檢查員通過留言板48得到。任何關(guān)于具體商 店的注釋(note )可通過"Store Notes (商店注釋)，，44訪問。檢查員 登錄之后，移動捕獲單元40則可通過使用例如標準GPS技術(shù)和零售 位置數(shù)據(jù)庫驗證并識別其位置。移動捕獲單元識別其位置后，則可從 處理單元2得到該零售商店的平面圖配置。平面圖配置包括例如走道、 冷藏拒、固定設(shè)備的數(shù)量、以及其它的平面圖詳細資料。利用這種信 息，移動捕獲單元30在其主屏幕40上顯示平面圖47,其包括檢查員 需要捕捉圖像的全部區(qū)域及其狀態(tài)的列表。根據(jù)本公開可選的實施方 式，可獲得并顯示真實的圖示平面圖。每個部分可用顏色編碼，以幫 助檢查員快速查看已捕獲什么圖像和還需捕獲什么圖像。根據(jù)本公開 的實施方式，將以有利于捕獲數(shù)據(jù)的順序顯示尚需捕獲的區(qū)域。例如， 第一區(qū)可為入口附近，以使纟僉察員的停機時間(down-time )達到最小。 主屏幕40上提示的順序/次序可按照人們走過商店的一般方式執(zhí)行標 準的商店檢查。檢查員可隨時通過觸摸或點擊"Check Battery (檢查 電池)"43檢查移動捕獲單元30的電池壽命。捕獲全部圖像后，可通 過觸摸或點擊"Up-loadPics (加載圖像)"45將其加載到處理單元2。 檢查員可通過使用例如貨架圖，用移動捕獲單元30檢查陳列活動 和檢查店內(nèi)零售狀況。貨架圖是商店的布局的圖表(diagram)、制圖(drawing)或其它可視的說明，包括特定產(chǎn)品的布置和產(chǎn)品分類。為 捕獲零售商店狀況的一個或多個圖像，檢查員可觸摸或點擊平面圖47 上的任何位置和觸摸或點擊"Go To Detail Screen (到詳細屏幕)"42, 例如，如果檢查員觸摸或點擊第四項，"Aisle2 (走道2)"，則將顯示 圖5所示的詳細屏幕50。詳細屏幕50幫助檢查員通過使用貨架圖52 捕獲圖像。詳細說明走道布局的貨架圖52顯示在詳細屏幕50上。通
過觸摸或點擊"AddPics (增加圖像)"51,檢查員可開始捕獲零售商 店狀況的圖像。捕獲圖像后，將圖像自動下載到移動捕獲單元30的存 儲區(qū)域。為在貨架圖52的適當位置增加圖像，檢查員可在適當位置 觸摸屏幕，使得該圖像在屏幕右邊顯示為大圖53和走道中的小縮略圖 54。如果檢查員將圖像放置于錯誤的位置，他/她可通過觸摸或點擊"MovePics (移動圖像)"58并觸摸屏幕上圖像應(yīng)該出現(xiàn)的正確位置 來移動圖像。如果圖像不合格，檢查員則可通過觸摸或點擊"Delete Pics(刪除圖像)"59刪除圖像并重攝圖像。檢查員還可通過觸摸或點擊"View Full Size (查看實際大小)"60查看實際大小。根據(jù)本公開的實施方式，檢查員可通過切換到具有固定照相機的 移動捕獲單元30 (例如上文介紹的推車)捕獲走道的整個長度。推車 單元可具有一個照相才幾，或其可在其相對的兩側(cè)具有多個照相沖幾，以 使得當將推車推過走道時，推車拍攝零售商店狀況的高質(zhì)量圖像的能 力達到最大。檢查員可觸摸或點擊"Start Camera (啟動照相機)"55 和觸摸或點擊將開始圖像捕獲的位置處的貨架圖52區(qū)域。然后檢查 員可將例如推車單元的移動捕獲單元30推下走道，捕獲該走道內(nèi)的零 售商店狀況的一個或多個圖像。然后檢查員可觸摸"Stop camera (停 止照相機)"56和/或貨架圖52上走道末端的位置，指示對該走道的 圖像捕獲完成。^r查員可通過觸摸或點擊"Main Screen (主屏幕)" 返回主屏幕40,或可通過觸摸或點擊使檢查員轉(zhuǎn)至下一個或上一個走 道的箭頭57繼續(xù)捕獲全部走道的全部長度。箭頭57還可使檢查員移 動到商店內(nèi)的其它位置，例如，商店的前部、商店的后部、商店的結(jié) 帳區(qū)域、商店的產(chǎn)品區(qū)域等?？蛇x地，檢查員可觸摸或點擊"Start Video(開始視頻)"62和/或貨架圖52上將開始圖像捕獲的位置。然后檢 查員可將例如推車單元的移動捕獲單元30推下走道，捕獲該走道內(nèi)的 零售商店狀況的一個或多個圖像。檢查員可繼續(xù)使移動捕獲單元30 在附近的走道來回移動，直到通過觸摸或點擊"Stop Video(停止視頻)" 63結(jié)束圖像捕獲。存儲裝置33暫時存儲一個或多個零售商店狀況的一個或多個捕 獲圖像一段預(yù)定的時間。例如，可將圖像存儲并以不同方式縫合在一
起以組織和準備圖像用于比較或圖像識別步驟。此外，將圖像縫合在 一起有助于消除由零售商店的有序圖像之間的可能重疊、以及通過一 個或多個照相機拍攝照片引起的復(fù)制。此外，圖像縫合還可提供用于虛擬漫游瀏覽器特性，以及用于ad-hoc圖像查看的原始數(shù)據(jù)庫，。根 據(jù)可選的實施方式，可在發(fā)送捕獲圖像之后或在捕獲圖像時進行圖像 縫合。新的圖像創(chuàng)建并通過質(zhì)量保證測試之后，可將縫合在一起以創(chuàng)建 較大的圖像用于虛擬商店漫游的原始源圖像刪除。如果使用視頻流捕 獲用于縫合的原始源圖像，則在對各視頻幀進行隔離、抽取、格式轉(zhuǎn) 換、并縫合到一起之后，視頻流將被刪除。應(yīng)該將最后的處理圖像在 圖像捕獲單元21的數(shù)據(jù)庫中存儲一段預(yù)定的時間。例如，可將圖像保 留一周，然后由當前周的圖像替代。根據(jù)本公開的實施方式，可將每 個圖像存儲為單獨的文件。在傳輸圖像之前，移動捕獲單元30可處理一個或多個捕獲圖像。 特別地，移動捕獲單元30可確定這些圖像是否具有例如遺漏區(qū)和/或 圖像映射錯誤的任何問題，例如，移動捕獲單元30和貨架或陳列之間的角度而使圖像變形、鏡頭是否臟或離焦、是否由于移動捕獲單元30 的移動而使圖像模糊、是否由于圖像未與上一個圖像重疊而使得其中 具有信息間隙、圖像是否為已經(jīng)得到的圖像重復(fù)或與之前已獲得的圖 像重疊、是否存在某種類型的硬件故障而使不能夠獲得圖像、是否直 立的冷藏拒或電冰箱的窗上有霜而妨礙移動捕獲單元30獲得產(chǎn)品的 清晰圖^f象等。如果具有任何的圖像遺漏或錯誤，例如以上所述的各項， 檢查員則可重攝這些圖像，或移動捕獲單元可自動重攝圖像。此外， 全部圖像可旋轉(zhuǎn)到正確的方向(例如，可將圖像顯示在屏幕上，并且 如果圖像不正確，檢查員可撤銷旋轉(zhuǎn))，且自動增強顏色、亮度、色調(diào) 等(例如，可在壓縮圖像之前以成批模式完成)、檢查聚焦(例如，可 將圖像顯示在屏幕上，使得檢查員可確定是否將其丟棄)、和/或從陳 列中剪切圖像以使貨架上的產(chǎn)品可被圖像識別模塊23正確識別。根據(jù) 本公開的實施方式，在捕獲下一組貨架圖像之前，移動捕獲單元30
的操作者可在視覺上檢查處理過的虛擬商店漫游圖像并審定圖像質(zhì) 量。例如，如果產(chǎn)品包含非常小的標簽，檢查員則可在獲取圖像之前 從陳列中移開一個產(chǎn)品，使標簽更明顯。處理裝置還可將一個或多個捕獲圖像與相關(guān)信息相結(jié)合，所述相關(guān)信息例如日期、時間和位置信息，包括但不限于商店名稱、商店 位置、陳列位置、陳列類型、圖像捕獲的日期和時間。根據(jù)可選的實 施方式，由圖像捕獲單元21執(zhí)行的處理可在由處理單元2發(fā)送捕獲圖 像之后進行?？蓪⒉东@圖像和相關(guān)信息發(fā)送到處理單元，處理單元存儲捕獲圖 像和相關(guān)信息，并進一步處理并轉(zhuǎn)換為有用信息。處理單元在發(fā)送一個或多個捕獲圖像和相關(guān)信息之后，在處理單元2對其 進行接收。處理單元2可為集中式的處理單元，并包括圖像識別才莫塊 23、信息庫24、儲存庫25、報告引擎26、外部數(shù)據(jù)儲存庫27、以及 異常審核裝置28。接收到所述一個或多個圖像和相關(guān)信息之后，將其存儲在儲存庫 25中。不是全部的捕獲圖像將被永久存儲。例如，將刪除復(fù)制品、不 好的圖像等。根據(jù)本公開的實施方式，可將所述一個或多個捕獲圖像 作為原始圖像存儲在MS-SQL數(shù)據(jù)庫中，用于通過商店、位置、日期、 時間和方位快速存取。還可通過使用例如數(shù)據(jù)鏡像或某些其它形式的 備份軟件，將一個或多個捕獲圖像存儲在備份位置。為使數(shù)據(jù)存儲最 小化，應(yīng)該以圖像識別模塊所需的最小分辨率捕獲和存儲圖像?？梢?這樣的方式在每個圖像上加上水印，并且使得在圖像識別過程中，水 印不會降低質(zhì)量圖像。由于每天都有大量的存儲需求，最終的圖像可 離線保存。圖6是根據(jù)本公開的實施方式、示出圖像識別模塊^處理步驟的 流程圖。該步驟可由圖像捕獲單元21或圖像識別模塊23執(zhí)行。圖像 識別模塊23通過確定每個圖像是否具有足夠高的質(zhì)量和是否具有足 夠多的圖像內(nèi)容，來處理一個或多個捕獲圖像。例如，圖像識別模塊 23可首先確定圖像具有足夠高的質(zhì)量(即，聚焦、失真等X步驟S601 )。 如果圖像識別模塊23確定圖像不具有足夠高的質(zhì)量(否，步驟S601 ), 則刪除或標記該圖像、終止、或請求重攝該圖像(步驟S602)。否則， 如果圖像識別模塊23確定圖像質(zhì)量足夠(是，步驟S602),則圖像識 別模塊23可確定全部圖像內(nèi)容是否與其編碼位置一致(步驟S603 ) (即，如果從貨架角度編碼圖像，則確定圖像中是否具有陳列單元)。 如果圖像識別模塊23確定圖像中存在障礙物(否，步驟S603 )(即， 人、購物車、或妨礙觀察貨架或陳列的任何其它障礙物)，則可刪除或 標記該圖像、終止、或請求重攝該圖像(步驟S602)。然而，如果圖 像識別模塊23確定圖像內(nèi)容足夠(是，步驟S603 ),則將認可該圖像 并將其發(fā)送到處理的第二步(步驟S604)。根據(jù)實施方式，如果圖像 識別模塊23確定圖像包含不同的貨架上的不需要分析的產(chǎn)品的遠景， 則圖像識別模塊23可通過剪切圖像將其移除來從分析中排除。根據(jù)可 選的實施方式，圖像識別模塊將在商店內(nèi)用手握式的條形碼閱讀器識 別產(chǎn)品。除了記錄需要進一步處理的產(chǎn)品的UPC之夕卜(例如已脫銷狀 況)，操作移動捕獲單元30 (例如通過推動或駕駛)的人還將使用手 握式的條形碼閱讀器電子地記錄在零售商店內(nèi)陳列的每個產(chǎn)品的UPC 碼。處理的第二步包括圖像識別模塊23將一個或多個捕獲圖像與例 如CPG產(chǎn)品圖像數(shù)據(jù)庫或第三方賣主庫的信息庫24進行比較，以識 別一個或多個捕獲圖像中的一個或多個零售商店狀況，例如商店號碼、 圖像日期/時間、UPC、和/或描述產(chǎn)品在商店內(nèi)的精確位置的其它詳細 信息等。這考慮到了由商店創(chuàng)建關(guān)于零售狀況的信息的數(shù)據(jù)庫，包括 在每個商店內(nèi)找到哪些產(chǎn)品及其在商店中的位置的詳細資料。例如，圖像識別單元23可將每個捕獲圖像中的每個零售商店狀況與信息庫 24進行比較，并識別每個捕獲圖像中出現(xiàn)的產(chǎn)品(例如，通過識別圖 像中的每個UPC)。該處理可分為多個中央處理器("CPU"),以使每 個CPU將在下一個報告到期之前完成處理。為了加快處理，圖像識別 單元23可僅對每個圖像使用信息庫24的相關(guān)部分。例如，如果圖像 識別模塊23僅對陳列進行分析，則其可使用通常位于走道末端陳列中
的大約5,000個左右的UPC，或者如果其僅分析罐裝商品區(qū)的圖^f象， 則其將不分析信息庫24中的冷凍產(chǎn)品圖像。信息庫24可包括UPC、貨架標簽、產(chǎn)品圖像、和/或允許圖像識 別模塊23在一個或多個捕獲圖像中識別一個或多個零售商店狀況的 任何其它信息。例如，化妝品部可有非常小的產(chǎn)品，其UPC之間的僅 有的主要差別在于顏色?？蓪γ總€圖像執(zhí)行多次掃描，以完成圖像識 別。例如，有些種類的產(chǎn)品上只有少量文本可區(qū)分不同的UPC。可在 庫中對這些類型的UPC進行標記。如果對已標記的UPC進行了定位， 則使用不同的商務(wù)規(guī)則再次對圖像進行處理。例如，如果對一個產(chǎn)品 只找到了一個圖像，則可使用附加的信息完成識別過程，所述附加信 息例如貨架標簽上的信息，包括說明、UPC條形碼以及相關(guān)標志圖樣。 對于陳列來說，可使用紙板箱和/或運貨裝置上的信息。根據(jù)本公開的實施方式，圖像識別模塊23可通過將一個或多個捕 獲圖像與第三方賣主庫進行比較找出具體的標志圖樣和店內(nèi)標識。在識別每個圖像中的一個或多個零售商店狀況并獲得相關(guān)信息之 后，將信息存儲到數(shù)據(jù)庫25中。例如，對于每個識別的零售商店狀況， 可將以下信息存儲到數(shù)據(jù)庫中圖像捕獲日期、圖像捕獲時間、圖像 標識、商店號碼、用戶標識、平面圖、商店位置、固定設(shè)備、固定設(shè) 備視圖、順序位置、處理位置區(qū)、UPC、數(shù)量、推銷標識、圖像中的 X/Y位置、處理日期/時間、軟件版本等。例如，圖像捕獲的日期與拍 攝圖像的日期相關(guān)，圖像捕獲時間與拍攝圖像的時間相關(guān)，其可轉(zhuǎn)換 為相關(guān)時區(qū)的當?shù)貢r間。圖像標識可為當將文件上載給處理單元2時 為文件分配的文件名或識別標記。這種標識可在ad-hoc才艮告沖莫式中佳_ 用，以獲得圖像。商店號碼是分配給美國的每個商店的數(shù)字ID。存在 能夠通過商業(yè)獲得的這樣 一種數(shù)據(jù)庫，其中由全球的煒度和經(jīng)度識別 美國的每個零售商店的物理位置。該數(shù)據(jù)庫還包括關(guān)于每個零售商店 位置的其它信息，例如零售商店名稱。這種信息可用于確認和記錄移 動捕獲單元的零售商店檢查員的物理位置和零售源。用戶標識與檢查 員或圖像捕獲單元21的操作者的標識相關(guān)。平面圖是當軟件將商店固 定設(shè)備映射到實際的平面藍圖時可使用的字段。可需要使用一個或多 個數(shù)據(jù)字段識別商店內(nèi)的位置。在固定設(shè)備字段放置圖像捕獲開始處 的圖像。在固定設(shè)備視圖字段放置圖像捕獲結(jié)束處的圖像。順序位置 與幫助將圖像縫合為局部分組(即，整個走道)的內(nèi)部序號相關(guān)。處理位置區(qū)可為識別模塊23計算的字段，識別模塊23能通過使用UPC 和物理位置計算該字段。UPC是產(chǎn)品的、設(shè)置在圖像中的UPC。對于 在圖像中設(shè)置的每個UPC，在表中都有一條記錄。數(shù)量字段與在圖像 中設(shè)置的UPC的數(shù)量相關(guān)。例如，如果貨架具有產(chǎn)品的三個面，則數(shù) 量為3。推銷標識是可用于識別貨架標簽和店內(nèi)標志圖樣(例如貨架 播講器和橫幅)的字段。圖像中的X/Y位置與圖像中發(fā)現(xiàn)產(chǎn)品的位置 相關(guān)。例如，其可用于識別產(chǎn)品位于貨架上的什么地方以及是否符合 公司指示。X/Y位置還可用于研究和調(diào)試由客戶識別的數(shù)據(jù)精度問題。 處理日期/時間是圖像識別模塊23處理圖像并識別圖像中的特定產(chǎn)品 的日期。軟件版本是圖像識別模塊用于識別產(chǎn)品的圖像識別軟件的版 本。報告引擎26可提供對位于任何商店內(nèi)任何位置在任何給定時間 任意捕獲的圖像的訪問。例如，通過ad-hoc圖像瀏覽器，可使用過濾 器每次取出一個單獨的圖片。過濾器允許用戶選擇搜索參數(shù)，例如日 期范圍、時間、商店、產(chǎn)品等。當查看單個圖片時，用戶可在時間上 向前或向后翻以查看相同位置的情況或經(jīng)過一段時間后將呈現(xiàn)的情 況。當查看具體的圖像時，用戶可在貨架圖上查看多個商店的相同位 置。通過虛擬商店漫游瀏覽器，可二維或三維地順序查看零售商店狀 況的圖像。瀏覽器可根據(jù)一個或多個零售商店狀況抽取圖像并"漫游" 每個圖像。如果存在相同的固定設(shè)備和位置的重復(fù)圖像，瀏覽器則可 將其濾除，或為重復(fù)的圖像提供不同的視圖選項。如果圖像中存在間 隙，瀏覽器則可用標準的壁紙?zhí)钊腴g隙。對一個或多個捕獲圖像以及相關(guān)信息進行分析并產(chǎn)生一個或多個 概要報告和/或警報?？勺詣拥貙⒌陜?nèi)零售狀況的自動警報和報告發(fā)送 客戶，并通過商店、日期、時間和產(chǎn)品對信息詳細說明。警報是可配 置的并是表驅(qū)動的，允許處理單元2容易地設(shè)置將觸發(fā)警報的商務(wù)規(guī) 則。例如，如果商店對于發(fā)送捕獲圖像是過期的；如果商店未能顯示
具體產(chǎn)品；如果在陳列中發(fā)現(xiàn)了未批準用于促銷的產(chǎn)品；或任何其它 的用戶定義的警報?？蓪⒕瘓蟀l(fā)送到計算機、膝上型電腦、個人數(shù)字 助理、蜂窩電話、和任何其它的手握式裝置?？蓪⒕W(wǎng)絡(luò)鏈接嵌入在消 息內(nèi)，以使得如果裝置具有瀏覽器支持，接受者則可直接跳轉(zhuǎn)到報告 和圖像。可能的情況下，警報是組合的，以使個體用戶不在短時間內(nèi) 接收大量的相關(guān)電子郵件。報告可運行在包括商店、區(qū)域、連鎖店、和任何其它位置的概要 等級。報告可通過商店內(nèi)的位置(即，端架、走道等)報告結(jié)果。對 于陳列的產(chǎn)品，報告可包括產(chǎn)品陳列的天數(shù)、UPC、介紹、品牌、大 小等的概要說明。根據(jù)本公開的實施方式，可將零售點的銷售數(shù)據(jù)與 零售商店狀況集合，以提供接近實時的促銷分析。當由處理單元2集 合銷售點數(shù)據(jù)時，報告可包括關(guān)于下列各項中的 一 個或多個的信息 正常價格、銷售價格、基礎(chǔ)容量、實際容量、增量、物品UPC、品牌 介紹、大小、分類概要說明、分類基礎(chǔ)、分類實際、分類提升、分類 目標百分比利潤率、分類實際百分比利潤率、分享的促銷品牌概要說 明等。圖7-12示出了根據(jù)本發(fā)明的實施方式，通過使用用于測量零售 商店陳列情況的方法產(chǎn)生的樣本報告。例如，圖8示出了顯示商店的 陳列情況的報告，圖9示出了顯示區(qū)域級的陳列情況的報告，圖10 示出了顯示部門級的陳列情況的報告，圖11示出了顯示零售商級的陳 列情況的報告，以及圖12示出了顯示竟爭品牌的陳列情況的報告?？?通過使用存儲在儲存庫25中的數(shù)據(jù)和從一個或多個外部數(shù)據(jù)儲存庫 27得到的外部數(shù)據(jù)產(chǎn)生每個報告。例如，可將與商店相關(guān)的信息存儲 在包括全部商店列表的外部數(shù)據(jù)儲存庫27中，包括唯一的零售商店標 識號、名稱、介紹、地址、總公司、交易種類、形式和其它信息及屬 性?？蓪⑴c總公司相關(guān)的信息存儲在包括全部總公司的列表的外部數(shù) 據(jù)儲存庫27中，包括介紹、地址、和/或任何其它信息。這考慮到了 單獨的商店標識到總公司的總信息累積。可將與UPC相關(guān)的信息存儲 在包括全部產(chǎn)品的列表的外部數(shù)據(jù)儲存庫27中，包括UPC說明、產(chǎn) 品維度、多個角度的產(chǎn)品圖像、以及其它屬性。可將與品牌相關(guān)的信
息存儲到包括全部品牌的列表的外部數(shù)據(jù)儲存庫27中，包括介紹、分 類、生產(chǎn)商等。與類別和生產(chǎn)商相關(guān)的信息也可存儲在此外部數(shù)據(jù)儲 存庫27中。根據(jù)本公開的一個實施方式，包括用于測量零售商店陳列情況的計算機可執(zhí)行代碼的計算機存儲媒質(zhì)包括用于捕獲一個或多個零售 商店狀況的一個或多個圖像的代碼、用于將一個或多個捕獲圖像與相 關(guān)信息結(jié)合的代碼、用于將一個或多個捕獲圖像和相關(guān)信息發(fā)送到處 理單元用于存儲和處理的代碼、用于在處理單元接收一個或多個捕獲 圖像以及相關(guān)信息并將其存儲到儲存庫的代碼、用于處理一個或多個 捕獲圖像的代碼、用于將一個或多個捕獲圖像中的一個或多個零售商 店狀況與庫比較以識別一個或多個零售商店狀況并獲得關(guān)于一個或多個零售商店狀況的識別信息的代碼、用于將一個或多個識別的捕獲圖 像和用于 一 個或多個零售商店狀況的識別信息存儲到儲存庫中的代碼、用于分析一個或捕獲圖像中的一個或多個零售商店狀況和識別信 息的代碼、以及用于基于所述分析產(chǎn)生一個或多個概要報告或一個或 多個警報的代碼。根據(jù)本公開的一個實施方式，用于捕獲一個或多個零售商店狀況 的一個或多個圖像進一步包括用于識別并檢驗裝置的位置的代碼、 用于捕獲一個或多個零售商店狀況的一個或多個圖像的代碼、用于存 儲一個或多個零售商店狀況的一個或多個捕獲圖像的代碼、用于處理 一個或多個零售商店狀況的一個或多個捕獲圖像的代碼、用于將一個 或多個零售商店狀況的一個或多個捕獲圖像發(fā)送到處理單元的代碼、 以及用于產(chǎn)生指示一個或多個零售商店狀況的一個或多個捕獲圖像是 否成功發(fā)送到處理單元的確認的代碼。根據(jù)以上教導(dǎo)，本發(fā)明的大量的其它改變都是可能的。
權(quán)利要求
1.用于測量零售商店陳列情況的方法，包括捕獲一個或多個零售商店狀況的一個或多個圖像；將所述一個或多個捕獲圖像與相關(guān)信息聯(lián)合；將所述一個或多個捕獲圖像與所述相關(guān)信息發(fā)送到處理單元用于存儲和處理；在所述處理單元接收所述一個或多個捕獲圖像和所述相關(guān)信息，并將所述一個或多個捕獲圖像和相關(guān)信息存儲到儲存庫中；處理所述一個或多個捕獲圖像；將所述一個或多個捕獲圖像中的所述一個或多個零售商店狀況與信息庫進行比較，以識別所述一個或多個零售商店狀況并獲得關(guān)于所述一個或多個零售商店狀況的識別信息；將所述識別的一個或多個捕獲圖像和用于所述一個或多個零售商店狀況的識別信息存儲到所述儲存庫中；分析所述一個或多個捕獲圖像中的一個或多個零售商店狀況和識別信息；以及基于所述分析，產(chǎn)生一個或多個概要報告或一個或多個警報。
2. 如權(quán)利要求l所述的方法，進一步包括，提供所述一個或多個 零售商店狀況的原始圖像供應(yīng)和/或原始數(shù)據(jù)供應(yīng)。
3. 如權(quán)利要求l所述的方法，進一步包括，當滿足或超出一個或 多個零售商店狀況時，提供自動警報。
4. 如權(quán)利要求l所述的方法，進一步包括，提供到任何零售商店 內(nèi)的任何位置的、在任何給定時間任意捕獲的圖像的訪問。
5. 如權(quán)利要求l所述的方法，其中，所述捕獲、聯(lián)合、發(fā)送、接 收、處理、比較、存儲和分析步驟是自動執(zhí)行的。
6. 如權(quán)利要求1所述的方法，其中，通過移動單元實現(xiàn)圖像捕獲。
7. 如權(quán)利要求l所述的方法，進一步包括，識別和驗證圖像捕獲 單元的位置。
8. 如權(quán)利要求l所述的方法，其中，通過以下各項中的一個或多 個捕獲所述一個或多個圖像店內(nèi)安全照相機、照相機電話、固定的 -見頻數(shù)字照相機、網(wǎng)i各照相^L、移動的-見頻數(shù)字照相才幾、手握式移動 捕獲單元、自動的移動捕獲單元、以及自推進的機器人。
9. 如權(quán)利要求l所述的方法，其中，所述處理步驟進一步包括確 定所述一個或多個捕獲圖像是否具有足夠高的圖像質(zhì)量和足夠多的圖 像內(nèi)容。
10. 如權(quán)利要求1所述的方法，其中，所述相關(guān)信息包括日期、 時間和位置信息。
11. 如權(quán)利要求1所述的方法，其中，通過遠程通信鏈路將所述 一個或多個概要報告或警報發(fā)送給客戶。
12. 如權(quán)利要求l所述的方法，其中，將所述一個或多個警"t艮結(jié) 合在一起，然后通過遠程通信鏈路將其發(fā)送給客戶。
13. 如權(quán)利要求l所述的方法，其中，所述捕獲步驟包括檢查每 個捕獲圖像并審定其質(zhì)量和內(nèi)容。
14. 如權(quán)利要求1所述的方法，其中，所述處理單元包括用于上 載所述一個或多個捕獲圖像的網(wǎng)絡(luò)入口 。
15. 用于測量零售商店陳列情況的系統(tǒng)，包括圖像捕獲單元，用于捕獲一個或多個零售商店狀況的一個或多個 圖像；用于將所述一個或多個捕獲圖像與相關(guān)信息聯(lián)合的裝置；用于發(fā)送所述一個或多個捕獲圖像與所述相關(guān)信息的裝置；以及處理單元，包括用于接收所述一個或多個捕獲圖像和相關(guān)信息的裝置；用于處理所述一個或多個捕獲圖像的裝置；圖像識別模塊，用于將所述一個或多個捕獲圖像中的所述一 個或多個零售商店狀況與信息庫進行比較，以識別所述一個或多 個零售商店狀況并獲得關(guān)于所述一個或多個零售商店狀況的識 別信息；儲存庫，用于存儲所述一個或多個識別的捕獲圖像和識別信 息；以及報告引擎，用于分析所述一個或多個捕獲圖像中的所述一個 或多個零售商店狀況和識別信息，并基于所述分析，產(chǎn)生一個或 多個概要報告或一個或多個警報。
16. 如權(quán)利要求15所述的系統(tǒng)，進一步包括，用于提供所述一個 或多個零售商店狀況的原始圖像供應(yīng)和/或原始數(shù)據(jù)供應(yīng)的裝置。
17. 如權(quán)利要求15所述的系統(tǒng)，進一步包括，用于在滿足或超出 一個或多個零售商店狀況時提供自動警報的裝置。
18. 如權(quán)利要求15所述的系統(tǒng)，進一步包括用于訪問在任何零售 商店內(nèi)在任何位置任何給定時間任意捕獲的圖像的裝置。
19. 如權(quán)利要求15所述的系統(tǒng)，其中，所述圖像捕獲單元、用于 聯(lián)合的裝置、用于發(fā)送的裝置、以及處理單元是自動的。
20. 如權(quán)利要求15所迷的系統(tǒng)，其中，通過移動單元實現(xiàn)圖像捕獲。
21. 如權(quán)利要求15所述的系統(tǒng)，其中，所述圖像捕獲單元包括 識別和驗證裝置，用于識別和驗證所述圖像捕獲單元的位置； 捕獲裝置，用于捕獲一個或多個零售商店狀況的一個或多個圖像； 存儲裝置，用于存儲所述一個或多個零售商店狀況的所述一個或多個圖像；處理裝置，用于處理所述一個或多個零售商店狀況的所述一個或 多個圖像；發(fā)送裝置，用于將所述一個或多個零售商店狀況的所述一個或多 個圖像發(fā)送到處理單元；以及生成裝置，用于產(chǎn)生指示所述一個或多個零售商店狀況的所述一 個或多個圖像是否成功發(fā)送到所述處理單元的確認。
22. 如權(quán)利要求21所述的系統(tǒng)，其中，所述圖像捕獲單元是手推 車單元或自動機器人的形式。
23. 如權(quán)利要求22所述的系統(tǒng)，其中，所述手推車單元在其相對 側(cè)包^^兩個或多個固定的照相才幾。
24. 如權(quán)利要求21所述的系統(tǒng)，其中，通過以下各項中的一個或 多個捕獲所述一個或多個圖^f象店內(nèi)安全照相^U照相才幾電"i舌、固定 的一見頻數(shù)字照相機、網(wǎng)絡(luò)照相機、移動的一見頻數(shù)字照相機、手握式移 動捕獲單元、自動的移動捕獲單元、以及自動機器人。
25. 如權(quán)利要求21所述的系統(tǒng)，其中，所述處理步驟進一步包括 確定所述一個或多個捕獲圖像是否具有足夠高的圖像質(zhì)量和足夠多的 圖像內(nèi)容。
26. 如權(quán)利要求15所述的系統(tǒng)，其中，所述相關(guān)信息包括日期、 時間和位置信息。
27. 如權(quán)利要求15所述的系統(tǒng)，其中，通過遠程通信鏈^各將所述 一個或多個概要報告或警報發(fā)送給客戶。
28. 如權(quán)利要求15所述的系統(tǒng)，其中，將所述一個或多個警報結(jié) 合在一起，然后通過遠程通信鏈路將其發(fā)送給客戶。
29. 如權(quán)利要求15所述的系統(tǒng)，其中，用于處理的裝置包括用于 檢查每個捕獲圖像并審定其質(zhì)量和內(nèi)容的裝置。
30. 如權(quán)利要求15所述的方法，其中，所述處理單元位于中央并 進一步包括用于上載所述一個或多個捕獲圖像的網(wǎng)絡(luò)入口。
31. 包括用于測量零售商店陳列情況的計算機可執(zhí)行代碼的計算 機存儲媒質(zhì)，包括用于捕獲一個或多個零售商店狀況的一個或多個圖像的代碼；用于將所述一個或多個捕獲圖像與相關(guān)信息結(jié)合的代碼；用于將所述一個或多個捕獲圖像和所述相關(guān)信息發(fā)送到處理單元用于存儲和處理的代碼；用于在所述處理單元接收所述一個或多個捕獲圖像和所述相關(guān)信息并將所述一個或多個捕獲圖像和相關(guān)信息存儲到儲存庫的代碼； 用于處理所述一個或多個捕獲圖像的代碼；用于將所述一個或多個捕獲圖像中的所述一個或多個零售商店狀 況與信息庫進行比較以識別所述一個或多個零售商店狀況并獲得關(guān)于 所述 一 個或多個零售商店狀況的識別信息的代碼；用于將所述一個或多個識別的捕獲圖像和用于所述一個或多個零 售商店狀況的識別信息存儲到所述儲存庫中的代碼；用于分析所述一個或捕獲圖像中的所述一個或多個零售商店狀況 和識別信息的代碼；以及用于基于所述分析產(chǎn)生一個或多個概要報告或一個或多個警報的 代碼。
32. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，進一步包括，用于提 供所述一個或多個零售商店狀況的原始圖像供應(yīng)和/或原始數(shù)據(jù)供應(yīng) 的代碼。
33. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，進一步包括，用于在 滿足或超出 一個或多個零售商店狀況時提供自動警報的代碼。
34. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，進一步包括，用于提 供對任何零售商店內(nèi)的任何位置在任何給定時間任意捕獲的圖像的訪 問的代碼。
35. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，其中，用于捕獲、聯(lián) 合、發(fā)送、接收、處理、比較、存儲和分析的所述代碼是自動的。
36. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，進一步包括，用于識 別和驗證圖像捕獲單元的位置的代碼。
37. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，其中，用于處理的所 述代碼進一步包括用于確定所述一個或多個捕獲圖像的圖像質(zhì)量和圖 像內(nèi)容是否足夠的代碼。
38. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，其中，所述相關(guān)信息 包括日期、時間和位置信息。
39. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，其中，通過電信鏈路 將所述一個或多個概要報告或警報發(fā)送給客戶。
40. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，其中，將所述一個或 多個警報結(jié)合在一起，然后通過電信鏈路將其發(fā)送給客戶。
41. 如權(quán)利要求31所述的計算機存儲媒質(zhì)，其中，用于捕獲的所 述代碼包括檢查每個捕獲圖像并審定其質(zhì)量和內(nèi)容。
42. 用于測量零售商店陳列情況的計算機可執(zhí)行代碼的計算機存 儲媒質(zhì)，包括用于識別并檢驗裝置的位置的代碼；用于捕獲一個或多個零售商店狀況的一個或多個圖像的代碼； 用于存儲所述一個或多個零售商店狀況的所述一個或多個捕獲圖 像的代碼；用于處理所述一個或多個零售商店狀況的所述一個或多個捕獲圖 像的代碼；用于將所述一個或多個零售商店狀況的所述一個或多個捕獲圖像 發(fā)送到處理單元的代碼；以及用于產(chǎn)生指示所述一個或多個零售商店狀況的所述一個或多個捕 獲圖像是否成功發(fā)送到所述處理單元的確認的代碼。
43. 如權(quán)利要求42所述的計算機存儲媒質(zhì)，其中，所述圖像捕獲 單元是以手推車單元或自動機器人的形式。
44. 如權(quán)利要求42所述的計算機存儲媒質(zhì)，其中，所述手推車單 元在其相對側(cè)包括兩個或更多的固定的照相才幾。
全文摘要
提供了用于測量零售商店陳列情況的方法和系統(tǒng)。捕獲一個或多個零售商店狀況中的一個或多個圖像并將其與相關(guān)信息聯(lián)合。將一個或多個捕獲圖像和相關(guān)信息發(fā)送到處理單元用于存儲和處理。在處理單元接收一個或多個捕獲圖像和相關(guān)信息，并將其存儲到儲存庫并對其進行處理。將一個或多個捕獲圖像中的一個或多個零售商店狀況與信息庫進行比較以對其進行識別并獲得識別信息。將一個或多個識別的捕獲圖像和用于一個或多個零售商店狀況的識別信息存儲到儲存庫中。分析一個或多個捕獲圖像中的一個或多個零售商店狀況和識別信息，并基于此分析產(chǎn)生一個或多個概要報告或一個或多個警報。
文檔編號G06F17/00GK101160576SQ200680012350
公開日2008年4月9日 申請日期2006年4月12日 優(yōu)先權(quán)日2005年4月13日
發(fā)明者亞歷山大·林, 克雷格·漢密爾頓, 韋恩·斯賓塞 申請人:斯德艾斯有限公司