姿勢(shì)識(shí)別裝置及其控制方法、程序、電子設(shè)備及記錄介質(zhì)的制作方法
【專利摘要】人物判定部(22)判定在攝像頭(3)拍攝到的圖像中是否拍攝有用戶,如果未拍攝有用戶,則輸出部(27)發(fā)出表示未拍攝到姿勢(shì)的通知。
【專利說(shuō)明】姿勢(shì)識(shí)別裝置及其控制方法、程序、電子設(shè)備及記錄介質(zhì)
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及利用攝像頭拍攝用戶的動(dòng)作并根據(jù)拍攝的圖像對(duì)用戶的姿勢(shì)進(jìn)行識(shí)另Ij的姿勢(shì)識(shí)別裝置、電子設(shè)備、姿勢(shì)識(shí)別裝置的控制方法、控制程序以及記錄介質(zhì)。
【背景技術(shù)】
[0002]近年來(lái),正在開發(fā)通過(guò)識(shí)別用戶的姿勢(shì)來(lái)生成用于對(duì)裝置進(jìn)行控制的控制信號(hào)的各種信息輸入裝置。作為這樣的信息輸入裝置,例如存在專利文獻(xiàn)I和2中所記載的信息輸入裝置。具體而言,存在如下所述的裝置:即,用戶操作定位設(shè)備(pointing device)、筆型輸入設(shè)備、觸控板等輸入設(shè)備,輸入設(shè)備對(duì)該動(dòng)作進(jìn)行檢測(cè)從而識(shí)別用戶的姿勢(shì)。
[0003]另一方面,存在不使用輸入設(shè)備而利用攝像頭對(duì)用戶的動(dòng)作進(jìn)行拍攝,根據(jù)拍攝的圖像來(lái)識(shí)別用戶姿勢(shì)的信息輸入裝置。以下,將根據(jù)圖像來(lái)識(shí)別用戶姿勢(shì)的信息輸入裝置稱作姿勢(shì)識(shí)別裝置。在該姿勢(shì)識(shí)別裝置中,用戶不需要對(duì)輸入設(shè)備等進(jìn)行操作,而能夠直觀地向裝置輸入操作指示,因此,該姿勢(shì)識(shí)別裝置作為下一代的界面(interface)而受到期待。
[0004]現(xiàn)有技術(shù)文獻(xiàn)
[0005]專利文獻(xiàn)
[0006]專利文獻(xiàn)1:日本國(guó)公開專利公報(bào)“特開2004-303207號(hào)公報(bào)(2004年10月28日公開)”;
[0007]專利文獻(xiàn)2:日本國(guó)公開專利公報(bào)“特開2009-301301號(hào)公報(bào)(2009年12月24日公開)”;
[0008]專利文獻(xiàn)3:日本國(guó)公開專利公報(bào)“特開2007-166187號(hào)公報(bào)(2007年6月28日公開)”;
[0009]專利文獻(xiàn)4:日本國(guó)公開專利公報(bào)“特開2008-244804號(hào)公報(bào)(2008年10月9日公開)”。
【發(fā)明內(nèi)容】
[0010]發(fā)明所要解決的問(wèn)題
[0011]但是,在現(xiàn)有的姿勢(shì)識(shí)別裝置中,用戶無(wú)法知曉姿勢(shì)識(shí)別裝置是否處于能夠識(shí)別自身的姿勢(shì)的狀態(tài)。換而言之,用戶無(wú)法正確地判斷自身的姿勢(shì)是否被進(jìn)入到攝像頭的視場(chǎng)角范圍內(nèi)。因此,存在以下情況:盡管姿勢(shì)識(shí)別裝置不處于能夠識(shí)別用戶姿勢(shì)的狀態(tài),但是用戶還是期待姿勢(shì)被識(shí)別而多次重復(fù)相同的動(dòng)作或者無(wú)意義地下功夫活動(dòng)。
[0012]在此,存在如下技術(shù),S卩,當(dāng)攝像頭進(jìn)行拍攝時(shí),判定人類的全身、臉等是否進(jìn)入到視場(chǎng)角內(nèi),在未進(jìn)入時(shí)發(fā)出警告(專利文獻(xiàn)3和4)。但是,專利文獻(xiàn)3和4中所記載的技術(shù)是針對(duì)一般攝像頭的技術(shù),并不是有關(guān)姿勢(shì)識(shí)別裝置的技術(shù)。另外,以往在姿勢(shì)識(shí)別裝置中,不通知姿勢(shì)是否進(jìn)入到視場(chǎng)角內(nèi)。
[0013]本發(fā)明正是鑒于上述問(wèn)題而完成的,其目的在于,實(shí)現(xiàn)當(dāng)用戶的姿勢(shì)未進(jìn)入到視場(chǎng)角內(nèi)時(shí)發(fā)出通知的姿勢(shì)識(shí)別裝置、電子設(shè)備、姿勢(shì)識(shí)別裝置的控制方法、控制程序以及記錄介質(zhì)。
[0014]用于解決問(wèn)題的手段
[0015]為了解決上述問(wèn)題,本發(fā)明的姿勢(shì)識(shí)別裝置根據(jù)攝像頭拍攝到的圖像來(lái)識(shí)別人的姿勢(shì),并基于識(shí)別出的姿勢(shì)向電子設(shè)備輸出用于控制該電子設(shè)備的信息,其具有:人判定單元,判定上述圖像中是否包含有人;以及輸出單元,在上述人判定單元判定為上述圖像中未包含有人時(shí),輸出用于指示第一通知的人視場(chǎng)角外通知指示信息,其中,上述第一通知是指,未拍攝到人的通知。
[0016]為了解決上述問(wèn)題,本發(fā)明的姿勢(shì)識(shí)別裝置的控制方法用于控制姿勢(shì)識(shí)別裝置,該姿勢(shì)識(shí)別裝置根據(jù)攝像頭拍攝到的圖像來(lái)識(shí)別人的姿勢(shì),并基于識(shí)別出的姿勢(shì)向電子設(shè)備輸出用于控制該電子設(shè)備的信息,其包括:人判定步驟,判定上述圖像中是否包含有人;以及輸出步驟,當(dāng)在上述人判定步驟中判定為上述圖像中未包含有人時(shí),輸出用于指示第一通知的人視場(chǎng)角外通知指示信息,其中,上述第一通知是指,未拍攝到人的通知。
[0017]根據(jù)上述結(jié)構(gòu),在攝像頭拍攝到的圖像中未包含有人時(shí),輸出單元向電子設(shè)備輸出用于指示未拍攝到人的通知的人視場(chǎng)角外通知指示信息。電子設(shè)備基于人視場(chǎng)角外通知指示信息,向操作電子設(shè)備的人發(fā)出表示未拍攝到人的通知。
[0018]因此,操作電子設(shè)備的人基于來(lái)自電子設(shè)備的通知,能夠判斷攝像頭拍攝到的圖像中是否包含有自身,即,能夠判斷自身是否在攝像頭的視場(chǎng)角外。因此,起到能夠防止操作電子設(shè)備的人的如下的無(wú)意義的動(dòng)作的效果:即,盡管未拍攝到操作電子設(shè)備的人自身,但該人為了使姿勢(shì)被識(shí)別而多次重復(fù)相同的姿勢(shì)。
[0019]發(fā)明的效果
[0020]如上所述,本發(fā)明的姿勢(shì)識(shí)別裝置具有:人判定單元,判定上述圖像中是否包含有人;以及輸出單元,在上述人判定單元判定為上述圖像中未包含有人時(shí),輸出用于指示第一通知的人視場(chǎng)角外通知指示信息,其中,上述第一通知是指,未拍攝到人的通知。
[0021]另外,本發(fā)明的姿勢(shì)識(shí)別裝置的控制方法包括:人判定步驟,判定上述圖像中是否包含有人;以及輸出步驟,當(dāng)在上述人判定步驟中判定為上述圖像中未包含有人時(shí),輸出用于指示第一通知的人視場(chǎng)角外通知指示信息,其中,上述第一通知是指,未拍攝到人的通知。
[0022]因此,起到能夠防止人的如下的無(wú)意義的動(dòng)作的效果:即,盡管未拍攝到人自身,但該人為了使姿勢(shì)被識(shí)別而多次重復(fù)相同的姿勢(shì)。
【專利附圖】
【附圖說(shuō)明】
[0023]圖1是示出本發(fā)明的實(shí)施方式的圖,是示出姿勢(shì)識(shí)別裝置和搭載有姿勢(shì)識(shí)別裝置的電視機(jī)的主要部分結(jié)構(gòu)的框圖;
[0024]圖2是示出搭載有上述姿勢(shì)識(shí)別裝置的電視機(jī)的使用形態(tài)的一個(gè)例子的圖;
[0025]圖3是示出保存在上述電視機(jī)的電視機(jī)存儲(chǔ)部中的電視機(jī)處理歷史信息的一個(gè)例子的圖;
[0026]圖4是示出保存在上述姿勢(shì)識(shí)別裝置的姿勢(shì)識(shí)別裝置存儲(chǔ)部中的人物確定信息的一個(gè)例子的圖;[0027]圖5是示出保存在上述姿勢(shì)識(shí)別裝置的姿勢(shì)識(shí)別裝置存儲(chǔ)部中的用戶信息的一個(gè)例子的圖;
[0028]圖6是示出保存在上述姿勢(shì)識(shí)別裝置的姿勢(shì)識(shí)別裝置存儲(chǔ)部中的操作時(shí)機(jī)信息的一個(gè)例子的圖;
[0029]圖7是示出保存在上述姿勢(shì)識(shí)別裝置的姿勢(shì)識(shí)別裝置存儲(chǔ)部中的姿勢(shì)信息的一個(gè)例子的圖;
[0030]圖8是示出保存在上述姿勢(shì)識(shí)別裝置的姿勢(shì)識(shí)別裝置存儲(chǔ)部中的姿勢(shì)識(shí)別裝置處理歷史信息的一個(gè)例子的圖;
[0031]圖9是示出由上述姿勢(shì)識(shí)別裝置執(zhí)行的處理的一個(gè)例子的流程圖;
[0032]圖10是示出攝像頭拍攝到的圖像的圖;
[0033]圖11是示出攝像頭拍攝到的圖像的圖;
[0034]圖12是示出攝像頭拍攝到的圖像的圖;
[0035]圖13是示出攝像頭拍攝到的圖像的圖。
【具體實(shí)施方式】
[0036]〈本發(fā)明的概要〉
[0037]本發(fā)明涉及當(dāng)用戶(操作者)通過(guò)姿勢(shì)操作電子設(shè)備時(shí),在用戶位于攝像頭的視場(chǎng)角外的情況下,向用戶通知該情況的技術(shù)。搭載有本發(fā)明的姿勢(shì)識(shí)別裝置的電子設(shè)備的使用形態(tài)的一個(gè)例子如圖2所示。圖2是示出搭載有本發(fā)明的姿勢(shì)識(shí)別裝置的電子設(shè)備的使用形態(tài)的一個(gè)例子的圖。
[0038]在圖2中,示出了電子設(shè)備是電視機(jī)2且在電視機(jī)2中內(nèi)置有姿勢(shì)識(shí)別裝置的情況。如圖2所示,當(dāng)用戶4偏離攝像頭3的視場(chǎng)角Θ時(shí),電視機(jī)2中顯示“沒(méi)有拍攝到”等,從而向用戶4通知未拍攝到用戶自身或者姿勢(shì)的情況。
[0039]通過(guò)發(fā)出這樣的通知,用戶能夠知曉自身的姿勢(shì)是否被拍攝。因此,能夠防止如下的用戶的無(wú)意義的動(dòng)作:即,盡管姿勢(shì)未被拍攝,但用戶為了使姿勢(shì)被識(shí)別而多次重復(fù)相同的姿勢(shì)。
[0040]以下,基于圖1?圖13更詳細(xì)地說(shuō)明圖2中示出的本發(fā)明的實(shí)施方式。此外,在本實(shí)施方式中,示出了電子設(shè)備是電視機(jī)的例子,但是并不僅限于此。例如,作為電子設(shè)備,也可以是移動(dòng)電話機(jī)、游戲機(jī)、數(shù)碼相機(jī)、安全門(門)等。
[0041]另外,在本實(shí)施方式中,假設(shè)搭載有姿勢(shì)識(shí)別裝置的電視機(jī)2設(shè)置在家庭內(nèi)且“父親”、“母親”、“孩子”等三人作為用戶存在。在本實(shí)施方式中,假設(shè)像這樣由特定的用戶進(jìn)行使用,但是并不僅限于此。本發(fā)明的電子設(shè)備也可以供不特定的多個(gè)用戶使用。例如,在醫(yī)院等中,存在不特定的多個(gè)用戶,但是有時(shí)不優(yōu)選直接觸摸設(shè)備來(lái)進(jìn)行操作。因此,在醫(yī)院等環(huán)境下,能夠?qū)⒆藙?shì)識(shí)別裝置作為電子設(shè)備的操作手段而恰當(dāng)?shù)丶右岳谩?br>
[0042]此外,此處的用戶是指操作電子設(shè)備的人(試圖對(duì)電子設(shè)備進(jìn)行操作的人)。
[0043]<電視機(jī)和姿勢(shì)識(shí)別裝置的結(jié)構(gòu)>
[0044]首先,針對(duì)電視機(jī)2和搭載于電視機(jī)2的姿勢(shì)識(shí)別裝置的具體結(jié)構(gòu)和功能進(jìn)行說(shuō)明。圖1是示出電視機(jī)2和搭載于電視機(jī)2的姿勢(shì)識(shí)別裝置I的主要部分結(jié)構(gòu)的一個(gè)例子的框圖。首先針對(duì)電視機(jī)2的結(jié)構(gòu)進(jìn)行說(shuō)明。[0045][電視機(jī)的結(jié)構(gòu)]
[0046]如圖1所示,電視機(jī)2具有電視機(jī)控制部51、電視機(jī)存儲(chǔ)部52、電視機(jī)通信部53、操作部54、顯示部(通知單元)55、聲音輸出部(通知單元)56以及姿勢(shì)識(shí)別裝置I。此外,電視機(jī)2也可以具有聲音輸入部等部件,但由于與發(fā)明的技術(shù)特征無(wú)關(guān)而不對(duì)所述部件進(jìn)行圖示。
[0047]電視機(jī)通信部53是利用無(wú)線通信方式或有線通信方式進(jìn)行與其他裝置之間的通信而且按照電視機(jī)控制部51的指示進(jìn)行數(shù)據(jù)的交換的裝置。具體而言,電視機(jī)通信部53是接收廣播波(broadcast wave)的天線,是接收廣播波從而接收影像數(shù)據(jù)、聲音數(shù)據(jù)以及節(jié)目數(shù)據(jù)等的裝置。
[0048]操作部54是用于用戶向電視機(jī)2輸入操作信號(hào)從而操作電視機(jī)2的裝置。操作部54也可以由操作按鈕等輸入設(shè)備等構(gòu)成。另外,也可以是操作部54和顯示部55成為一體的觸控面板。另外,操作部54也可以是與電視機(jī)2分開的遙控器等遠(yuǎn)程控制裝置。此外,因?yàn)殡娨暀C(jī)2具有姿勢(shì)識(shí)別裝置1,所以電視機(jī)2也可以不具有操作部54。
[0049]顯示部55是按照電視機(jī)控制部51的指示來(lái)顯示圖像的裝置。顯示部55只要是按照電視機(jī)控制部51的指示來(lái)顯示圖像的裝置即可,例如,可以使用IXD(液晶顯示器)、有機(jī)電致發(fā)光顯示器、等離子顯示器等。
[0050]聲音輸出部56是按照電視機(jī)控制部51的指不來(lái)輸出聲音的裝置,例如為揚(yáng)聲器。
[0051]電視機(jī)控制部51是通過(guò)執(zhí)行從電視機(jī)存儲(chǔ)部52讀取到臨時(shí)存儲(chǔ)部(未圖示)的程序來(lái)進(jìn)行各種運(yùn)算并且整體地控制電視機(jī)2所具有的各部分的裝置。
[0052]具體而言,電視機(jī)控制部51是如下裝置,即,基于經(jīng)由電視機(jī)通信部53獲取的影像數(shù)據(jù)、聲音數(shù)據(jù)以及節(jié)目數(shù)據(jù)等,在顯示部55中顯示影像、節(jié)目信息,或者從聲音輸出部56輸出聲音。另外,電視機(jī)控制部51基于來(lái)自操作部54或者姿勢(shì)識(shí)別裝置I的操作信號(hào),執(zhí)行電源的開/關(guān)、頻道的切換、音量的變更、節(jié)目表的顯示等規(guī)定的處理。另外,電視機(jī)控制部51在執(zhí)行規(guī)定的處理時(shí),將已執(zhí)行的處理的處理內(nèi)容與處理日期和時(shí)刻相對(duì)應(yīng)地保存在電視機(jī)存儲(chǔ)部52中來(lái)作為電視機(jī)處理歷史信息61。
[0053]另外,電視機(jī)控制部51基于來(lái)自姿勢(shì)識(shí)別裝置I的指示信號(hào)在顯示部55中顯示指不信號(hào)所表不的信息和/或從聲音輸出部56輸出聲音,從而向用戶通知該信息。另外,電視機(jī)控制部51也可以通過(guò)使LED等通知燈(未圖示)發(fā)光,來(lái)向用戶通知上述指示信號(hào)所表不的信息。
[0054]電視機(jī)控制部51從姿勢(shì)識(shí)別裝置I接收用于通知未拍攝到姿勢(shì)或操作對(duì)象者的指示或者用于通知不是操作對(duì)象者的指示,詳細(xì)情況后述?;谶@樣的指示,電視機(jī)控制部51可以將上述內(nèi)容作為文字(text)在顯示部55中進(jìn)行顯示,也可以將上述內(nèi)容作為聲音從聲音輸出部56輸出。另外,電視機(jī)控制部51也可以為了通知姿勢(shì)或操作對(duì)象者未被拍攝的情況,而在顯示部55的整個(gè)或一部分畫面中顯示攝像頭3拍攝到的圖像。
[0055]電視機(jī)存儲(chǔ)部52是保存供電視機(jī)控制部51參照的程序、數(shù)據(jù)等的裝置,例如保存上述的電視機(jī)處理歷史信息61等。
[0056]基于圖3對(duì)保存在電視機(jī)存儲(chǔ)部52中的電視機(jī)處理歷史信息61進(jìn)行說(shuō)明。圖3是示出保存在電視機(jī)存儲(chǔ)部52中的電視機(jī)處理歷史信息61的一個(gè)例子的圖。如圖3所示,電視機(jī)處理歷史信息61是將電視機(jī)控制部51已執(zhí)行的處理的處理內(nèi)容與電視機(jī)控制部51執(zhí)行了處理的處理日期和時(shí)間進(jìn)行了關(guān)聯(lián)的信息。
[0057]姿勢(shì)識(shí)別裝置I是根據(jù)攝像頭3拍攝到的圖像來(lái)識(shí)別用戶的姿勢(shì),并基于識(shí)別的姿勢(shì)向電子設(shè)備輸出用于控制該電子設(shè)備的信號(hào)(信息)的裝置。在圖1所示的例子中,姿勢(shì)識(shí)別裝置I搭載于電視機(jī)2,但是并不僅限于此,電視機(jī)2與姿勢(shì)識(shí)別裝置I也可以分開。接下來(lái)針對(duì)姿勢(shì)識(shí)別裝置I的具體結(jié)構(gòu)和功能進(jìn)行說(shuō)明。
[0058][姿勢(shì)識(shí)別裝置的結(jié)構(gòu)]
[0059]如圖1所示,姿勢(shì)識(shí)別裝置I具有姿勢(shì)識(shí)別裝置控制部11、姿勢(shì)識(shí)別裝置存儲(chǔ)部12以及姿勢(shì)識(shí)別裝置通信部13。
[0060]姿勢(shì)識(shí)別裝置通信部13是如下裝置,即,利用無(wú)線通信方式或有線通信方式進(jìn)行與攝像頭3等其他裝置之間的通信,而且按照姿勢(shì)識(shí)別裝置控制部11的指示進(jìn)行數(shù)據(jù)的交換。具體而言,姿勢(shì)識(shí)別裝置通信部13按照姿勢(shì)識(shí)別裝置控制部11的指示從攝像頭3獲取攝像頭3拍攝到的圖像。
[0061]姿勢(shì)識(shí)別裝置控制部11是通過(guò)執(zhí)行從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取到臨時(shí)存儲(chǔ)部(未圖示)的程序來(lái)進(jìn)行各種運(yùn)算并且整體地控制姿勢(shì)識(shí)別裝置I所具有的各部分的裝置。
[0062]在本實(shí)施方式中,姿勢(shì)識(shí)別裝置控制部11具有包括下述的各功能塊的結(jié)構(gòu):圖像獲取部21、人物判定部(人判定單元)22、人物確定部23、用戶判定部(操作對(duì)象者判定單元、操作禁止者判定單元)24、時(shí)機(jī)判定部(時(shí)機(jī)判定單元)26、輸出部(輸出單元)27、姿勢(shì)識(shí)別執(zhí)行部28以及信息設(shè)定部29。就這些姿勢(shì)識(shí)別裝置控制部11的各功能塊(21?24、26?29)而言,可以通過(guò)CPlXCentral Processing Unit:中央處理單兀)將存儲(chǔ)在由R0M(Read OnlyMemory:只讀存儲(chǔ)器)等實(shí)現(xiàn)的存儲(chǔ)裝置中的程序讀取到由RAM (Random Access Memory:隨機(jī)存取存儲(chǔ)器)等實(shí)現(xiàn)的臨時(shí)存儲(chǔ)部中并執(zhí)行上述程序來(lái)實(shí)現(xiàn)。
[0063]圖像獲取部21是經(jīng)由姿勢(shì)識(shí)別裝置通信部13從攝像頭3獲取攝像頭3拍攝到的圖像的裝置。
[0064]人物判定部22是判定圖像獲取部21所獲取的圖像中是否拍攝到了人物的裝置。例如,人物判定部22針對(duì)圖像執(zhí)行人體檢測(cè)或者臉部檢測(cè)等,在檢測(cè)的結(jié)果是檢測(cè)到了全身或作為人體的一部分的臉(頭)、手、腳等部位時(shí),判定為拍攝到了人物。另外,人物判定部22針對(duì)圖像執(zhí)行人體檢測(cè)或者臉部檢測(cè)等,確定全身或者部位的檢測(cè)可靠度來(lái)作為檢測(cè)的結(jié)果,在檢測(cè)可靠度大于等于規(guī)定值時(shí),判定為拍攝到了人物。
[0065]換而言之,人物判定部22在圖像獲取部21所獲取的圖像中拍攝到了人的全身或者人的部位時(shí),判定為拍攝到了人物。此外,人物判定部22也可以根據(jù)一個(gè)圖像檢測(cè)一個(gè)或者多個(gè)人。另外,人物判定部22只需是判定圖像中是否拍攝到了人物的裝置即可,其手法不受限制。
[0066]例如,人物判定部22為了對(duì)全身或者作為人體的一部分的臉(頭)、手、腳等部位進(jìn)行檢測(cè),可以應(yīng)用在日本特開2005-115932號(hào)公報(bào)、日本特開2008-158790號(hào)公報(bào)以及日本特開2008-15641號(hào)公報(bào)中記載的技術(shù)或?qū)W習(xí)型的人體檢測(cè)技術(shù)等。
[0067]人物確定部23是從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取人物確定信息41,并基于人物確定信息41確定人物判定部22所檢測(cè)到的人的裝置。
[0068]具體而言,在人物確定信息41包含用于分別確定“父親”、“母親”、“孩子”這三個(gè)人的信息時(shí),人物確定部23可以針對(duì)人物判定部22所檢測(cè)到的全身圖像、臉部圖像等進(jìn)行認(rèn)證,從而確定檢測(cè)到的是哪一個(gè)人。例如,人物確定部23可以計(jì)算人物判定部22所檢測(cè)到的臉部圖像的特征量,并對(duì)計(jì)算出的特征量與“父親”、“母親”、“孩子”的臉部圖像的特征量進(jìn)行比較,將最接近的人物確定為人物判定部22所檢測(cè)到的臉部圖像的人物。
[0069]另外,人物確定部23可以根據(jù)人物判定部22所檢測(cè)到的全身圖像、臉部圖像、手部圖像等,確定性別、年齡、人種等,并基于該確定的結(jié)果來(lái)確定人物判定部22檢測(cè)到的人是誰(shuí)。另外,也可以從人物判定部22所檢測(cè)到的全身圖像、臉部圖像、手部圖像等來(lái)檢測(cè)裝飾品等,并基于人物帶在身上的裝飾品來(lái)確定人物判定部22檢測(cè)到的人是誰(shuí)。
[0070]另外,在人物判定部22檢測(cè)出拍攝有全身或者臉部等一部分的圖像(例如,只拍攝有半身圖像或者臉、手或腳的一部分的圖像)時(shí),人物確定部23也可以在補(bǔ)充完未拍攝到的部分之后進(jìn)行確定人物的處理。例如,在檢測(cè)出拍攝有半身、半張臉的圖像時(shí),也可以在進(jìn)行鏡像變換(mirroring)之后進(jìn)行確定人物的處理。
[0071]此外,人物確定部23也可以不將人物判定部22檢測(cè)到的人作為個(gè)人進(jìn)行確定,而是確定性別、年齡、人種等人物的屬性。另外,人物確定部23只需能夠確定個(gè)人或?qū)傩约纯?,其手法不受到限制。人物確定部23也可以使用上述以外的公知技術(shù)來(lái)確定個(gè)人、屬性。
[0072]用戶判定部24是從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取用戶信息42并基于用戶信息42判定人物確定部23所確定的人物是否為操作對(duì)象者的裝置。另外,用戶判定部24是基于用戶信息42判斷人物確定部23所確定的人物是否為操作禁止者的裝置。
[0073]在此,操作對(duì)象者是指能夠利用姿勢(shì)來(lái)執(zhí)行對(duì)電視機(jī)2的操作的人物。換而言之,只有被設(shè)定為操作對(duì)象者的用戶才能夠利用姿勢(shì)來(lái)執(zhí)行對(duì)電視機(jī)2的操作。另外,操作禁止者是指禁止利用姿勢(shì)來(lái)執(zhí)行對(duì)電視機(jī)2的操作的人物。
[0074]時(shí)機(jī)判定部26基于電視機(jī)2或者姿勢(shì)識(shí)別裝置I的當(dāng)前或者過(guò)去的處理,判定是否處于用戶希望利用姿勢(shì)進(jìn)行操作的操作時(shí)機(jī)。具體而言,時(shí)機(jī)判定部26從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取操作時(shí)機(jī)信息43。然后,時(shí)機(jī)判定部26從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取姿勢(shì)識(shí)別裝置處理歷史信息45,并從電視機(jī)控制部51獲取表示電視機(jī)2的當(dāng)前的處理內(nèi)容的信息和表示過(guò)去的處理內(nèi)容的電視機(jī)處理歷史信息61,判定當(dāng)前時(shí)刻是否滿足操作時(shí)機(jī)信息43所表示的處理?xiàng)l件。
[0075]輸出部27是基于人物判定部22、用戶判定部24以及時(shí)機(jī)判定部26的判定結(jié)果,向電視機(jī)控制部51輸出用于指示規(guī)定信息的通知的指示信號(hào)或者用于指示所述通知的消除的指示信號(hào)的裝置。
[0076]具體而言,在人物判定部22判定為未拍攝到人物且時(shí)機(jī)判定部26判定為處于操作時(shí)機(jī)的情況下,輸出部27向電視機(jī)控制部51輸出用于指示特定通知的人物視場(chǎng)角外通知指示信號(hào)(人視場(chǎng)角外通知指示信息),該特定通知是指,未拍攝到操作對(duì)象者(用戶)的通知。另外,在人物判定部22判定為未拍攝到人物且時(shí)機(jī)判定部26判定為處于操作時(shí)機(jī)的情況下,輸出部27也可以向電視機(jī)控制部51輸出用于指示特定通知的姿勢(shì)視場(chǎng)角外通知指示信號(hào)來(lái)取代人物視場(chǎng)角外通知指示信號(hào),其中,該特定通知是指,未拍攝到姿勢(shì)的通知。另外,在用戶判定部24判定為既不是操作對(duì)象者也不是操作禁止者且時(shí)機(jī)判定部26判定為處于操作時(shí)機(jī)的情況下,輸出部27向電視機(jī)控制部51輸出用于指示特定通知的非操作對(duì)象者通知指示信號(hào)(非操作對(duì)象者通知指示信息),其中,該特定通知是指,不是操作對(duì)象者的通知。另外,在用戶判定部24判定為操作對(duì)象者且電視機(jī)2進(jìn)行未拍攝到姿勢(shì)的通知或不是操作對(duì)象者的通知的情況下,輸出部27向電視機(jī)控制部51輸出用于指示消除該通知的通知消除指示信號(hào)。
[0077]此外,輸出部27也可以在人物判定部22判定為未拍攝到人物時(shí),向電視機(jī)控制部51輸出用于指示未拍攝到操作對(duì)象者(用戶)的通知的人物視場(chǎng)角外通知指示信號(hào)。
[0078]另外,輸出部27向電視機(jī)控制部51輸出由姿勢(shì)識(shí)別執(zhí)行部28生成的操作信號(hào)。另外,輸出部27向電視機(jī)控制部51輸出由姿勢(shì)識(shí)別執(zhí)行部28生成的姿勢(shì)識(shí)別錯(cuò)誤信號(hào)。
[0079]姿勢(shì)識(shí)別執(zhí)行部28在用戶判定部24判定為操作對(duì)象者時(shí),執(zhí)行姿勢(shì)識(shí)別處理。具體而言,姿勢(shì)識(shí)別執(zhí)行部28在開始姿勢(shì)識(shí)別處理時(shí),從圖像獲取部21獲取按時(shí)間順序排列的多個(gè)圖像,并且從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取姿勢(shì)信息44。然后,姿勢(shì)識(shí)別執(zhí)行部28根據(jù)獲取的多個(gè)圖像檢測(cè)姿勢(shì)信息44所示的姿勢(shì)。
[0080]姿勢(shì)識(shí)別執(zhí)行部28在檢測(cè)出規(guī)定的姿勢(shì)時(shí),生成在姿勢(shì)信息44中與檢測(cè)出的姿勢(shì)相對(duì)應(yīng)的操作信號(hào)。另一方面,在不能夠檢測(cè)出姿勢(shì)時(shí),姿勢(shì)識(shí)別執(zhí)行部28也可以生成姿勢(shì)識(shí)別錯(cuò)誤信號(hào)。
[0081]另外,姿勢(shì)識(shí)別執(zhí)行部28將執(zhí)行了姿勢(shì)識(shí)別處理的日期和時(shí)刻、生成的操作信號(hào)或姿勢(shì)識(shí)別錯(cuò)誤信號(hào)以及操作對(duì)象者相互對(duì)應(yīng)起來(lái)生成姿勢(shì)識(shí)別裝置處理歷史信息45,并將該姿勢(shì)識(shí)別裝置處理歷史信息45保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中。
[0082]信息設(shè)定部29是用于設(shè)定人物確定信息41、用戶信息42、操作時(shí)機(jī)信息43以及姿勢(shì)信息44的裝置。具體而言,信息設(shè)定部29基于來(lái)自用戶的指示,即,從電視機(jī)控制部51獲取輸入到操作部54的操作信號(hào)或者從姿勢(shì)識(shí)別執(zhí)行部28獲取操作信號(hào)而基于獲取的操作信號(hào)生成或更新各信息。
[0083]另外,在規(guī)定數(shù)量的處理歷史作為姿勢(shì)識(shí)別裝置處理歷史信息45保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中時(shí),信息設(shè)定部29也可以參照姿勢(shì)識(shí)別裝置處理歷史信息45,將通過(guò)姿勢(shì)執(zhí)行操作的次數(shù)為規(guī)定次數(shù)的人物設(shè)定為操作對(duì)象者,并對(duì)用戶信息42進(jìn)行更新。
[0084]另外,在新的處理歷史作為姿勢(shì)識(shí)別裝置處理歷史信息45保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中時(shí),信息設(shè)定部29也可以參照最新的處理歷史,僅限在規(guī)定期間內(nèi)僅將剛剛通過(guò)姿勢(shì)進(jìn)行了操作的人物設(shè)定為操作對(duì)象者,并對(duì)用戶信息42進(jìn)行更新。
[0085]另外,信息設(shè)定部29也可以參照姿勢(shì)識(shí)別裝置處理歷史信息45,僅限在規(guī)定期間內(nèi)將在規(guī)定期間內(nèi)通過(guò)姿勢(shì)執(zhí)行了操作的一個(gè)或多個(gè)人物設(shè)定為操作對(duì)象者,并對(duì)用戶信息42進(jìn)行更新。例如,當(dāng)用戶X通過(guò)姿勢(shì)執(zhí)行了操作時(shí),將之后的5分鐘作為等候操作時(shí)間。假設(shè)用戶Y在等候操作時(shí)間內(nèi)通過(guò)姿勢(shì)執(zhí)行了操作。在該情況下,信息設(shè)定部29在等候操作時(shí)間結(jié)束后,在規(guī)定的操作對(duì)象者有效期間(例如,15分鐘)內(nèi)將用戶X和用戶Y設(shè)定為操作對(duì)象者。
[0086]此外,信息設(shè)定部29也可以在從設(shè)定了操作對(duì)象者或操作禁止者開始經(jīng)過(guò)了規(guī)定期間之后,解除針對(duì)操作對(duì)象者或操作禁止者的設(shè)定。也就是說(shuō),信息設(shè)定部29也可以事先規(guī)定針對(duì)操作對(duì)象者或操作禁止者的設(shè)定有效的期間,在設(shè)定有效期間內(nèi),將規(guī)定的用戶設(shè)定為操作對(duì)象者或操作禁止者,在設(shè)定有效期間結(jié)束后,解除該設(shè)定。另外,信息設(shè)定部29也可以基于來(lái)自用戶的指示,即,從電視機(jī)控制部51獲取輸入至操作部54的操作信號(hào)或者從姿勢(shì)識(shí)別執(zhí)行部28獲取操作信號(hào),并基于獲取的操作信號(hào)解除針對(duì)操作對(duì)象者或操作禁止者的設(shè)定。[0087]另外,信息設(shè)定部29也可以從電視機(jī)控制部51獲取電視機(jī)處理歷史信息61而且從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取姿勢(shì)識(shí)別裝置處理歷史信息45,并基于電視機(jī)處理歷史信息61和姿勢(shì)識(shí)別裝置處理歷史信息45,學(xué)習(xí)用戶希望通過(guò)姿勢(shì)進(jìn)行操作的操作時(shí)機(jī),并對(duì)操作時(shí)機(jī)信息43進(jìn)行更新。
[0088]姿勢(shì)識(shí)別裝置存儲(chǔ)部12是保存供姿勢(shì)識(shí)別裝置控制部11進(jìn)行參照的程序、數(shù)據(jù)等的裝置,例如保存上述的人物確定信息41、用戶信息42、操作時(shí)機(jī)信息43、姿勢(shì)信息44、以及姿勢(shì)識(shí)別裝置處理歷史信息45等。
[0089]分別基于圖4?圖8對(duì)保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中的人物確定信息41、用戶信息42、操作時(shí)機(jī)信息43、姿勢(shì)信息44以及姿勢(shì)識(shí)別裝置處理歷史信息45進(jìn)行說(shuō)明。圖4是示出保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中的人物確定信息41的一個(gè)例子的圖。圖5是示出保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中的用戶信息42的一個(gè)例子的圖。圖6是示出保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中的操作時(shí)機(jī)信息43的一個(gè)例子的圖。圖7是示出保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中的姿勢(shì)信息44的一個(gè)例子的圖。圖8是示出保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中的姿勢(shì)識(shí)別裝置處理歷史信息45的一個(gè)例子的圖。
[0090](人物確定信息)
[0091]如圖4所示,人物確定信息41是用戶名和用于個(gè)別地確定該用戶的個(gè)別確定信息以及表示該用戶的屬性的個(gè)人屬性信息相互對(duì)應(yīng)的信息。在圖示的例子中,作為個(gè)別確定信息存在“特征量”?!疤卣髁俊崩缡菑挠脩舻娜梭w圖像和/或臉部圖像中抽取的信息。人物確定部23參照“特征量”,從人物判定部22所檢測(cè)出的人體圖像或者臉部圖像中抽取特征量,并確定該特征量是否與人物確定信息41中包含的某一項(xiàng)特征量一致或近似,從而個(gè)別地確定用戶。
[0092]另外,在圖示的例子中,作為個(gè)人屬性信息,存在“性別”、“身高”、“年齡”、“人種”以及“裝飾品”?!靶詣e”表示用戶的性別。人物確定部23根據(jù)人物判定部22檢測(cè)出的人體圖像或者臉部圖像,基于嘴唇的顏色、皮膚的顏色、基于眉毛的形狀或顏色來(lái)判斷的化妝的有無(wú)、美甲(nail)的有無(wú)、胡須的有無(wú)、指甲的形狀(長(zhǎng)指甲時(shí)是女性,短指甲時(shí)是男性等)、服裝、鞋襪等來(lái)確定用戶的性別。人物確定部23根據(jù)確定的性別判斷是哪一個(gè)用戶。例如,在圖示的例子中,如果能夠判斷為女性,則因?yàn)榕杂脩糁挥小澳赣H”,所以能夠?qū)⒂脩舸_定為“母親”。
[0093]另外,“身高”表示用戶的身高。人物確定部23根據(jù)人物判定部22檢測(cè)出的人體圖像或者臉部圖像確定拍攝到的人的身高,并根據(jù)確定的身高判斷是哪一個(gè)用戶。
[0094]另外,“年齡”表示用戶的年齡。人物確定部23根據(jù)人物判定部22檢測(cè)出的人體圖像或者臉部圖像確定拍攝到的人的年齡,并根據(jù)確定的年齡判斷是哪一個(gè)用戶。
[0095]另外,“人種”表示用戶的人種。人物確定部23根據(jù)人物判定部22檢測(cè)出的人體圖像或臉部圖像,基于瞳孔的顏色、皮膚的顏色、頭發(fā)的顏色等,確定拍攝到的人的人種,并根據(jù)確定的人種判斷是哪一個(gè)用戶。
[0096]另外,“裝飾品”表示用戶戴在身上的裝飾品。人物確定部23根據(jù)人物判定部22檢測(cè)出的人體圖像或者臉部圖像,對(duì)眼鏡、戒指、手表等裝飾品進(jìn)行檢測(cè),判斷佩戴了檢測(cè)出的裝飾品的人物是哪一個(gè)用戶。
[0097]此外,人物確定信息41中也可以包含有“體型”、“發(fā)型”等信息作為個(gè)人屬性信息。另外,在圖示的例子中,人物確定信息41中包含六種信息,但是人物確定信息41只需包含個(gè)別確定信息或者個(gè)人屬性信息中的至少一種信息即可。
[0098](用戶信息)
[0099]如圖5所示,用戶信息42是表示哪個(gè)用戶被設(shè)定為操作對(duì)象者或操作禁止者的信息。在圖5所示的例子中,“父親”被設(shè)定為操作對(duì)象者,“孩子”被設(shè)定為操作禁止者。在圖5所示的例子中,將用戶個(gè)人設(shè)定為操作對(duì)象者和操作禁止者,但是并不僅限于此。例如,也可以將“女性”設(shè)定為操作對(duì)象者,或者將“未成年人”設(shè)定為操作禁止者,或者以用戶的屬性來(lái)設(shè)定操作對(duì)象者或操作禁止者。
[0100]此外,在本實(shí)施方式中,只有被設(shè)定為操作對(duì)象者的用戶能夠通過(guò)姿勢(shì)執(zhí)行操作,但是并不僅限于此。例如,也可以設(shè)定為無(wú)論誰(shuí)都能夠利用姿勢(shì)自由地操作電視機(jī)的狀態(tài)。在該情況下,例如可以將操作對(duì)象者設(shè)定為“全部用戶”。
[0101]另外,如上所述,操作對(duì)象者和操作禁止者也可以事先通過(guò)用戶的指示或者缺省來(lái)設(shè)定。
[0102](操作時(shí)機(jī)信息)
[0103]如圖6所示,操作時(shí)機(jī)信息43是表示視為是操作時(shí)機(jī)的條件的信息,該條件用于判斷是否處于用戶希望利用姿勢(shì)進(jìn)行操作的操作時(shí)機(jī)。
[0104]認(rèn)為以下各時(shí)刻為用戶希望利用姿勢(shì)進(jìn)行操作的操作時(shí)機(jī)的可能性高:S卩,電子設(shè)備進(jìn)行了規(guī)定的處理之后、電子設(shè)備正在進(jìn)行規(guī)定的處理的期間內(nèi)、從電子設(shè)備進(jìn)行了規(guī)定的處理開始經(jīng)過(guò)了規(guī)定期間之后、通過(guò)姿勢(shì)進(jìn)行了操作之后、從通過(guò)姿勢(shì)進(jìn)行了操作開始經(jīng)過(guò)了規(guī)定期間之后等。因此,設(shè)定圖6所示的條件作為用于判斷是否處于操作時(shí)機(jī)的條件。
[0105]在圖6所示的例子中,時(shí)機(jī)判定部26從姿勢(shì)識(shí)別裝置存儲(chǔ)部12中讀取姿勢(shì)識(shí)別裝置處理歷史信息45,并分別判斷當(dāng)前時(shí)刻是不是在通過(guò)姿勢(shì)進(jìn)行了操作之后的5分鐘以內(nèi),或者是不是在從通過(guò)姿勢(shì)進(jìn)行了操作開始經(jīng)過(guò)了 20分鐘后的5分鐘以內(nèi),在是任一者的情況下判斷為是操作時(shí)機(jī)。另外,時(shí)機(jī)判定部26從電視機(jī)控制部51獲取電視機(jī)處理歷史信息61,并分別判斷當(dāng)前時(shí)刻是不是在打開電視機(jī)的電源之后的5分鐘以內(nèi),或者是不是在變更音量之后的I分鐘以內(nèi),或者是不是在從變更頻道的操作開始經(jīng)過(guò)了 I小時(shí)后的5分鐘以內(nèi),在是任一者的情況下判斷為是操作時(shí)機(jī)。另外,時(shí)機(jī)判定部26從電視機(jī)控制部51獲取表示電視機(jī)2的當(dāng)前的處理內(nèi)容的信息,如果電視機(jī)2當(dāng)前正在顯示廣告(CM),則判定為是操作時(shí)機(jī)。
[0106]這樣,在本實(shí)施方式中,時(shí)機(jī)判定部26在操作時(shí)機(jī)信息43中包含的任一項(xiàng)條件得到滿足時(shí),判定為是操作時(shí)機(jī),但是并不僅限于此。例如,時(shí)機(jī)判定部26也可以在操作時(shí)機(jī)信息43中包含的規(guī)定數(shù)量以上的條件得到滿足時(shí),判定為是操作時(shí)機(jī)。另外,時(shí)機(jī)判定部26也可以針對(duì)各條件事先設(shè)定可靠度,在可靠度的總值(和值)大于等于規(guī)定值時(shí)判定為是操作時(shí)機(jī)。另外,也可以與每一用戶相對(duì)應(yīng)地事先設(shè)定操作時(shí)機(jī)信息43中包含的各條件。由此,時(shí)機(jī)判定部26能夠與各用戶的使用形態(tài)相配合地判定操作時(shí)機(jī)。
[0107]另外,也可以追加特定的時(shí)間帶、星期幾等進(jìn)一步的條件作為操作時(shí)機(jī)信息43的各條件。另外,在根據(jù)電子設(shè)備的特性、個(gè)人的使用形態(tài),電子設(shè)備被周期地操作時(shí),也可以將周期性的條件設(shè)定為操作時(shí)機(jī)。這樣,就操作時(shí)機(jī)而言,操作時(shí)機(jī)根據(jù)電子設(shè)備的特性(屬性)、操作者的使用形態(tài)而分成多種。因此,優(yōu)選根據(jù)電子設(shè)備的特性(屬性)、操作者的使用形態(tài)而適當(dāng)?shù)卦O(shè)定或者學(xué)習(xí)操作時(shí)機(jī)。
[0108](姿勢(shì)信息)
[0109]如圖7所示,姿勢(shì)信息44是姿勢(shì)與操作信號(hào)相對(duì)應(yīng)的信息。例如,在根據(jù)獲取的圖像來(lái)檢測(cè)出操作對(duì)象者采取“只立起右手食指”的姿勢(shì)時(shí),姿勢(shì)識(shí)別執(zhí)行部28生成操作信號(hào)“S01”。此外,操作信號(hào)“SOI”是控制電視機(jī)2的電源開/關(guān)的信號(hào),操作信號(hào)“S02”是控制電視機(jī)2的頻道變更的信號(hào),操作信號(hào)“ S03 ”是控制電視機(jī)2的音量變更的信號(hào)。
[0110](姿勢(shì)識(shí)別裝置處理歷史信息)
[0111]如圖8所示,姿勢(shì)識(shí)別裝置處理歷史信息45是如下的信息:即,在所述姿勢(shì)識(shí)別裝置處理歷史信息45中,由姿勢(shì)識(shí)別執(zhí)行部28生成的操作信號(hào)、姿勢(shì)識(shí)別執(zhí)行部28執(zhí)行了姿勢(shì)識(shí)別處理的處理日期和時(shí)刻以及進(jìn)行了由姿勢(shì)識(shí)別執(zhí)行部28識(shí)別出的姿勢(shì)的操作對(duì)象者相互對(duì)應(yīng)。
[0112]此外,在圖1所示的例子中,電視機(jī)2搭載姿勢(shì)識(shí)別裝置1,但是并不僅限于此,也可以是電視機(jī)2具有姿勢(shì)識(shí)別裝置I的全部功能。具體而言,也可以是電視機(jī)控制部51具有姿勢(shì)識(shí)別裝置控制部11的功能,電視機(jī)存儲(chǔ)部52具有姿勢(shì)識(shí)別裝置存儲(chǔ)部12所保存的信息,電視機(jī)通信部53具有姿勢(shì)識(shí)別裝置通信部13的功能。
[0113]<姿勢(shì)識(shí)別裝置的處理>
[0114]接下來(lái),基于圖9?圖13說(shuō)明由姿勢(shì)識(shí)別裝置I執(zhí)行的處理。圖9是示出由姿勢(shì)識(shí)別裝置I執(zhí)行的處理的一個(gè)例子的流程圖。另外,圖10?圖13是示出攝像頭3拍攝到的圖像的圖。在此,假設(shè)圖5中示出的信息作為用戶信息42保存在姿勢(shì)識(shí)別裝置存儲(chǔ)部12中。也就是說(shuō),假設(shè)操作對(duì)象者是“父親”、操作禁止者是“孩子”、“母親”是既不是操作對(duì)象者也不是操作禁止者的人物。
[0115][攝像頭拍攝到的圖像中未拍攝有任何人的情況]
[0116]首先,針對(duì)如圖10所示地?cái)z像頭3拍攝到的圖像中未拍攝有任何人的情況下的處理進(jìn)行說(shuō)明。
[0117]如圖9所示,圖像獲取部21經(jīng)由姿勢(shì)識(shí)別裝置通信部13從攝像頭3獲取攝像頭3拍攝到的圖像(SI)。人物判定部22判定圖像獲取部21所獲取的圖像中是否拍攝有人物
(S2)。在此,因?yàn)閳D10所示的圖像中未拍攝到任何人,所以人物判定部22不會(huì)從圖像中檢測(cè)出任何人物,從而判定為未拍攝到人物。
[0118]當(dāng)人物判定部22判定為未拍攝到人物時(shí)(S2:否),時(shí)機(jī)判定部26基于電視機(jī)2或者姿勢(shì)識(shí)別裝置I的當(dāng)前或過(guò)去的處理,判定是否處于用戶希望通過(guò)姿勢(shì)進(jìn)行操作的操作時(shí)機(jī)(S3 )。當(dāng)時(shí)機(jī)判定部26判定為處于操作時(shí)機(jī)時(shí)(S3:是),輸出部27向電視機(jī)控制部51輸出用于指示未拍攝到姿勢(shì)或操作對(duì)象者的通知的人物視場(chǎng)角外通知指示信號(hào)(S4)。另一方面,當(dāng)時(shí)機(jī)判定部26判定為不處于操作時(shí)機(jī)時(shí)(S3:否),輸出部27不進(jìn)行任何輸出,返回到SI。
[0119][攝像頭拍攝到的圖像中拍攝有“母親”的情況]
[0120]接下來(lái),針對(duì)如圖11所示地?cái)z像頭3拍攝到的圖像中拍攝有“母親”的情況下的處理進(jìn)行說(shuō)明。
[0121]如圖9所示,圖像獲取部21經(jīng)由姿勢(shì)識(shí)別裝置通信部13從攝像頭3中獲取攝像頭3拍攝到的圖像(SI)。人物判定部22判定圖像獲取部21所獲取的圖像中是否拍攝有人物(S2)。在此,因?yàn)閳D11所示的圖像中拍攝有“母親”的臉等,所以人物判定部22根據(jù)圖像檢測(cè)出人物,從而判定為拍攝到了人物。
[0122]當(dāng)人物判定部22判定為拍攝到了人物時(shí)(S2:是),人物確定部23從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取人物確定信息41,并基于人物確定信息41確定由人物判定部22檢測(cè)出的人(S5)。在此,人物確定部23確定人物判定部22檢測(cè)出的人物是“母親”。
[0123]接著,用戶判定部24從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取用戶信息42,并基于用戶信息42判定由人物確定部23確定的人物是否為操作對(duì)象者(S6)。在此,因?yàn)椤澳赣H”不是操作對(duì)象者,所以用戶判定部24判定為不是操作對(duì)象者(S6:否)。接下來(lái),用戶判定部24基于用戶信息42判定由人物確定部23確定的人物是否為操作禁止者(S7)。在此,因?yàn)椤澳赣H”也不是操作禁止者,所以用戶判定部24判定為不是操作禁止者(S7:否)。
[0124]接著,時(shí)機(jī)判定部26基于電視機(jī)2或者姿勢(shì)識(shí)別裝置I的當(dāng)前或過(guò)去的處理,判定是否處于用戶希望通過(guò)姿勢(shì)進(jìn)行操作的操作時(shí)機(jī)(S8)。當(dāng)時(shí)機(jī)判定部26判定為處于操作時(shí)機(jī)時(shí)(S8:是),輸出部27向電視機(jī)控制部51輸出用于指示不是操作對(duì)象者的通知的非操作對(duì)象者通知指示信號(hào)(S9)。另一方面,當(dāng)時(shí)機(jī)判定部26判定為不處于操作時(shí)機(jī)時(shí)(S8:否),輸出部27不進(jìn)行任何輸出,返回到SI。
[0125][攝像頭拍攝到的圖像中拍攝有“孩子”的情況]
[0126]接下來(lái),針對(duì)如圖12所示地?cái)z像頭3拍攝到的圖像中拍攝有“孩子”的情況下的處理進(jìn)行說(shuō)明。
[0127]如圖9所示,圖像獲取部21經(jīng)由姿勢(shì)識(shí)別裝置通信部13從攝像頭3中獲取攝像頭3拍攝到的圖像(SI)。人物判定部22判定圖像獲取部21所獲取的圖像中是否拍攝有人物(S2)。在此,因?yàn)閳D12所示的圖像中拍攝有“孩子”的臉等,所以人物判定部22根據(jù)圖像檢測(cè)出人物,從而判定為拍攝到了人物。
[0128]當(dāng)人物判定部22判定為拍攝到了人物時(shí)(S2:是),人物確定部23從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取人物確定信息41,并基于人物確定信息41確定由人物判定部22檢測(cè)出的人
(S5)。在此,人物確定部23確定人物判定部22檢測(cè)出的人物是“孩子”。
[0129]接著,用戶判定部24從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取用戶信息42,并基于用戶信息42判定由人物確定部23確定的人物是否為操作對(duì)象者(S6)。在此,因?yàn)椤昂⒆印辈皇遣僮鲗?duì)象者,所以用戶判定部24判定為不是操作對(duì)象者(S6:否)。接下來(lái),用戶判定部24基于用戶信息42判定由人物確定部23確定的人物是否為操作禁止者(S7)。在此,因?yàn)椤昂⒆印笔遣僮鹘拐?,所以用戶判定?4判定為操作禁止者(S7:是)。當(dāng)用戶判定部24判定為操作禁止者時(shí),輸出部27不進(jìn)行任何輸出,返回到SI。
[0130][攝像頭拍攝到的圖像中拍攝有“父親”的情況]
[0131]接下來(lái),針對(duì)如圖13所示地?cái)z像頭3拍攝到的圖像中拍攝有“父親”的情況下的處理進(jìn)行說(shuō)明。
[0132]如圖9所示,圖像獲取部21經(jīng)由姿勢(shì)識(shí)別裝置通信部13從攝像頭3獲取攝像頭3拍攝到的圖像(SI)。人物判定部22判定圖像獲取部21所獲取的圖像中是否拍攝有人物
(S2)。在此,因?yàn)閳D12所示的圖像中拍攝有“父親”的臉等,所以人物判定部22根據(jù)圖像檢測(cè)出人物,從而判定為拍攝到了人物。[0133]當(dāng)人物判定部22判定為拍攝到了人物時(shí)(S2:是),人物確定部23從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取人物確定信息41,并基于人物確定信息41確定由人物判定部22檢測(cè)出的人
(S5)。在此,人物確定部23確定人物判定部22檢測(cè)出的人物是“父親”。
[0134]接著,用戶判定部24從姿勢(shì)識(shí)別裝置存儲(chǔ)部12讀取用戶信息42,并基于用戶信息42判定由人物確定部23確定的人物是否為操作對(duì)象者(S6)。在此,因?yàn)椤案赣H”是操作對(duì)象者,所以用戶判定部24判定為是操作對(duì)象者(S6:是)。
[0135]在此,當(dāng)電視機(jī)控制部51正基于指示信號(hào)執(zhí)行通知處理時(shí)(S10:是),輸出部27向電視機(jī)控制部51輸出用于指示消除該通知的通知消除指示信號(hào)(S11)。然后,姿勢(shì)識(shí)別執(zhí)行部28執(zhí)行姿勢(shì)識(shí)別處理(S11)。另一方面,當(dāng)電視機(jī)控制部51沒(méi)有在執(zhí)行通知處理時(shí)(S10:否),輸出部27不進(jìn)行任何輸出,姿勢(shì)識(shí)別執(zhí)行部28執(zhí)行姿勢(shì)識(shí)別處理(S12)。
[0136]此外,在圖9所示的處理例中,在判定是否為操作對(duì)象者之后執(zhí)行姿勢(shì)識(shí)別處理,但是并不僅限于此。例如,也可以針對(duì)圖像獲取部21所獲取的圖像,首先由姿勢(shì)識(shí)別執(zhí)行部28執(zhí)行姿勢(shì)識(shí)別處理,在不能夠正常進(jìn)行姿勢(shì)識(shí)別時(shí),進(jìn)行上述S2?S9的處理。
[0137]〈變形例〉
[0138]作為變形例,對(duì)電子設(shè)備是安全門(security gate)的情況進(jìn)行說(shuō)明。該安全門設(shè)置在只有女性會(huì)員能夠進(jìn)入的房間的入口。而且,在此操作對(duì)象者被設(shè)定為經(jīng)過(guò)事先注冊(cè)的女性用戶,操作禁止者被設(shè)定為男性。
[0139]在該情況下,當(dāng)女性會(huì)員雖然做出了姿勢(shì),但未被攝像頭拍攝到時(shí),安全門向女性會(huì)員發(fā)出表示未拍攝到姿勢(shì)的通知。另外,在不是會(huì)員的女性做出了姿勢(shì)時(shí),安全門向不是會(huì)員的女性發(fā)出表示不是操作對(duì)象者也就是非會(huì)員的通知。此時(shí),安全門也可以向不是會(huì)員的女性通知成為會(huì)員所需要的信息。另外,在男性做出姿勢(shì)時(shí),安全門不進(jìn)行任何通知。在安全門等中,從安全性的角度出發(fā),向允許者(操作對(duì)象者)和可能成為允許者的人物以外的人物(在該情況下是指男性)通知在通過(guò)姿勢(shì)進(jìn)行的操作中產(chǎn)生了錯(cuò)誤,不是優(yōu)選的。
[0140]此外,雖然取決于安全性與用戶的便利之間的平衡,但是當(dāng)在性別判定處理中執(zhí)行錯(cuò)誤的判定處理的頻率不低時(shí),安全門可以在判斷為男性的情況下,也在多次的判定處理中偶爾發(fā)出表示非會(huì)員的通知。
[0141]〈用于解決問(wèn)題的手段〉
[0142]本發(fā)明的姿勢(shì)識(shí)別裝置根據(jù)攝像頭拍攝到的圖像來(lái)識(shí)別人的姿勢(shì),并基于識(shí)別出的姿勢(shì)向電子設(shè)備輸出用于控制該電子設(shè)備的信息,其具有:人判定單元,判定上述圖像中是否包含有人;以及輸出單元,在上述人判定單元判定為上述圖像中未包含有人時(shí),輸出用于指示第一通知的人視場(chǎng)角外通知指示信息,其中,上述第一通知是指,未拍攝到人的通知。
[0143]本發(fā)明的姿勢(shì)識(shí)別裝置的控制方法用于控制姿勢(shì)識(shí)別裝置,該姿勢(shì)識(shí)別裝置根據(jù)攝像頭拍攝到的圖像來(lái)識(shí)別人的姿勢(shì),并基于識(shí)別出的姿勢(shì)向電子設(shè)備輸出用于控制該電子設(shè)備的信息,其包括:人判定步驟,判定上述圖像中是否包含有人;以及輸出步驟,當(dāng)在人判定步驟中判定為上述圖像中未包含有人時(shí),輸出用于指示第一通知的人視場(chǎng)角外通知指示信息,其中,上述第一通知是指,未拍攝到人的通知。
[0144]根據(jù)上述結(jié)構(gòu),在攝像頭拍攝到的圖像中未包含有人時(shí),輸出單元向電子設(shè)備輸出用于指示未拍攝到人的通知的人視場(chǎng)角外通知指示信息。電子設(shè)備基于人視場(chǎng)角外通知指示信息,向操作電子設(shè)備的人發(fā)出表示未拍攝到人的通知。
[0145]因此,操作電子設(shè)備的人基于來(lái)自電子設(shè)備的通知,能夠判斷攝像頭拍攝到的圖像中是否包含有自身,即,能夠判斷自身是否在攝像頭的視場(chǎng)角外。因此,起到能夠防止操作電子設(shè)備的人的如下的無(wú)意義的動(dòng)作的效果:即,盡管未拍攝到操作電子設(shè)備的人自身,但該人為了使姿勢(shì)被識(shí)別而多次重復(fù)相同的姿勢(shì)。
[0146]另外,優(yōu)選地,本發(fā)明的姿勢(shì)識(shí)別裝置還具有時(shí)機(jī)判定單元,該時(shí)機(jī)判定單元基于上述電子設(shè)備或者上述姿勢(shì)識(shí)別裝置的當(dāng)前或過(guò)去的處理,判定是否處于人希望通過(guò)姿勢(shì)進(jìn)行操作的操作時(shí)機(jī),當(dāng)上述人判定單元判定為上述圖像中未包含有人且上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)時(shí),上述輸出單元輸出上述人視場(chǎng)角外通知指示信息。
[0147]根據(jù)上述結(jié)構(gòu),當(dāng)攝像頭拍攝到的圖像中未包含有人且是人希望通過(guò)姿勢(shì)進(jìn)行操作的操作時(shí)機(jī)時(shí),輸出單元向電子設(shè)備輸出用于指示未拍攝到人的通知的人視場(chǎng)角外通知指示信息。
[0148]當(dāng)操作電子設(shè)備的人不在視場(chǎng)角內(nèi)時(shí),存在操作電子設(shè)備的人希望通過(guò)姿勢(shì)進(jìn)行操作然而該人不在視場(chǎng)角內(nèi)的情況,但是也存在由于人不希望通過(guò)姿勢(shì)進(jìn)行操作所以該人不在視場(chǎng)角內(nèi)的情況。因此,只在操作電子設(shè)備的人不在視場(chǎng)角內(nèi)且該人希望通過(guò)姿勢(shì)進(jìn)行操作時(shí)才向操作電子設(shè)備的人發(fā)出表示不在視場(chǎng)角內(nèi)的通知,由此能夠不妨礙操作電子設(shè)備的人對(duì)電子設(shè)備的使用,防止該人的無(wú)意義的動(dòng)作。
[0149]另外,優(yōu)選地,在本發(fā)明的姿勢(shì)識(shí)別裝置中,在當(dāng)前時(shí)刻為自從上述姿勢(shì)識(shí)別裝置向上述電子設(shè)備輸出基于姿勢(shì)識(shí)別的上述信息起規(guī)定期間以內(nèi)的時(shí)刻時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)。
[0150]認(rèn)為在人通過(guò)姿勢(shì)進(jìn)行操作之后的規(guī)定期間內(nèi)人再次通過(guò)姿勢(shì)進(jìn)行操作的可能性高。因此,如上述結(jié)構(gòu)那樣,在當(dāng)前時(shí)刻為自從上述姿勢(shì)識(shí)別裝置向上述電子設(shè)備輸出基于姿勢(shì)識(shí)別的上述信息起規(guī)定期間以內(nèi)的時(shí)刻時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī),由此能夠基于姿勢(shì)識(shí)別裝置的處理,高精度地確定操作時(shí)機(jī)。
[0151]另外,優(yōu)選地,在本發(fā)明的姿勢(shì)識(shí)別裝置中,當(dāng)自從上述姿勢(shì)識(shí)別裝置向上述電子設(shè)備輸出基于姿勢(shì)識(shí)別的上述信息起經(jīng)過(guò)了規(guī)定期間時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)。
[0152]認(rèn)為在自從人通過(guò)姿勢(shì)進(jìn)行了操作起經(jīng)過(guò)了規(guī)定期間的狀態(tài)下人再次通過(guò)姿勢(shì)進(jìn)行操作的可能性高。例如,當(dāng)電子設(shè)備是電視機(jī)時(shí),節(jié)目以一個(gè)小時(shí)為單位構(gòu)成的情況較多,另外,在節(jié)目結(jié)束時(shí)可能變更至其他頻道。因此,在電視機(jī)的情況下,認(rèn)為在自從進(jìn)行操作開始經(jīng)過(guò)了一個(gè)小時(shí)后,再次進(jìn)行頻道切換等操作的可能性高。
[0153]因此,如上述結(jié)構(gòu)那樣,當(dāng)自從上述姿勢(shì)識(shí)別裝置向上述電子設(shè)備輸出基于姿勢(shì)識(shí)別的上述信息起經(jīng)過(guò)了規(guī)定期間時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī),由此能夠基于姿勢(shì)識(shí)別裝置的處理,高精度地確定操作時(shí)機(jī)。
[0154]另外,優(yōu)選地,在本發(fā)明的姿勢(shì)識(shí)別裝置中,在上述電子設(shè)備在規(guī)定的期間內(nèi)執(zhí)行了規(guī)定的處理時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)。
[0155]認(rèn)為在電子設(shè)備執(zhí)行了規(guī)定處理后的規(guī)定期間之內(nèi)人再次通過(guò)姿勢(shì)進(jìn)行操作的可能性高。例如,認(rèn)為人在打開電子設(shè)備的電源后立即操作電子設(shè)備的可能性高。
[0156]因此,如上述結(jié)構(gòu)那樣,在上述電子設(shè)備在規(guī)定的期間內(nèi)執(zhí)行了規(guī)定的處理時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī),由此能夠基于姿勢(shì)識(shí)別裝置的處理,高精度地確定操作時(shí)機(jī)。
[0157]另外,優(yōu)選地,在本發(fā)明的姿勢(shì)識(shí)別裝置中,上述電子設(shè)備是電視機(jī),在上述電視機(jī)顯示廣告時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)。
[0158]認(rèn)為在電視機(jī)顯示廣告時(shí)人進(jìn)行頻道切換等操作的可能性高。因此,如上述結(jié)構(gòu)那樣,上述時(shí)機(jī)判定單元在上述電視機(jī)顯示廣告時(shí)判定為處于操作時(shí)機(jī),由此能夠基于姿勢(shì)識(shí)別裝置的處理,高精度地確定操作時(shí)機(jī)。
[0159]另外,優(yōu)選地,本發(fā)明的姿勢(shì)識(shí)別裝置還具有操作對(duì)象者判定單元,該操作對(duì)象者判定單元判定由上述人判定單元判定為包含在上述圖像中的人是否為能夠通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作的操作對(duì)象者,當(dāng)上述操作對(duì)象者判定單元判定為不是操作對(duì)象者時(shí),上述輸出單元輸出用于指示第二通知的非操作對(duì)象者通知指示信息,其中,上述第二通知是指,不是操作對(duì)象者的通知。
[0160]在操作電子設(shè)備的人不是操作對(duì)象者時(shí),S卩,在該人不能夠通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作時(shí),上述輸出單元輸出用于指示不是操作對(duì)象者的通知的非操作對(duì)象者通知指示信息。
[0161]因此,操作電子設(shè)備的人能夠基于來(lái)自電子設(shè)備的通知判斷自身是否為操作對(duì)象者。因此,能夠防止該人的如下的無(wú)意義的動(dòng)作:即,盡管不能夠通過(guò)姿勢(shì)進(jìn)行操作,但操作電子設(shè)備的人為了使姿勢(shì)被識(shí)別而多次重復(fù)相同的姿勢(shì)。
[0162]另外,優(yōu)選地,本發(fā)明的姿勢(shì)識(shí)別裝置還具有操作禁止者判定單元,該操作禁止者判定單元判定由上述人判定單元判定為包含在上述圖像中的人是否為被禁止通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作的操作禁止者,當(dāng)上述操作禁止者判定單元判定為操作禁止者時(shí),上述輸出單元不輸出上述非操作對(duì)象者通知指示信息。
[0163]在想要操作電子設(shè)備的人是操作禁止者時(shí),S卩,在想要操作電子設(shè)備的人被禁止通過(guò)姿勢(shì)操作上述電子設(shè)備時(shí),上述輸出單元不輸出用于指示不是操作對(duì)象者的通知的非操作對(duì)象者通知指示信息。因?yàn)椴僮鹘拐卟荒軌蛲ㄟ^(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作,所以無(wú)需通知用于容易地進(jìn)行姿勢(shì)識(shí)別的信息等。
[0164]因此,當(dāng)想要操作電子設(shè)備的人是操作禁止者時(shí),不通知上述信息,由此,妨礙操作禁止者以外的人使用電子設(shè)備的情況能夠得以減少,而且能夠防止向操作禁止者提供多余的信息。
[0165]另外,優(yōu)選地,在本發(fā)明的姿勢(shì)識(shí)別裝置中,上述操作對(duì)象者判定單元將事先被設(shè)定為能夠通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作的人判定為操作對(duì)象者。
[0166]另外,優(yōu)選地,在本發(fā)明的姿勢(shì)識(shí)別裝置中,上述操作對(duì)象者判定單元將通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作的次數(shù)為規(guī)定次數(shù)人判定為操作對(duì)象者。
[0167]另外,優(yōu)選地,在本發(fā)明的姿勢(shì)識(shí)別裝置中,上述操作對(duì)象者判定單元將在規(guī)定期間內(nèi)通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行了操作的人判定為操作對(duì)象者。
[0168]另外,本發(fā)明的電子設(shè)備具有上述姿勢(shì)識(shí)別裝置和通知單元,該通知單元按照上述輸出單兀輸出的信息向人發(fā)出通知。
[0169]根據(jù)上述結(jié)構(gòu),電子設(shè)備起到與上述姿勢(shì)識(shí)別裝置相同的效果。
[0170]此外,上述姿勢(shì)識(shí)別裝置也可以通過(guò)計(jì)算機(jī)實(shí)現(xiàn),在該情況下,通過(guò)使計(jì)算機(jī)發(fā)揮上述姿勢(shì)識(shí)別裝置的各單元的功能而使計(jì)算機(jī)實(shí)現(xiàn)上述姿勢(shì)識(shí)別裝置的控制程序、以及記錄有該控制程序的計(jì)算機(jī)可讀取的記錄介質(zhì)也包含在本發(fā)明的范圍內(nèi)。
[0171]〈補(bǔ)充〉
[0172]本發(fā)明并不僅限于上述實(shí)施方式,而在權(quán)利要求所示的范圍內(nèi)能夠進(jìn)行各種變更。即,對(duì)在權(quán)利要求所示的范圍內(nèi)進(jìn)行了適當(dāng)變更而得的技術(shù)手段進(jìn)行組合所獲得的實(shí)施方式也包含在本發(fā)明的技術(shù)范圍內(nèi)。
[0173]最后,姿勢(shì)識(shí)別裝置I的各功能塊,尤其是姿勢(shì)識(shí)別裝置控制部11可以由硬件邏輯器件構(gòu)成,也可以如下所述通過(guò)利用CPU由軟件實(shí)現(xiàn)。
[0174]S卩,姿勢(shì)識(shí)別裝置I具有執(zhí)行用于實(shí)現(xiàn)各功能的控制程序的命令的CPU、保存了上述程序的ROM、展開上述程序的RAM、以及保存上述程序及各種數(shù)據(jù)的存儲(chǔ)器等存儲(chǔ)裝置(記錄介質(zhì))等。并且,本發(fā)明的目的也能夠通過(guò)如下方式實(shí)現(xiàn),即,向上述姿勢(shì)識(shí)別裝置I提供計(jì)算機(jī)可讀取的記錄介質(zhì),該記錄介質(zhì)記錄有實(shí)現(xiàn)上述功能的軟件即姿勢(shì)識(shí)別裝置I的控制程序的程序代碼(執(zhí)行形式程序、中間代碼程序、源程序),使該計(jì)算機(jī)(或者,CPU、MPU(微處理器))讀取并執(zhí)行記錄在記錄介質(zhì)內(nèi)的程序代碼。
[0175]作為上述記錄介質(zhì),例如,能夠使用如下的設(shè)備:磁帶、盒式磁帶(cassette tape)等磁帶類;包括軟盤(Floppy disk:注冊(cè)商標(biāo))/硬盤等磁盤、⑶-ROM (只讀光盤)/M0 (光磁盤)/MD (迷你光盤)/DVD (數(shù)字多功能光盤)ZtD-R (數(shù)據(jù)寫入光盤)等光盤的盤(disk)類,IC卡(包括存儲(chǔ)卡)/光卡等卡類;或掩膜R0M/EPR0M (可擦除可編程只讀存儲(chǔ)器)/EEPROM(電可擦可編程只讀存儲(chǔ)器)/快閃ROM等半導(dǎo)體存儲(chǔ)器類。
[0176]另外,也可以將姿勢(shì)識(shí)別裝置I構(gòu)成為能夠與通信網(wǎng)絡(luò)連接,經(jīng)由通信網(wǎng)絡(luò)供給上述程序代碼。作為該通信網(wǎng)絡(luò),沒(méi)有特別的限定,例如,能夠利用互聯(lián)網(wǎng)、內(nèi)聯(lián)網(wǎng)、外聯(lián)網(wǎng)、LAN、ISDN (綜合業(yè)務(wù)數(shù)字網(wǎng))、VAN (增值網(wǎng)絡(luò))、CATV通信網(wǎng)、虛擬專用網(wǎng)(Virtual PrivateNetwork)、電話線路網(wǎng)、移動(dòng)通信網(wǎng)、衛(wèi)星通信網(wǎng)等。另外,作為構(gòu)成通信網(wǎng)絡(luò)的傳送介質(zhì),沒(méi)有特別的限定,例如,能夠利用IEEE1394、USB、電力線載波、電纜TV線路、電話線、ADSL(非對(duì)稱數(shù)字用戶環(huán)路)線路等有線網(wǎng)絡(luò),還能夠利用IrDA (紅外數(shù)據(jù)組織)、遙控之類的紅外線、藍(lán)牙(注冊(cè)商標(biāo))、802.11無(wú)線、HDR、移動(dòng)電話網(wǎng)、衛(wèi)星線路、地面波數(shù)字網(wǎng)等無(wú)線網(wǎng)絡(luò)。此外,本發(fā)明還可以通過(guò)以電子傳送體現(xiàn)上述程序代碼的、加載到載波中的計(jì)算機(jī)數(shù)據(jù)信號(hào)的形式來(lái)實(shí)現(xiàn)。
[0177]產(chǎn)業(yè)可用性
[0178]本發(fā)明能夠應(yīng)用于根據(jù)攝像頭拍攝到的圖像來(lái)識(shí)別用戶的姿勢(shì)并基于識(shí)別出的姿勢(shì)來(lái)控制電子設(shè)備的姿勢(shì)識(shí)別裝置。
[0179]附圖標(biāo)記的說(shuō)明
[0180]1:姿勢(shì)識(shí)別裝置;
[0181]2:電視機(jī)(電子設(shè)備);
[0182]3:攝像頭;
[0183]4:用戶;
[0184]22:人物判定部(人判定單元);
[0185]24:用戶判定部(操作對(duì)象者判定單元、操作禁止者判定單元);
[0186]26:時(shí)機(jī)判定部(時(shí)機(jī)判定單元);[0187]27:輸出部(輸出單元);
[0188]55:顯示部(通知單元);
[0189]56:聲音輸出部(通知單兀)。
【權(quán)利要求】
1.一種姿勢(shì)識(shí)別裝置,根據(jù)攝像頭拍攝到的圖像來(lái)識(shí)別人的姿勢(shì),并基于識(shí)別出的姿勢(shì)向電子設(shè)備輸出用于控制該電子設(shè)備的信息,其特征在于,具有: 人判定單元,判定上述圖像中是否包含有人;以及 輸出單元,在上述人判定單元判定為上述圖像中未包含有人時(shí),輸出用于指示第一通知的人視場(chǎng)角外通知指示信息,其中,上述第一通知是指,未拍攝到人的通知。
2.如權(quán)利要求1所述的姿勢(shì)識(shí)別裝置,其特征在于, 還具有時(shí)機(jī)判定單元,該時(shí)機(jī)判定單元基于上述電子設(shè)備或者上述姿勢(shì)識(shí)別裝置的當(dāng)前或過(guò)去的處理,判定是否處于人希望通過(guò)姿勢(shì)進(jìn)行操作的操作時(shí)機(jī), 當(dāng)上述人判定單元判定為上述圖像中未包含有人且上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)時(shí),上述輸出單元輸出上述人視場(chǎng)角外通知指示信息。
3.如權(quán)利要求2所述的姿勢(shì)識(shí)別裝置,其特征在于, 在當(dāng)前時(shí)刻為自從上述姿勢(shì)識(shí)別裝置向上述電子設(shè)備輸出基于姿勢(shì)識(shí)別的上述信息起規(guī)定期間以內(nèi)的時(shí)刻時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)。
4.如權(quán)利要求2所述的姿勢(shì)識(shí)別裝置,其特征在于, 當(dāng)自從上述姿勢(shì)識(shí)別裝置向上述電子設(shè)備輸出基于姿勢(shì)識(shí)別的上述信息起經(jīng)過(guò)了規(guī)定期間時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)。
5.如權(quán)利要求2所述的姿勢(shì)識(shí)別裝置,其特征在于, 在上述電子設(shè)備在規(guī)定的期間內(nèi)執(zhí)行了規(guī)定的處理時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)。
6.如權(quán)利要求2所述的姿勢(shì)識(shí)別裝置,其特征在于, 上述電子設(shè)備是電視機(jī), 在上述電視機(jī)顯示廣告時(shí),上述時(shí)機(jī)判定單元判定為處于操作時(shí)機(jī)。
7.如權(quán)利要求1~6中任一項(xiàng)所述的姿勢(shì)識(shí)別裝置,其特征在于, 還具有操作對(duì)象者判定單元,該操作對(duì)象者判定單元判定由上述人判定單元判定為包含在上述圖像中的人是否為能夠通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作的操作對(duì)象者, 當(dāng)上述操作對(duì)象者判定單元判定為不是操作對(duì)象者時(shí),上述輸出單元輸出用于指示第二通知的非操作對(duì)象者通知指示信息,其中,上述第二通知是指,不是操作對(duì)象者的通知。
8.如權(quán)利要求7所述的姿勢(shì)識(shí)別裝置,其特征在于, 還具有操作禁止者判定單元,該操作禁止者判定單元判定由上述人判定單元判定為包含在上述圖像中的人是否為被禁止通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作的操作禁止者, 當(dāng)上述操作禁止者判定單元判定為是操作禁止者時(shí),上述輸出單元不輸出上述非操作對(duì)象者通知指示信息。
9.如權(quán)利要求7所述的姿勢(shì)識(shí)別裝置,其特征在于, 上述操作對(duì)象者判定單元將事先被設(shè)定為能夠通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作的人判定為操作對(duì)象者。
10.如權(quán)利要求7所述的姿勢(shì)識(shí)別裝置,其特征在于, 上述操作對(duì)象者判定單元將通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行操作的次數(shù)為規(guī)定次數(shù)的人判定為操作對(duì)象者。
11.如權(quán)利要求1所述的姿勢(shì)識(shí)別裝置,其特征在于,上述操作對(duì)象者判定單元將在規(guī)定期間內(nèi)通過(guò)姿勢(shì)對(duì)上述電子設(shè)備進(jìn)行了操作的人判定為操作對(duì)象者。
12.—種電子設(shè)備,其特征在于,具有: 如權(quán)利要求1~11中任一項(xiàng)所述的姿勢(shì)識(shí)別裝置, 通知單元,按照上述輸出單元輸出的信息,向人發(fā)出通知。
13.一種姿勢(shì)識(shí)別裝置的控制方法,用于控制姿勢(shì)識(shí)別裝置,該姿勢(shì)識(shí)別裝置根據(jù)攝像頭拍攝到的圖像來(lái)識(shí)別人的姿勢(shì),并基于識(shí)別出的姿勢(shì)向電子設(shè)備輸出用于控制該電子設(shè)備的信息,其特征在于,包括: 人判定步驟,判定上述圖像中是否包含有人;以及 輸出步驟,當(dāng)在上述人判定步驟中判定為上述圖像中未包含有人時(shí),輸出用于指示第一通知的人視場(chǎng)角外通知指示信息,其中,上述第一通知是指,未拍攝到人的通知。
14.一種控制程序,其特征在于, 用于使如權(quán)利要求1~11中任一項(xiàng)所述的姿勢(shì)識(shí)別裝置動(dòng)作, 使計(jì)算機(jī)發(fā)揮上述姿勢(shì)識(shí)別裝置的各單元的功能。
15.—種記錄介質(zhì),其特征在于, 記錄有如權(quán)利要求14所述的 控制程序,并且能夠由計(jì)算機(jī)讀取。
【文檔編號(hào)】H04N21/422GK103688232SQ201280035734
【公開日】2014年3月26日 申請(qǐng)日期:2012年3月14日 優(yōu)先權(quán)日:2011年9月15日
【發(fā)明者】山本基夫, 阿部佑一, 半澤雄希, 高山貴宏 申請(qǐng)人:歐姆龍株式會(huì)社