專利名稱:信息處理設(shè)備、信息處理方法和程序的制作方法
技術(shù)領(lǐng)域:
本公開涉及一種信息處理設(shè)備,且更具體地涉及處理信息來顯示立體圖像的信息處理設(shè)備和信息處理方法和用于使得計(jì)算機(jī)執(zhí)行該方法的程序。
背景技術(shù):
已經(jīng)提出了用于顯示諸如從左眼圖像和右眼圖像形成的兩視點(diǎn)圖像的立體圖像或3D(三維)圖像的大量立體圖像顯示方法,其中可以通過使用在左眼和右眼之間的視差來獲得立體效果。另外,近年來,得益于使用計(jì)算機(jī)在立體圖像內(nèi)容或3D內(nèi)容的質(zhì)量上的改進(jìn),在劇院等中頻繁顯示立體圖像,并增加觀看者的興趣。另外,與電視廣播的數(shù)字化一起,可以傳輸過去不能通過模擬廣播來傳輸?shù)臄?shù)字?jǐn)?shù)據(jù)量。因此,預(yù)計(jì),通過未來的數(shù)字廣播,用于顯示立體圖像的數(shù)字?jǐn)?shù)據(jù)被傳輸給家用電視機(jī),以便有更多機(jī)會在家用電視機(jī)上顯示立體圖像。因此,預(yù)計(jì),還將增加對立體圖像的興趣。例如,作為用于顯示立體圖像的裝置,已經(jīng)在日本專利特開No.Hei 9-322198中公開了立體視頻顯示電視裝置,在其上,用戶可以戴上快門眼鏡來觀看具有立體效果的視頻。
發(fā)明內(nèi)容
通過立體視頻顯示電視裝置,可以適當(dāng)?shù)仫@示立體圖像。在此,當(dāng)用戶觀看立體圖像時(shí),可以立體地觀看到顯示的對象的素材主體。另外, 當(dāng)用戶觀看立體圖像時(shí),在立體圖像中包括的素材主體在深度方向上的位置看起來取決于素材主體的切換而不同。因此,預(yù)計(jì),如果可以考慮立體地觀看的素材主體在深度方向上的位置來輸出聲音,則可以更好地享受立體圖像。因此,期望提供信息處理設(shè)備和信息處理方法和程序,其中,當(dāng)顯示立體圖像時(shí), 可以考慮立體圖像中的素材主體在深度方向上的位置來輸出聲音。因此,根據(jù)公開的技術(shù)的實(shí)施例,提供一種信息處理設(shè)備,包括校正部分,適用于基于立體圖像中包括的素材主體在深度方向上的位置來校正與立體圖像相關(guān)的聲音信息; 以及輸出控制部分,適用于當(dāng)顯示立體圖像時(shí)輸出校正后的聲音圖像。而且,根據(jù)本公開的技術(shù)的實(shí)施例,提供一種用于使得計(jì)算機(jī)執(zhí)行一種方法的信息處理方法和程序,所述方法包括基于立體圖像中包括的素材主體在深度方向上的位置來校正與立體圖像相關(guān)的聲音信息;以及當(dāng)顯示立體圖像時(shí)輸出校正后的聲音圖像。在所述信息處理設(shè)備中,基于立體圖像中包括的素材主體在深度方向上的位置來校正聲音信息。則,當(dāng)顯示立體圖像時(shí),輸出校正后的聲音圖像。所述信息處理設(shè)備可以被配置以便其還包括檢測部分,適用于檢測在立體圖像中包括的具體對象,以及所述校正部分基于被檢測的具體對象在深度方向上的位置來校正要從被檢測的具體對象發(fā)出的聲音。在所述信息處理設(shè)備中,檢測在立體圖像中包括的具體
4對象,且基于所檢測的具體對象在深度方向上的位置來校正從具體對象中發(fā)出的聲音。在這種情況下,所述信息處理設(shè)備可以被配置以便所述聲音信息包括在中央聲道、左聲道和右聲道中的聲音,以及所述校正部分使用指示素材主體在深度方向上的位置、 即指示被檢測的具體對象在深度方向上的位置的參數(shù)之一來校正中央聲道中的聲音作為從被檢測的具體對象中發(fā)出的聲音,且使用除了指示被檢測的具體對象在深度方向上的位置的參數(shù)之外的參數(shù)來校正左聲道和右聲道中的聲音。在信息處理設(shè)備中,指示素材主體在深度方向上的位置的參數(shù)中指示被檢測的具體對象在深度方向上的位置的那一個(gè)用于校正在中央聲道中的聲音。然后,使用除了指示被檢測的具體對象在深度方向上的位置的參數(shù)之外的參數(shù)來校正左聲道和右聲道中的聲音。另外,在該情況下,所述校正部分可以計(jì)算除了指示被檢測的具體對象在深度方向上的位置的參數(shù)之外的參數(shù)的平均值,并基于所計(jì)算的平均值來校正在左聲道和右聲道中的聲音。在信息參考設(shè)備中,計(jì)算除了指示被檢測的具體對象在深度方向上的位置的參數(shù)之外的參數(shù)的平均值,并基于所計(jì)算的平均值來校正在左聲道和右聲道中的聲音。所述校正部分可以使用指示素材主體在深度方向上的位置的參數(shù)來校正所述聲音信息。在該信息處理設(shè)備中,使用指示素材主體在深度方向上的位置的參數(shù)來校正所述聲音信息。在該情況下,所述校正部分可以計(jì)算該參數(shù)的平均值并基于所計(jì)算的平均值來校正所述聲音信息。在信息處理設(shè)備中,計(jì)算該參數(shù)的平均值并基于所計(jì)算的平均值來校正所述聲音信息。所述校正部分可以校正所述聲音信息,以便根據(jù)在立體圖像中包括的素材主體的背景的聲音圖像定位于背景在深度方向上的位置。在信息處理設(shè)備中,校正所述聲音信息, 以便根據(jù)在立體圖像中包括的素材主體的背景的聲音圖像定位于背景在深度方向上的位置。所述校正部分可以校正所述聲音信息,以便根據(jù)所述聲音信息的聲音圖像定位于素材主體在深度方向上的位置。在信息處理設(shè)備中,校正所述聲音信息,以便根據(jù)所述聲音信息的聲音圖像定位于立體素材主體在深度方向上的位置。在該情況下,所述校正部分可以使用對應(yīng)于素材主體在深度方向上的位置的頭相關(guān)傳輸函數(shù)濾波器來校正所述聲音信息。在該信息處理設(shè)備中,使用對應(yīng)于立體素材主體在深度方向上的位置的頭相關(guān)傳輸函數(shù)濾波器來校正聲音信息。在這種情況下,所述信息處理設(shè)備可以被配置以便其還可以包括保持部分,適用于為在深度方向上的多個(gè)位置保持多個(gè)頭相關(guān)傳輸函數(shù)濾波器,其分別對應(yīng)于在深度方向上的多個(gè)位置,以及所述校正部分選擇頭相關(guān)傳輸函數(shù)濾波器中對應(yīng)于最靠近素材主體在深度方向上的位置的位置的那一個(gè),并使用所選擇的頭相關(guān)傳輸函數(shù)濾波器來校正所述聲音信息。在信息處理設(shè)備中,選擇頭相關(guān)傳輸函數(shù)濾波器中對應(yīng)于最靠近立體素材主體在深度方向上的位置的位置的那一個(gè),并使用所選擇的頭相關(guān)傳輸函數(shù)濾波器來校正所述聲
首{曰息。或者所述信息處理設(shè)備可以被配置以便其還包括操作接受部分,適用于接受用于切換在立體圖像中包括的素材主體在深度方向上的位置的切換操作,以及所述校正部分校正所述聲音信息,以便當(dāng)接受所述切換操作時(shí),根據(jù)聲音信息的聲音圖像定位于在切換之后的素材主體在深度方向上的位置。在所述信息處理設(shè)備中,當(dāng)接受用于切換在立體圖像中包括的素材主體在深度方向上的位置的切換操作時(shí),校正所述聲音信息,以便根據(jù)所述聲音信息的聲音圖像定位于切換后的立體素材主體在深度方向上的位置。總之,根據(jù)本公開的技術(shù)的信息處理設(shè)備可以實(shí)現(xiàn)較好的優(yōu)點(diǎn),當(dāng)顯示立體圖像時(shí),可以考慮立體圖像中的素材主體在深度方向上的位置來輸出聲音。
圖IA和IB是圖示使用應(yīng)用了公開的技術(shù)的信息處理設(shè)備的不同例子的簡化形式的示意圖;圖2是圖示根據(jù)本公開技術(shù)的第一實(shí)施例的信息處理設(shè)備的功能配置的例子的方框圖;圖3是示出在圖2所示的聲音校正部分的功能配置的例子的方框圖;圖4是示出在圖2所示的立體圖像校正部分的功能配置的例子的方框圖;圖5是示出在圖2所示的字幕產(chǎn)生部分的功能配置的例子的方框圖;圖6是示出在圖2所示的遙控器的外觀配置的例子的示意圖;圖7A和7B是圖示配置在圖2所示的顯示部分上顯示的立體圖像的圖像和在圖像中包括的素材主體在深度方向上的位置之間的關(guān)系的示意圖;圖8是圖示在配置在圖2所示的顯示部分上顯示的立體圖像的圖像中包括的素材主體的位移量之間的關(guān)系的示意圖;圖9A和9B是示意地圖示在圖2所示的內(nèi)容隨附信息存儲部分中存儲的立體圖像參數(shù)的圖;圖IOA和IOB是圖示在圖2所示的內(nèi)容存儲部分中存儲的立體圖像內(nèi)容的位移量和在圖2所示的顯示部分的顯示面的位移量之間的關(guān)系的示意圖;圖11是示意性地圖示在其中觀看在圖2所示的顯示部分上顯示的立體圖像的觀看位置和素材主體、即立體圖像中包括的立體素材主體的突出位置之間的關(guān)系的圖;圖12A和12B是示意地圖示由圖2所示的立體圖像校正部分分別在校正之前和校正之后的立體素材主體的位置的圖;圖13是示意性地圖示其中通過圖2所示的聲音校正部分來校正輸出聲音的校正方法的圖;圖14是圖示由圖2所示的聲音校正部分進(jìn)行的聲音校正處理的處理過程的例子的流程圖;圖15是圖示由圖2所示的立體圖像校正部分進(jìn)行的立體圖像校正處理的處理過程的例子的流程圖;圖16是圖示由圖2所示的字幕產(chǎn)生部分進(jìn)行的字幕產(chǎn)生處理的處理過程的例子的流程圖;圖17A和17B是示意地圖示按時(shí)序在圖2所示的顯示部分上顯示的立體圖像的圖;圖18是示出在圖2所示的聲音校正部分的功能配置的另一例子的方框圖;圖19A和19B、20A和20B和21A和21B是示意地圖示由圖2所示的立體圖像校正部分調(diào)整深度量的不同例子的圖;圖22k是示出圖2所示的信息處理設(shè)備的外觀配置的例子的示意圖,且圖22B是信息處理設(shè)備進(jìn)行的校正處理的流程的簡化形式的方框圖;圖23是圖示根據(jù)本公開技術(shù)的第二實(shí)施例的信息處理設(shè)備的功能配置的例子的方框圖;圖M是示出在圖23所示的立體圖像校正部分的功能配置的例子的方框圖;圖25是示出圖23所示的圖像拾取部分產(chǎn)生的圖像的簡化形式的示意圖;圖26A和26B是示意性地圖示在圖23所示的顯示部分上顯示的立體圖像的觀看位置和觀看立體圖像的用戶的會聚角之間的關(guān)系的圖;圖27A是圖示當(dāng)獲得圖23所示的參考虹膜信息保持部分中保持的參考虹膜信息時(shí)的測量方法的圖,且圖27B是示意性地圖示參考虹膜保持部分的所保持實(shí)體的圖;圖28和四是示意性地圖示校正在圖23所示的顯示部分上顯示的立體圖像中包括的立體素材主體的突出位置的不同例子的圖;以及圖30是圖示由圖23所示的信息處理設(shè)備進(jìn)行的立體圖像顯示處理的處理過程的例子的流程圖.
具體實(shí)施例方式以下,將參考附圖詳細(xì)描述在此公開的技術(shù)的優(yōu)選實(shí)施例。要注意,將以以下順序來描述該描述1.第一實(shí)施例(立體圖像輸出控制其中使用立體圖像參數(shù)來校正立體圖像和聲音信息的例子)2.第二實(shí)施例(立體圖像輸出控制其中基于眼球的變化來校正立體素材主體的位置的例子)<1.第一實(shí)施例>信息處理設(shè)備的使用的例子圖IA和IB圖示使用應(yīng)用了公開的技術(shù)的信息處理設(shè)備的不同例子的簡化形式。具體地,圖IA圖示其中坐在椅子11上的用戶或觀看者10看信息處理設(shè)備100的顯示部分181上顯示的圖像的狀態(tài)。圖IB圖示其中坐在椅子11上的用戶10看在提供了圖像拾取部分610的信息處理設(shè)備600的顯示部分181上顯示的圖像的另一狀態(tài)。圖IA 和IB所示的用戶10可以使用由其手握住的遙控器500來進(jìn)行信息處理設(shè)備100或600的各種操作。要注意,此后與公開技術(shù)的第二實(shí)施例結(jié)合地詳細(xì)描述提供了圖像拾取部分610 的信息處理設(shè)備600。信息處理設(shè)備的配置的例子圖2圖示根據(jù)本公開技術(shù)的第一實(shí)施例的信息處理設(shè)備100的功能配置的例子。 參考圖2,通過例如從廣播站接收廣播波并顯示可以是立體圖像或平面圖像的圖像的電視接收機(jī)或具有記錄功能的電視接收機(jī)來實(shí)現(xiàn)信息處理設(shè)備100。信息處理設(shè)備100包括控制部分110、操作接受部分115、內(nèi)容存儲部分121、內(nèi)容隨附信息存儲部分122、獲取部分130、聲音校正部分140、立體圖像校正部分150和字幕產(chǎn)生部分160。信息處理設(shè)備100還包括輸出控制部分170、顯示部分181、聲音輸出部分182
7和遙控器500。要注意,關(guān)于公開技術(shù)的第一實(shí)施例,在此省略用于通過天線從廣播站接收廣播波的廣播接收部分、用于解碼視頻信號的視頻解碼部分、和用于解碼音頻信號的音頻解碼部分等的圖示和描述,來有助于圖示和描述。另外,在公開技術(shù)的第一實(shí)施例中,假設(shè)為了簡化的描述,存儲并然后顯示通過廣播接收部分接收并由視頻解碼部分和音頻解碼部分解碼的內(nèi)容、即圖像數(shù)據(jù)或視頻數(shù)據(jù)和音頻數(shù)據(jù)??刂撇糠?10響應(yīng)于由操作接受部分115接受的操作輸入來控制信息處理設(shè)備 100的組件。例如,如果接受用于顯示立體圖像的顯示指令操作,則控制部分110進(jìn)行用于使得根據(jù)顯示指令操作的立體圖像內(nèi)容從顯示部分181和聲音輸出部分182輸出的控制。 另一方面,如果例如接受用于校正立體圖像的校正指令操作,則控制部分110進(jìn)行用于使得響應(yīng)于校正指令操作來進(jìn)行圖像校正處理的控制。另外,例如,如果例如接受用于校正立體圖像的聲音的校正指令操作,則控制部分110進(jìn)行用于使得響應(yīng)于校正指令操作來進(jìn)行聲音校正處理的控制。操作接受部分115是用于接受用戶的操作輸入的操作接受部分,并響應(yīng)于接受的操作輸入而向控制部分110供應(yīng)操作信號。操作接受部分115對應(yīng)于例如用于開/關(guān)電源的操作元件。另外,如果操作接受部分115從遙控器500接受操作信號,則其向控制部分 110供應(yīng)接受的操作信號。內(nèi)容存儲部分121被用于存儲各種內(nèi)容,并向獲取部分130供應(yīng)存儲的內(nèi)容。例如,內(nèi)容存儲部分121存儲對應(yīng)于由廣播接收部分接收的廣播波的內(nèi)容,即圖像數(shù)據(jù)和聲音數(shù)據(jù)。另外,例如,內(nèi)容存儲部分121存儲用于顯示立體圖像、即立體圖像內(nèi)容或立體圖像信息的內(nèi)容。內(nèi)容隨附信息存儲部分122是用于存儲與內(nèi)容存儲部分121中存儲的內(nèi)容相關(guān)的隨附信息的存儲部分,并向獲取部分130供應(yīng)所存儲的隨附信息。例如,內(nèi)容隨附信息存儲部分122存儲與內(nèi)容存儲部分121中存儲的立體圖像內(nèi)容相關(guān)的位移量保持表和以彼此相關(guān)的關(guān)系的二進(jìn)制化數(shù)據(jù),作為立體圖像參數(shù),其是隨附信息。要注意,此后參考圖9A和9B 來描述位移量保持表和二進(jìn)制化數(shù)據(jù)。另外,可以使用包括立體圖像內(nèi)容和關(guān)于立體圖像的隨附信息的內(nèi)容作為立體圖像內(nèi)容或立體圖像信息。獲取部分130在控制部分110的控制下,獲取在內(nèi)容存儲部分121和內(nèi)容隨附信息存儲部分122中存儲的各種信息,并向信息處理設(shè)備100的組件供應(yīng)所獲取的信息。例如,如果獲取部分130從內(nèi)容存儲部分121獲取立體圖像內(nèi)容,則其從立體圖像內(nèi)容中向立體圖像校正部分150供應(yīng)圖像數(shù)據(jù),且從立體圖像中向聲音校正部分140供應(yīng)聲音數(shù)據(jù)。在該情況下,獲取部分130從內(nèi)容隨附信息存儲部分122獲取與立體圖像內(nèi)容相關(guān)的立體圖像參數(shù),且向立體圖像校正部分150、聲音校正部分140和字幕產(chǎn)生部分160供應(yīng)立體圖像參數(shù)。聲音校正部分140在控制部分110的控制下當(dāng)輸出立體圖像內(nèi)容時(shí)校正聲音數(shù)據(jù),并向輸出控制部分170輸出校正后的聲音數(shù)據(jù)。具體地,聲音校正部分140基于立體圖像中包括的素材主體在深度上的位置來校正從獲取部分130向其供應(yīng)的聲音數(shù)據(jù)。例如, 所述聲音校正部分140使用從獲取部分130供應(yīng)的諸如表示素材主體在深度方向上的位置的參數(shù)的立體圖像參數(shù)中包括的位移量保持表,來校正聲音數(shù)據(jù)。例如,聲音校正部分140 計(jì)算在位移量保持表中的位移量的平均值,且基于所計(jì)算的平均值來校正聲音數(shù)據(jù)。在該情況下,所述聲音校正部分140校正所述聲音信息,以便例如,聲音數(shù)據(jù)的聲音圖像定位于素材主體在深度方向上的位置,即在對應(yīng)于位移量的平均值的位置。例如,所述聲音校正部分140使用對應(yīng)于所述位置的頭相關(guān)傳輸函數(shù)(HRTF)濾波器來校正所述聲音信息。要注意,從FIR(有限脈沖響應(yīng))濾波器來配置頭相關(guān)傳輸函數(shù)濾波器。另外,以后參考圖3來詳細(xì)描述聲音校正部分140的功能配置。要注意,聲音校正部分140用作在公開技術(shù)中的校正部分的部分。立體圖像校正部分150在控制部分110的控制下當(dāng)輸出立體圖像內(nèi)容時(shí)校正圖像數(shù)據(jù),并向輸出控制部分170輸出校正后的圖像數(shù)據(jù)。具體地,立體圖像校正部分150關(guān)于立體圖像中包括的素材主體在深度方向上的位置,校正從獲取部分130供應(yīng)的圖像數(shù)據(jù)。 例如,立體圖像校正部分150使用在從獲取部分130向其供應(yīng)的立體圖像參數(shù)中包括的位移量保持表,來校正圖像數(shù)據(jù)。例如,立體圖像校正部分150響應(yīng)于用戶操作來調(diào)整位移量保持表中的位移量,來校正圖像數(shù)據(jù)。要注意,此后參考圖4來詳細(xì)描述立體圖像校正部分 150的功能配置。字幕產(chǎn)生部分160在控制部分110的控制下當(dāng)要輸出立體圖像內(nèi)容時(shí)產(chǎn)生字幕數(shù)據(jù),且向輸出控制部分170輸出產(chǎn)生的字幕數(shù)據(jù)。具體地,字幕產(chǎn)生部分160根據(jù)來自控制部分110的指令來產(chǎn)生用于顯示字幕作為立體圖像的字幕數(shù)據(jù)。在該情況下,字幕產(chǎn)生部分160根據(jù)來自控制部分110的指令來校正字幕在深度方向上的位置。例如,立體圖像校正部分150使用在從獲取部分130向其供應(yīng)的立體圖像參數(shù)中包括的位移量保持表,來校正字幕數(shù)據(jù)。例如,字幕產(chǎn)生部分160計(jì)算在位移量保持表中的位移量的平均值,且基于所計(jì)算的平均值來校正字幕數(shù)據(jù)。要注意,此后參考圖5來詳細(xì)描述字幕產(chǎn)生部分160的功能配置。輸出控制部分170響應(yīng)于由操作接受部分115接受的操作輸入來進(jìn)行用于輸出在內(nèi)容存儲部分121中存儲的內(nèi)容的輸出處理。例如,如果接受用于顯示立體圖像的顯示指令操作,則輸出控制部分170控制顯示部分181和聲音輸出部分182來輸出與顯示指令操作相關(guān)的立體圖像內(nèi)容。在該情況下,輸出控制部分170進(jìn)行顯示對象的圖像數(shù)據(jù)和由字幕產(chǎn)生部分160產(chǎn)生的字幕數(shù)據(jù)的混合處理,以便在合成狀態(tài)下顯示立體圖像和作為立體圖像的字幕。另外,例如,如果接受用于校正立體圖像的校正指令操作,則輸出控制部分170 使用從聲音校正部分140輸出的聲音數(shù)據(jù)和從立體圖像校正部分150輸出的圖像數(shù)據(jù)進(jìn)行輸出操作。顯示部分181在輸出控制部分170的控制下顯示各種圖像??梢酝ㄟ^例如諸如 IXD (液晶顯示器)設(shè)備來實(shí)現(xiàn)顯示部分181。聲音輸出部分182在輸出控制部分170的控制下輸出各種聲音信息。可以通過例如揚(yáng)聲器來實(shí)現(xiàn)聲音輸出部分182。遙控器500用于從空間上遠(yuǎn)離信息處理設(shè)備100的位置的遠(yuǎn)程控制,并響應(yīng)于用戶向操作接受部分115的操作輸入來輸出操作信號或輸出信號。例如,紅外信號可以用作遙控器500的輸出信號。此后參考圖6來詳細(xì)描述遙控器500的外觀配置。聲音校正部分的配置的例子圖3圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的聲音校正部分140的功能配置的例子。
9
參考圖3,聲音校正部分140包括調(diào)整值計(jì)算塊141、位置轉(zhuǎn)換塊142、增益確定塊 143、和濾波器確定塊144。聲音校正部分140還包括聲音數(shù)據(jù)輸入塊145、音量調(diào)整塊146、 濾波處理塊147、聲音數(shù)據(jù)輸出塊148和保持塊149。調(diào)整值計(jì)算塊141在控制部分110的控制下計(jì)算用于從獲取部分130供應(yīng)的聲音數(shù)據(jù)的調(diào)整值,并向位置轉(zhuǎn)換塊142輸出所計(jì)算的調(diào)整值。例如,調(diào)整值計(jì)算塊141計(jì)算在從獲取部分130向其供應(yīng)的立體圖像參數(shù)中包括的位移量保持表中的位移量的平均值,作為調(diào)整值。位置轉(zhuǎn)換塊142將從調(diào)整值計(jì)算塊141輸出的調(diào)整值轉(zhuǎn)換為用于校正聲音數(shù)據(jù)的位置,即轉(zhuǎn)換為在深度方向上的位置。位置轉(zhuǎn)換塊142向增益確定塊143和濾波器確定塊 144輸出該位置、即校正后的位置信息。增益確定塊143基于從位置轉(zhuǎn)換塊142輸出的位置信息來確定用于進(jìn)行音量調(diào)整的增益量,且向音量調(diào)整塊146輸出確定的增益量。要注意,如果不需要音量調(diào)整,則增益確定塊143向音量調(diào)整塊146輸出“1”作為增益量。另外,此后將參考圖13詳細(xì)描述增益量的確定方法。濾波器確定塊144基于從位置轉(zhuǎn)換塊142輸出的位置信息來確定用于將聲音圖像定位于對應(yīng)于該位置信息的位置的濾波器系數(shù),并向?yàn)V波處理塊147輸出確定的濾波器系數(shù)。保持塊149為多個(gè)位置的每個(gè)保持分別對應(yīng)于在深度方向上的多個(gè)位置的多個(gè)頭相關(guān)傳輸函數(shù)濾波器。例如,濾波器確定塊144從保持塊149中保持的多個(gè)頭相關(guān)傳輸函數(shù)濾波器中選擇與最靠近對應(yīng)于從位置轉(zhuǎn)換塊142輸出的位置信息的位置的位置相對應(yīng)的頭相關(guān)傳輸函數(shù)濾波器。然后,濾波器確定塊144向?yàn)V波處理塊147輸出所選擇的頭相關(guān)傳輸函數(shù)濾波器的濾波器系數(shù)。要注意,以下將參考圖13詳細(xì)描述濾波器系數(shù)的確定方法。聲音數(shù)據(jù)輸入塊145從獲取部分130接收向其供應(yīng)的聲音數(shù)據(jù),并向音量調(diào)整塊 146供應(yīng)聲音數(shù)據(jù)。音量調(diào)整塊146使用從增益確定塊143輸出的增益量,進(jìn)行關(guān)于從聲音數(shù)據(jù)輸入塊145向其供應(yīng)的聲音數(shù)據(jù)的音量調(diào)整。要注意,此后參考圖13詳細(xì)描述音量調(diào)整方法。濾波處理塊147使用從濾波器確定塊144輸出的濾波器系數(shù),進(jìn)行從聲音數(shù)據(jù)輸入塊145向其供應(yīng)的聲音數(shù)據(jù)的濾波處理,且向聲音數(shù)據(jù)輸出塊148輸出濾波處理之后的聲音數(shù)據(jù)。例如,濾波處理塊147使用具有從濾波器確定塊144輸出的濾波器系數(shù)的頭相關(guān)傳輸函數(shù)濾波器,來進(jìn)行用于將聲音圖像定位于通過位置轉(zhuǎn)換塊142的轉(zhuǎn)換獲得的位置的濾波處理。該濾波處理是頭相關(guān)傳輸函數(shù)濾波器進(jìn)行的例如二進(jìn)制化處理和用于將頭相關(guān)傳輸函數(shù)回復(fù)(convolute)到聲音數(shù)據(jù)或聲音信號的處理。要注意,此后參考圖13來詳細(xì)描述濾波處理方法。聲音數(shù)據(jù)輸出塊148向輸出控制部分170輸出從濾波處理塊147輸出的濾波處理后的聲音數(shù)據(jù)。圖4圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的立體圖像校正部分150的功能配置的例子。參考圖4,立體圖像校正部分150包括調(diào)整塊141、圖像數(shù)據(jù)輸入塊152、水平移動處理塊152、平滑處理塊巧4和圖像數(shù)據(jù)輸出塊155。調(diào)整塊151在控制部分110的控制下,調(diào)整用于校正從獲取部分130向其供應(yīng)的圖像數(shù)據(jù)的參數(shù),并向水平移動處理塊153輸出調(diào)整后的參數(shù)。例如,調(diào)整塊151響應(yīng)于由操作接受部分115接受的操作輸入,調(diào)整在從獲取部分130向其供應(yīng)的立體圖像參數(shù)中包括的位移量保持表中的位移量,且向水平移動處理塊153輸出調(diào)整后的位移量。要注意,對于用于調(diào)整參數(shù)的操作輸入,例如,使用圖6所示的立體圖像的深度位置調(diào)整調(diào)節(jié)器510。 通過操作輸入,可能顯示被重新調(diào)整到位置、即用戶期望的深度方向上的位置的立體圖像。圖像數(shù)據(jù)輸入塊152從獲取部分130接收向其供應(yīng)作為輸入數(shù)據(jù)的圖像數(shù)據(jù),并向水平移動處理塊153供應(yīng)接收的圖像數(shù)據(jù)。水平移動處理塊153使用從調(diào)整塊151輸出的調(diào)整后參數(shù)來進(jìn)行從圖像數(shù)據(jù)輸入塊152向其供應(yīng)的圖像數(shù)據(jù)的圖像的移動處理,并向平滑處理塊巧4輸出在該處理之后的圖像數(shù)據(jù)。例如,水平移動處理塊153從配置對應(yīng)于從圖像數(shù)據(jù)輸入塊152供應(yīng)的圖像數(shù)據(jù)的立體圖像的左眼圖像和右眼圖像之間進(jìn)行左眼圖像的水平移動處理。具體地,水平移動處理塊153進(jìn)行將配置左眼圖像的像素移動調(diào)整塊151調(diào)整后的位移量來產(chǎn)生新右眼圖像的水平移動處理。例如在圖9B所示的位移量保持表300的塊的單元中進(jìn)行該水平移動處理。然后,水平移動處理塊153向平滑處理塊巧4輸出對應(yīng)于配置立體圖像的左眼圖像和新產(chǎn)生的右眼圖像的圖像數(shù)據(jù)。要注意,雖然在本例子中,使用調(diào)整塊151調(diào)整后的位移量來產(chǎn)生新的右眼圖像,但是或者可以使用調(diào)整塊151調(diào)整后的位移量來對原始右眼圖像進(jìn)行水平移動處理來產(chǎn)生立體圖像。平滑處理塊巧4關(guān)于從水平移動處理塊153輸出的圖像數(shù)據(jù),進(jìn)行立體素材主體的區(qū)域的邊緣部分的濾波處理,即通過移動平均濾波器進(jìn)行的平滑處理。平滑處理塊154 向圖像數(shù)據(jù)輸出塊155輸出該處理后的圖像數(shù)據(jù)。例如,平滑處理塊IM使用從獲取部分 130向其供應(yīng)的立體圖像參數(shù)中包括的二進(jìn)制化數(shù)據(jù)來確定立體素材主體的區(qū)域和任何其他區(qū)域。然后,平滑處理塊巧4通過移動平均濾波器對被確定為立體素材主體的區(qū)域的區(qū)域進(jìn)行平滑處理。通過該平滑處理,可以向位于遠(yuǎn)程的立體素材主體或3D對象的區(qū)域提供視角。圖像數(shù)據(jù)輸出塊155向輸出控制部分170輸出從平滑處理塊巧4輸出的圖像處理后的圖像數(shù)據(jù)。字幕數(shù)據(jù)校正部分的配置的例子圖5圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的字幕產(chǎn)生部分160的功能配置的例子。參考圖5,字幕產(chǎn)生部分160包括調(diào)整值計(jì)算塊161、字幕數(shù)據(jù)產(chǎn)生塊162和字幕數(shù)據(jù)輸出塊163。調(diào)整值計(jì)算塊161在控制部分110的控制下,計(jì)算用于確定要在顯示部分181上顯示的字幕的該位置、即在深度方向上的位置的調(diào)整值。調(diào)整值計(jì)算塊161向字幕數(shù)據(jù)產(chǎn)生塊162輸出計(jì)算的調(diào)整值。例如,調(diào)整值計(jì)算塊161計(jì)算在從獲取部分130向其供應(yīng)的立體圖像參數(shù)中包括的位移量保持表中的位移量的平均值,作為調(diào)整值。字幕數(shù)據(jù)產(chǎn)生部分162在控制部分110的控制下產(chǎn)生要在顯示部分181上顯示的字幕數(shù)據(jù),并向字幕數(shù)據(jù)輸出塊163輸出產(chǎn)生的字幕數(shù)據(jù)。例如,字幕數(shù)據(jù)產(chǎn)生塊162可以使用在內(nèi)容存儲部分121中存儲的內(nèi)容、即字幕內(nèi)容來產(chǎn)生字幕數(shù)據(jù)。在該情況下,字幕數(shù)據(jù)產(chǎn)生塊162進(jìn)行使用從調(diào)整值計(jì)算塊161輸出的調(diào)整值產(chǎn)生的字幕數(shù)據(jù)的圖像或字幕圖像的水平移動處理。然后,字幕數(shù)據(jù)產(chǎn)生塊162向字幕數(shù)據(jù)輸出塊163輸出該處理之后的字幕數(shù)據(jù)。要注意,在該情況下的水平移動處理與圖4所示的水平移動處理塊153進(jìn)行的水平移動處理相同,且因此在此省略該處理的重復(fù)描述。字幕數(shù)據(jù)輸出塊163向輸出控制部分170輸出從字幕數(shù)據(jù)產(chǎn)生塊162輸出的字幕數(shù)據(jù)。以此方式,根據(jù)公開技術(shù)的第一實(shí)施例,可以向用戶提供根據(jù)在顯示部分181上顯示的立體圖像的適當(dāng)?shù)牧Ⅲw字幕。因此,用戶可以享受進(jìn)一步豐富的呈現(xiàn)。遙控器的配置的例子圖6圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的遙控器500的外觀配置的例子。參考圖6,遙控器500具有在其上提供的電源按鈕501和502,、頻道指定按鈕組 503、箭頭標(biāo)記確定按鈕組504、功能選擇按鈕組505和參考虹膜信息獲取按鈕506。遙控器 500還具有在其上提供的立體圖像校正切換按鈕507、音量調(diào)整調(diào)節(jié)器508、頻道選擇調(diào)節(jié)器509、立體圖像的深度位置調(diào)整調(diào)節(jié)器510、和立體圖像的聲音位置調(diào)整調(diào)節(jié)器511。電源按鈕510和502分別用于打開和關(guān)閉信息處理設(shè)備100的電源。頻道指定按鈕組503用于當(dāng)可以使用信息處理設(shè)備100、基于廣播波、對于立體圖像或平面圖像的廣播節(jié)目時(shí)指定廣播頻道。箭頭標(biāo)記確定按鈕組504包括向上、向下、向左和向右箭頭標(biāo)記按鈕和當(dāng)在顯示部分181上顯示菜單平面等時(shí)的確定按鈕。當(dāng)用于選擇在顯示部分181上顯示的顯示平面圖像上的向上、向下、向左和向右方向的選擇操作時(shí)使用向上、向下、向左和向右箭頭標(biāo)記按鈕。例如,當(dāng)要在菜單平面上進(jìn)行選擇操作時(shí),該向上、向下、向左和向右箭頭標(biāo)記按鈕用于分別向上、向下、向左和向右地移動選擇狀態(tài)。確定按鈕用于在顯示部分181上顯示的顯示平面圖像上進(jìn)行各種確定操作,且用于例如確定在菜單平面上的選擇狀態(tài)。功能選擇按鈕組505包括用于選擇各種功能的按鈕。按下參考虹膜向下獲取按鈕506來獲取關(guān)于用戶的參考虹膜向下。要注意,此后在公開技術(shù)的第二實(shí)施例中詳細(xì)描述該參考虹膜詳細(xì)獲取按鈕506。按下立體圖像校正切換按鈕507來進(jìn)行在自動進(jìn)行關(guān)于立體圖像的各種校正的自動模式和手動進(jìn)行這些各種校正的手動模式之間的切換。音量調(diào)整調(diào)節(jié)器508用于調(diào)整要從聲音輸出部分182輸出的聲音的音量。頻道選擇調(diào)節(jié)器509用于當(dāng)可以使用信息處理設(shè)備100、基于廣播波、對于立體圖像或平面圖像的廣播節(jié)目時(shí)選擇廣播頻道。立體圖像的深度位置調(diào)整調(diào)節(jié)器510用于當(dāng)在顯示部分181上顯示立體圖像時(shí)調(diào)整立體圖像中包括的素材主體在深度方向上的位置。要注意,此后參考圖12A和12B來詳細(xì)描述使用深度位置調(diào)整調(diào)節(jié)器510對立體圖像的調(diào)整的例子。立體圖像的聲音位置調(diào)整調(diào)節(jié)器511用于當(dāng)在顯示部分181上顯示立體圖像時(shí)調(diào)整定位關(guān)于立體圖像的聲音的聲音圖像的位置、即深度方向上的位置。在立體圖像和立體圖像中包括的素材主體在深度方向上的位置之間的關(guān)系的例子圖7A和7B圖示配置在公開技術(shù)的第一實(shí)施例中的顯示部分181上顯示的立體圖像的圖像和在每個(gè)圖像中包括的素材主體在深度方向上的位置之間的關(guān)系。更具體地,圖
127A示意性地圖示了當(dāng)在顯示部分181上顯示立體圖像時(shí)、在可以在深度方向上虛擬地放置用戶210可以立體地觀看的素材主體203-305的位置的情況下的頂部平面圖。圖7B圖示了用于立體地顯示圖7A所示的素材主體203-205的立體圖像、具體地、左眼圖像201和右眼圖像202。具體地,左眼和右眼圖像201和202包括素材主體203-205。另外,深度方向是例如平行于互連用戶210和顯示部分181的顯示面的線且垂直于顯示部分181的顯示面的方向。要注意,在圖7B中,在左眼圖像201和右眼圖像202兩者中通過相同參考字符來指示相同素材主體。另外,在圖7B中,以夸大的主體示出在左眼圖像201和右眼圖像202 中包括的素材主體203-205的位移量來便于理解。另外,在公開技術(shù)的第一例子中,可以使用視察屏障方法或特殊眼鏡方法作為用于在顯示部分181上立體圖像的顯示方法。在特殊眼鏡方法中,用戶佩戴諸如活動快門類型眼鏡或極化器類型眼鏡的用于觀看立體圖像的特殊眼鏡,以便向用戶提供立體圖像。要注意,公開技術(shù)的實(shí)施例也可以被用于除了視察屏障方法和特殊眼鏡方法之外的任何其他方法。在此,研究一種情況,其中,當(dāng)在顯示部分181上顯示左眼圖像201和右眼圖像202 時(shí),用戶210的左眼211看到左眼圖像201,且用戶210的右眼212看到右眼圖像202。在該情況下,假設(shè)在顯示面的位置220、即顯示部分181的顯示面的位置處看到在左眼圖像201 和右眼圖像202中包括的素材主體204。另外,假設(shè)位置220的內(nèi)側(cè)、即相對于顯示面的內(nèi)側(cè)221看到在左眼圖像201和右眼圖像202中包括的素材主體203,且在顯示面的位置220 的那一側(cè)、即在相對于顯示面的那一側(cè)222看到素材主體205。以此方式,在參考在顯示面上的位置220處的素材主體204的情況下,在立體圖像、即在左眼圖像201和右眼圖像202中的水平方向上,放置提供立體效果的素材主體203 和205。另外,在參考位置220的情況下,放置的位置在突出素材主體205和回縮素材主體 203之間反轉(zhuǎn)。在左眼圖像和右眼圖像中包括的素材主體的位移量的關(guān)系的例子圖8圖示配置在公開技術(shù)的第一實(shí)施例中的顯示部分181上顯示的立體圖像的圖像中包括的素材主體的位移量之間的關(guān)系。矩形230對應(yīng)于圖7B所示的左眼圖像201和右眼圖像202,且在矩形230中,示出在圖7B所示的左眼圖像201和右眼圖像202中包括的素材主體203到205。要注意,在矩形230中,用粗線指示從素材主體203-205中的在圖 7B所示的左眼圖像201中包括的素材主體203-205的內(nèi)容。要注意,素材主體204沒有位移,因?yàn)樗夭闹黧w204對應(yīng)于圖7A所示的顯示面上的位置220。因此,在矩形230,在左眼圖像201中包括的素材主體204和在右眼圖像202中包括的素材主體204彼此重復(fù)。另外,由箭頭標(biāo)記230來指示在矩形230中參考左眼圖像201的情況下在左眼圖像201和右眼圖像202之間的素材主體203的位移量。類似地,由另一箭頭標(biāo)記232來指示在參考左眼圖像201的情況下在左眼圖像201和右眼圖像202之間的素材主體205的位移量。要注意,如上所述,素材主體204沒有位移。因?yàn)槭褂迷谧笱酆陀已壑g的視差來獲得立體視覺,因此響應(yīng)于素材主體的顯示位置、即在深度方向上的位置,彼此位移在左眼圖像201和右眼圖像202中包括的素材主體。換句話說,顯示素材主體的位移量對應(yīng)于立體素材主體或3D對象的突出量或回縮量。
因此,在公開技術(shù)的第一實(shí)施例中,使用關(guān)于配置立體圖像的左眼圖像和右眼圖像的素材主體的位移量、即立體素材主體或3D對象的突出量或回縮量,作為立體圖像參數(shù)。因此,在公開技術(shù)的第一實(shí)施例中,使用左眼圖像作為參考,且使用基于在左眼圖像中包括的顯示素材主體和右眼圖像中包括的顯示素材主體之間的差、即素材主體的突出量或回縮量計(jì)算的立體圖像參數(shù)。例如,如果將用作參考的左眼圖像中包括的素材主體位移到在右眼圖像上的左側(cè)、即圖8中的左側(cè),則素材主體是突出主體。然后,確定素材主體的位移量大于0、即位移
量> 0。另一方面,例如,如果將用作參考的左眼圖像中包括的素材主體位移到在右眼圖像上的右側(cè)、即圖8中的右側(cè),則素材主體是回縮主體。然后,確定素材主體的位移量小于 0、即位移量< 0。但是,例如,如果將用作參考的左眼圖像中包括的素材主體不位移到右眼圖像上, 則素材主體位于顯示面的位置、即屏幕面。然后,確定素材主體的位移量等于0、即位移量= O0具體地,由于在用作參考的左眼圖像201中包括的素材主體203被位移到右眼圖像202上由箭頭標(biāo)記231指示的右側(cè),因此素材主體203是回縮主體,且素材主體203的位移量小于0,即素材主體203的位移量< 0。另一方面,由于在用作參考的左眼圖像201中包括的素材主體205被位移到右眼圖像202上由箭頭標(biāo)記232指示的左側(cè),因此素材主體205是突出主體,且素材主體205的位移量大于0,即素材主體205的位移量> 0。另一方面,由于在用作參考的左眼圖像201中包括的素材主體204不位移到右眼圖像202上,因此素材主體204位于顯示面或屏幕面上的位置處,且素材主體204的位移量是0,即素材主體204的位移量=0。位移量保持表的例子圖9A和9B示意性地圖示在公開技術(shù)的第一實(shí)施例中在內(nèi)容隨附信息存儲部分 122中存儲的立體圖像參數(shù)、即位移量保持表300。更具體地,圖9A圖示了用于產(chǎn)生位移量保持表300的立體圖像、即具體的左眼圖像301和右眼圖像302。參考圖9A,左眼圖像301和右眼圖像302包括1,920X1, 080像素。 要注意,在圖9A中,示出對應(yīng)于左眼圖像301和右眼圖像302的矩形,而未示出圖像中包括
的素材主體等。在此,描述立體圖像中包括的素材主體的位移量的計(jì)算方法。例如,左眼圖像被劃分為具體尺寸的區(qū)域或塊,且計(jì)算在左眼圖像和右眼圖像的例如4X4像素的尺寸的對應(yīng)區(qū)域之間的比較處理、即當(dāng)在水平方向上連續(xù)移動對應(yīng)區(qū)域時(shí)的比較處理。然后,基于相關(guān)值,以塊為單位確定位移量來產(chǎn)生位移量保持表300。圖9B圖示保持以塊為單位從左眼圖像301和右眼圖像302計(jì)算的位移量的位移量保持表300。在關(guān)于每個(gè)從1,920X1, 080像素配置的左眼圖像301和右眼圖像302的以 4X4像素的塊為單位進(jìn)行比較處理的情況下,對于各個(gè)塊計(jì)算480X270 = 1 ,600位移量。在與位移量保持表300中的計(jì)算對象的塊相關(guān)的關(guān)系中,保持以此方式對于各個(gè)塊計(jì)算的位移量。另外,對配置計(jì)算對象的立體圖像內(nèi)容的每幀產(chǎn)生位移量保持表300。然后,在內(nèi)容隨附信息存儲部分122中,在與計(jì)算對象的立體圖像內(nèi)容相關(guān)的關(guān)系中存儲位移量保持表300。在該情況下,在與配置計(jì)算對象的立體圖像內(nèi)容的幀相關(guān)的關(guān)系中存儲位移量保持表300。另外,在圖9B中,示出位于對應(yīng)于左眼圖像301的塊的位置的位移量保持表300 的位置處的位移量。另外,可以另外以像素為單位或以分塊為單位來保持位移量。但是,在圖9B中,圖示其中保持以像素為單位計(jì)算的位移量的例子,以便理解。另外,雖然在圖9B 中,位移量被計(jì)算為0、表示突出方向上的值或突出量的正值和表示回縮方向上的值或回縮量的負(fù)值中的任一,但是僅示出正值便于理解。二進(jìn)制化數(shù)據(jù)的例子現(xiàn)在,描述作為立體圖像參數(shù)的例子的二進(jìn)制化數(shù)據(jù)。例如,可以通過對位移量是 “非0”且靠近其中位移量是“0”的區(qū)域(零位移量區(qū)域)的位移量保持表300的區(qū)域(非零位移量區(qū)域)進(jìn)行邊緣檢測處理來檢測立體素材主體。通過邊緣檢測處理,以位移量保持表300的塊為單位計(jì)算諸如例如“1”表示立體素材主體的區(qū)域且“0”表示任何其他區(qū)域的二進(jìn)制化數(shù)據(jù)。然后,以位移量保持表300的塊為單位計(jì)算的0或1的二進(jìn)制化數(shù)據(jù)被保持在位移量保持表300中的相關(guān)關(guān)系中。例如,如果用0和1的所計(jì)算二進(jìn)制化數(shù)據(jù)來指定立體圖像中的封閉區(qū)域,則可以確定封閉區(qū)域作為立體素材主體的區(qū)域。在以此方式來指定立體素材主體的區(qū)域的情況下,對應(yīng)于素材主體的區(qū)域和素材主體的位移量可以彼此相關(guān)以得到立體圖像參數(shù)。另外, 如果在立體圖像中包括多個(gè)素材主體,則對應(yīng)于多個(gè)素材主體的區(qū)域和素材主體的位移量可以彼此相關(guān)以得到立體圖像參數(shù)。在以此方式指定多個(gè)素材主體的情況下,對應(yīng)于素材主體的區(qū)域必須是封閉區(qū)域。要注意,內(nèi)容隨附信息存儲部分122可以存儲通過將對應(yīng)于每個(gè)指定的素材主體的區(qū)域與深度量相關(guān)而得到的立體圖像參數(shù),該深度量是通過彼此轉(zhuǎn)換指定的素材主體的位移量而獲得的突出量或回縮量。在圖像上的位移量和在位移面上的位移量之間的關(guān)系的例子圖IOA和IOB圖示公開技術(shù)的第一實(shí)施例中的內(nèi)容存儲部分121中存儲的立體圖像內(nèi)容上的位移和顯示部分181的顯示面上的位移之間的關(guān)系。更具體地,圖IOA示出配置立體圖像的左眼圖像201和右眼圖像202。圖IOA所示的左眼圖像201和右眼圖像202 類似于圖7B所示的那些。在圖IOA中,左眼圖像201上的素材主體與右眼圖像202中包括的素材主體203的位移量被表示作為位移量Gl。圖IOB示出顯示部分181上顯示的立體圖像。要注意,在圖IOB中,以合成方式來示出圖IOA所示的左眼圖像201和右眼圖像202。另外,在圖IOB中,顯示部分181的顯示面上的位移、即在左眼圖像201和右眼圖像202中包括的素材主體203的位移被表示為位
移量G20聲音校正部分140、立體圖像校正部分150和字幕產(chǎn)生部分160以此方式基于在立體圖像的位移量和顯示部分181的顯示面部的位移量之間的關(guān)系,使用立體圖像參數(shù)進(jìn)行校正處理。在該情況下,聲音校正部分140、立體圖像校正部分150和字幕產(chǎn)生部分160基于在立體圖像的位移量和顯示部分181的顯示面部的位移量之間的保持的轉(zhuǎn)換表,使用立體圖像參數(shù)進(jìn)行校正處理。在觀看位置和突出位置之間的關(guān)系的例子
圖11示意性地圖示公開技術(shù)的第一實(shí)施例中的當(dāng)觀看顯示部分181上顯示的立體圖像時(shí)的觀看位置和立體圖像中包括的素材主體、即立體素材主體的突出位置之間的關(guān)系。參考圖11,顯示立體圖像的位置、即顯示部分181的顯示面上的位置被表示為顯示面的位置350,且在觀看顯示部分181上顯示的立體圖像的情況下的用戶的觀看位置被表示為觀看位置351。另外,在此狀態(tài)下,素材主體的突出位置、即可以被正觀看立體圖像的用戶看到的立體素材主體352被表示為突出位置353。在此,在立體圖像中包括的立體素材主體352的位移量、即顯示面上的位移量用ρ 表示,在顯示面的位置350和觀看位置351之間的距離用L表示,且正觀看立體圖像的用戶的兩眼之間的距離用e表示。另外,在顯示面的位置350和突出位置353之間的距離或突出量用d表示。在此情況下,在顯示位置的位置350、觀看位置351和突出位置353之間的關(guān)系根據(jù)相似性關(guān)系滿足以下公式1 dip= (L-d) E ......公式 1如果變換公式1,則確定d = pL(e+p)。具體地,如果ρ = 71mm, 1 = 2,OOOmm和e = 65mm被替換為公式1,則可以確定突出量 d 為 1,044mm(d = 71X2,000/(65+71))。以此方式,可以使用素材主體的位移量來確定立體圖像上的素材主體的突出量。 因此,立體圖像校正部分150可以使用立體圖像上的素材主體的位移量,進(jìn)行素材主體的深度量、即突出量或回縮量的校正。立體圖像的校正的例子圖12A示意性地圖示了在顯示部分181上顯示立體圖像且在深度方向上虛擬地放置立體圖像中包括的素材主體203到205的位置的情況下的頂部平面圖。要注意,圖12A 所示的例子類似于圖7A的例子,除了距離Bl和Si。距離Bl是在深度方向上虛擬地放置素材主體203-205的位置的情況下、在素材主體203和204之間的深度方向上的距離。同時(shí),距離Sl是在深度方向上虛擬地放置素材主體203-205的位置的情況下、在素材主體204和205之間的深度方向上的距離。圖12B示意性地圖示了在通過立體圖像校正部分150校正之后在顯示部分181上顯示立體圖像且在深度方向上虛擬地放置立體圖像中包括的素材主體203-205的位置的情況下的頂部平面圖。距離B2是在深度方向上虛擬地放置素材主體203-205的位置的情況下、在素材主體203和204之間的深度方向上的距離。同時(shí),距離S2是在深度方向上虛擬地放置素材主體203-205的位置的情況下、在素材主體204和205之間的深度方向上的距離。在圖12B,調(diào)整立體圖像的深度量、即突出量或回縮量在很緩和的狀態(tài)下,以便當(dāng)用戶長時(shí)間觀看立體圖像內(nèi)容時(shí),用戶的眼睛在長時(shí)間觀看后可能不疲乏。例如,通過對圖6所示的立體圖像移動該深度位置調(diào)整調(diào)節(jié)器510到相對于中間的“低”側(cè),可以調(diào)整立體素材主體的深度量、即突出量或回縮量到緩和的量。在該情況下, 調(diào)整塊151可以通過將位移量保持表中的位移量乘以常數(shù)K(0 < K < 1),來調(diào)整每個(gè)位移
16量在該情況下,在圖12A和12B的例子中,滿足B2 < Bl和S2 < Si。以此方式,可以減少立體素材主體的突出量或回縮量來減少用戶的眼睛的負(fù)擔(dān)。另一方面,通過對圖6所示的立體圖像移動該深度位置調(diào)整調(diào)節(jié)器510到相對于中間的“高”側(cè),可以調(diào)整立體素材主體的深度量、即突出量或回縮量以便強(qiáng)調(diào)。在該情況下,調(diào)整塊151可以通過將位移量保持表中的位移量乘以常數(shù)K(1<K),來調(diào)整每個(gè)位移量以此方式,可以增加立體素材主體的突出量或回縮量來強(qiáng)調(diào),以提升立體圖像的立體效果, 以便用戶可以享受立體圖像。以此方式,通過響應(yīng)于用戶操作來調(diào)整立體圖像的深度量,可以提供符合用戶的個(gè)人喜好的適當(dāng)立體圖像。在該情況下,例如,如果在遙控器500上提供對應(yīng)于觀看者的不同年齡組的設(shè)置按鈕、諸如孩子按鈕、青年按鈕和老人按鈕,且響應(yīng)于用戶的年齡組而按下它們,則可以提供適用于用戶的年齡組的適當(dāng)立體圖像。例如,如果按下孩子按鈕或老人按鈕,則可以將立體圖像和相關(guān)聲音設(shè)置為緩和的水平。另一方面,如果按下青年按鈕,則可以將立體圖像和相關(guān)聲音設(shè)置為強(qiáng)調(diào)。另外,在以此方式轉(zhuǎn)變立體圖像的深度量的情況下,即在進(jìn)行轉(zhuǎn)變操作的情況下, 可以校正聲音數(shù)據(jù)以便基于聲音數(shù)據(jù)的聲音圖像可以位于對應(yīng)于校正后的深度量的位置處。聲音的校正的例子圖13示意性地圖示在公開文檔的第一實(shí)施例中由聲音校正部分140校正輸出聲音的情況下的校正方法。在圖13中,示意性地圖示在觀看顯示部分181上顯示的立體圖像的情況下的觀看位置和素材主體、即在立體圖像中包括的立體素材主體的突出位置之間的關(guān)系。參考圖13,顯示立體圖像的位置、即顯示部分181的顯示面上的位置是顯示面的位置400,且在用戶觀看顯示部分181上顯示的立體圖像的情況下的用戶的觀看位置是觀看位置401。另外,在該情況下,素材主體A和B、即可以由觀看立體圖像的用戶看到的立體素材主體402和403的突出位置分別是突出位置404和405。在此,在顯示面的位置400和觀看位置401之間的距離用L表示,在顯示面的位置 400和突出位置404之間的距離、即突出位置404的突出量用Ya表示,且在顯示面的位置 400和突出位置405之間的距離、即突出位置405的突出量用Yb來表示。在該情況下,在觀看位置401和突出位置404之間的距離Za是L_Ya,即Za = L-Ya,且在觀看位置401和突出位置405之間的距離Zb是L-Yb,即,Zb = L-Yb。因此,在顯示部分181上顯示立體圖像,且立體圖像包括突出到突出位置404的立體素材主體的情況下,濾波處理塊147響應(yīng)于距離Za來進(jìn)行濾波處理。因此,聲音圖像可以定位于立體素材主體402的突出位置404。要注意,該聲音圖像意味著感官聲音源。在此,通過已知方法來確定在濾波處理中使用的濾波器系數(shù),該已知方法是分別在要定位的聲音源的位置處、或距離處和方向上和觀看位置處安裝仿真人頭(dummy head),且測量脈沖響應(yīng)。例如,在日本專利特開No. 2010-178373中公開該方法。另外,在與保持塊I49中的聲音源的位置相關(guān)的關(guān)系中,預(yù)先存儲由上述方法確定的分別對應(yīng)于不同可假設(shè)聲音源的位置、或距離和方向的多個(gè)濾波器系數(shù)。然后,濾波器確定塊144響應(yīng)于從位置轉(zhuǎn)換塊142輸出的立體素材主體的深度量、即突出位置或回縮位
17置來選擇濾波器系數(shù)之一。具體地,濾波器確定塊144選擇與最靠近立體素材主體的突出位置的位置相對應(yīng)的濾波器系數(shù)。然后,濾波處理塊147使用由濾波器確定塊144選擇的濾波器系數(shù)來進(jìn)行濾波處理。另外,以通過進(jìn)行音量調(diào)整來校正該聲音。自此,參考圖13描述其中參考作為素材主體A的立體素材主體402的突出位置404進(jìn)行作為素材主體B的立體素材主體403的突出位置405的音量調(diào)整的例子。從音壓和距離之間的關(guān)系中確定當(dāng)調(diào)整音量時(shí)使用的增益量。具體地,在突出位置404處的音壓是Ia的情況下,可以通過以下公式2來確定在突出位置405處的音壓Λ Ib = IaX (Zb/Za)2 . · ·公式 2因此,作為在進(jìn)行突出位置405處的音量調(diào)整的情況下的增益量g,確定rt/Ia, 艮口,g = Ib/Ia0具體地,增益確定塊143確定HVIa作為在基于來自位置轉(zhuǎn)換塊142的位置信息進(jìn)行在突出位置405處的音量調(diào)整的情況下的增益量g。以此方式,音量調(diào)整塊146在突出位置404的向其或向后的位置處、例如在突出位置405處,使用由增益確定塊143確定的增益量進(jìn)行音量調(diào)整。通過以此方式進(jìn)行音量調(diào)整處理以及濾波處理,可以準(zhǔn)確地校正在除了對應(yīng)于頭相關(guān)傳輸函數(shù)濾波器的位置之外的位置處的聲音信息。另外,通過以此方式進(jìn)行音量調(diào)整處理以及濾波處理,即使提供大量頭相關(guān)傳輸函數(shù)濾波器,也可以進(jìn)行對應(yīng)于每個(gè)位置的聲音信息的校正。以此方式,可以使用素材主體的位移位置來確定立體圖像上的素材主體的突出量。因此,聲音校正部分140可以使用素材主體的位移量,進(jìn)行立體圖像中的素材主體的聲音信息的校正。以此方式,通過公開技術(shù)的第一實(shí)施例,可以向用戶提供根據(jù)在顯示部分181上顯示的立體圖像的適當(dāng)?shù)牧Ⅲw聲音。換句話說,當(dāng)要顯示立體圖像時(shí),可以考慮素材主體在深度方向上的位置來進(jìn)行聲音輸出。因此,用戶可以享受進(jìn)一步豐富的呈現(xiàn)。信息處理設(shè)備的操作的例子現(xiàn)在,將參考附圖詳細(xì)描述本公開技術(shù)的第一實(shí)施例的信息處理設(shè)備100的操作。聲音校正部分的操作的例子圖14圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的聲音校正部分140進(jìn)行的聲音校正處理的處理過程的例子。在圖14中,基于位移量保持表的位移量的平均值來校正聲音。首先,在步驟S911處決定是否進(jìn)行立體圖像的顯示指令操作,以及如果不進(jìn)行立體圖像的顯示指令操作,則連續(xù)進(jìn)行監(jiān)視。如果在步驟S911處進(jìn)行立體圖像的顯示指令操作,則調(diào)整值計(jì)算塊141在步驟S912處獲取位移量保持表,且在步驟S913處計(jì)算位移量保持表的位移量的平均值作為調(diào)整值。然后,在步驟S914,位置轉(zhuǎn)換塊142將作為調(diào)整值的平均值轉(zhuǎn)換為對應(yīng)的位置、即轉(zhuǎn)換為在深度方向上的位置。然后,增益確定塊143在步驟S915處基于轉(zhuǎn)換后的位置來確定用于進(jìn)行音量調(diào)整的增益量。然后,在步驟S916處,濾波器確定塊144基于轉(zhuǎn)換后的位置來確定用于將聲音圖像定位于該位置的濾波器系數(shù)。然后,在步驟S917處,音量調(diào)整塊146使用確定的增益量來進(jìn)行音量調(diào)整。然后,在步驟S918處,濾波處理塊147使用確定的濾波器系數(shù)來進(jìn)行濾波處理。要注意,在步驟 S912處的處理是在公開的技術(shù)中的校正過程的例子。然后,在步驟S919中,聲音數(shù)據(jù)輸出塊148向輸出控制部分170輸出校正處理之后聲音數(shù)據(jù)。因此,從輸出控制部分170輸出校正處理之后的聲音數(shù)據(jù)。要注意,在步驟 S919處的處理是公開技術(shù)中的輸出控制步驟的例子。然后,在步驟S920,決定是否進(jìn)行立體圖像的顯示結(jié)束操作。如果不進(jìn)行立體圖像的顯示結(jié)束操作,則處理返回到步驟S912。另一方面,如果在步驟S920處進(jìn)行立體圖像的顯示結(jié)束操作,則聲音校正處理的操作結(jié)束。立體圖像校正部分的操作的例子圖15圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的立體圖像校正部分150進(jìn)行的立體圖像校正處理的處理過程的例子。更具體地,圖15圖示其中基于通過用戶操作進(jìn)行的參數(shù)調(diào)整來校正立體圖像的例子。首先,在步驟S931,確定是否進(jìn)行立體圖像的顯示指令操作。如果不進(jìn)行立體圖像的顯示指令操作,則連續(xù)進(jìn)行監(jiān)視。但是,如果在步驟S931處進(jìn)行立體圖像的顯示指令操作,則在步驟S932處決定是否進(jìn)行參數(shù)調(diào)整的指令操作。如果不進(jìn)行參數(shù)調(diào)整的指令操作,則處理繼續(xù)到步驟S938。另一方面,如果在步驟S932處進(jìn)行參數(shù)調(diào)整的指令操作,則調(diào)整塊151在步驟 S933處獲取位移量保持表。然后,響應(yīng)于由操作接受部分115接受的操作、即響應(yīng)于參數(shù)調(diào)整的指令操作,在步驟S934處調(diào)整在位移量保持表中的位移量。然后,水平移動處理塊153在步驟S935處,基于調(diào)整后的位移量來進(jìn)行水平移動處理,且然后在步驟S936處,平滑處理塊154基于二進(jìn)制化數(shù)據(jù)來進(jìn)行平滑處理。然后,圖像數(shù)據(jù)輸出塊155在步驟S937處向輸出控制部分170輸出校正處理之后的圖像數(shù)據(jù)。然后,在步驟S938,決定是否進(jìn)行立體圖像的顯示結(jié)束操作。如果不進(jìn)行立體圖像的顯示結(jié)束操作,則處理返回到步驟S932。另一方面,如果在步驟S938處進(jìn)行立體圖像的顯示結(jié)束操作,則圖像校正處理的操作結(jié)束。字幕產(chǎn)生部分的操作的例子圖16圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的字幕產(chǎn)生部分160進(jìn)行的字幕產(chǎn)生處理的處理過程的例子。更具體地,在圖16中,基于位移量保持表的位移量的平均值來校正字幕數(shù)據(jù)。首先,在步驟S951,決定是否進(jìn)行立體圖像的顯示指令操作。如果不進(jìn)行立體圖像的顯示指令操作,則連續(xù)進(jìn)行監(jiān)視。另一方面,如果在步驟S951處進(jìn)行立體圖像的顯示指令操作,則調(diào)整值計(jì)算塊161在步驟S953處獲取位移量保持表。例如,調(diào)整值計(jì)算塊161 在步驟S953處計(jì)算位移量保持表的平均值作為調(diào)整值。然后,在步驟S954,字幕數(shù)據(jù)產(chǎn)生塊162產(chǎn)生字幕數(shù)據(jù)。然后,字幕數(shù)據(jù)產(chǎn)生塊162 在步驟S955處使用平均值或調(diào)整值,關(guān)于字幕數(shù)據(jù)或如此產(chǎn)生的字幕圖像,進(jìn)行圖像的水平移動處理。然后,字幕數(shù)據(jù)輸出塊163在步驟S956處向輸出控制部分170輸出產(chǎn)生的字幕數(shù)據(jù)。然后,在步驟S957處,決定是否進(jìn)行立體圖像的顯示結(jié)束操作。如果不進(jìn)行立體圖像的顯示結(jié)束操作,則處理返回到步驟S952。另一方面,如果在步驟S957處進(jìn)行立體圖像的顯示結(jié)束操作,則字幕產(chǎn)生處理的操作結(jié)束。參考具體立體圖像的位置的聲音的校正的例子在前述描述中,描述基于位移量保持表中的位移量的平均值來校正聲音的例子。 但是,例如,在要顯示包括諸如用戶或家庭的具體人的立體圖像的情況下,假設(shè),用戶期望參考具體人來校正該聲音。因此,在以下描述中,描述其中參考立體圖像中包括的具體對象來校正聲音的例子。17A和17B示意地圖示按時(shí)序在公開技術(shù)的第一實(shí)施例中的顯示部分181上顯示的立體圖像。更具體地,圖17A示出當(dāng)從前側(cè)成像正起飛的飛機(jī)413時(shí)的立體圖像410-412。同時(shí),圖17B示出當(dāng)從前側(cè)成像朝向圖像拾取人側(cè)前進(jìn)的人418時(shí)的立體圖像415-417。假設(shè),立體圖像410-412和415-417對應(yīng)于從配置用于顯示立體圖像的動態(tài)圖片的幀中的在每個(gè)固定的間隔時(shí)間之后的幀。在圖17A和17B中,按時(shí)序示出配置立體圖像的左眼圖像和右眼圖像之一的圖像來便于理解。另外,假設(shè),當(dāng)顯示對應(yīng)于立體圖像410-412的動態(tài)圖片時(shí),顯示飛機(jī)413作為其突出量相對較大的立體圖像。而且,假設(shè),在顯示對應(yīng)于立體圖像415-417的動態(tài)圖片的情況下,顯示該人418作為其突出量相對較大的立體素材主體。如從圖17A和17B看到,在具體立體素材主體、即飛機(jī)413或人418按時(shí)序朝向圖像拾取人側(cè)連續(xù)前進(jìn)的情形下,從音頻聲道中識別從立體素材主體生成的的聲音,且校正該聲音。如果以此方式進(jìn)行聲音校正,可以得到該用戶更喜愛的適當(dāng)?shù)穆曇糨敵?。聲音校正部分的配置的例子圖18圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的聲音校正部分450的功能配置的例子。要注意,聲音校正部分450是圖3所示的聲音校正部分140的部分修改的形式。因此, 在此省略公共組件的重復(fù)描述來避免冗余要注意,聲音校正部分450是在公開技術(shù)中的校正部分的例子。參考圖18,聲音校正部分450包括面部檢測塊451、位置轉(zhuǎn)換塊452、增益確定塊 453、濾波器確定塊454、音量調(diào)整塊456、濾波處理塊457、混合器塊458和聲音數(shù)據(jù)輸出部分 459。聲音數(shù)據(jù)輸入塊145從獲取部分130接收向其供應(yīng)的中央聲道、左聲道和右聲道的聲音數(shù)據(jù)作為向其的輸入,且向音量調(diào)整塊146和音量調(diào)整塊456供應(yīng)聲音數(shù)據(jù)。例如, 作為聲道的中央聲道的聲音數(shù)據(jù)通過信號線462被供應(yīng)到音量調(diào)整塊456,而作為主聲道的左聲道和右聲道的聲音數(shù)據(jù)通過信號線被供應(yīng)到音量調(diào)整塊146。另外,濾波處理塊147 向混合器塊458輸出濾波處理之后的聲音數(shù)據(jù)。面部檢測塊451在控制部分110的控制下,檢測從獲取部分130向其供應(yīng)的圖像數(shù)據(jù)中包括的人的面部。然后,面部檢測塊451向位置轉(zhuǎn)換塊452輸出關(guān)于被檢測面部的面部信息、具體地即對應(yīng)于面部的被檢測區(qū)域的位移量的平均值。例如,面部檢測塊451使用位移量保持表和從獲取部分130向其供應(yīng)的立體圖像參數(shù)中包括的二進(jìn)制化數(shù)據(jù)來檢測人的面部。例如,立體圖像校正部分451響應(yīng)于用戶操作來調(diào)整位移量保持表中的位移量,來校正圖像數(shù)據(jù)。然后,面部檢測塊451進(jìn)行在提取的位移量和預(yù)先保留的人的面部的圖案圖像之間的匹配方法,來基于匹配處理的結(jié)果來檢測人的面部。要注意,可以使用某些其他檢測方法。例如,可以使用此后參考圖23描述的類似于由公開技術(shù)的第二實(shí)施例中的面部檢測部分620使用的面部檢測方法。要注意,面部檢測塊451是在公開技術(shù)中的檢測部分的例子。位置轉(zhuǎn)換塊452將從面部檢測塊451輸出的面部信息、即平均值轉(zhuǎn)換為用于校正聲音數(shù)據(jù)的方向上的位置。然后,位置轉(zhuǎn)換塊452向增益確定塊453和濾波器確定塊454 輸出該位置或轉(zhuǎn)換后的位置信息。然后,增益確定塊453基于從位置轉(zhuǎn)換塊452輸出的位置信息,確定用于進(jìn)行音量調(diào)整的增益量,并向音量調(diào)整塊456輸出確定的增益信息。濾波器確定塊454基于從位置轉(zhuǎn)換塊452輸出的位置信息來確定用于將聲音圖像定位于對應(yīng)于該位置信息的位置的濾波器系數(shù)。濾波器確定塊454向?yàn)V波處理塊457輸出確定的濾波器系數(shù)。音量調(diào)整塊456使用從增益確定塊453輸出的增益量,進(jìn)行從聲音數(shù)據(jù)輸入塊145 向其供應(yīng)的聲音數(shù)據(jù)的音量調(diào)整,且向?yàn)V波處理塊457輸出音量調(diào)整之后的聲音數(shù)據(jù)。濾波處理塊457使用從濾波器確定塊454輸出的濾波器系數(shù),進(jìn)行從聲音數(shù)據(jù)輸入塊145向其供應(yīng)的聲音數(shù)據(jù)的濾波處理,且向混合器塊458輸出濾波處理之后的聲音數(shù)據(jù)。混合器塊458混合從濾波處理塊147輸出的濾波處理之后的聲音數(shù)據(jù)和從濾波處理塊157輸出的濾波處理之后的聲音數(shù)據(jù),且向聲音數(shù)據(jù)輸出部分459輸出混合的聲音數(shù)據(jù)。聲音數(shù)據(jù)輸出塊459向輸出控制部分170輸出從混合器塊458輸出的聲音數(shù)據(jù)。以此方式,聲音校正部分450基于由面部檢測塊451檢測的人的作為具體對象的面部在深度方向上的位置,來校正從該人發(fā)出的聲音。具體地,聲音校正部分450使用從立體圖像參數(shù)中的表示人的面部在深度方向上的位置的參數(shù)、即位移量,來校正中央聲道的聲音數(shù)據(jù),即從該人發(fā)出的聲音數(shù)據(jù)。另外,例如,聲音校正部分450可以使用除了表示人面部在深度方向上的位置的參數(shù)之外的參數(shù)或位移量,來校正左聲道和右聲道的聲音數(shù)據(jù)。例如,調(diào)整值計(jì)算塊141計(jì)算除了表示人面部在深度方向上的位置的參數(shù)之外的參數(shù)或位移量的平均值。然后,調(diào)整值計(jì)算塊141可以基于所計(jì)算的平均值來校正左聲道和右聲道的聲音數(shù)據(jù)。要注意,雖然在以上描述的例子中,檢測人面部作為具體對象,但是可以使用某些其他具體對象檢測方法來檢測例如飛機(jī)、汽車或人體的具體對象。例如,在日本專利特開 No. 2010-067102中公開了可以使用其中使用方向性梯度(HOG)的直方圖來進(jìn)行素材主體檢測的檢測方法來檢測具體對象。參考背景的位置的聲音的校正的例子在以前描述中,描述其中參考立體圖像中包括的具體對象來校正聲音的例子。但是,可以另外參考立體圖像中包括的不同區(qū)域來校正聲音。例如,在立體圖像中包括的背景區(qū)域、或換句話說除了立體圖像之外的區(qū)域可以用作校正聲音、即關(guān)于背景區(qū)域的背景聲音的參考。例如,能夠使用二進(jìn)制化數(shù)據(jù)來指定背景區(qū)域。具體地,二進(jìn)制化數(shù)據(jù)是“0”的區(qū)域是背景區(qū)域。同時(shí),可以從周圍聲道中提取背景聲音。然后,在聲道中的背景聲音的聲音圖像被定位于對應(yīng)于背景區(qū)域的位置。因此,可以向用戶提供最佳立體聲音。
21
基于場景轉(zhuǎn)變的立體圖像的校正的例子之前,根據(jù)用戶操作來校正立體圖像的例子。在此,假設(shè),例如在從廣播節(jié)目轉(zhuǎn)變?yōu)镃M(商業(yè)信息)時(shí),或在頻道轉(zhuǎn)變或場景轉(zhuǎn)變時(shí),可能發(fā)生從立體圖像到平面圖像或從平面圖像反轉(zhuǎn)為立體圖像的轉(zhuǎn)變。如果發(fā)生突然轉(zhuǎn)變、諸如從立體圖像到平面圖像或從平面圖像到立體圖像的轉(zhuǎn)變,則用戶可能有不舒服的感覺。以下,描述參考CM轉(zhuǎn)變或頻道轉(zhuǎn)變來校正立體圖像的例子。要注意,以下在該例子中的信息處理設(shè)備的配置基本類似于參考圖2等來描述的配置。因此,在此省略與圖2等所示的信息處理設(shè)備100的那些共同的信息處理設(shè)備的組件的描述來避免冗余。要注意,作為在場景轉(zhuǎn)變時(shí)的檢測方法,可以使用其中對象圖像和就在先前的圖像或相近圖像彼此比較來檢測展示突然轉(zhuǎn)變的圖像來分析對象圖像是換臺轉(zhuǎn)變點(diǎn)(cut change point)還是場景轉(zhuǎn)換點(diǎn)的方法。例如,作為換臺轉(zhuǎn)變檢測方法,可以使用在日本專利特征No. 2008-83894中公開的使用圖像之間的直方圖相似性和空間相關(guān)圖像相似性來確定換臺轉(zhuǎn)變的方法。根據(jù)該方法,基于關(guān)于對象圖像和相鄰圖像的直方圖相似性和空間相關(guān)圖像相似性,在對象圖像和相近圖像之間的圖像轉(zhuǎn)變是換臺轉(zhuǎn)變。要注意,可以基于來自廣播接收部分的視頻信號來檢測CM轉(zhuǎn)變。同時(shí),可以基于由遙控器500或操作接受部分 115接受的用戶操作來檢測頻道轉(zhuǎn)變。基于CM轉(zhuǎn)變的立體圖像的校正的例子圖19A和19B圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的立體圖像校正部分150的進(jìn)行的深度量的調(diào)整的例子。在圖19A和19B中,按時(shí)序示意性地圖示對應(yīng)于來自位移量保持表300中包含的位移量中的一個(gè)位移量、即一個(gè)塊的深度量的變化。另外,在圖19A和19B 所示的例子中,假設(shè),顯示廣播節(jié)目作為立體圖像,且顯示CM作為平面圖像。在圖19A中,按時(shí)序圖示在調(diào)整之前的立體圖像的深度量。圖19A中示出的曲線 531和532對應(yīng)于被顯示為立體圖像的廣播節(jié)目、即節(jié)目(3D)的深度量的過渡。假設(shè),在對應(yīng)于曲線531和532的廣播節(jié)目、即節(jié)目(3D)之后,顯示CMQD)為平面圖像。如圖19A所示,在從廣播節(jié)目向CMQD)、即從對應(yīng)于曲線531的節(jié)目(3D)向 CM (2D)轉(zhuǎn)變時(shí),深度量突然變化。類似地,在從CMQD)向廣播節(jié)目轉(zhuǎn)變、即對應(yīng)于曲線532 的節(jié)目(3D)時(shí),和在從對應(yīng)于曲線532的廣播節(jié)目、即節(jié)目(3D)向CM^))轉(zhuǎn)變時(shí),深度量突然變化。在深度量以此方式變化的情況下,存在觀看立體圖像的用戶可能有不舒服的感覺的可能。例如,在從廣播節(jié)目、即從節(jié)目(3D)向CMQD)轉(zhuǎn)變時(shí),由于圖像突然從立體圖像向平面圖像轉(zhuǎn)變,因此存在用戶可能有不舒服的感覺的可能。因此,在從廣播節(jié)目、即從節(jié)目(3D)向CMQD)轉(zhuǎn)變時(shí),以圖19B所示的方式調(diào)整深度量,以便可以減少在從立體圖像向平面圖像轉(zhuǎn)變時(shí)可能給用戶提供的不舒服的感覺。在圖19B中,按時(shí)序圖示在調(diào)整之后的立體素材主體的深度量。在調(diào)整對應(yīng)于圖 19A所示的曲線531的深度量之后,圖19所示的曲線533對應(yīng)于深度量的過渡。同時(shí),在調(diào)整對應(yīng)于圖19A所示的曲線532的深度量之后,圖19B所示的另一曲線534對應(yīng)于深度量的過渡。例如,在從廣播節(jié)目、即從節(jié)目(3D)向CMQD)轉(zhuǎn)變時(shí),圖4所示的調(diào)整塊151進(jìn)行從深度量、即在邊界時(shí)間之前預(yù)定時(shí)間段、例如時(shí)間段til的深度量的調(diào)整。例如,對于從時(shí)間段til的開始到結(jié)束的時(shí)間段,可以通過將深度量乘以隨時(shí)間減少的參數(shù)來進(jìn)行調(diào)整。該參數(shù)a變化到例如0彡a彡1的范圍內(nèi)的值,且在時(shí)間段til的開始,參數(shù)a是a = 1,且在時(shí)間段til的結(jié)束,參數(shù)a是a = 0。另外,對于從時(shí)間段til的開始到結(jié)束的時(shí)間段,參數(shù)a變化以便響應(yīng)于時(shí)間流逝從1減少到0。例如,另一方面,在從CMQD)向廣播節(jié)目、即節(jié)目(3D)轉(zhuǎn)變時(shí),圖4所示的調(diào)整塊 151進(jìn)行深度量、即在邊界時(shí)間之后預(yù)定時(shí)間段、例如時(shí)間段tl2的位移量的調(diào)整。例如,通過將深度量乘以響應(yīng)于從時(shí)間段tl2的開始到結(jié)束的時(shí)間段的時(shí)間流逝而增加的參數(shù)b, 來進(jìn)行調(diào)整。該參數(shù)b變化到例如1的范圍內(nèi)的值,且在時(shí)間段tl2的開始,參數(shù) b是b = 0,且在時(shí)間段tl2的結(jié)束,參數(shù)b是b = 1。另外,參數(shù)b變化以便響應(yīng)于從時(shí)間段tl2的開始到結(jié)束的時(shí)間段的時(shí)間流逝而從0增加到1。基于頻道轉(zhuǎn)變的立體圖像的校正的例子圖20A和20B圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的立體圖像校正部分150的進(jìn)行的深度量的調(diào)整的例子。在圖20A和20B中,按時(shí)序示意性地圖示對應(yīng)于來自位移量保持表300中包含的位移量中的一個(gè)位移量、即一個(gè)塊的深度量的變化。另外,在圖20A和20B 所示的例子中,假設(shè),顯示立體圖像和平面圖像之一。要注意,圖20A和20B所示的例子是對圖19A和19B中圖示的例子的修改,且基本上類似于圖19A和19B的例子,除了 CMQD)時(shí)間段和節(jié)目QD)時(shí)間段。要注意,雖然在圖19A、19B和20A、20B所示的例子中,圖示在CM轉(zhuǎn)變和頻道轉(zhuǎn)變時(shí)的立體圖像的校正的例子,在場景轉(zhuǎn)變時(shí),可以類似地進(jìn)行立體圖像的校正。以此方式,在CM轉(zhuǎn)變時(shí),在場景轉(zhuǎn)變時(shí)和在頻道轉(zhuǎn)變時(shí),可能通過調(diào)整深度量來減輕觀看者的不舒服的感覺。在特殊再現(xiàn)時(shí)的立體圖像的校正的例子在先前的描述中,描述在場景轉(zhuǎn)變時(shí)的立體圖像的校正的例子。在此,而且,可以假設(shè),用戶可以通過諸如雙倍速度再現(xiàn)的特殊再現(xiàn)方法來觀看立體圖像。在通過之前提出的這種特殊再現(xiàn)方法來顯示立體圖像的情況下,由于再現(xiàn)速度高于普通立體圖像顯示,因此用戶可能感到難以觀看該立體圖像。因此,在以下描述中,描述其中當(dāng)通過特殊再現(xiàn)方法顯示立體圖像時(shí)校正立體圖像的例子。要注意,在該情況下的信息處理設(shè)備的配置基本類似于參考圖2等來描述的配置。因此,在此省略類似配置的重復(fù)描述以避免冗余。圖21A和21B圖示根據(jù)本公開技術(shù)的第一實(shí)施例中的立體圖像校正部分150的進(jìn)行的深度量的調(diào)整的例子。更具體地,圖21A和21B示意性地圖示按時(shí)序示意性地圖示對應(yīng)于來自位移量保持表300中包含的位移量中的一個(gè)位移量、即一個(gè)塊的深度量的變化。另夕卜,在圖21A和21B所示的例子中,假設(shè),正進(jìn)行諸如雙倍速度再現(xiàn)或三倍速度再現(xiàn)的預(yù)定多倍速度再現(xiàn)。在此,在進(jìn)行預(yù)定多倍速度再現(xiàn)的情況下,在抽樣掉其某些幀的同時(shí),顯示顯示對象的立體圖像內(nèi)容。例如,如果進(jìn)行雙倍速度再現(xiàn),則在抽樣掉配置立體圖像內(nèi)容的幀中的每隔一個(gè)的幀的同時(shí)顯示顯示對象的立體圖像內(nèi)容。在此,當(dāng)進(jìn)行預(yù)定多倍速度再現(xiàn)時(shí),不使用與使得對象被抽樣掉的幀相關(guān)的位移量保持表。這使得能夠快速地進(jìn)行立體圖像的校正處理。圖21A按時(shí)序圖示在調(diào)整之前的立體圖像的深度量。圖21A中示出的曲線551對應(yīng)于立體圖像的深度量的過渡。圖21B按時(shí)序圖示在調(diào)整之后的立體圖像的深度量。圖21B所示的曲線552對應(yīng)于在調(diào)整對應(yīng)于圖21A所示的曲線551的深度量之后的深度量的過渡。例如,如果正進(jìn)行諸如雙倍速度再現(xiàn)或三倍速度再現(xiàn)的預(yù)定多倍速度再現(xiàn),則能夠如上所述檢測場景轉(zhuǎn)變,并基于檢測的結(jié)果來調(diào)整深度量。具體地,進(jìn)行調(diào)整以便深度量不呈現(xiàn)橫跨場景轉(zhuǎn)變的突然轉(zhuǎn)變。或者,例如,可以使用與不使得對象被抽樣掉的幀相關(guān)的位移量保持表來計(jì)算固定時(shí)間段內(nèi)的深度量的平均值,以便調(diào)整固定時(shí)間段內(nèi)的深度量,以便該深度量可以保持在離平均值的固定范圍內(nèi)。例如,能夠計(jì)算時(shí)間段t31內(nèi)的深度量的平均值553,并調(diào)整時(shí)間段t31內(nèi)的深度量,以便其可以具有離平均值553的固定范圍Hl內(nèi)的值。具體地,如果接受指示立體圖像的多倍速度再現(xiàn)的指令操作,則立體圖像校正部分150校正立體圖像中包括的素材主體在深度方向上的位置,以便在深度方向上的素材主體的位置的變化可以維持在固定范圍內(nèi)?;蛘?,例如,可以通過乘以參數(shù)cn (η是正整數(shù))來調(diào)整深度量,該參數(shù)cn響應(yīng)于多倍速度再現(xiàn)的倍率而減小。該參數(shù)cn具有例如OScnS 1的范圍內(nèi)的值,且滿足...c4(四倍速度再現(xiàn)時(shí)的參數(shù))<c3(三倍速度再現(xiàn)時(shí)的參數(shù))<c2(兩倍速度再現(xiàn)時(shí)的參數(shù))< cl (正常速度再現(xiàn)時(shí)的參數(shù))=1的關(guān)系??梢允沟媚軌驕p小在多倍速度再現(xiàn)時(shí)在幀之間的深度量的波動以減小用戶眼睛的負(fù)擔(dān)。另外,在特殊再現(xiàn)操作時(shí),可以通過調(diào)整深度量來消除用戶的不愉快的感覺。要注意,當(dāng)如上所述進(jìn)行在CM轉(zhuǎn)變時(shí)立體圖像的校正、在頻道轉(zhuǎn)變時(shí)立體圖像的校正、在特殊再現(xiàn)時(shí)立體圖像的校正等時(shí),可以使用調(diào)整后的深度量來進(jìn)行聲音的校正。另夕卜,可以通過用戶操作來設(shè)置是否可以與以此方式的圖像的校正一起進(jìn)行聲音校正。當(dāng)同時(shí)顯示多個(gè)屏幕時(shí)的校正的例子在上述例子中,顯示基于立體圖像內(nèi)容的立體圖像作為在顯示部分181上的一個(gè)屏幕,即作為一個(gè)屏幕圖像。在此,假設(shè)其中例如信息處理設(shè)備分別在多個(gè)屏幕上顯示立體圖像的情況,該信息處理設(shè)備可以在相同顯示面板上顯示多個(gè)屏幕、即諸如主屏幕和子屏幕的多個(gè)屏幕圖像。在該情況下,如果在多個(gè)屏幕上顯示的立體圖像實(shí)質(zhì)上彼此不同,則可以進(jìn)行多個(gè)屏幕的立體圖像的校正。因此,在以下描述中,描述如下例子,其中,在同時(shí)在相同顯示面板上顯示多個(gè)屏幕的情況下,對每個(gè)屏幕進(jìn)行在屏幕上顯示的立體圖像的校正。圖22A和22B圖示簡化形式的根據(jù)本公開技術(shù)的第一實(shí)施例中的信息處理設(shè)備 560的外觀配置和校正處理的流程的例子。要注意,在本例子中的信息處理設(shè)備基本類似于參考圖2等來描述的信息處理設(shè)備。因此,在此省略與圖2等所示的上述消息處理設(shè)備 100的那些共同的組件的重復(fù)描述來避免冗余。更具體地,圖22A示出作為信息處理設(shè)備560的外觀配置的前側(cè)的外觀配置的例子。參考圖22A,例如,在信息處理設(shè)備560的顯示部分181上,顯示主屏幕561和子屏幕 562。另外,信息處理設(shè)備560可以在主屏幕561和子屏幕562上顯示彼此不同的立體圖像。圖22B圖示簡化形式的由信息處理設(shè)備560進(jìn)行的校正處理的流程。更具體地, 圖22B所示的例子類似于上述的校正處理,除了以彼此不同的方式校正同時(shí)顯示的兩個(gè)立體圖像。參考圖22B,作為主屏幕的校正處理570的圖像校正處理,對主屏幕圖像數(shù)據(jù)571、 即對構(gòu)造主屏幕561的顯示的對象的圖像數(shù)據(jù)進(jìn)行圖像校正處理572。然后,進(jìn)行在校正后的圖像數(shù)據(jù)的主屏幕立體圖像輸出573。同時(shí),作為主屏幕的校正處理570的聲音校正處理,進(jìn)行主屏幕聲音數(shù)據(jù)574的聲音校正處理575。然后,針對校正后的聲音數(shù)據(jù)進(jìn)行主屏幕聲音輸出576。另外,作為子屏幕的校正處理580的圖像校正處理,針對子屏幕圖像數(shù)據(jù)581、即對構(gòu)造子屏幕562的顯示的對象的圖像數(shù)據(jù)進(jìn)行圖像校正處理582。然后,針對在校正后的圖像數(shù)據(jù)進(jìn)行子屏幕立體圖像輸出583。同時(shí),作為子屏幕的校正處理580的聲音校正處理,針對子屏幕聲音數(shù)據(jù)584進(jìn)行聲音校正處理585。然后,針對在校正后的聲音數(shù)據(jù)進(jìn)行子屏幕聲音輸出586?;蛘?,可以基于相同的設(shè)置實(shí)體來進(jìn)行對主屏幕的校正處理570和對子屏幕的校正處理580,或可以基于不同設(shè)置實(shí)體來分別進(jìn)行對主屏幕的校正處理570和對子屏幕的校正處理580。或者,可以響應(yīng)于通過用戶操作來設(shè)置的主屏幕561和子屏幕562的尺寸來改變設(shè)置實(shí)體。要注意,雖然在圖22A和22B的例子中,同時(shí)在同一顯示面板上顯示兩個(gè)屏幕,但是可以類似地進(jìn)行三個(gè)或更多屏幕的顯示。以此方式,在顯示主屏幕561和子屏幕562的情況下,可以通過對每個(gè)屏幕調(diào)整深度量來在各個(gè)屏幕上提供豐富的呈現(xiàn)。<2.第二實(shí)施例>在公開技術(shù)的第一實(shí)施例中,描述了基于關(guān)于用戶操作或立體圖像的各種信息來進(jìn)行聲音校正和圖像校正的例子。在此,因?yàn)榱Ⅲw圖像提供在顯示的素材主體的實(shí)際顯示位置和用戶通過幻象而看到的素材主體的位置之間的差,因此假設(shè)用戶可能具有不舒服的感覺。因此,在公開技術(shù)的第二實(shí)施例中,描述其中如所述的用戶的眼睛由于諸如不舒服感覺而疲勞的感覺被緩和的例子。信息處理設(shè)備的配置的例子圖23圖示根據(jù)本公開技術(shù)的第二實(shí)施例的信息處理設(shè)備600的功能配置的例子。參考圖23,信息處理設(shè)備600包括圖像拾取部分610、面部檢測部分620、虹膜檢測部分630和參考虹膜信息保持部分640。信息處理設(shè)備600眼球變化檢測部分650、獲取部分660、立體圖像校正部分670、聲音輸出部分680、和控制部分690。信息處理設(shè)備600還包括操作接受部分115、內(nèi)容存儲部分121、內(nèi)容隨附信息存儲部分122、顯示部分181、聲音輸出部分182和遙控器500,它們與圖2所示的基本類似。因此,在此省略與圖2等所示的消息處理設(shè)備100的那些共同的那些組件的重復(fù)描述來避免冗余。圖像拾取部分610在控制部分690的控制下,拾取圖像拾取對象的圖像來產(chǎn)生圖像數(shù)據(jù)或視頻數(shù)據(jù),且向面部檢測部分620和虹膜檢測部分630連續(xù)輸出產(chǎn)生的圖像數(shù)據(jù)。 更具體地,圖像拾取部分610包括未示出的光學(xué)單元、圖像拾取設(shè)備和信號處理部分。在圖像拾取部分610中,在圖像拾取設(shè)備的圖像拾取面上形成通過光學(xué)單元近來的圖像拾取對象的光學(xué)圖像,且在該狀態(tài)下,圖像拾取設(shè)備進(jìn)行圖像拾取操作。然后,信息處理部分對拾取的圖像信號進(jìn)行信號處理來產(chǎn)生圖像數(shù)據(jù)。然后,以預(yù)定幀速來向面部檢測部分620和虹膜檢測部分630連續(xù)輸出產(chǎn)生的圖像數(shù)據(jù)??梢杂衫鐔瓮蚕鄼C(jī)實(shí)現(xiàn)圖像拾取部分610。另外,圖像拾取部分610包括用于執(zhí)行自動聚焦的自動聚焦(AF)功能。該自動聚焦功能是例如稱為對比度AF的對比度檢測類型。
25
在此,描述AF處理。在AF處理中,例如,重復(fù)進(jìn)行一系列操作,即到要開始獲取對比度信息的位置的移動操作和對比度信息的獲取操作、即單次AF處理的組合。每次執(zhí)行單次AF處理時(shí),可以得到從鏡頭到圖像拾取對象的距離、即圖像拾取對象距離。具體地,如果圖像拾取對象距離用a表示,從鏡頭到在圖像拾取設(shè)備上形成的圖像的距離用b表示,且鏡頭的焦距用f表示,則滿足以下公式3 l/a+1/b = 1/f ...公式 3基于公式3,圖像拾取部分610可以計(jì)算圖像拾取對象距離a = l/(l/f-l/b)。然后,圖像拾取部分610向眼球變化檢測部分650輸出所計(jì)算的圖像拾取對象距離a。要注意,雖然在公開技術(shù)的第二實(shí)施例中,圖像拾取部分610被內(nèi)置于信息處理設(shè)備600中,但是可以使用成像設(shè)備作為外部設(shè)備來取代圖像拾取部分610。例如,諸如數(shù)字靜態(tài)照相機(jī)或例如具有集成相機(jī)的記錄器的數(shù)字視頻攝像機(jī)的成像設(shè)備彼此通過無線電路或有線電路連接,該集成相機(jī)具有向外部設(shè)備和信息處理設(shè)備600輸出產(chǎn)生的圖像數(shù)據(jù)的外部輸出端。然后,可以通過信息處理設(shè)備600來獲取由成像設(shè)備產(chǎn)生的圖像數(shù)據(jù),且將其連續(xù)供應(yīng)給面部檢測部分620和虹膜檢測部分630。面部檢測部分620檢測從圖像拾取部分610輸出的圖像數(shù)據(jù)中包括的人的面部, 并向虹膜檢測部分630輸出關(guān)于所檢測的面部的面部檢測信息。作為面部檢測方法,例如, 可以使用如下面部檢測方法和其他方法,該面部檢測方法基于在實(shí)際圖像和記錄面部的亮度分布信息的模板之間的匹配,如在日本專利特開No. 2004-133637中公開的基于被包括在圖像數(shù)據(jù)中的皮膚、人類的面部等的顏色的特征量的面部檢測方法。該面部檢測信息包括圖像數(shù)據(jù)、即圖像上的所檢測面部的位置和大小。要注意,在圖像數(shù)據(jù)上的所檢測面部的位置可以是例如圖像數(shù)據(jù)上的面部圖像的左上部分,且圖像數(shù)據(jù)上的所檢測面部的大小可以是例如圖像數(shù)據(jù)的面部圖像在水平方向和垂直方向上的長度?;谠撁娌繖z測信息,可以指定如下面部圖像,其是在包括圖像數(shù)據(jù)上的面部的至少一部分的矩形中的圖像數(shù)據(jù)。虹膜檢測部分630檢測從圖像拾取部分610輸出的圖像數(shù)據(jù)中包括的面部的雙眼的虹膜,并向眼球變化檢測部分650輸出關(guān)于所檢測的虹膜的虹膜信息。更具體地,虹膜檢測部分630使用包括面部檢測部分620輸出的位置和大小的面部檢測信息,從圖像拾取部分610輸出的圖像數(shù)據(jù)中提取對應(yīng)于面部檢測部分620檢測的面部的面部圖像。作為在該情況下的虹膜檢測方法,例如,可以類似于面部檢測方法而使用基于在實(shí)際圖像和記錄虹膜的亮度分布信息等的模板之間的匹配的虹膜檢測方法。虹膜信息包括面部圖像上的所檢測虹膜的位置。基于該虹膜信息,可以指定圖像數(shù)據(jù)上的雙眼的虹膜的位置。虹膜的位置可以是例如虹膜的中心位置??梢允褂靡恍┢渌缒z測方法。例如,從圖像拾取部分610輸出的圖像數(shù)據(jù)可以被二進(jìn)制化以便基于一個(gè)屏幕上的二進(jìn)制化數(shù)據(jù)來檢測虹膜。例如,從圖像拾取部分610 輸出的圖像數(shù)據(jù)被二進(jìn)制化以確定水平或向左和向右方向上的各個(gè)線上的黑色像素和白色像素。然后,提取其中在水平方向上預(yù)定范圍內(nèi)的一定數(shù)量的白像素連續(xù)出現(xiàn)且另一預(yù)定范圍內(nèi)的另一數(shù)量的黑像素出現(xiàn)且此外再一預(yù)定范圍內(nèi)的一定數(shù)量的白像素在連續(xù)黑像素之后出現(xiàn)的線作為虹膜區(qū)域的候選線。然后,在垂直或向上和向下方向上,檢測其中預(yù)定范圍內(nèi)的一定數(shù)量的這種被檢測的候選線連續(xù)出現(xiàn)的區(qū)域。所檢測的區(qū)域可以被確定為虹膜區(qū)域。
或者,可以使用眼球移動的測量設(shè)備來檢測虹膜。例如,在專用于觀看立體圖像的眼鏡的鏡片的位置處提供眼球移動測量設(shè)備。在測量設(shè)備的眼球側(cè),提供紅外LED (發(fā)光二極管)和光學(xué)接收器,同時(shí)在它們的外側(cè)提供成像設(shè)備。然后,在眼球上發(fā)射紅外光,且由光接收器來檢測從眼球反射的光。由此可以指定虹膜部分的位置。參考虹膜信息保持部分640保持虹膜信息、即由虹膜檢測部分630關(guān)于預(yù)定時(shí)刻檢測的虹膜的參考虹膜信息,且向眼球變化檢測部分650供應(yīng)保持的參考虹膜信息。眼球變化檢測部分650當(dāng)在顯示部分181上顯示立體圖像時(shí)檢測用戶的眼球的變化,并向立體圖像校正部分670輸出檢測的結(jié)果。例如,眼球變化檢測部分650使得在參考虹膜信息保持部分640中保持在由虹膜檢測部分630在預(yù)定時(shí)刻檢測的虹膜之間的距離作為參考虹膜信息、即作為參考虹膜距離。然后,眼球變化檢測部分650相互比較在參考虹膜信息保持部分640中保持的參考虹膜信息和在預(yù)定時(shí)刻之后從虹膜檢測部分630輸出的虹膜信息,以檢測用戶的眼球的變化。在該情況下,眼球變化檢測部分650向立體圖像校正部分670輸出在比較的對象的虹膜距離之間的差值、或在基于虹膜距離的會聚角之間的差值,作為檢測結(jié)果。換句話說,眼球變化檢測部分650可以基于在虹膜檢測部分630檢測的虹膜之間的距離來檢測用戶的眼球的變化。在此,預(yù)定時(shí)刻可以是進(jìn)行用于指示顯示立體圖像的指令操作的時(shí)刻或接通信息處理設(shè)備600的電源的時(shí)刻。獲取部分660在控制部分690的控制下,獲取在內(nèi)容存儲部分121和內(nèi)容隨附信息存儲部分122中存儲的各種信息,并向相關(guān)組件供應(yīng)所獲取的信息。立體圖像校正部分670在控制部分690的控制下當(dāng)輸出立體圖像內(nèi)容時(shí)校正圖像數(shù)據(jù),并向輸出控制部分680輸出校正后的圖像數(shù)據(jù)。具體地,立體圖像校正部分670基于由眼球變化檢測部分650檢測的眼球的所檢測變化來校正在立體圖像中包括的素材主體的深度方向上的位置。在該情況下,如果眼球的變化大于固定量的參考值,則立體圖像校正部分670進(jìn)行校正,以便立體圖像中包括的素材主體的深度方向上的位置向立體圖像的顯示面?zhèn)纫苿印A硗?,立體圖像校正部分670可以基于眼球的變化來確定對應(yīng)于立體圖像素材主體的用戶的會聚角是否大于作為固定角的參考角。然后,如果會聚角大于固定參考角, 則立體圖像校正部分670進(jìn)行校正,以便立體圖像中包括的素材主體的深度方向上的位置移動到立體圖像的顯示面?zhèn)?。在這些校正處理中,通過調(diào)整表示素材主體在深度方向上的位置的參數(shù)、例如位移量保持表中的位移量,來校正立體圖像中包括的素材主體在深度方向上的位置。輸出控制部分680響應(yīng)于由操作接受部分115接受的操作輸入來進(jìn)行用于輸出在內(nèi)容存儲部分121中存儲的內(nèi)容的輸出處理。另外,輸出控制部分680控制顯示部分181 來顯示包括參考素材主體的參考立體圖像,該參考素材主體用于測量預(yù)定時(shí)刻、諸如在指示顯示立體圖像的指令操作時(shí)或當(dāng)接通信息處理設(shè)備600的電源時(shí)的參考虹膜距離。控制部分690根據(jù)由操作接受部分115接受的操作輸入來控制信息處理設(shè)備600 的組件。圖像校正部分的配置的例子圖M圖示根據(jù)本公開技術(shù)的第二實(shí)施例中的立體圖像校正部分670的功能配置的例子。參考圖對,立體圖像校正部分670包括圖像數(shù)據(jù)輸入塊152、水平移動處理塊152、 平滑處理塊巧4和圖像數(shù)據(jù)輸出塊155,與圖4所示的基本上相似。因此,在此省略它們的重復(fù)描述以避免冗余。立體圖像校正部分670還包括確定塊671和調(diào)整塊672。確定塊671基于控制部分690的控制,來確定是否要校正立體圖像中包括的素材主體在深度方向上的位置,且向調(diào)整塊672輸出包括諸如差值的確定信息的確定結(jié)果。具體地,確定塊671使用從眼球變化檢測部分650輸出的檢測結(jié)果,即在構(gòu)成比較對象的虹膜距離之間的差值,來確定眼球的變化、即差值是否大于固定參考值。然后,如果眼球的變化大于固定參考值,則確定塊671確定要進(jìn)行校正。另一方面,如果眼球的變化不大于固定參考值,則確定塊671確定不進(jìn)行校正。換句話說,確定塊671可以基于眼球的變化來確定對應(yīng)于立體圖像素材主體的用戶的會聚角是否大于作為固定參考角。然后,如果會聚角大于固定參考角,則確定塊671確定要進(jìn)行校正。調(diào)整塊672,基于從確定塊671輸出的確定結(jié)果,調(diào)整用于校正從獲取部分660向其供應(yīng)的圖像數(shù)據(jù)的參數(shù),并向水平移動處理塊153輸出調(diào)整后的參數(shù)。具體地,如果從確定塊671輸出要進(jìn)行校正的確定結(jié)果,則調(diào)整塊672調(diào)整用于進(jìn)行校正以將立體圖像中包括的素材主體在深度方向上的位置移動到立體圖像的顯示面?zhèn)鹊膮?shù)。另一方面,如果從確定塊671輸出不進(jìn)行校正的確定結(jié)果,則調(diào)整塊672不進(jìn)行參數(shù)的調(diào)整。由圖像拾取部分產(chǎn)生的圖像的例子圖25圖示簡化形式的在公開技術(shù)的第二實(shí)施例中的由圖像拾取部分610產(chǎn)生的圖像、即圖像705。參考圖25,圖像705是由圖像拾取部分610產(chǎn)生的圖像或圖像數(shù)據(jù)的例子,且包括例如圖IB所示的信息處理設(shè)備600前端的椅子11上坐著的用戶10的面部。要注意,由面部檢測部分620檢測圖像705中包括的用戶10的面部。另外,由虹膜檢測部分630檢測圖像705中包括的用戶10的雙眼、即左眼711和右眼712的虹膜。另外,在公開技術(shù)的第二實(shí)施例中,左眼的虹膜的中心位置被視為左眼的虹膜的位置,且右眼的虹膜的中心位置被視為右眼的虹膜的位置。另外,在公開技術(shù)的第二實(shí)施例中,在左眼的虹膜的中心位置和右眼的虹膜的中心位置之間的距離是虹膜距離。具體地,在公圖25所示的例子中,在左眼 711的虹膜的中心位置和右眼712的虹膜的中心位置之間的距離是虹膜距離。由于虹膜具有對應(yīng)于實(shí)際虹膜距離el的值,因此其被虛擬地表示為“el”。要注意,可以基于圖像拾取對象距離、即從鏡頭到用戶10的面部的距離、從鏡頭到圖像拾取元件的距離和在圖像拾取元件的圖像拾取面上形成為圖像的虹膜之間的距離來計(jì)算虹膜距離el。另外,可以使用固定值、諸如65mm來用作虹膜距離el。在觀看位置、突出位置和會聚角之間的關(guān)系的例子如26A和26B示意性地圖示公開技術(shù)的第二實(shí)施例中的顯示部分181上顯示的立體圖像的觀看位置和觀看立體圖像的用戶的會聚角之間的關(guān)系。圖26示出當(dāng)用戶觀看平面圖像或2D圖像時(shí)的眼球和對應(yīng)的會聚角0 1。在圖26八中,在顯示部分181的顯示面上顯示立體圖像的位置被表示為顯示面的位置700,且當(dāng)用戶觀看顯示部分181上顯示的立體圖像時(shí)的用戶的觀看位置被表示為觀看位置710。例如,當(dāng)用戶觀看到顯示面的位置700上顯示的平面圖像時(shí),進(jìn)行水平方向上的用戶的眼球的調(diào)整,以便該角可以與用戶察覺的圖像的位置一致,且調(diào)整雙眼的焦點(diǎn)到顯示面的位置700。更具體地,進(jìn)行水平方向上的用戶的雙眼的角度調(diào)整,以便由互連用戶的
28雙眼、即左眼711和右眼712的虹膜的直線和顯示面的位置700所限定的交叉點(diǎn)、換句話說察覺點(diǎn)701,與用戶察覺的圖像的位置一致。另外,與角度調(diào)整一起,調(diào)整雙眼的焦點(diǎn)到顯示面的位置700、即察覺點(diǎn)701。要注意,察覺點(diǎn)701處的角度α 通常稱為會聚角。在用戶以此方式觀察在顯示面的位置700上顯示的屏幕圖像的情況下,用戶的雙眼、即左眼711和右眼712的焦點(diǎn)和視點(diǎn)(eye point)兩者出現(xiàn)在顯示面的位置700處。在此,描述會聚角α 1的計(jì)算方法。例如,顯示面的位置700和觀看位置710之間的距離用Ll表示,在觀看立體圖像的用戶的雙眼之間的距離用el表示。在該情況下,滿足以下公式4。tan (α 1/2) = (el/2)/Li . · ·公式 4然后,可以從以下公式5中確定會聚角α 1 α 1 = 2tan_1((el/2)/Ll) · · ·公式 5要注意,作為距離Li,可以使用從圖像拾取部分610輸出的圖像拾取對象距離?;蛘?,作為距離Li,可以使用假設(shè)觀看位置而確定的固定值,諸如2m,或可以通過用戶手動操作、即使用遙控器500的手動操作來獲取距離Li。或者,可以通過用調(diào)整的麥克風(fēng)的距離測量或通過遙控器500的距離測量方法來獲得距離L2。要注意,在使用遙控器500的距離測量方法中,例如,在用戶10用手握住的遙控器500上提供UWB (超寬帶),以便使用UWB的位置測量功能來測量距離Li?;蛘撸梢允褂糜眉t外線或超聲波來測量距離的距離測量設(shè)備來測量距離Li。圖^B示出當(dāng)用戶觀看立體圖像或3D圖像的情況下的用戶的眼球和對應(yīng)的收斂角α 2。要注意,在圖^B中,顯示面的位置700和觀看位置710類似于圖26Α所示的。另夕卜,立體圖像中包括的立體素材主體720的突出位置被表示為突出位置721,且顯示面的位置700和突出位置721之間的距離或突出量用L2表示。例如,當(dāng)用戶觀看到顯示面的位置700上顯示的立體圖像時(shí),進(jìn)行水平方向上的用戶的眼球的調(diào)整,以便調(diào)整到由用戶察覺的圖像的位置、即突出位置721。具體地,進(jìn)行水平方向上的用戶的眼球的角度調(diào)整,以便由互連用戶的雙眼、即左眼711和右眼712的虹膜的直線和突出位置721所限定的交叉點(diǎn)、即察覺點(diǎn)722可以與用戶察覺的圖像、即立體素材主體720的圖像的位置一致。要注意,在察覺點(diǎn)722處的會聚角是α 2。但是,調(diào)整雙眼的焦點(diǎn)到顯示面部的位置700。具體地,進(jìn)行角度調(diào)整,以便該角度與察覺點(diǎn)722 —致,且調(diào)整雙眼的焦點(diǎn)到顯示面的位置700、即察覺點(diǎn)701。以此方式,在雙眼被聚焦在顯示面的位置700處時(shí),因?yàn)椴煊X點(diǎn)722位于突出位置 721,因此與很可能出現(xiàn)的生理現(xiàn)象產(chǎn)生矛盾。因此,顯著地防止了所述的矛盾導(dǎo)致用戶的疲勞。在此,描述會聚角α 2的計(jì)算方法。例如,顯示面的位置700和突出位置721之間的距離用L2表示,在觀看立體圖像的用戶的雙眼之間的距離用e2表示。在該情況下,滿足以下公式6。tan (α 2/2) = (e2/2) / (L1-L2) ...公式 6然后,可以根據(jù)以下公式7中確定會聚角α 2 α 2 = 2tan_1 ((e2/2) / (L1-L2)) . · ·公式 7要注意,作為距離L2,可以使用立體圖像中的素材主體的位移量來確定素材主體的突出量由此確定距離L2。要注意,雖然在本例子中,基于用戶的雙眼、即左眼711和右眼722的虹膜之間的距離,檢測用戶察覺的圖像、即立體素材主體720的圖像,但是可以使用一些其他檢測方法。例如,可以使用眼睛跟蹤或注視分析方法來用于檢測。參考虹膜信息的測量的例子圖27A和27B示意性地圖示當(dāng)獲取公開技術(shù)的第二實(shí)施例中的參考虹膜保持部分 640中所保持的參考虹膜信息時(shí)的測量方法和參考虹膜信息保持部分640的所保持實(shí)體的例子。更具體地,圖27圖示當(dāng)測量參考虹膜信息時(shí)顯示部分181上顯示的立體圖像或3D 圖像、用戶的眼球、和會聚角α 10之間的關(guān)系。要注意,在圖27Α中,顯示面的位置700和觀看位置710類似于圖26Α所示的。另外,立體圖像中包括的參考立體素材主體730的突出位置被表示為突出位置731,且顯示面的位置700和突出位置731之間的距離、即突出量用L3表示。在此,參考立體素材主體730是在當(dāng)獲取關(guān)于用戶的參考虹膜信息時(shí)顯示的立體圖像或參考立體圖像中包括的素材主體。例如,如果按下圖6所示的參考虹膜信息獲取按鈕506,則控制部分690向輸出控制部分680發(fā)出指令以在顯示部分181上顯示包括參考立體素材主體730的立體圖像。最后,在顯示部分181上顯示包括參考立體素材主體730的立體圖像,且用戶可以察覺參考立體素材主體730。要注意,可以在內(nèi)容存儲部分121中存儲或者可以在輸出控制部分680中保持包括參考立體素材主體730的立體圖像。要注意, 可以使用以上給出的公式7來確定會聚角α 10。圖27Β示意性地圖示了參考虹膜信息保持部分640的所保持的實(shí)體。在參考虹膜信息保持部分640中,保持了左眼虹膜位置信息641、右眼虹膜位置信息642、雙眼虹膜距離信息643和會聚角信息644。參考虹膜信息保持部分640中保持的信息是關(guān)于虹膜檢測部分630當(dāng)在顯示部分181上顯示包括參考立體素材主體730的立體圖像時(shí)檢測的虹膜的信息或參考虹膜信息。左眼虹膜位置信息641表示關(guān)于虹膜檢測部分630當(dāng)在顯示部分181上顯示包括參考立體素材主體730的立體圖像時(shí)檢測的左眼的虹膜的位置。在左眼虹膜位置信息641 中,例如,存儲例如在由圖像拾取部分610產(chǎn)生的圖像數(shù)據(jù)或圖像中的左眼711的虹膜的中心位置(XI,Υ1)。右眼虹膜位置信息642表示關(guān)于虹膜檢測部分630當(dāng)在顯示部分181上顯示包括參考立體素材主體730的立體圖像時(shí)檢測的右眼的虹膜的位置。在右眼虹膜位置信息642 中,例如,存儲例如在由圖像拾取部分610產(chǎn)生的圖像數(shù)據(jù)或圖像中的右眼712的虹膜的中心位置(Χ2,Υ2)。雙眼虹膜距離信息643是表示虹膜檢測部分630當(dāng)在顯示部分181上顯示包括參考立體素材主體730的立體圖像時(shí)檢測的左眼和右眼的虹膜之間的距離的信息。在雙眼虹膜距離信息643中,例如,存儲例如在由圖像拾取部分610產(chǎn)生的圖像數(shù)據(jù)或圖像中的左眼 711和右眼712之間的距離e3。會聚角信息644是表示虹膜檢測部分630當(dāng)在顯示部分181上顯示包括參考立體素材主體730的立體圖像時(shí)檢測的左眼和右眼的虹膜相關(guān)的會聚角的信息。在會聚角信息
30644中,例如,存儲例如在由圖像拾取部分610產(chǎn)生的圖像數(shù)據(jù)或圖像中的左眼711和右眼 712相關(guān)的會聚角α 10。突出位置的校正的例子圖28和四示意性地圖示公開技術(shù)的第二實(shí)施例的顯示部分181上顯示的立體圖像中包括的立體素材主體的突出位置的校正的例子。更具體地,圖28圖示當(dāng)在顯示部分181上顯示的立體圖像或3D圖像、用戶的眼球、和會聚角α 10和α 11之間的關(guān)系的例子。要注意,圖觀類似于圖27Α,除了關(guān)于立體素材主體740的信息。另外,立體圖像中包括的立體素材主體740的突出位置被表示為突出位置741,且顯示面的位置700和突出位置741之間的距離、即突出量用L4表示。另外, 可以使用以下公式7確定會聚角all:在此,眼球變化檢測部分650基于由虹膜檢測部分630檢測的虹膜信息,即基于關(guān)于左眼711和右眼712的虹膜信息,來計(jì)算會聚角all。然后,眼球變化檢測部分650 計(jì)算在參考虹膜信息保持部分640的會聚角信息644中保持的參考會聚角a 10和會聚角 a 11之間的差。然后,立體圖像校正部分670的確定塊671基于差值α 10-a 11來確定是否調(diào)整立體素材主體740的深度量。具體地,如果差值a 10-all是0或正值,S卩如果 a IO^ a 11,則確定塊671確定不需要立體素材主體740的深度量的調(diào)整。另一方面,如果差值a 10-a 11呈現(xiàn)負(fù)值,S卩如果a 10 < a 11,則確定塊671確定需要立體素材主體740 的深度量的調(diào)整。在圖觀所示的例子中,由于會聚角a 10大于會聚角a 11,即由于a 10彡a 11, 因此則確定塊671確定不需要立體素材主體740的深度量的調(diào)整。換句話說,如果如圖觀所示的在顯示部分181上顯示包括立體素材主體740的立體圖像,則不進(jìn)行立體圖像的校正。圖四圖示當(dāng)在顯示部分181上顯示的立體圖像或3D圖像、用戶的眼球、和會聚角 a 10和a 12之間的關(guān)系的例子。要注意,圖四類似于圖27A,除了關(guān)于立體素材主體750 的信息。另外,立體圖像中包括的立體素材主體750的突出位置被表示為突出位置751,且顯示面的位置700和突出位置751之間的距離、即突出量用L5表示。可以使用以下公式7 確定會聚角a 12 在此,類似于圖觀所示的情況,眼球變化檢測部分650計(jì)算參考會聚角a 12,并計(jì)算在參考會聚角a 10和會聚角α 12之間的差值。然后,立體圖像校正部分670的確定塊 671基于差值a 10-a 12來確定是否調(diào)整立體素材主體750的深度量。在圖四所示的例子中,由于會聚角a 10小于會聚角a 12,即由于a 10 < a 11, 因此則確定塊671確定需要立體素材主體750的深度量的調(diào)整。在該情況下,調(diào)整塊672 基于在參考會聚角a 10和會聚角a 12之間的差值來調(diào)整立體素材主體750的深度量,以便會聚角a 12可以在參考會聚角α 10內(nèi)。通過該調(diào)整,立體素材主體750的位置、即突出位置751變?yōu)榕c參考立體素材主體730的位置相同的位置、即突出位置731或比突出位置 731更靠近顯示面的位置700側(cè)的位置。要注意,雖然在上述例子中,眼球變化檢測部分650計(jì)算會聚角,但是確定塊671 可以另外計(jì)算會聚角并進(jìn)行確定。具體地,確定塊671計(jì)算對應(yīng)于參考立體素材主體730 的用戶10的參考會聚角a 10,并計(jì)算對應(yīng)于在顯示部分181上顯示的立體圖像中包括的立
31體素材主體750的用戶10的會聚角α 12。然后,立體圖像校正部分670基于在會聚角α 12和參考會聚角α 10之間的比較結(jié)果來校正立體素材主體750在深度方向上的位置。另外,在上述例子中,雖然相互比較會聚角以確定是否需要校正。但是,可以相互比較虹膜距離以確定是否需要校正。信息處理設(shè)備的操作的例子現(xiàn)在,將參考附圖描述本公開技術(shù)的第二實(shí)施例的信息處理設(shè)備600的操作。圖30圖示根據(jù)本公開技術(shù)的第二實(shí)施例中的信息處理設(shè)備600進(jìn)行的立體圖像顯示處理的處理過程的例子。在圖30中,可以相互比較會聚角以確定是否需要校正。參考圖30,首先,在步驟S971處決定是否進(jìn)行立體圖像的顯示指令操作,以及如果不進(jìn)行立體圖像的顯示指令操作,則連續(xù)進(jìn)行監(jiān)視。另一方面,如果在步驟S971處進(jìn)行立體圖像的顯示指令操作,則輸出控制部分680在控制部分690的控制下控制顯示部分181 來在步驟S972處顯示參考立體圖像。然后,在步驟S973處,虹膜檢測部分630檢測由圖像拾取部分610產(chǎn)生的圖像或圖像數(shù)據(jù)中包括的用戶的雙眼的虹膜。然后在步驟S974處,眼球變化檢測部分650基于所檢測的虹膜之間的距離、即基于參考虹膜距離來計(jì)算參考會聚角α 10。然后,在步驟S975處,控制部分690輸出關(guān)于顯示指令操作的立體圖像內(nèi)容。更具體地,在步驟S975處,輸出控制部分680控制顯示部分181來根據(jù)顯示指令操作而顯示立體圖像,且控制顯示部分181來根據(jù)顯示指令操作來顯示立體圖像內(nèi)容。然后,在步驟S976處,虹膜檢測部分630檢測由圖像拾取部分610產(chǎn)生的圖像或圖像數(shù)據(jù)中包括的用戶的雙眼的虹膜。然后在步驟S977處,眼球變化檢測部分650基于所檢測的虹膜之間的距離來計(jì)算會聚角α 20。然后,在步驟S978處,確定塊671基于差值,進(jìn)行參考會聚角α 10和會聚角α 20 之間的比較,即α 10-α 20 < 0的確定。如果在步驟S978處比較結(jié)果指示會聚角α 20等于或小于參考會聚角α 10,則處理返回到步驟S975。另一方面,如在步驟S978處會聚角 α 20大于參考會聚角α 10,則調(diào)整塊672在步驟S979處調(diào)整立體素材主體的參數(shù)、即位移量。更具體地,調(diào)整塊672在步驟S979處基于在參考會聚角α 10和會聚角α 20之間的差值來調(diào)整立體素材主體的參數(shù),以便會聚角α 20可以在參考會聚角α 10內(nèi)。然后,立體圖像校正部分670在步驟S980處使用調(diào)整后的參數(shù)或位移量來進(jìn)行立體圖像的校正。然后, 連續(xù)顯示校正后的立體圖像。因此,在步驟S981處,決定是否進(jìn)行立體圖像的顯示結(jié)束操作。如果不進(jìn)行立體圖像的顯示結(jié)束操作,則處理返回到步驟S975。另一方面,如果在步驟S981處進(jìn)行立體圖像的顯示結(jié)束操作,則立體圖像顯示處理的操作結(jié)束。以此方式,通過公開技術(shù)的第二實(shí)施例,當(dāng)用戶觀看立體圖像時(shí),可以減少眼睛的疲勞同時(shí)不喪失呈現(xiàn)。要注意,雖然在本公開技術(shù)的第二首鼠兩端描述中,省略了聲音的校正的描述,但是當(dāng)校正上述立體圖像時(shí),可以使用用于校正的參數(shù)來校正聲音。要注意,在本公開技術(shù)的實(shí)施例的前述描述中,描述了其中獲取對應(yīng)于廣播波的立體圖像內(nèi)容來顯示立體圖像的信息處理設(shè)備。但是,本公開技術(shù)的實(shí)施例也可以應(yīng)用于
32其中獲取記錄介質(zhì)中存儲的立體圖像內(nèi)容來顯示立體圖像的信息處理設(shè)備。本公開技術(shù)的實(shí)施例也可以應(yīng)用于其中通過可以是有線網(wǎng)絡(luò)或無線網(wǎng)絡(luò)的網(wǎng)絡(luò)來獲取立體圖像內(nèi)容來顯示立體圖像的信息處理設(shè)備。要注意,接合本公開技術(shù)的優(yōu)選實(shí)施例描述的任何處理過程都可以被視為包括處理過程的方法或用于使得計(jì)算機(jī)執(zhí)行處理過程的程序或作為存儲了程序的記錄介質(zhì)。記錄介質(zhì)可以是例如CD (光盤)、MD (MiniDisc)、DVD (數(shù)字通用盤)存儲卡、藍(lán)光碟(注冊商標(biāo))寸。本公開包含涉及分別在2010年11月四日在日本專利局提交的日本優(yōu)先權(quán)專利申請JP 2010-264891中公開的主題,其全部內(nèi)容被引用附于此。本領(lǐng)域技術(shù)人員應(yīng)該理解,可以取決于設(shè)計(jì)需求或其他因素,進(jìn)行各種修改、組合、子組合和變更,只要它們處于所附權(quán)利要求或其等同物的范圍內(nèi)。
權(quán)利要求
1.一種信息處理設(shè)備,包括校正部分,適用于基于立體圖像中包括的素材主體在深度方向上的位置來校正與立體圖像相關(guān)的聲音信息;以及輸出控制部分,適用于當(dāng)顯示立體圖像時(shí)輸出校正后的聲音圖像。
2.根據(jù)權(quán)利要求1的信息處理設(shè)備,還包括檢測部分,適用于檢測在立體圖像中包括的具體對象,其中所述校正部分基于被檢測的具體對象在深度方向上的位置來校正要從被檢測的具體對象發(fā)出的聲音。
3.根據(jù)權(quán)利要求2的信息處理設(shè)備,其中,所述聲音信息包括在中央聲道、左聲道和右聲道中的聲音,以及所述校正部分使用指示素材主體在深度方向上的位置的參數(shù)中的、指示被檢測的具體對象在深度方向上的位置的那一個(gè)參數(shù),來校正中央聲道中的聲音作為從被檢測的具體對象中發(fā)出的聲音,且使用除了指示被檢測的具體對象在深度方向上的位置的參數(shù)之外的參數(shù)來校正左聲道和右聲道中的聲音。
4.根據(jù)權(quán)利要求3的信息處理設(shè)備,其中,所述校正部分計(jì)算除了指示被檢測的具體對象在深度方向上的位置的參數(shù)之外的參數(shù)的平均值,并基于所計(jì)算的平均值來校正在左聲道和右聲道中的聲音。
5.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述校正部分使用指示素材主體在深度方向上的位置的參數(shù)來校正所述聲音信息。
6.根據(jù)權(quán)利要求5的信息處理設(shè)備,其中,所述校正部分計(jì)算該參數(shù)的平均值并基于所計(jì)算的平均值來校正所述聲音信息。
7.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述校正部分校正所述聲音信息,以便根據(jù)在立體圖像中包括的素材主體的背景的聲音圖像定位于背景在深度方向上的位置。
8.根據(jù)權(quán)利要求1的信息處理設(shè)備,其中,所述校正部分校正所述聲音信息,以便根據(jù)所述聲音信息的聲音圖像定位于素材主體在深度方向上的位置。
9.根據(jù)權(quán)利要求8的信息處理設(shè)備,其中,所述校正部分使用對應(yīng)于素材主體在深度方向上的位置的頭相關(guān)傳輸函數(shù)濾波器來校正所述聲音信息。
10.根據(jù)權(quán)利要求9的信息處理設(shè)備,還包括保持部分,適用于為在深度方向上的多個(gè)位置保持多個(gè)頭相關(guān)傳輸函數(shù)濾波器,其分別對應(yīng)于在深度方向上的多個(gè)位置,其中所述校正部分選擇頭相關(guān)傳輸函數(shù)濾波器中對應(yīng)于最靠近素材主體在深度方向上的位置的位置的那一個(gè),并使用所選擇的頭相關(guān)傳輸函數(shù)濾波器來校正所述聲音信息。
11.根據(jù)權(quán)利要求8的信息處理設(shè)備,還包括操作接受部分,適用于接受用于切換在立體圖像中包括的素材主體在深度方向上的位置的切換操作,其中所述校正部分校正所述聲音信息,以便當(dāng)接受所述切換操作時(shí),根據(jù)聲音信息的聲音圖像定位于在切換之后的素材主體在深度方向上的位置。
12.一種信息處理方法,包括基于立體圖像中包括的素材主體在深度方向上的位置來校正與立體圖像相關(guān)的聲音信息;以及當(dāng)顯示立體圖像時(shí)輸出校正后的聲音圖像。
13. 一種用于使得計(jì)算機(jī)執(zhí)行以下的程序基于立體圖像中包括的素材主體在深度方向上的位置來校正與立體圖像相關(guān)的聲音信息;以及當(dāng)顯示立體圖像時(shí)輸出校正后的聲音圖像。
全文摘要
本發(fā)明涉及一種信息處理設(shè)備,包括校正部分,適用于基于立體圖像中包括的素材主體在深度方向上的位置來校正與立體圖像相關(guān)的聲音信息;以及輸出控制部分,適用于當(dāng)顯示立體圖像時(shí)輸出校正后的聲音圖像。
文檔編號H04N5/60GK102480630SQ20111037284
公開日2012年5月30日 申請日期2011年11月22日 優(yōu)先權(quán)日2010年11月29日
發(fā)明者德永竜二, 志田修利, 福地弘行 申請人:索尼公司