專利名稱：圖像處理裝置、顯示裝置、圖像處理方法和圖像處理程序的制作方法
技術領域：
本發(fā)明涉及圖像處理裝置、顯示裝置、圖像處理方法和圖像處理程序。
背景技術：
近年來，使用雙眼視差的立體顯示技術受到關注，且該技術已被實現(xiàn)，雙眼視差即為左眼用圖像和右眼用圖像之間的水平方向上的偏移。在立體顯示中，雙眼視差越大，圖像就越看起來好像更大程度地向前側凸出或向后側凹陷。因此，通過增大雙眼視差，能夠實現(xiàn)嚴格的立體顯示。然而，存在觀眾的視覺出現(xiàn)疲勞的風險。因此，為了減小觀眾的視覺疲勞，提出了調整雙眼視差的方法。例如，日本專利號 No. 3749227公開了調整一種雙眼視差的技術，該技術將多個設定成不同雙眼視差值的多個樣本圖像呈現(xiàn)給觀眾，并讓觀眾給出是否能夠忍受所呈現(xiàn)圖像的反饋。此外，作為另一示例，日本專利特許公開號No. 2001-238231公開了一種增強深度感的技術，該技術根據(jù)物體的深度方向的位置改變圖像中的物體的模糊狀態(tài)(blurring state)、物體的遮光關系和物體的陰影等特性。然而，根據(jù)日本專利號No. 3749227所公開的技術，為了減小觀眾的視覺疲勞，基本上在減小立體感的方向上和在減小深度感的方向上調整雙眼視差。因此，不可避免地喪失了現(xiàn)實感和/或真實性。此外，如果從雙眼三維信息感知的立體感和深度感不同于從單眼三維信息感知的立體感和深度感，則引起不自然感。此外，日本專利特許公開號 No. 2001-238231沒有具體說明需要設置何種參數(shù)、需要采用何種計算公式來設置參數(shù)以及使用何值來設置參數(shù)。即便反復試探性地設置參數(shù)的值，也不能保證所得到的左眼用二維圖像和右眼用二維圖像對于人是自然的和舒適的。相反，極有可能的是，所得到的左眼用二維圖像和右眼用二維圖像對于人是不自然的和不舒適的，并引起視覺疲勞。另一方面，能夠使用人的視覺特性，人的視覺特效表明了從單眼二維信息感知深度的程度。例如，依照作為一類單眼二維信息的空間透視(aerial perspective)，人們根據(jù)物體的對比度的大小能夠憑經(jīng)驗感覺出自己與該物體之間的距離。因此，在通過使用對比度成分對圖像進行處理時，通過提高顯示在前側位置處的物體的對比度，使物體顯示在從當前前側位置進一步向前側偏移的位置處，而通過降低顯示在后側位置處的物體的對比度，使物體顯示在從當前的后側位置進一步向后側偏移的位置處。因此，能夠基于上述視覺特性來調整圖像的對比度成分。在此情況下，如果所處理的圖像為靜止圖像，則調整每個圖像的對比度成分。另一方面，在所處理的圖像為運動圖像的情況下，如果對所有幀應用與靜止圖像相同的處理，則
5對每一圖像進行了不相關的處理，使得前后幀之間不存在任何相關信息。因此，為了生成視差圖，提取了各個幀的深度信息(視差信息)。由于所提取的深度信息中包含了誤差，所以即使對于實際上在初始幀之間不存在任何變化的區(qū)域來說，由于錯誤地提取了深度信息， 在某些情況下使得該區(qū)域看起來好像在初始幀之間發(fā)生了深度變化。因此，視差圖在幀與幀之間發(fā)生變化，且每個幀的對比度調整增益略微變化。因此，在某些情況下，可能出現(xiàn)諸如閃爍等刺目艮現(xiàn)象(eyesore phenomenon)。另一方面，實際上，由于視差提取誤差和運動估計誤差，即便物體在兩個相繼幀之間是完全靜止的，在某些情況下仍調整對比度成分。在這些情況下，同樣可能發(fā)生諸如閃爍等刺眼現(xiàn)象。

發(fā)明內容
因此，為解決上述技術問題，本發(fā)明提供了一種圖像處理裝置，所述圖像處理裝置能夠有差別地識別三維運動圖像中的圖像的靜止區(qū)域和運動區(qū)域，并對靜止區(qū)域和運動區(qū)域進行不同的對比度調整。此外，本發(fā)明還提供了用于該圖像處理裝置的顯示裝置、由該圖像處理裝置采用的圖像處理方法以及實施該圖像處理方法的圖像處理程序。為了解決上述問題，本發(fā)明的一個實施例提供了一種圖像處理裝置，所述圖像處理裝置包括深度信息提取部，其提取輸入三維運動圖像的第M幀的圖像的深度信息；亮度提取部，其提取所述輸入三維運動圖像的所述第M幀的所述圖像的亮度成分；對比度提取部，其基于所述第M幀的所述圖像的所述亮度成分，提取所述輸入三維運動圖像的所述第M 幀的所述圖像的對比度成分；增益生成部，其基于所述第M幀的所述圖像的所述對比度成分和所述第M幀的所述圖像的所述深度信息，計算所述第M幀的所述圖像的用于調整對比度成分的計算增益圖；相關度估計部，其計算包括第N-I幀和第N幀的至少兩個幀的圖像之間的相關度值，其中，N > 0 ；以及運動分析部，其基于所述相關度值，有差別地識別所述第N 幀的所述圖像中的靜止區(qū)域和運動區(qū)域。能夠提供如下結構所述增益生成部基于所述第M幀的所述圖像的用于調整對比度成分的所述計算增益圖和所計算的所述相關度值，估計所述第N幀的所述圖像的用于調整對比度成分的估計增益圖。此外，還能夠提供如下結構如果所述第N幀與所述第M幀相一致，所述增益生成部對所述第N幀的所述圖像的用于調整對比度成分的所述估計增益圖和所述第M幀的所述圖像的用于調整對比度成分的所述計算增益圖進行算術平均處理，或使用預定的權重對它們進行加權求和處理，以生成所述第N幀的所述圖像的用于調整對比度成分的平均增益圖。此外，還能夠提供如下結構所述圖像處理裝置還具有增益合成部， 所述增益合成部用于生成合成增益圖，所述合成增益圖包括具有應用到所述靜止區(qū)域的增益的所述估計增益圖和具有應用到所述運動區(qū)域的增益的所述平均增益圖。所述增益合成部可通過使用低通濾波器處理所述合成增益圖的所述靜止區(qū)域和所述運動區(qū)域之間的邊界區(qū)域。此外，還能夠提供如下結構所述第M幀是由第0幀和第K幀中的至少一者構成， K是周期值的整數(shù)倍，所述周期值是復位周期的值。此外，還能夠提供如下結構所述相關度估計部通過使用運動預測技術計算所述相關度值。
此外，還能夠提供如下結構所述相關度估計部計算所述第N幀的所述圖像和所述第N-I幀的所述圖像之間的所述相關度值，而所述增益生成部通過使用所述第N幀的所述圖像和所述第N-I幀的所述圖像之間的所計算的所述相關度值和所述第N-I幀的所述圖像的用于調整對比度成分的所述估計增益圖，估計所述第N幀的所述圖像的用于調整對比度成分的所述估計增益圖。此外，還能夠提供如下結構對于除所述第0幀之外的所有幀，所述相關度估計部重復進行所述第N幀的所述圖像和所述第N-I幀的所述圖像之間的所述相關度值的計算處理，而對于除所述第0幀之外的所有幀，所述增益生成部通過所計算的所述相關度值和所述第N-I幀的所述圖像的用于調整對比度成分的所述估計增益圖重復進行所述第N幀的所述圖像的用于調整對比度成分的所述估計增益圖的估計處理。此外，還能夠提供如下結構M個幀的所述周期值設定成可變值，所述可變值是基于所述輸入三維運動圖像的變化而確定。此外，還能夠提供如下結構所述輸入三維運動圖像的運動越大，所述M個幀的所述周期值所設定成的值越小，或者所述輸入三維運動圖像的運動越小，所述M個幀的所述周期值所設定成的值越大。此外，還能夠提供如下結構所述圖像處理裝置還包括空間頻率成分提取部，所述空間頻率成分提取部基于所述第M幀的所述圖像的所述亮度成分，提取所述第M幀的所述圖像的空間頻率成分，且所述增益生成部基于所述第M幀的所述圖像的所述對比度成分、 所述第M幀的所述圖像的所述空間頻率成分和所述第M幀的所述圖像的所述深度信息，計算所述第M幀的所述圖像的用于調整對比度成分的所述計算增益圖。此外，還能夠提供如下結構所述圖像處理裝置還包括對比度調整部，所述對比度調整部通過使用所述第N幀的所述圖像的用于調整對比度成分的所述計算增益圖、所述第 N幀的所述圖像的用于調整對比度成分的所述估計增益圖或所述第N幀的所述圖像的所述合成增益圖，調整所述第N幀的所述圖像的所述對比度成分。另外，還提供了一種還包括顯示裝置的結構，所述顯示裝置顯示通過所述圖像處理裝置調整了對比度成分的每幀圖像。此外，為了解決上述問題，本發(fā)明的另一實施例提供了一種圖像處理方法，所述圖像處理方法包括在深度信息提取步驟中，提取輸入三維運動圖像的第M幀的圖像的深度信息；在亮度提取步驟中，提取所述輸入三維運動圖像的所述第M幀的所述圖像的亮度成分；在對比度提取步驟中，基于所述第M幀的所述圖像的所述亮度成分，提取所述輸入三維運動圖像的所述第M幀的所述圖像的對比度成分；在增益生成步驟中，基于所述第M幀的所述圖像的所述對比度成分和所述第M幀的所述圖像的所述深度信息，計算所述第M幀的所述圖像的用于調整對比度成分的計算增益圖；在相關度估計步驟中，計算包括第N-I幀和第N幀的至少兩個幀的圖像之間的相關度值，其中N > 0 ；以及在運動分析步驟中，基于所述相關度值，有差別地識別所述第N幀的所述圖像中的靜止區(qū)域和運動區(qū)域。此外，為了解決上述問題，本發(fā)明的再一實施例提供了一種由計算機執(zhí)行的圖像處理程序，所述圖像處理程序進行處理包括在深度信息提取過程中，提取輸入三維運動圖像的第M幀的圖像的深度信息；在亮度提取過程中，提取所述輸入三維運動圖像的所述第M 幀的所述圖像的亮度成分；在對比度提取過程中，基于所述第M幀的所述圖像的所述亮度成分，提取所述輸入三維運動圖像的所述第M幀的所述圖像的對比度成分；在增益生成過程中，基于所述第M幀的所述圖像的所述對比度成分和所述第M幀的所述圖像的所述深度信息，計算所述第M幀的所述圖像的用于調整對比度成分的計算增益圖；在相關度估計過程中，計算包括第N-I幀和第N幀的至少兩個幀的圖像之間的相關度值，其中N > 0 ；以及在運動分析過程中，基于所述相關度值，有差別地識別所述第N幀的所述圖像中的靜止區(qū)域和運動區(qū)域。此外，為了解決上述問題，本發(fā)明的又一實施例提供了一種圖像處理裝置，所述圖像處理裝置包括相關度估計部，其計算兩個相繼輸入幀的圖像之間的相關度值；增益生成部，其基于輸入圖像的對比度成分和所述輸入圖像的深度信息，計算所述輸入圖像的用于調整對比度成分的計算結果增益，并通過所述計算結果增益和所述相關度值估計所述輸入圖像的用于調整對比度成分的估計結果增益；以及運動分析部，其基于所述相關度值，有差別地識別所述輸入圖像中的靜止區(qū)域和運動區(qū)域。此外，還能夠提供如下結構所述增益生成部通過第N-I幀的圖像的所述計算結果增益和所述第N-I幀的所述圖像與第N幀的圖像之間的所述相關度值，估計所述第N幀的所述圖像的所述估計結果增益。此外，還能夠提供如下結構所述增益生成部通過第P-I幀的圖像的所述估計結果增益和所述第P-I幀的所述圖像與第P幀的圖像之間的所述相關度值，估計所述第P幀的所述圖像的所述估計結果增益。此外，還能夠提供如下結構所述增益生成部對第Q幀的圖像的所述估計結果增益和所述第Q幀的所述圖像的所述計算結果增益進行算術平均處理或使用預定權重對它們進行加權求和處理，以生成所述第Q幀的所述圖像的混合增益，且所述圖像處理裝置還包括增益合成部，所述增益合成部生成合成增益，所述合成增益包括應用到所述靜止區(qū)域的所述估計結果增益和應用到所述運動區(qū)域的所述混合增益。此外，為了解決上述問題，根據(jù)本發(fā)明的又一實施例提供了一種圖像處理裝置，所述圖像處理裝置包括增益生成部，其基于第一幀的圖像的對比度成分和所述第一幀的所述圖像的深度信息，計算第一增益；對比度調整部，其基于所述第一增益，調整所述第一幀的所述圖像的對比度成分；相關度估計部，其計算所述第一幀的所述圖像和第二幀的圖像之間的相關度值；以及運動分析部，其基于所述相關度值，有差別地識別所述第二幀的所述圖像中的靜止區(qū)域和運動區(qū)域。所述增益生成部生成用于所述靜止區(qū)域的靜止區(qū)域第二增益和用于所述運動區(qū)域的運動區(qū)域第二增益，所述運動區(qū)域第二增益不同于所述靜止區(qū)域第二增益，且所述對比度調整部基于所述靜止區(qū)域第二增益和所述運動區(qū)域第二增益，調整所述第二幀的所述圖像的對比度成分。如上所述，根據(jù)本發(fā)明，在圖像是三維運動圖像的情況下，圖像處理裝置能夠有差別地識別圖像的靜止區(qū)域和運動區(qū)域，且能夠對靜止區(qū)域與運動區(qū)域進行不同的對比度調整。因此，本發(fā)明能夠將深度感得到修正的平滑三維運動圖像提供給觀眾。


圖1表示本發(fā)明實施例的圖像處理裝置的整體結構；圖2是表示由本發(fā)明實施例的圖像處理裝置進行的對比度調整處理的流程圖3是表示在圖2所示流程圖的步驟中進行增益圖CG的計算過程的流程圖；圖4是表示在圖2所示流程圖的步驟中進行增益圖EG的估計過程的流程圖；圖5代表性地表示待由本實施例的圖像處理裝置處理的第0幀圖像的左眼用原始圖像和待由本實施例的圖像處理裝置處理的第0幀圖像的右眼用原始圖像；圖6代表性地表示第0幀的左眼用視差圖；圖7代表性地表示第0幀的左眼用增益圖CG ；圖8代表性地表示第1幀的左眼用原始圖像；圖9是用于說明動作預測技術的示意圖；圖10是表示第0幀和第1幀之間運動矢量的示意圖；圖11代表性地表示第1幀的左眼用增益圖EG ；圖12代表性地表示第5幀的左眼用原始圖像和第5幀的右眼用原始圖像；圖13代表性地表示第5幀的左眼用增益圖EG ；圖14代表性地表示第5幀的左眼用視差圖；圖15代表性地表示第5幀的左眼用增益圖CG ；圖16代表性地表示第5幀的左眼用增益圖MG ；圖17是用于說明兩個相繼幀中的靜止、運動和邊界區(qū)域的示意圖；圖18表示各種增益圖；以及圖19是用于說明邊界處理的執(zhí)行與增益圖之間關系的示意圖。
具體實施例方式以下，參見

本發(fā)明的實施例。應注意的是，在本發(fā)明的說明書和附圖中， 由相同的附圖標記表示實際上具有相同功能結構的結構元件，從而僅需對這些結構元件進行一次說明。因此，能夠避免重復說明。而且，應注意的是，由以下順序說明實施例。I.第一實施例1圖像處理裝置的功能結構1. 1運動圖像和幀相關度2.圖像處理裝置的操作2.1對比度的調整處理2. 2增益圖CGn的計算處理2. 3增益圖EG的估計處理2. 4增益圖MGn的生成處理2. 5合成增益圖S(iN的生成處理2. 6邊界處理I.第一實施例1圖像處理裝置的功能結構首先，通過參照圖1的功能框圖來說明本實施例的圖像處理裝置10的功能結構。如圖1所示，圖像處理裝置10具有圖像輸入部11、亮度提取部12、深度信息提取部13、空間頻率成分(spatial-frequency component)提取部14、對比度提取部15、增益生
9成部16、對比度調整部17、圖像處理部18、圖像輸出部19、相關度估計部20、運動分析部21 以及增益合成部22。圖像處理裝置10對輸入三維運動圖像的每一幀圖像的對比度成分進行調整處理，以增強或減弱每一幀圖像的深度感。在此情況下，三維圖像是用于使觀眾能夠感知三維圖像的二維圖像。在本實施例中，三維運動圖像的每一幀圖像均構成三維圖像。圖像輸入部11從外部源接收三維運動圖像，并將每一輸入幀的三維運動圖像提供到亮度提取部12。從外部源接收的三維運動圖像的數(shù)據(jù)存在各種格式。然而，圖像輸入部11能夠接收具有任意數(shù)據(jù)格式的三維運動圖像。數(shù)據(jù)格式的代表性示例為第一、第二和第三數(shù)據(jù)格式。在第一數(shù)據(jù)格式的情況下，三維運動圖像是以立體圖像的形式接收，該立體圖像是由左眼用圖像L和右眼用圖像R構成。在第二數(shù)據(jù)格式的情況下，三維運動圖像是以多視點圖像的形式接收，該多視點圖像是由至少三視點圖像構成。在第三數(shù)據(jù)格式的情況下，三維運動圖像是以二維圖像和該二維圖像的深度信息的形式接收。在下文中，當圖像或亮度圖像被指定為處理對象時，圖像或亮度圖像在第一數(shù)據(jù)格式的情況下必然包括左眼用圖像L和右眼用圖像R，在第二數(shù)據(jù)格式的情況下必然包括多個多視點圖像中的一個多視點圖像，或在第三數(shù)據(jù)格式的情況下必然包括二維圖像和該二維圖像的深度信息。亮度提取部12提取輸入三維運動圖像的第M幀圖像的亮度成分。第M幀由第0 幀和第K幀構成，其中K是周期值(即，復位周期的值)的整數(shù)倍。以下將詳細說明上述周期值。例如，如果由RGB顏色坐標系中的線性RGB值表示圖像，則亮度提取部12根據(jù)下述符合ITU-R BT709標準的公式(1)各RGB值轉換為亮度值Y，以由此提取輸入三維運動圖像的亮度成分
Y = O. 2126R+0. 7152G+0. 0722B. . . (1)根據(jù)公式(1)，由像素的亮度值Y表示的圖像是指亮度圖像。應注意的是，圖像不必由亮度值Y(或RGB信號)表示。例如，圖像也可以由CIE X^顏色坐標系中的CTZ值表示。在此情況下，由亮度值Y表示的圖像作為亮度圖像進行處理。此外，不必根據(jù)公式(1) 進行亮度值的提取。即，還能夠采用其他技術提取亮度值。深度信息提取部13提取輸入三維運動圖像的第M幀圖像的深度信息，由此生成視差圖。具體地，圖像輸入部11可將輸入三維運動圖像提供到深度信息提取部13，深度信息提取部13隨后提取作為處理對象的輸入三維運動圖像的第M幀圖像的深度信息，或可選擇地，亮度提取部12向深度信息提取部13提供亮度信號，以作為處理對象。如果三維運動圖像以作為具有第一數(shù)據(jù)格式的立體圖像接收，則深度信息提取部 13計算所謂的雙眼視差，即，計算立體圖像上對應點之間的圖像偏移。隨后，深度信息提取部13基于所計算的雙眼視差近似計算深度信息。深度信息提取部13能夠通過采用諸如塊匹配技術(block matching technique)或 DP 匹配技術(DP matching technique)等技術計算雙眼視差。此外，如果三維運動圖像以作為具有第二數(shù)據(jù)格式的多視點圖像接收，則深度信息提取部13計算從三個以上的視點圖像中選擇的兩個視點圖像的雙眼視差，并接著基于所計算的雙眼視差近似計算深度信息。
10
此外，如果三維運動圖像以作為具有第三數(shù)據(jù)格式的二維圖像和該二維圖像的深度信息接收，深度信息提取部13僅接收深度信息自身。因此，深度信息提取部13僅提取深
度{曰息?？臻g頻率成分提取部14基于亮度提取部12所提取的亮度成分來提取三維運動圖像的預定空間頻率成分。空間頻率成分提取部14能夠通過使用代表性的Gabor濾波器提取預定空間頻率成分。已知的是，Gabor濾波器與視覺系統(tǒng)的信號響應特性相近，并具有由以下公式(2)表示的函數(shù)g(x，y，λ，θ，ψ，σ，Y)
權利要求
1.一種圖像處理裝置，其包括深度信息提取部，其提取輸入三維運動圖像的第M幀的圖像的深度信息；亮度提取部，其提取所述輸入三維運動圖像的所述第M幀的所述圖像的亮度成分；對比度提取部，其基于所述第M幀的所述圖像的所述亮度成分，提取所述輸入三維運動圖像的所述第M幀的所述圖像的對比度成分；增益生成部，其基于所述第M幀的所述圖像的所述對比度成分和所述第M幀的所述圖像的所述深度信息，計算所述第M幀的所述圖像的用于調整對比度成分的計算增益圖；相關度估計部，其計算包括第N-I幀和第N幀的至少兩個幀的圖像之間的相關度值，其中，N>0 ；以及運動分析部，其基于所述相關度值，有差別地識別所述第N幀的所述圖像中的靜止區(qū)域和運動區(qū)域。
2.如權利要求1所述的圖像處理裝置，其中，所述增益生成部基于所計算的所述相關度值和所述第M幀的所述圖像的用于調整對比度成分的所述計算增益圖，估計所述第N幀的所述圖像的用于調整對比度成分的估計增益圖，且如果所述第N幀與所述第M幀相一致，所述增益生成部對所述第N幀的所述圖像的用于調整對比度成分的所述估計增益圖和所述第M幀的所述圖像的用于調整對比度成分的所述計算增益圖進行算術平均處理，或使用預定的權重對它們進行加權求和處理，以生成所述第N幀的所述圖像的用于調整對比度成分的平均增益圖，以及所述圖像處理裝置還具有增益合成部，所述增益合成部用于生成合成增益圖，所述合成增益圖包括具有應用到所述靜止區(qū)域的增益的所述估計增益圖和具有應用到所述運動區(qū)域的增益的所述平均增益圖。
3.如權利要求2所述的圖像處理裝置，其中，所述增益合成部通過使用低通濾波器處理所述合成增益圖的所述靜止區(qū)域和所述運動區(qū)域之間的邊界區(qū)域。
4.如權利要求1所述的圖像處理裝置，其中，所述第M幀是由第0幀和第K幀中的至少一者構成，K是周期值的整數(shù)倍，所述周期值是復位周期的值。
5.如權利要求1所述的圖像處理裝置，其中，所述相關度估計部通過使用運動預測技術計算所述相關度值。
6.如權利要求4所述的圖像處理裝置，其中，所述相關度估計部計算所述第N幀的所述圖像和所述第N-I幀的所述圖像之間的所述相關度值，且所述增益生成部通過使用所述第N幀的所述圖像和所述第N-I幀的所述圖像之間的所計算的所述相關度值和所述第N-I幀的所述圖像的用于調整對比度成分的所述估計增益圖，估計所述第N幀的所述圖像的用于調整對比度成分的所述估計增益圖。
7.如權利要求6所述的圖像處理裝置，其中，對于除所述第0幀之外的所有幀，所述相關度估計部重復進行所述第N幀的所述圖像和所述第N-I幀的所述圖像之間的所述相關度值的計算處理，且對于除所述第0幀之外的所有幀，所述增益生成部通過所計算的所述相關度值和所述第N-I幀的所述圖像的用于調整對比度成分的所述估計增益圖重復進行所述第N幀的所述圖像的用于調整對比度成分的所述估計增益圖的估計處理。
8.如權利要求4所述的圖像處理裝置，其中，M個幀的所述周期值設定成可變值，所述可變值是基于所述輸入三維運動圖像的變化而確定。
9.如權利要求8所述的圖像處理裝置，其中，所述輸入三維運動圖像的運動越大，所述 M個幀的所述周期值所設定成的值越小，或者所述輸入三維運動圖像的運動越小，所述M個幀的所述周期值所設定成的值越大。
10.如權利要求1所述的圖像處理裝置，其中，所述圖像處理裝置還包括空間頻率成分提取部，所述空間頻率成分提取部基于所述第 M幀的所述圖像的所述亮度成分，提取所述第M幀的所述圖像的空間頻率成分，且所述增益生成部基于所述第M幀的所述圖像的所述對比度成分、所述第M幀的所述圖像的所述空間頻率成分和所述第M幀的所述圖像的所述深度信息，計算所述第M幀的所述圖像的用于調整對比度成分的所述計算增益圖。
11.如權利要求2所述的圖像處理裝置，其中，所述圖像處理裝置還包括對比度調整部，所述對比度調整部通過使用所述第N幀的所述圖像的用于調整對比度成分的所述計算增益圖、所述第N幀的所述圖像的用于調整對比度成分的所述估計增益圖或所述第N幀的所述圖像的所述合成增益圖，調整所述第N幀的所述圖像的所述對比度成分。
12.一種包括前述權利要求11所述的圖像處理裝置的顯示裝置，其中，所述顯示裝置顯示通過所述圖像處理裝置調整了對比度成分的每幀圖像。
13.一種圖像處理方法，其包括在深度信息提取步驟中，提取輸入三維運動圖像的第M幀的圖像的深度信息； 在亮度提取步驟中，提取所述輸入三維運動圖像的所述第M幀的所述圖像的亮度成分；在對比度提取步驟中，基于所述第M幀的所述圖像的所述亮度成分，提取所述輸入三維運動圖像的所述第M幀的所述圖像的對比度成分；在增益生成步驟中，基于所述第M幀的所述圖像的所述對比度成分和所述第M幀的所述圖像的所述深度信息，計算所述第M幀的所述圖像的用于調整對比度成分的計算增益圖；在相關度估計步驟中，計算包括第N-I幀和第N幀的至少兩個幀的圖像之間的相關度值，其中N>0 ；以及在運動分析步驟中，基于所述相關度值，有差別地識別所述第N幀的所述圖像中的靜止區(qū)域和運動區(qū)域。
14.一種由計算機執(zhí)行的圖像處理程序，所述圖像處理程序執(zhí)行的處理包括 在深度信息提取過程中，提取輸入三維運動圖像的第M幀的圖像的深度信息；在亮度提取過程中，提取所述輸入三維運動圖像的所述第M幀的所述圖像的亮度成分；在對比度提取過程中，基于所述第M幀的所述圖像的所述亮度成分，提取所述輸入三維運動圖像的所述第M幀的所述圖像的對比度成分；在增益生成過程中，基于所述第M幀的所述圖像的所述對比度成分和所述第M幀的所述圖像的所述深度信息，計算所述第M幀的所述圖像的用于調整對比度成分的計算增益圖；在相關度估計過程中，計算包括第N-I幀和第N幀的至少兩個幀的圖像之間的相關度值，其中N>0 ；以及在運動分析過程中，基于所述相關度值，有差別地識別所述第N幀的所述圖像中的靜止區(qū)域和運動區(qū)域。
15.一種圖像處理裝置，其包括相關度估計部，其計算兩個相繼輸入幀的圖像之間的相關度值；增益生成部，其基于輸入圖像的對比度成分和所述輸入圖像的深度信息，計算所述輸入圖像的用于調整對比度成分的計算結果增益，并通過所述計算結果增益和所述相關度值估計所述輸入圖像的用于調整對比度成分的估計結果增益；以及運動分析部，其基于所述相關度值，有差別地識別所述輸入圖像中的靜止區(qū)域和運動區(qū)域。
16.如權利要求15所述的圖像處理裝置，其中，所述增益生成部通過第N-I幀的圖像的所述計算結果增益和所述第N-I幀的所述圖像與第N幀的圖像之間的所述相關度值，估計所述第N幀的所述圖像的所述估計結果增益。
17.如權利要求16所述的圖像處理裝置，其中，所述增益生成部通過第P-I幀的圖像的所述估計結果增益和所述第P-I幀的所述圖像與第P幀的圖像之間的所述相關度值，估計所述第P幀的所述圖像的所述估計結果增益。
18.如權利要求16或17所述的圖像處理裝置，其中，所述增益生成部對第Q幀的圖像的所述估計結果增益和所述第Q幀的所述圖像的所述計算結果增益進行算術平均處理或使用預定權重對它們進行加權求和處理，以生成所述第 Q幀的所述圖像的混合增益，且所述圖像處理裝置還包括增益合成部，所述增益合成部生成合成增益，所述合成增益包括應用到所述靜止區(qū)域的所述估計結果增益和應用到所述運動區(qū)域的所述混合增益。
19.一種圖像處理裝置，其包括增益生成部，其基于第一幀的圖像的對比度成分和所述第一幀的所述圖像的深度信息，計算第一增益；對比度調整部，其基于所述第一增益，調整所述第一幀的所述圖像的對比度成分；相關度估計部，其計算所述第一幀的所述圖像和第二幀的圖像之間的相關度值；以及運動分析部，其基于所述相關度值，有差別地識別所述第二幀的所述圖像中的靜止區(qū)域和運動區(qū)域，其中，所述增益生成部生成用于所述靜止區(qū)域的靜止區(qū)域第二增益和用于所述運動區(qū)域的運動區(qū)域第二增益，所述運動區(qū)域第二增益不同于所述靜止區(qū)域第二增益，且所述對比度調整部基于所述靜止區(qū)域第二增益和所述運動區(qū)域第二增益，調整所述第二幀的所述圖像的對比度成分。
全文摘要
本發(fā)明涉及圖像處理裝置、顯示裝置、圖像處理方法和圖像處理程序。所述圖像處理裝置包括用于提取圖像的深度信息的深度信息提取部；用于提取圖像的亮度成分的亮度提取部；用于提取圖像的對比度成分的對比度提取部；用于計算圖像的計算增益圖、估計圖像的估計增益圖或計算圖像的平均增益圖的增益生成部；相關度估計部，其計算至少兩個幀的圖像之間的相關度值；以及運動分析部，其基于相關度值，識別圖像中的靜止區(qū)域和運動區(qū)域。本發(fā)明能夠有差別地識別三維運動圖像中的靜止區(qū)域和運動區(qū)域，并能夠對靜止區(qū)域進行與運動區(qū)域不同的對比度調整，因此能夠將深度感得到修正的平滑三維運動圖像提供給觀眾。
文檔編號G06T7/20GK102480629SQ20111037185
公開日2012年5月30日 申請日期2011年11月21日 優(yōu)先權日2010年11月29日
發(fā)明者兵動靖英, 高橋修一 申請人:索尼公司