合并候選導(dǎo)出裝置、圖像解碼裝置以及圖像編碼裝置的制造方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及合并候選導(dǎo)出裝置、圖像解碼裝置以及圖像編碼裝置。
【背景技術(shù)】
[0002]在多視點(diǎn)的圖像編碼技術(shù)中,已提出在對多個(gè)視點(diǎn)的圖像進(jìn)行編碼時(shí)通過預(yù)測圖像間的視差來降低信息量的視差預(yù)測編碼、與其編碼方法對應(yīng)的解碼方法。將表征視點(diǎn)圖像間的視差的矢量稱作位移矢量。位移矢量是具有水平方向的要素(X分量)和垂直方向的要素(y分量)的二維的矢量,針對作為對一個(gè)圖像進(jìn)行分割而獲得的區(qū)域的每個(gè)塊來計(jì)算。此外,為了獲取多視點(diǎn)的圖像,一般利用配置在各個(gè)視點(diǎn)的攝像機(jī)。在多視點(diǎn)的編碼中,各視點(diǎn)圖像在多個(gè)層中分別被編碼為不同的層。由多個(gè)層構(gòu)成的運(yùn)動圖像的編碼方法一般被稱作可伸縮編碼或者層級編碼。在可伸縮編碼中,通過在層間進(jìn)行預(yù)測,由此來實(shí)現(xiàn)高的編碼效率。在層間不進(jìn)行預(yù)測而成為基準(zhǔn)的層被稱作基礎(chǔ)層,除此之外的層被稱作擴(kuò)展層。將層由視點(diǎn)圖像構(gòu)成的情況下的可伸縮編碼稱作視圖可伸縮編碼。此時(shí),基礎(chǔ)層也被稱作基礎(chǔ)視圖,擴(kuò)展層也被稱作非基礎(chǔ)視圖。進(jìn)而,除了視圖可伸縮之外,層由紋理層(圖像層)和縱深層(距離圖像層)構(gòu)成的情況下的可伸縮編碼被稱作三維可伸縮編碼。
[0003]此外,可伸縮編碼中,除了視圖可伸縮編碼之外,還具有空間可伸縮編碼(作為基礎(chǔ)層而處理分辨率低的圖片,作為擴(kuò)展層而處理分辨率高的圖片)、SNR可伸縮編碼(作為基礎(chǔ)層而處理圖像質(zhì)量低的圖片,作為擴(kuò)展層而處理分辨率高的圖片)等。在可伸縮編碼中,例如將基礎(chǔ)層的圖片作為參照圖片而利用在擴(kuò)展層的圖片的編碼中。
[0004]在非專利文獻(xiàn)I中,已知被稱作視點(diǎn)合成預(yù)測的技術(shù),通過將預(yù)測單元分割為小的子塊,針對每個(gè)子塊,利用位移矢量來進(jìn)行預(yù)測,由此來獲得精度高的預(yù)測圖像。此外,在非專利文獻(xiàn)I中,已知被稱作殘差預(yù)測的技術(shù),利用與對象視圖不同的視圖的圖像來估計(jì)殘差,并進(jìn)行加法運(yùn)算。此外,在非專利文獻(xiàn)I中,已知導(dǎo)出幀間視圖合并候選等擴(kuò)展合并候選的技術(shù)。
[0005]在先技術(shù)文獻(xiàn)
[0006]非專利文獻(xiàn)
[0007]非專利文獻(xiàn)1:3D-HEVC Draft Text 4,JCT3V-F1001_v2,JCT-3V 6th Meeting:CH,25 Oct.-1 Nov.2013(2013年 12月 14日公開)
【發(fā)明內(nèi)容】
[0008]發(fā)明要解決的課題
[0009]在非專利文獻(xiàn)I的合并候選導(dǎo)出中,為了可伸縮用而對合并候選進(jìn)行了擴(kuò)展。這些擴(kuò)展合并候選的導(dǎo)出由于復(fù)雜度比較高,因此存在若被利用于需要導(dǎo)出多個(gè)合并候選的預(yù)測單元小的情況則處理量大的課題。
[0010]用于解決課題的手段
[0011 ]本發(fā)明的一個(gè)形態(tài)為合并候選導(dǎo)出裝置,具備:導(dǎo)出基本合并候選的基本合并候選導(dǎo)出部、和導(dǎo)出與基本合并候選不同的擴(kuò)展合并候選的擴(kuò)展合并候選導(dǎo)出部,其特征在于,在預(yù)測塊的尺寸為給定的尺寸以下的情況下,合并候選列表中利用從基本合并候選導(dǎo)出部導(dǎo)出的基本合并候選列表,在除此之外的情況下,合并候選列表中利用包含從擴(kuò)展合并候選導(dǎo)出部導(dǎo)出的合并候選列表在內(nèi)的合并候選列表。
[0012]本發(fā)明的一個(gè)形態(tài)為合并候選導(dǎo)出裝置,具備:導(dǎo)出基本合并候選的基本合并候選導(dǎo)出部、和導(dǎo)出與基本合并候選不同的擴(kuò)展合并候選的擴(kuò)展合并候選導(dǎo)出部,其特征在于,在預(yù)測單元尺寸大于給定的尺寸的情況下,將由基本合并候選導(dǎo)出部導(dǎo)出的合并候選和由擴(kuò)展合并候選導(dǎo)出部導(dǎo)出的合并候選追加到合并候選列表中,在預(yù)測單元尺寸為給定的尺寸以下的情況下,將由基本合并候選導(dǎo)出部導(dǎo)出的合并候選追加到合并候選列表中。
[0013]本發(fā)明的一個(gè)形態(tài)為合并候選導(dǎo)出裝置,具備:導(dǎo)出基本合并候選的基本合并候選導(dǎo)出部、和導(dǎo)出與基本合并候選不同的擴(kuò)展合并候選的擴(kuò)展合并候選導(dǎo)出部,其特征在于,在預(yù)測單元尺寸大于給定的尺寸的情況下,將擴(kuò)展合并候選追加到合并候選列表中,在預(yù)測單元尺寸為給定的尺寸以下的情況下,不將擴(kuò)展合并候選追加到合并候選列表中。
[0014]本發(fā)明的一個(gè)形態(tài)為合并候選導(dǎo)出裝置,具備:導(dǎo)出基本合并候選的基本合并候選導(dǎo)出部、和導(dǎo)出與基本合并候選不同的擴(kuò)展合并候選的擴(kuò)展合并候選導(dǎo)出部,其特征在于,在預(yù)測塊的尺寸為給定的尺寸以下的情況下,將擴(kuò)展合并候選的利用可能性導(dǎo)出為不利用。
[0015]本發(fā)明的一個(gè)形態(tài)中,其特征在于,僅在上述給定的尺寸為8、且預(yù)測單元寬度與高度均為8以上的情況下,在合并候選列表中包含擴(kuò)展合并候選。
[0016]本發(fā)明的一個(gè)形態(tài)中,其特征在于,在預(yù)測單元寬度與預(yù)測單元高度之和為12的情況下,合并候選列表中利用從基本合并候選導(dǎo)出部導(dǎo)出的基本合并候選列表。
[0017]本發(fā)明的一個(gè)形態(tài)中,其特征在于,僅在預(yù)測單元寬度與預(yù)測單元高度之和大于12的情況下,在合并候選列表中包含擴(kuò)展合并候選。本發(fā)明的一個(gè)形態(tài)中,其特征在于,在預(yù)測塊的尺寸為給定的尺寸以下的情況下,不從合并候選的VSP合并標(biāo)記之中導(dǎo)出合并模式的VSP模式標(biāo)記。
[0018]本發(fā)明的一個(gè)形態(tài)為對由多層構(gòu)成的編碼數(shù)據(jù)進(jìn)行解碼的圖像解碼裝置,其特征在于,具備上述記載的合并候選導(dǎo)出裝置。
[0019]本發(fā)明的一個(gè)形態(tài)為對由多層構(gòu)成的編碼數(shù)據(jù)進(jìn)行編碼的圖像編碼裝置,其特征在于,具備上述記載的合并候選導(dǎo)出裝置。
[0020]發(fā)明效果
[0021]根據(jù)本發(fā)明,起到如下效果,S卩:由于在合并候選導(dǎo)出中根據(jù)塊尺寸來限制導(dǎo)出擴(kuò)展合并候選的情況,因此處理量被降低。
【附圖說明】
[0022]圖1是表示本發(fā)明的實(shí)施方式所涉及的圖像傳輸系統(tǒng)的構(gòu)成的概要圖。
[0023]圖2是表示本實(shí)施方式所涉及的編碼流的數(shù)據(jù)的層級結(jié)構(gòu)的圖。
[0024]圖3是表不參照圖片列表的一例的概念圖。
[0025]圖4是表示參照圖片的例子的概念圖。
[0026]圖5是表示本實(shí)施方式所涉及的圖像解碼裝置的構(gòu)成的概要圖。
[0027]圖6是表示本實(shí)施方式所涉及的幀間預(yù)測參數(shù)解碼部的構(gòu)成的概要圖。
[0028]圖7是表示本實(shí)施方式所涉及的合并模式參數(shù)導(dǎo)出部的構(gòu)成的概要圖。
[0029]圖8是表示本實(shí)施方式所涉及的AMVP預(yù)測參數(shù)導(dǎo)出部的構(gòu)成的概要圖。
[0030]圖9是表示分割模式的圖案的圖,圖9(a)?(h)分別表示分割模式為2NXN、2NXN、2NXnU、2NXnD、NX2N、nLX2N、nRX2N、以及NXN的情況下的分區(qū)形狀。
[0031]圖10是表示本實(shí)施方式所涉及的幀間預(yù)測參數(shù)解碼控制解碼部的構(gòu)成的概要圖。
[0032]圖11是表示本實(shí)施方式所涉及的幀間預(yù)測圖像生成部的構(gòu)成的概要圖。
[0033]圖12是說明視點(diǎn)合成部中的子塊的分割方法的圖。
[0034]圖13是說明視點(diǎn)合成部中的子塊的分割方法的圖。
[0035]圖14是表示本實(shí)施方式所涉及的殘差預(yù)測部的構(gòu)成的概要圖。
[0036]圖15是本實(shí)施方式所涉及的殘差預(yù)測的概念圖(之一)。
[0037]圖16是本實(shí)施方式所涉及的殘差預(yù)測的概念圖(之二)。
[0038]圖17是表示本實(shí)施方式所涉及的視點(diǎn)合成預(yù)測部的構(gòu)成的概要圖。
[0039]圖18是表不合并候選列表的一例的圖。
[0040]圖19是表示空間合并候選所參照的相鄰塊的位置的圖。
[0041]圖20是表示本實(shí)施方式所涉及的圖像編碼裝置的構(gòu)成的框圖。
[0042]圖21是表示本實(shí)施方式所涉及的幀間預(yù)測參數(shù)編碼部的構(gòu)成的概要圖。
[0043]圖22是表示本實(shí)施方式的合并候選導(dǎo)出部30361A的個(gè)別的動作的圖。
[0044]圖23是表示本實(shí)施方式的合并候選導(dǎo)出部30361A的動作的整體的圖。
[0045]圖24是表示本實(shí)施方式的合并候選導(dǎo)出部30361B的動作的圖。
[0046]圖25是表示本實(shí)施方式的合并候選導(dǎo)出部30361B的動作的圖。
[0047]圖26是表示本實(shí)施方式的合并候選導(dǎo)出部30361C的動作的圖。
[0048]圖27是說明本實(shí)施方式的合并模式參數(shù)導(dǎo)出部3036D的動作的圖。
【具體實(shí)施方式】
[0049](第丨實(shí)施方式)
[0050]以下,參照附圖來說明本發(fā)明的實(shí)施方式。
[0051]圖1是表示本實(shí)施方式所涉及的圖像傳輸系統(tǒng)I的構(gòu)成的概要圖。
[0052]圖像傳輸系統(tǒng)I是傳輸對多個(gè)層圖像進(jìn)行編碼后的碼,并顯示對被傳輸?shù)拇a進(jìn)行解碼后的圖像的系統(tǒng)。圖像傳輸系統(tǒng)I構(gòu)成為包含:圖像編碼裝置11、網(wǎng)絡(luò)21、圖像解碼裝置31以及圖像顯示裝置41。
[0053]圖像編碼裝置11中被輸入表示多個(gè)層圖像(也稱作紋理圖像)的信號T。所謂層圖像,是指以某分辨率以及某視點(diǎn)被視覺辨認(rèn)或者被拍攝的圖像。在利用多個(gè)層圖像來進(jìn)行編碼三維圖像的視圖可伸縮編碼的情況下,多個(gè)層圖像分別被稱作視點(diǎn)圖像。在此,視點(diǎn)相當(dāng)于拍攝裝置的位置或者觀測點(diǎn)。例如,多個(gè)視點(diǎn)圖像是左右的拍攝裝置分別朝向被攝體進(jìn)行拍攝而得到的圖像。圖像編碼裝置11對其信號分別進(jìn)行編碼,生成編碼流Te(編碼數(shù)據(jù))。關(guān)于編碼流Te的詳情將后述。所謂視點(diǎn)圖像,是指在某視點(diǎn)下被觀測的二維圖像(平面圖像)。視點(diǎn)圖像例如由配置在二維平面內(nèi)的每個(gè)像素的亮度值或者色信號值來表示。以下,將一張視點(diǎn)圖像或者表示該視點(diǎn)圖像的信號稱作圖片(picture)。此外,在利用多個(gè)層圖像來進(jìn)行空間可伸縮編碼的情況下,該多個(gè)層圖像由分辨率低的基礎(chǔ)層圖像和分辨率高的擴(kuò)展層圖像構(gòu)成。在利用多個(gè)層圖像來進(jìn)行SNR可伸縮編碼的情況下,該多個(gè)層圖像由圖像質(zhì)量低的基礎(chǔ)層圖像和圖像質(zhì)量高的擴(kuò)展層圖像構(gòu)成。其中,也可以任意組合視圖可伸縮編碼、空間可伸縮編碼、SNR可伸縮編碼來進(jìn)行編碼。在本實(shí)施方式中,作為多個(gè)層圖像,至少處理包含基礎(chǔ)層圖像和基礎(chǔ)層圖像以外的圖像(擴(kuò)展層圖像)在內(nèi)的圖像的編碼以及解碼。在多個(gè)層之中,針對圖像或編碼參數(shù)中存在參照關(guān)系(依賴關(guān)系)的兩個(gè)層,將被參照的一側(cè)的圖像稱作第I層圖像,將要參照的一側(cè)的圖像稱作第2層圖像。例如,在有參照基礎(chǔ)層被編碼的(基礎(chǔ)層以外的)增強(qiáng)層圖像的情況下,將基礎(chǔ)層圖像作為第I層圖像來處理,將增強(qiáng)層圖像作為第2層圖像來處理。另外,作為增強(qiáng)層圖像的例子,有基礎(chǔ)視圖以外的視點(diǎn)的圖像、縱深圖像等。
[0054]所謂縱深圖像(被稱作depthmap、“深度圖像”、“距離圖像”),是指被攝空間內(nèi)包含的被攝體、背景的、距視點(diǎn)(拍攝裝置等)的距離所對應(yīng)的信號值(稱作“縱深值”、“深度值”、“縱深”等),是由配置在二維平面的每個(gè)像素的信號值(像素值)構(gòu)成的圖像信號。構(gòu)成縱深圖像的像素與構(gòu)成視點(diǎn)圖像的像素對應(yīng)。因此,縱深圖成為線索,用于利用作為成為將被攝空間投影至二維平面的基準(zhǔn)的圖像信號的視點(diǎn)圖像來表征三維的被攝空間。
[0055]網(wǎng)絡(luò)21將圖像編碼裝置11所生成的編碼流Te傳輸至圖像解碼裝置31。網(wǎng)絡(luò)21為因特網(wǎng)(internet)、廣域網(wǎng)(WAN: Wide Area Network)、小規(guī)模網(wǎng)絡(luò)(LAN: Local AreaNetwork,局域網(wǎng))或者它們的組合。網(wǎng)絡(luò)21不一定限于雙向的通信網(wǎng),也可以為地面波數(shù)字廣播、衛(wèi)星廣播等的傳輸廣播波的單向或者雙向的通信網(wǎng)。此外,網(wǎng)絡(luò)21也可被DVD(Digital Versatile Disc;數(shù)字通用盤)、BD(Blue_ray Disc;藍(lán)光盤)等的記錄有編碼流Te的存儲介質(zhì)替代。
[0056]圖像解碼裝置31對網(wǎng)絡(luò)21所傳輸?shù)木幋a流Te分別進(jìn)行解碼,生成分別解碼后的多個(gè)解碼層圖像Td (解碼視點(diǎn)圖像Td)。
[0057]圖像顯示裝置41顯示圖像解碼裝置31所生成的多個(gè)解碼層圖像Td的全部或者一部分。例如,在視圖可伸縮編碼中,在全部的情況下顯示三維圖像(立體圖像)、自由視點(diǎn)圖像,在一部分的情況下顯示二維圖像。圖像顯示裝置41例如具備液晶顯示器、有機(jī)EL(Electro-luminescence ;電致發(fā)光)顯示器等的顯示設(shè)備。此外,在空間可伸縮編碼、SNR可伸縮編碼中,在圖像解碼裝置31和圖像顯示裝置41具有高的處理能力的情況下,顯示圖像質(zhì)量高的擴(kuò)展層圖像,在只具有更低的處理能力的情況下,才顯示無需擴(kuò)展層那樣高的處理能力、顯示能力的基礎(chǔ)層圖像。
[0058]〈編碼流Te的結(jié)構(gòu)〉
[0059]在詳細(xì)說明本實(shí)施方式所涉及的圖像編碼裝置11以及圖像解碼裝置31之前,先說明由圖像編碼裝置11生成并由圖像解碼裝置31解碼的編碼流Te的數(shù)據(jù)結(jié)構(gòu)。
[0060]圖2是表示編碼流Te中的數(shù)據(jù)的層級結(jié)構(gòu)的圖。編碼流Te例示性地包含序列、以及構(gòu)成序列的多個(gè)圖片。圖2(a)?(f)分別是表示規(guī)定序列SEQ的序列層、規(guī)定圖片PICT的圖片層、規(guī)定切片S的切片層、規(guī)定切片數(shù)據(jù)的切片數(shù)據(jù)層、規(guī)定切片數(shù)據(jù)中所含的編碼樹單元的編碼樹層、規(guī)定編碼樹中所含的編碼單位(Coding Unit;CU)的編碼單元層的圖。
[0061](序列層)
[0062]在序列層中,規(guī)定了圖像解碼裝置31為了解碼處理對象的序列SEQ(以下也稱作對象序列)而要參照的數(shù)據(jù)的集合。如圖2(a)所示,序列SEQ包含:視頻參數(shù)集合(VideoParameter Set)、序列參數(shù)集合SPS(Sequence Parameter Set)、圖片參數(shù)集合PPS(Picture Parameter Set)、圖片PICT、以及附加擴(kuò)展信息SEI (Supplemental EnhancementInformat1n)。在此,#之后所示的值表示層ID(nuh_layer_id)。在圖2中,雖然示出存在#0和#1即層O和層I的編碼數(shù)據(jù)的例子,但層的種類以及層的數(shù)目并不限于此。層ID(nuh_layer_id)為O的層對應(yīng)于基礎(chǔ)層,層ID(nuh_layer_id)為O以外的層對應(yīng)于增強(qiáng)層。
[0063]視頻參數(shù)集合VPS在由多個(gè)層構(gòu)成的運(yùn)動圖像中,規(guī)定了多個(gè)運(yùn)動圖像所共同的編碼參數(shù)的集合、以及運(yùn)動圖像中所含的多個(gè)層及與各個(gè)層關(guān)聯(lián)的編碼參數(shù)的集合。
[0064]在序列參數(shù)集合SPS中,規(guī)定了圖像解碼裝置31為了解碼對象序列而要參照的編碼參數(shù)的集合。例如,規(guī)定了圖片的寬度、高度。
[0065]在圖片參數(shù)集合PPS中,規(guī)定了圖像解碼裝置31為了解碼對象序列內(nèi)的各圖片而要參照的編碼參數(shù)的集合。例如,包含用于解碼圖片的量化幅度的基準(zhǔn)值(pic_init_qp_minus26)、表示加權(quán)預(yù)測的適用的標(biāo)記(weighted_pred_f lag)。其中,PPS也可以存在多個(gè)。在此情況下,從對象序列內(nèi)的各圖片之中選擇多個(gè)PPS的任意一個(gè)。
[0066](圖片層)
[0067]在圖片層中,規(guī)定了圖像解碼裝置31為了解碼處理對象的圖片PICT(以下也稱作對象圖片)而要參照的數(shù)據(jù)的集合。如圖2(b)所示,圖片PICT包含切片SO?SNS-1 (NS為圖片PICT中所含的切片的總數(shù))。
[0068]另外,以下在無需分別區(qū)分切片SO?SNS-1的情況下,有時(shí)省略記述符號后綴。此夕卜,關(guān)于以下所說明的編碼流Te中所含的數(shù)據(jù)、即附有后綴的其他數(shù)據(jù),也同樣。
[0069](切片層)
[0070]在切片層中,規(guī)定了圖像解碼裝置31為了解碼處理對象的切片S(也稱作對象切片)而要參照的數(shù)據(jù)的集合。如圖2(c)所示,切片S包含切片頭部SH以及切片數(shù)據(jù)SDATA。
[0071]在切片頭部SH中,包含為了決定對象切片的解碼方法而圖像解碼裝置31要參照的編碼參數(shù)組。指定切片類型的切片類型指定信息(Slicejype)為切片頭部SH中所含的編碼參數(shù)的一例。
[0072]作為能由切片類型指定信息指定的切片類型,列舉(I)在編碼時(shí)僅利用幀內(nèi)預(yù)測的I切片、(2)在編碼時(shí)利用單向預(yù)測或者幀內(nèi)預(yù)測的P切片、(3)在編碼時(shí)利用單向預(yù)測、雙向預(yù)測或者幀內(nèi)預(yù)測的B切片等。
[0073]另外,在切片頭部SH中也可以包含上述序列層中所含的、對于圖片參數(shù)集合PPS的參照(pic_parameter_set_id)。
[0074](切片數(shù)據(jù)層)
[0075]在切片數(shù)據(jù)層中,規(guī)定了圖像解碼裝置31為了解碼處理對象的切片數(shù)據(jù)SDATA而要參照的數(shù)據(jù)的集合。如圖2 (d)所示,切片數(shù)據(jù)SDATA包含編碼樹塊(CTB: Coded TreeBlock) XTB為構(gòu)成切片的固定尺寸(例如64 X 64)的塊,也有時(shí)稱作最大編碼單位(IXU:Largest Cording Unit)。
[0076](編碼樹層)
[0077]如圖2(e)所示,編碼樹層規(guī)定了圖像解碼裝置31為了解碼處理對象的編碼樹塊而要參照的數(shù)據(jù)的集合。編碼樹單元通過遞歸式四叉樹分割而被分割。將通過遞歸式四叉樹分割而獲得的樹結(jié)構(gòu)的節(jié)點(diǎn)稱作編碼樹(coding tree)。四叉樹的中間節(jié)點(diǎn)為編碼樹單元(CTU = Coded Tree Unit),編碼樹塊自身也被規(guī)定為最上位的CTUXTU包含分割標(biāo)記(split_flag),在split_flag為I的情況下,被分割為4個(gè)編碼樹單元CTU。在split_f lag為O的情況下,編碼樹單元CTU被分割為4個(gè)編碼單元(CU:Coded Unit)。編碼單元CU為編碼樹層的末端節(jié)點(diǎn),在該層中不再進(jìn)行其以上的分割。編碼單元CU成為編碼處理的基本單位。
[0078]此外,在編碼樹塊CTB的尺寸為64X 64像素的情況下,編碼單元⑶的尺寸可取64 X64像素、32 X 32像素、16 X 16像素、以及8 X 8像素之中的任意一者。
[0079](編碼單元層)
[0080]如圖2(f)所示,編碼單元層規(guī)定了圖像解碼裝置31為了解碼處理對象的編碼單元而要參照的數(shù)據(jù)的集合。具體而言,編碼單元由CU頭部CUH、預(yù)測樹、變換樹、CU頭部CUF構(gòu)成。在CU頭部CUH中,規(guī)定了:編碼單元是利用幀內(nèi)預(yù)測的單元還是利用幀間預(yù)測的單元等。此外,在CU頭部CUH中,包含:表示編碼單元用于殘差預(yù)測的權(quán)重(或是否進(jìn)行殘差預(yù)測)的殘差預(yù)測權(quán)重索引iv_res_pred_weight_idx、表示是否利用照度補(bǔ)償預(yù)測的照度補(bǔ)償標(biāo)記ic_flag。編碼單元成為預(yù)測樹(predict1n tree;PT)以及變換樹(transform tree;TT)的根部。CU頭部CUF被包含在預(yù)測樹與變換樹之間或者變換樹之后。
[0081]預(yù)測樹中,編碼單元被分割為一個(gè)或者多個(gè)預(yù)測塊,并規(guī)定了各預(yù)測塊的位置和尺寸。用另一種表現(xiàn)來說,預(yù)測塊是構(gòu)成編碼單元的一個(gè)或者多個(gè)的不重復(fù)的區(qū)域。此外,預(yù)測樹包含通過上述的分割而獲得的一個(gè)或者多個(gè)預(yù)測塊。
[0082]預(yù)測處理針對每個(gè)該預(yù)測塊來進(jìn)行。以下,將作為預(yù)測的單位的預(yù)測塊也稱作預(yù)測單位(predict1n unit ;PU、預(yù)測單元)。
[0083]預(yù)測樹中的分割的種類大致來說有幀內(nèi)預(yù)測的情況和幀間預(yù)測的情況這兩種。所謂幀內(nèi)預(yù)測,是指同一圖片內(nèi)的預(yù)測,所謂幀間預(yù)測,是指在互不相同的圖片間(例如顯示時(shí)刻間、層圖像間)進(jìn)行的預(yù)測處理。
[0084]在幀內(nèi)預(yù)測的情況下,分割方法有2NX2N(與編碼單元同一尺寸)和NXN。
[0085]此外,在幀間預(yù)測的情況下,關(guān)于分割方法,通過編碼數(shù)據(jù)的分割模式part_mode而被編碼。若將對象CU的尺寸設(shè)為2N X 2N像素,貝Ij由分割模式part_mode指定的分割模式中有如下的合計(jì)8個(gè)種類的圖案。即為:2NX 2N像素、2NXN像素、NX 2N像素、以及NXN像素的4個(gè)對稱分割(symmetric splittings)、和2NXnU像素、2NXnD像素、nLX 2N像素、以及nRX2N像素的4個(gè)非對稱分害lJ(AMP:asymmetric mot1n partit1ns)。其中,意味著N=2m(m為I以上的任意的整數(shù))。以下,將分割模式為非對稱分割的預(yù)測塊也稱呼為AMP塊。由于分割數(shù)為1、2、4之中的任意一個(gè),因此⑶中所含的為I個(gè)?4個(gè)。將這些PU依次表現(xiàn)為PU0、PU1、PU2、PU3。
[0086]在圖9(a)?(h)中,關(guān)于各個(gè)分割模式,具體圖示出CU中的PU分割的邊界的位置。[0087 ]圖9 (a)表不⑶不進(jìn)行分割的2N X 2N的分割模式。此外,圖9 (b)以及(e)分別表不分害_式為2N X N以及N X 2N的情況下的分區(qū)(par t i t i on)的形狀。此外,圖9 (h)表示分割模式為NXN的情況下的分區(qū)的形狀。
[0088]此外,圖9(幻、((1)、(0以及&)分別表示是作為非對稱分割(4103)的2~\111]、2~\nD、nL X 2N以及nR X 2N的情況下的分區(qū)的形狀。
[0089]此外,在圖9(a)?(h)中,各區(qū)域上所附的編號表示區(qū)域的識別編號,按照該識別編號順序?qū)^(qū)域進(jìn)行處理。即,該識別編號表征區(qū)域的掃描順序。
[0090]在幀間預(yù)測的情況下的預(yù)測塊中,定義了上述8個(gè)種類的分割模式之中的NXN(圖9(h))以外的7個(gè)種類。
[0091]此外,N的具體的值由該P(yáng)U所屬的⑶的尺寸來規(guī)定,nU、nD、nL、以及nR的具體的值根據(jù)N的值來決定。例如,32 X 32像素的⑶能夠分割為32 X 32像素、32 X 16像素、16 X 32像素、32 X 16像素、32 X 8像素、32 X 24像素、8 X 32像素、以及24 X 32像素的幀間預(yù)測的預(yù)測塊。
[0092]此外,在變換樹中,編碼單元被分割為一個(gè)或者多個(gè)變換塊,并規(guī)定了各變換塊的位置和尺寸。若用另一種表現(xiàn)來說,變換塊是構(gòu)成編碼單元的一個(gè)或者多個(gè)的不重復(fù)的區(qū)域。此外,變換樹包含通過上述的分割而獲得的一個(gè)或者多個(gè)變換塊。
[0093]變換樹中的分割之中有:將尺寸與編碼單元相同的區(qū)域分配為變換塊的方式、和與上述的樹塊的分割同樣基于遞歸式四叉樹分割的方式。
[0094]變換處理針對每個(gè)該變換塊來進(jìn)行。以下,將作為變換的單位的變換塊也稱作變換單位(transform unit;TU、變換單元)。
[0095](預(yù)測參數(shù))
[0096]預(yù)測單元的預(yù)測圖像通過預(yù)測單元所附帶的預(yù)測參數(shù)來導(dǎo)出。預(yù)測參數(shù)中有幀內(nèi)預(yù)測的預(yù)測參數(shù)或幀間預(yù)測的預(yù)測參數(shù)。以下,說明幀間預(yù)測的預(yù)測參數(shù)(幀間預(yù)測參數(shù))。