圖像數(shù)據(jù)發(fā)送裝置、圖像數(shù)據(jù)發(fā)送方法、圖像數(shù)據(jù)接收裝置和圖像數(shù)據(jù)接收方法
【專利摘要】本發(fā)明的目的是要使得能夠在解碼前，在接收端能夠進(jìn)行子流配置構(gòu)成單個(gè)視頻流的情況和子流配置構(gòu)成多個(gè)視頻流的情況的容易和可靠的識(shí)別。在規(guī)定格式的、具有包括第一圖像數(shù)據(jù)和與此第一數(shù)據(jù)有關(guān)的預(yù)定數(shù)量的第二圖像數(shù)據(jù)的基本視頻流的容納器的發(fā)送期間，特定信息被插入在對(duì)于與此容納器層的基本視頻流有關(guān)的信息的安置位置。在規(guī)定格式的、包含包括第一圖像數(shù)據(jù)的基本視頻流和分別包括與此第一數(shù)據(jù)有關(guān)的預(yù)定數(shù)量的第二圖像數(shù)據(jù)的預(yù)定數(shù)量擴(kuò)展視頻流的容納器的發(fā)送期間，特定信息被插入在對(duì)于分別與此容納器層的預(yù)定數(shù)量的擴(kuò)展視頻流有關(guān)的信息的安置位置。
【專利說(shuō)明】圖像數(shù)據(jù)發(fā)送裝置、圖像數(shù)據(jù)發(fā)送方法、圖像數(shù)據(jù)接收裝置和圖像數(shù)據(jù)接收方法
【技術(shù)領(lǐng)域】
[0001]本技術(shù)涉及圖像數(shù)據(jù)發(fā)送裝置、圖像數(shù)據(jù)發(fā)送方法、圖像數(shù)據(jù)接收裝置和圖像數(shù)據(jù)接收方法，更具體地，涉及用于發(fā)送用以進(jìn)行三維圖像顯示的圖像數(shù)據(jù)、可伸縮編碼的圖像數(shù)據(jù)等的圖像數(shù)據(jù)發(fā)送裝置等。
【背景技術(shù)】
[0002]迄今為止，作為用于運(yùn)動(dòng)畫(huà)面的編碼方法，已知H.264/AVC(Advanced VideoCoding,高級(jí)視頻編碼)(參見(jiàn)NPL1)。另外，作為這種H.264/AVC的擴(kuò)展，已知H.264/MVC(Mult1-view Video Coding,多視圖視頻編碼)(參見(jiàn) NPL2)。
[0003]在MVC中，采用多視圖圖像數(shù)據(jù)的各項(xiàng)一起被編碼的機(jī)制。在MVC中，多視圖圖像數(shù)據(jù)被編碼為一項(xiàng)基本視圖圖像數(shù)據(jù)和超過(guò)一項(xiàng)的非基本視圖圖像數(shù)據(jù)。
[0004]另外，作為H.264/AVC 的擴(kuò)展，已知H.264/SVC(Scalable Video Coding,可伸縮視頻編碼)(參見(jiàn)NPL3)。SVC是用于分層地對(duì)圖像編碼的技術(shù)。在SVC中，分層級(jí)被分為基級(jí)(最底級(jí))和被添加至此基級(jí)的擴(kuò)展級(jí)(更聞的級(jí))，所述基級(jí)包括對(duì)于以最小質(zhì)量對(duì)運(yùn)動(dòng)畫(huà)面解碼所需要的圖像數(shù)據(jù)，所述擴(kuò)展級(jí)包括用于改善運(yùn)動(dòng)畫(huà)面的質(zhì)量的圖像數(shù)據(jù)。
[0005]引用列表
[0006]非專利文獻(xiàn)
[0007]NPL 1:" Draft Errata List withRevision-Marked Corrections for H.264/AVC" , JVT-1050, Thomas Wiegand et al., Joint Video Team(JVT)of IS0/IEC MPEG &ITU-T VCEG, 2003
[0008]NPL 2: Joint Draft4.0on MultiviewVideo Coding, Joint Video Team of ISO/IEC MPEG & ITU-T VCEG, JVT-X209, 2007 年 7 月
[0009]NPL 3:Heiko Schwarz, Detlev Marpe, andThomas ffiegand, " Overview of theScalable Video CodingExtension of the H.264/AVC Standard" , IEEETRANSACTIONSON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY, VOL.17，N0.9，2007 年 9 月，頁(yè)數(shù)1103-1120.
【發(fā)明內(nèi)容】
[0010]在MVC的情況下，已知的是，在傳輸流中發(fā)送通過(guò)對(duì)作為一個(gè)畫(huà)面的基本視圖的圖像數(shù)據(jù)編碼所獲得的基本視頻流、以及每一個(gè)均通過(guò)對(duì)作為一個(gè)畫(huà)面的非基本視圖的一項(xiàng)圖像數(shù)據(jù)編碼所獲得的預(yù)定數(shù)量的擴(kuò)展視頻流。而且，在MVC的情況下，還已知的是，在用作容納器的傳輸流中發(fā)送通過(guò)對(duì)作為一個(gè)流的基本視圖的圖像數(shù)據(jù)和非基本視圖的預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)編碼所獲得的基本視頻流。
[0011]當(dāng)傳輸流中存在多個(gè)視頻流時(shí)，即，當(dāng)子流配置為使得它們由多個(gè)流構(gòu)成時(shí)，需要彼此同步地處理各流。此外，在這種情況下，盡管比特速率由于速率的改變彼此獨(dú)立而在各視頻流之間是不同的，但是要求根據(jù)系統(tǒng)需要，諸如以恒定的比特速率或者可變的比特速率、在整個(gè)傳輸流中進(jìn)行速率控制。此外，在這種情況下，在隨機(jī)訪問(wèn)期間，需要平滑地定位多個(gè)流(主要是I畫(huà)面)的開(kāi)始，由此，對(duì)于多路復(fù)用多個(gè)視頻流而言，需要先進(jìn)的技術(shù)。
[0012]另一方面，當(dāng)在傳輸流中僅存在一個(gè)視頻流時(shí)，即，當(dāng)多個(gè)子流被配置為使得它們由一個(gè)視頻流構(gòu)成時(shí)，各個(gè)視圖的圖像數(shù)據(jù)的各項(xiàng)編碼數(shù)據(jù)被互連作為例如訪問(wèn)單元的每個(gè)組，并且可以通過(guò)用訪問(wèn)單元表示的每個(gè)組來(lái)解碼和顯示編碼數(shù)據(jù)。于是，對(duì)同步處理和隨機(jī)訪問(wèn)給予更少的考慮。
[0013]另外，可以進(jìn)行簡(jiǎn)單的多路復(fù)用，如通過(guò)將多個(gè)畫(huà)面的組看作單個(gè)大畫(huà)面來(lái)進(jìn)行速率控制，從而實(shí)現(xiàn)在整體上方便從編碼到多路復(fù)用的控制的優(yōu)點(diǎn)。因此，如果在傳輸流中僅存在一個(gè)視頻流，那么尤其是發(fā)送方可確定更易于應(yīng)對(duì)。
[0014]本技術(shù)的目標(biāo)是通過(guò)使得接收方能夠在進(jìn)行解碼前可靠和容易地識(shí)別子流配置為使得它們由單個(gè)視頻流還是多個(gè)視頻流構(gòu)成來(lái)方便接收方的處理。
[0015]對(duì)于問(wèn)題的解決方案
[0016]本技術(shù)的構(gòu)思是一種圖像數(shù)據(jù)發(fā)送裝置，包括:發(fā)送單元，其發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)和與第一圖像數(shù)據(jù)有關(guān)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的基本視頻流的容納器；以及信息插入單元，其將特定信息插入至所述容納器的層中有關(guān)基本視頻流的信息所位于的位置。
[0017]在本技術(shù)中，具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)和有關(guān)此第一圖像數(shù)據(jù)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的基本視頻流的容納器由發(fā)送單元發(fā)送。例如，容納器可以是數(shù)字廣播標(biāo)準(zhǔn)中采用的傳輸流(MPEG-2TS)。進(jìn)一步，例如，容納器可以是因特網(wǎng)分發(fā)中使用的MP4的容納器或者具有MP4以外的格式的容納器。特定信息通過(guò)信息插入單元插入至容納器的層中有關(guān)基本視頻流的信息所位于的位置。
[0018]注意，在本技術(shù)中，例如，特定信息可以是具有關(guān)于第一圖像數(shù)據(jù)和預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的信息的描述符。而且，在本技術(shù)中，例如，所述容納器可以是傳輸流，并且所述信息插入單元可以將所述描述符插入至節(jié)目映射表下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路的描述符部分。
[0019]而且，在本技術(shù)中，例如，所述第一圖像數(shù)據(jù)可以是用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)，所述第二圖像數(shù)據(jù)可以是用于進(jìn)行三維圖像顯示的基本視圖以外的視圖的圖像數(shù)據(jù)，并且所述描述符可以是具有關(guān)于每個(gè)視圖的信息的MVC擴(kuò)展描述符。
[0020]而且，在本技術(shù)中，例如，所述第一圖像數(shù)據(jù)可以是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)的圖像數(shù)據(jù)，所述第二圖像數(shù)據(jù)可以是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)以外的分層級(jí)的圖像數(shù)據(jù)，并且所述描述符可以是具有關(guān)于每個(gè)分層級(jí)的圖像數(shù)據(jù)的信息的SVC擴(kuò)展描述符。
[0021]以此方式，在本技術(shù)中，當(dāng)發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)和與此第一圖像數(shù)據(jù)有關(guān)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的容納器時(shí)，特定信息被插入至容納器的層中有關(guān)基本視頻流的信息所位于的位置。
[0022]于是，接收方可以可靠和容易地識(shí)別此容納器容納包括第一圖像數(shù)據(jù)和與此第一圖像數(shù)據(jù)有關(guān)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的基本視頻流。然后，這使得接收方能夠在進(jìn)行解碼前精確地確定進(jìn)行解碼時(shí)緩沖存儲(chǔ)器的配置以及解碼模式和顯示模式。[0023]進(jìn)一步，本技術(shù)的另一構(gòu)思是一種圖像數(shù)據(jù)發(fā)送裝置，包括:發(fā)送單元，其發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)的基本視頻流和預(yù)定項(xiàng)數(shù)的擴(kuò)展視頻流的容納器，所述擴(kuò)展視頻流包括與第一圖像數(shù)據(jù)有關(guān)的預(yù)定數(shù)量的第二圖像數(shù)據(jù)的各個(gè)項(xiàng)；以及信息插入單元，其將特定信息插入至所述容納器的層中有關(guān)預(yù)定數(shù)量的擴(kuò)展視頻流中每一個(gè)的信息所位于的位置。
[0024]在本技術(shù)中，發(fā)送具有預(yù)定格式的容納器，該容納器容納包括第一圖像數(shù)據(jù)的基本視頻流和包括關(guān)于第一圖像數(shù)據(jù)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的預(yù)定數(shù)量的擴(kuò)展視頻流。例如，容納器可以是數(shù)字廣播標(biāo)準(zhǔn)中采用的傳輸流(MPEG-2 TS)。進(jìn)一步，例如，容納器可以是因特網(wǎng)分發(fā)中使用的MP4的容納器或者具有MP4以外的格式的容納器。特定信息通過(guò)信息插入單元插入至容納器的層中有關(guān)基本視頻流的信息所位于的位置。
[0025]在本技術(shù)中，例如，所述特定信息可以是具有關(guān)于第一圖像數(shù)據(jù)和預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的信息的描述符。而且，在本技術(shù)中，所述容納器可以是傳輸流，并且所述信息插入單元可以將所述描述符插入至節(jié)目映射表下對(duì)應(yīng)于預(yù)定數(shù)量的基本視頻流的視頻基本環(huán)路的描述符部分。
[0026]注意，在本技術(shù)中，例如，所述第一圖像數(shù)可以是用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)，所述第二圖像數(shù)據(jù)可以是用于進(jìn)行三維圖像顯示的基本視圖以外的視圖的圖像數(shù)據(jù)，并且所述描述符可以是具有關(guān)于每個(gè)視圖的信息的MVC擴(kuò)展描述符。
[0027]而且，在本技術(shù)中，例如，所述第一圖像數(shù)據(jù)可以是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)的圖像數(shù)據(jù)，所述第二圖像數(shù)據(jù)可以是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)以外的分層級(jí)的圖像數(shù)據(jù)，并且所述描述符可以是具有關(guān)于每個(gè)分層級(jí)的圖像數(shù)據(jù)的信息的SVC擴(kuò)展描述符。
[0028]以此方式，在本技術(shù)中，當(dāng)發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)的基本視頻流和包括與此第一圖像數(shù)據(jù)有關(guān)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的預(yù)定數(shù)量的擴(kuò)展視頻流的容納器時(shí)，特定信息被插入至容納器的層中有關(guān)預(yù)定數(shù)量的擴(kuò)展視頻流中每一個(gè)的信息所位于的位置。
[0029]于是，接收方可以可靠和容易地識(shí)別此容納器容納包括第一圖像數(shù)據(jù)的基本視頻流和包括與此第一圖像數(shù)據(jù)有關(guān)的預(yù)定數(shù)量的各項(xiàng)第二圖像數(shù)據(jù)的預(yù)定數(shù)量的擴(kuò)展視頻流。然后，這使得接收方能夠在進(jìn)行解碼前精確地確定進(jìn)行解碼時(shí)緩沖存儲(chǔ)器的配置以及解碼模式和顯示模式。
[0030]進(jìn)一步，本技術(shù)的另一構(gòu)思是一種圖像數(shù)據(jù)接收裝置，包括:接收單元，其接收具有預(yù)定格式的容納器；以及處理單元，其基于所述容納器的層中特定信息的存在和插入位置，處理所述容納器中容納的視頻流，以便獲得彼此有關(guān)的預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。
[0031]在本技術(shù)中，具有預(yù)定格式的容納器由接收單元接收。然后，基于容納器的層中特定信息的存在和插入位置，處理單元處理此容納器中容納的視頻流，并且處理單元獲得彼此有關(guān)的預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。例如，預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)可以形成用于進(jìn)行三維圖像顯示的圖像數(shù)據(jù)或者可伸縮編碼的數(shù)據(jù)的圖像數(shù)據(jù)。
[0032]注意，在本技術(shù)中，例如，當(dāng)所述特定信息插入至所述容納器的層中與所述容納器中容納的基本視頻流有關(guān)的信息所位于的位置時(shí)，所述處理單元可以處理此基本視頻流，以便獲得預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。而且，在本技術(shù)中，例如，當(dāng)所述特定信息插入至所述容納器的層中與所述容納器中容納的擴(kuò)展視頻流有關(guān)的信息所位于的位置時(shí)，所述處理單元可以處理該容納器中容納的該擴(kuò)展視頻流和基本視頻流，以便獲得預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。
[0033]以此方式，在本技術(shù)中，基于容納器的層中特定信息的存在和插入位置，處理此容納器中容納的視頻流，并且獲得彼此有關(guān)的預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。在這種情況下，可以在進(jìn)行解碼前精確地確定進(jìn)行解碼時(shí)緩沖存儲(chǔ)器的配置以及解碼模式和顯示模式，從而使得可以平滑地獲得圖像數(shù)據(jù)。
[0034]發(fā)明的有益效果
[0035]根據(jù)本技術(shù)，接收方可以在進(jìn)行解碼前可靠和容易地識(shí)別子流配置為由單個(gè)視頻流還是多個(gè)視頻流構(gòu)成。
【專利附圖】
【附圖說(shuō)明】
[0036]圖1是圖示用作本發(fā)明的實(shí)施例的圖像發(fā)送/接收系統(tǒng)的配置的示例的框圖。
[0037]圖2是圖示MVC擴(kuò)展描述符的結(jié)構(gòu)(Syntax，句法)的示例的圖。
[0038]圖3是圖示布置在廣播站中的形成圖像發(fā)送/接收系統(tǒng)的傳輸數(shù)據(jù)產(chǎn)生器的配置的示例的框圖。
[0039]圖4示出示意性圖示與基本視頻流和擴(kuò)展視頻流相關(guān)聯(lián)地插入MVC擴(kuò)展描述符的圖。
[0040]圖 5 是圖不 NAL 單兀首標(biāo)(NAL unit header MVC extension, NAL 單兀首標(biāo) MVC擴(kuò)展)的配置(Syntax)的示例的圖。
[0041]圖6是圖示發(fā)送二維(2D)圖像時(shí)傳輸流TS的配置的示例的圖。
[0042]圖7是圖示發(fā)送三維(3D)圖像時(shí)傳輸流TS的配置的示例的圖。
[0043]圖8是圖示發(fā)送三維(3D)圖像時(shí)傳輸流TS的配置的示例的圖。
[0044]圖9是圖示形成圖像發(fā)送/接收系統(tǒng)的接收器的配置的示例的框圖。
[0045]圖10是圖示CPU基于MVC擴(kuò)展描述符的存在和插入位置執(zhí)行的控制處理的示例的流程圖。
[0046]圖11示出示意性圖示接收器在接收到各種信號(hào)時(shí)執(zhí)行的處理的流程的圖。
[0047]圖12是圖示SVC擴(kuò)展描述符的結(jié)構(gòu)(Syntax)的示例的圖。
[0048]圖13是圖示NAL單元首標(biāo)(NAL單元首標(biāo)SVC擴(kuò)展)的配置(Syntax)的示例的圖。
[0049]圖14是圖示應(yīng)對(duì)SVC流的接收器的配置的示例的框圖。
【具體實(shí)施方式】
[0050]以下描述用于實(shí)施本技術(shù)的方式(下文稱為“實(shí)施例”)。將按下列順序給出描述。
[0051]1.實(shí)施例
[0052]2.修改的示例
[0053]〈1.實(shí)施例 >
[0054][圖像發(fā)送/接收系統(tǒng)]
[0055]圖1圖示用作實(shí)施例的圖像發(fā)送/接收系統(tǒng)10的配置的示例。此圖像發(fā)送/接收系統(tǒng)10包括廣播站100和接收器200。廣播站100通過(guò)廣播波發(fā)送用作容納器(container)的傳輸流TS。
[0056]當(dāng)發(fā)送二維(2D)圖像時(shí)，包括二維圖像數(shù)據(jù)的視頻流容納在傳輸流TS中。在這種情況下，視頻流被發(fā)送為AVC(2D)視頻基本流。
[0057]當(dāng)發(fā)送三維(3D)圖像時(shí)，傳輸流TS中可容納包括用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)和基本視圖以外的預(yù)定數(shù)量視圖的各項(xiàng)圖像數(shù)據(jù)的一個(gè)視頻流。即，這是將子流配置為使得它們由單個(gè)視頻流構(gòu)成的情況。在這種情況下，通過(guò)對(duì)作為一個(gè)畫(huà)面的基本視圖的圖像數(shù)據(jù)和預(yù)定數(shù)量非基本視圖的各項(xiàng)圖像數(shù)據(jù)進(jìn)行編碼所獲得的視頻流被發(fā)送為MVC視頻基本流(基本視頻流)。
[0058]在這種情況下，在傳輸流TS的層中有關(guān)上述基本視頻流的信息所位于的位置處，插入特定的信息(例如，具有關(guān)于各個(gè)視圖的各項(xiàng)圖像數(shù)據(jù)的信息的描述符)。在此實(shí)施例中，將MVC擴(kuò)展描述符(MVC_extension_descriptor)插入節(jié)目映射表下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路的描述符部分。
[0059]通過(guò)以此方式插入MVC擴(kuò)展描述符，接收方能夠識(shí)別出正在進(jìn)行三維(3D)傳輸并且子流配置為使得它們由單個(gè)視頻流構(gòu)成。即，接收方能夠識(shí)別出傳輸流TS容納包括用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)和基本視圖以外的預(yù)定數(shù)量視圖的各項(xiàng)圖像數(shù)據(jù)的基本視頻流。
[0060]另一方面，當(dāng)發(fā)送三維(3D)圖像時(shí)，傳輸流TS中可容納包括用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)的基本視頻流和包括基本視圖以外的預(yù)定數(shù)量視圖的各項(xiàng)圖像數(shù)據(jù)的預(yù)定數(shù)量擴(kuò)展視頻流。即，這是將子流配置為使得它們由多個(gè)流構(gòu)成的情況。
[0061]在這種情況下，通過(guò)對(duì)作為一個(gè)畫(huà)面的基本視圖的圖像數(shù)據(jù)編碼而獲得的視頻流被發(fā)送為MVC基本視圖視頻基本流(基本視頻流)。而且，每個(gè)均通過(guò)對(duì)作為一個(gè)畫(huà)面的非基本視圖的一項(xiàng)圖像數(shù)據(jù)編碼而獲得的預(yù)定項(xiàng)數(shù)的視頻流被發(fā)送為MVC非基本視圖視頻基本流(擴(kuò)展視頻流)。
[0062]在這種情況下，在傳輸流TS的層中有關(guān)每一個(gè)上述預(yù)定數(shù)量擴(kuò)展視頻流的一項(xiàng)信息所位于的位置處，插入特定的信息(例如，具有關(guān)于每個(gè)視圖的圖像數(shù)據(jù)的一項(xiàng)信息的描述符)。在此實(shí)施例中，將MVC擴(kuò)展描述符(MVC_extension_descriptor)插入節(jié)目映射表下對(duì)應(yīng)于擴(kuò)展視頻流的視頻基本環(huán)路的描述符部分。
[0063]通過(guò)以此方式插入MVC擴(kuò)展描述符，接收方能夠識(shí)別出正在進(jìn)行三維(3D)傳輸并且子流配置為使得它們由多個(gè)流構(gòu)成。即，接收方能夠識(shí)別出傳輸流TS容納包括用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)的基本視頻流和包括具有基本視圖以外的預(yù)定數(shù)量視圖的各項(xiàng)圖像數(shù)據(jù)的預(yù)定數(shù)量擴(kuò)展視頻流。
[0064]圖2圖示此MVC擴(kuò)展描述符的結(jié)構(gòu)(Syntax)的示例，盡管整個(gè)描述符的詳細(xì)描述將予以省略。字段"view order index_start"表不第一視圖編號(hào)，"view order index_end"表示最終視圖編號(hào)。通過(guò)這些信息項(xiàng)，可以識(shí)別所有視圖的編號(hào)。字段"View_id"表示與此描述符對(duì)應(yīng)的視圖(非基本視圖)的序數(shù)編號(hào)。此字段"View_id"指定與稍后描述的"NAL unit header"中的"view_id"的內(nèi)容類似的內(nèi)容,并且可以省略為保留位。
[0065]接收器200接收通過(guò)廣播波從廣播站100發(fā)送的傳輸流TS。在此傳輸流TS中，當(dāng)發(fā)送二維(2D)圖像時(shí)，容納包括二維數(shù)據(jù)的AVC(2D)視頻基本流。而且，在此傳輸流TS中，當(dāng)發(fā)送三維(3D)圖像時(shí)，僅容納MVC基本視頻流，或者連同此MVC基本視頻流一起的預(yù)定數(shù)量擴(kuò)展視頻流。
[0066]基于傳輸流TS的層中特定信息的存在和插入位置，接收器200處理此傳輸流TS中容納的視頻流。即，確定進(jìn)行解碼時(shí)緩沖存儲(chǔ)器的配置以及解碼模式和顯示模式。接收器200獲得用于進(jìn)行二維(2D)圖像顯示的圖像數(shù)據(jù)或者用于進(jìn)行三維(3D)圖像顯示的預(yù)定數(shù)量視圖的各項(xiàng)圖像數(shù)據(jù)，然后顯示二維(2D)圖像或(3D)圖像。
[0067]在此實(shí)施例中，接收器200確定節(jié)目映射表下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路(第一 ES環(huán)路)的描述符部分中是否存在MVC擴(kuò)展描述符。然后，當(dāng)在第一 ES環(huán)路中存在描述符時(shí)，接收器200識(shí)別出正在進(jìn)行三維(3D)傳輸，并且此視頻流包括用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)和除了基本視圖以外的預(yù)定數(shù)量視圖的圖像數(shù)據(jù)。在這種情況下，接收器200對(duì)傳輸流TS中容納的對(duì)應(yīng)視頻流解碼，以便獲得用于進(jìn)行三維圖像顯示的多項(xiàng)圖像數(shù)據(jù)，然后顯示三維圖像。
[0068]另一方面，當(dāng)在第一 ES環(huán)路中不存在描述符時(shí)，接收器200確定在傳輸流TS中是否容納擴(kuò)展視頻流。然后，當(dāng)容納擴(kuò)展視頻流時(shí)，接收器200確定節(jié)目映射表下對(duì)應(yīng)于擴(kuò)展視頻流的視頻基本環(huán)路(第二 ES環(huán)路)的描述符部分中是否存在MVC擴(kuò)展描述符。
[0069]然后，當(dāng)在第二 ES環(huán)路中存在描述符時(shí)，接收器200識(shí)別出正在進(jìn)行三維(3D)傳輸，并且此擴(kuò)展視頻流和基本視頻流包括用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)和除了基本視圖之外的預(yù)定數(shù)量視圖的圖像數(shù)據(jù)。在這種情況下，接收器200對(duì)傳輸流TS中容納的多個(gè)視頻流解碼，以便獲得用于進(jìn)行三維圖像顯示的多項(xiàng)圖像數(shù)據(jù)，然后顯示三維圖像。
[0070]進(jìn)一步，當(dāng)傳輸流TS中沒(méi)有容納擴(kuò)展視頻流時(shí)或者在第二 ES環(huán)路中不存在描述符時(shí)，接收器200識(shí)別出正在進(jìn)行二維(2D)傳輸。在這種情況下，接收器200對(duì)傳輸流TS中容納的視頻流解碼，以便獲得二維圖像數(shù)據(jù)，然后進(jìn)行已知的基本的二維圖像顯示。
[0071]"傳輸數(shù)據(jù)產(chǎn)生器的配置的示例"
[0072]圖3圖示廣播站100中產(chǎn)生上述傳輸流的傳輸數(shù)據(jù)產(chǎn)生器110的配置的示例。此傳輸數(shù)據(jù)產(chǎn)生器110包括數(shù)據(jù)提取單元(檔案單元)111、視頻編碼器112、視差編碼器113和音頻編碼器114。此傳輸數(shù)據(jù)產(chǎn)生器110還包括圖形產(chǎn)生單元115、圖形編碼器116和多路復(fù)用器117。
[0073]數(shù)據(jù)記錄介質(zhì)Illa固定至數(shù)據(jù)提取單元111，以使得例如其與數(shù)據(jù)提取單元111可附連和分離。在此數(shù)據(jù)記錄介質(zhì)Illa中，連同要發(fā)送的節(jié)目的圖像數(shù)據(jù)一起，記錄與此圖像數(shù)據(jù)相關(guān)聯(lián)的聲音數(shù)據(jù)。例如，根據(jù)節(jié)目，將圖像數(shù)據(jù)切換到用于進(jìn)行三維(3D)圖像顯示的圖像數(shù)據(jù)或者用于進(jìn)行二維(2D)圖像顯示的圖像數(shù)據(jù)。而且，例如，根據(jù)節(jié)目的內(nèi)容，如廣告的節(jié)目自身，將圖像數(shù)據(jù)切換到用于進(jìn)行三維(3D)圖像顯示的圖像數(shù)據(jù)或者用于進(jìn)行二維(2D)圖像顯示的圖像數(shù)據(jù)。如上面說(shuō)明的，用于進(jìn)行三維圖像顯示的多項(xiàng)圖像數(shù)據(jù)由基本視圖的圖像數(shù)據(jù)和預(yù)定數(shù)量的非基本視圖的圖像數(shù)據(jù)構(gòu)成。
[0074]當(dāng)圖像數(shù)據(jù)是用于進(jìn)行三維圖像顯示的圖像數(shù)據(jù)時(shí)，視差信息也可以記錄在數(shù)據(jù)記錄介質(zhì)Illa上。此視差信息是指示基本視圖和每個(gè)非基本視圖之間視差、深度數(shù)據(jù)等的視差信息(視差矢量)。深度數(shù)據(jù)可以通過(guò)進(jìn)行預(yù)定轉(zhuǎn)換而處理為視差信息。視差信息例如是關(guān)于每個(gè)像素(畫(huà)面要素)的視差信息或者是關(guān)于通過(guò)將視圖(圖像)分割預(yù)定數(shù)量所獲得的每個(gè)分割區(qū)域的視差信息。[0075]通過(guò)調(diào)整要在接收方中基本視圖的圖像和每個(gè)非基本視圖的圖像上疊加的相同疊加信息(如圖形信息)的位置，此視差信息例如用于提供視差。通過(guò)對(duì)接收方中基本視圖的圖像數(shù)據(jù)和每個(gè)非基本視圖的圖像數(shù)據(jù)進(jìn)行內(nèi)插處理(后處理)，此視差信息例如還用于獲得預(yù)定數(shù)量的視圖的顯示圖像數(shù)據(jù)。數(shù)據(jù)記錄介質(zhì)Illa是盤(pán)形記錄介質(zhì)、半導(dǎo)體存儲(chǔ)器等。數(shù)據(jù)提取單元111從數(shù)據(jù)記錄介質(zhì)Illa提取圖像數(shù)據(jù)、聲音數(shù)據(jù)、視差信息等，并且輸出它們。
[0076]視頻編碼器112對(duì)從數(shù)據(jù)提取單元111輸出的圖像數(shù)據(jù)進(jìn)行編碼(例如，MPEG2視頻，MPEG4-AVC (MVC)，HEVC等)，從而獲得編碼的視頻數(shù)據(jù)。而且，通過(guò)使用布置在后級(jí)的流格式器(未示出)，此視頻編碼器112產(chǎn)生視頻基本流。
[0077]S卩，當(dāng)圖像數(shù)據(jù)是二維(2D)圖像數(shù)據(jù)時(shí)，此視頻編碼器112產(chǎn)生包括此二維圖像數(shù)據(jù)的AVC(2D)視頻基本流。另一方面，當(dāng)圖像數(shù)據(jù)是用于進(jìn)行三維(3D)圖像顯示的多個(gè)視圖的圖像數(shù)據(jù)時(shí)，此視頻編碼器112產(chǎn)生包括這多個(gè)視圖的圖像數(shù)據(jù)的一個(gè)或多個(gè)視頻基本流。例如，如果子流配置為使得它們由單個(gè)視頻流構(gòu)成，則視頻編碼器112對(duì)作為一個(gè)畫(huà)面的基本視圖的圖像數(shù)據(jù)和預(yù)定數(shù)量的非基本視圖的圖像數(shù)據(jù)編碼，從而產(chǎn)生MVC視頻基本流(基本視頻流)。
[0078]另一方面，例如，如果子流配置為使得它們由多個(gè)視頻流構(gòu)成，則視頻編碼器112對(duì)作為一個(gè)視頻基本流的基本視圖的圖像數(shù)據(jù)編碼，從而產(chǎn)生MVC基本視圖視頻基本流(基本視頻流)。另外，在這種情況下，視頻編碼器112還對(duì)作為獨(dú)立視頻基本流的預(yù)定數(shù)量的非基本視圖的各項(xiàng)圖像數(shù)據(jù)編碼，從而產(chǎn)生預(yù)定數(shù)量的MVC非基本視圖視頻基本流(擴(kuò)展視頻流)。
[0079]音頻編碼器114對(duì)從數(shù)據(jù)提取單元111輸出的聲音數(shù)據(jù)進(jìn)行編碼(如MPEG2 AudioAAC等),從而廣生首頻基本流。
[0080]視差編碼器113對(duì)從數(shù)據(jù)提取單元111輸出的視差信息進(jìn)行預(yù)定的編碼，從而產(chǎn)生視差信息的基本流。注意，如上面說(shuō)明的，如果視差信息是關(guān)于每個(gè)像素(畫(huà)面要素)的視差信息，則可以將此視差信息處理為像素?cái)?shù)據(jù)。在這種情況下，通過(guò)使用與用于上述圖像數(shù)據(jù)的編碼方法類似的編碼方法，視差編碼器113可以對(duì)視差信息編碼，從而產(chǎn)生視差信息基本流。注意，在此情況下，從數(shù)據(jù)提取單元111輸出的視差信息的編碼可以由視頻編碼器112進(jìn)行，在此情況下，視差信息編碼器113不是必要的。
[0081]圖形產(chǎn)生單元115產(chǎn)生指示要在圖像上疊加的圖形信息(還包括字幕信息)的數(shù)據(jù)(圖形數(shù)據(jù))。圖形編碼器116產(chǎn)生圖形基本流，所述圖形基本流包括通過(guò)圖形產(chǎn)生單元115產(chǎn)生的圖形數(shù)據(jù)。
[0082]圖形信息例如指示標(biāo)志(logo)。字幕信息例如指示字幕。此圖形數(shù)據(jù)是位圖數(shù)據(jù)。指示圖像上的疊加位置的偏移信息被添加至此圖形數(shù)據(jù)。此偏移信息例如指示從圖像的左上部的原點(diǎn)到疊加位置處圖形信息的左上部的像素的距離的垂直方向上和水平方向上的偏移值。注意，用于發(fā)送作為位圖數(shù)據(jù)的字幕數(shù)據(jù)的標(biāo)準(zhǔn)通過(guò)DVB標(biāo)準(zhǔn)化為作為歐洲數(shù)字廣播標(biāo)準(zhǔn)的"DVB_Subtitling"，并加以利用。
[0083]多路復(fù)用器117對(duì)視頻編碼器112、視差編碼器113、音頻編碼器114和圖形編碼器116產(chǎn)生的基本流進(jìn)行分組和多路復(fù)用，從而產(chǎn)生傳輸流TS。當(dāng)發(fā)送二維(2D)圖像時(shí)，該傳輸流TS容納包括二維圖像數(shù)據(jù)的AVC (2D)視頻基本流。另一方面，當(dāng)發(fā)送三維(3D)圖像時(shí)，此傳輸流TS容納MVC基本子流和與此MVC基本子流一起的預(yù)定數(shù)量的擴(kuò)展子流。
[0084]當(dāng)發(fā)送三維(3D)圖像時(shí)，多路復(fù)用器117將特定信息插入至傳輸流TS的層的特定位置。在這種情況下，該特定位置依據(jù)子流配置為使得它們由單個(gè)流還是多個(gè)流構(gòu)成而改變。
[0085]如果子流配置為使得它們由單個(gè)視頻流構(gòu)成，則在傳輸流TS的層中有關(guān)上述基本視頻流的信息位于的位置處，插入特定的信息(例如，具有關(guān)于各個(gè)視圖的圖像數(shù)據(jù)的信息的描述符)。在此實(shí)施例中，多路復(fù)用器117將MVC擴(kuò)展描述符(參見(jiàn)圖2)插入至節(jié)目映射表下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路的描述符部分。
[0086]圖4(a)示意性圖示與基本視頻流相關(guān)聯(lián)地以此方式插入MVC擴(kuò)展描述符(MVC_extension_descriptor)。在此不例中，具有流類型(Stream type) " OxlB"的基本視頻流包括基本視圖圖像數(shù)據(jù)的編碼數(shù)據(jù)和一項(xiàng)非基本視圖圖像數(shù)據(jù)的編碼數(shù)據(jù)。基本視圖圖像數(shù)據(jù)的編碼數(shù)據(jù)由"SPS-Coded Slice"構(gòu)成，而非基本視圖圖像數(shù)據(jù)的編碼數(shù)據(jù)由"Subset SPS-Coded Slice"構(gòu)成。
[0087]而且，如果子流配置為使得它們由多個(gè)流構(gòu)成，則在傳輸流TS的層中有關(guān)每個(gè)上述預(yù)定數(shù)量的擴(kuò)展視頻流的一項(xiàng)信息所位于的位置處，插入特定的信息(例如，具有關(guān)于每個(gè)視圖的圖像數(shù)據(jù)的一項(xiàng)信息的描述符)。在此實(shí)施例中，將MVC擴(kuò)展描述符(參見(jiàn)圖2)插入至節(jié)目映射表下對(duì)應(yīng)于擴(kuò)展視頻流的視頻基本環(huán)路的描述符部分。
[0088]圖4(b)示意性圖示與擴(kuò)展視頻流相關(guān)聯(lián)地以此方式插入MVC擴(kuò)展描述符(MVC_extension_descriptor)。在此不例中，具有流類型(Stream type) " OxlB"的基本視頻流只包括基本視圖圖像數(shù)據(jù)的編碼數(shù)據(jù)。此基本視圖圖像數(shù)據(jù)的編碼數(shù)據(jù)由"SPS-CodedSlice"構(gòu)成。另外，在此示例中，具有流類型(Stream type)" 0x20"的擴(kuò)展視頻流只包括非基本視圖圖像數(shù)據(jù)的編碼數(shù)據(jù)。此非基本視圖圖像數(shù)據(jù)的編碼數(shù)據(jù)由"SubsetSPS-Coded Slice"構(gòu)成。
[0089]圖5圖示NAL單元首標(biāo)(NAL單元首標(biāo)MVC擴(kuò)展)的配置(Syntax,句法)的示例。字段"View_id"指示對(duì)應(yīng)視圖的序數(shù)編號(hào)。即，當(dāng)進(jìn)行解碼時(shí)，接收方能夠基于關(guān)于此字段"View_id"的字段信息，識(shí)別出每一項(xiàng)編碼數(shù)據(jù)對(duì)應(yīng)于分組中的哪一項(xiàng)視圖圖像數(shù)據(jù)。
[0090]將簡(jiǎn)要地描述圖3中所示的傳輸數(shù)據(jù)產(chǎn)生器111的操作。將數(shù)據(jù)提取單元111輸出的圖像數(shù)據(jù)(用于進(jìn)行二維圖像顯示的一項(xiàng)圖像數(shù)據(jù)或者用于進(jìn)行三維圖像顯示的多個(gè)視圖的圖像數(shù)據(jù))提供給視頻編碼器112。在此視頻編碼器112中，對(duì)此圖像數(shù)據(jù)進(jìn)行編碼處理(例如，MPEG2video, MPEG4-AVC (MVC)，HEVC等)，并且產(chǎn)生包括編碼的視頻數(shù)據(jù)的視頻基本流，然后將其輸出至多路復(fù)用器117。
[0091]S卩，在視頻編碼器112中，在用于進(jìn)行二維圖像顯示的圖像數(shù)據(jù)的情況下，例如產(chǎn)生包括此圖像數(shù)據(jù)的AVC(2D)視頻基本流。另一方面，在用于進(jìn)行三維圖像顯示的多個(gè)視圖的圖像數(shù)據(jù)的情況下，產(chǎn)生包括這多個(gè)視圖的圖像數(shù)據(jù)的一個(gè)或多個(gè)視頻基本流。
[0092]例如，當(dāng)將子流配置為使得它們由單個(gè)視頻流構(gòu)成時(shí)，產(chǎn)生包括基本視圖的圖像數(shù)據(jù)和預(yù)定數(shù)量的非基本視圖的圖像數(shù)據(jù)的MVC視頻基本流(基本視頻流)。而且，例如，當(dāng)將子流配置為使得它們由多個(gè)流構(gòu)成時(shí)，產(chǎn)生包括基本視圖的圖像數(shù)據(jù)的MVC基本視圖視頻基本流(基本視頻流)。而且，在這種情況下還產(chǎn)生包括預(yù)定數(shù)量的非基本視圖的每一項(xiàng)圖像數(shù)據(jù)的MVC非基本視圖視頻基本流(擴(kuò)展視頻流)。[0093]而且，當(dāng)從數(shù)據(jù)提取單元111輸出用于進(jìn)行三維圖像顯示的多個(gè)視圖的各項(xiàng)圖像數(shù)據(jù)時(shí)，還從此數(shù)據(jù)提取單元111輸出與各個(gè)視圖的每一項(xiàng)圖像數(shù)據(jù)對(duì)應(yīng)的視差信息。將此視差信息提供給視差編碼器113。在視差編碼器113中，對(duì)視差信息進(jìn)行預(yù)定的編碼處理，從而產(chǎn)生包括編碼數(shù)據(jù)的視差基本流。將此視差基本流提供給多路復(fù)用器117。
[0094]而且，當(dāng)從數(shù)據(jù)提取單元111輸出圖像數(shù)據(jù)時(shí)，還從此數(shù)據(jù)提取單元111輸出與該圖像數(shù)據(jù)相關(guān)聯(lián)的聲音數(shù)據(jù)。將此聲音數(shù)據(jù)提供給音頻編碼器114。在此音頻編碼器114中，對(duì)聲音數(shù)據(jù)進(jìn)行諸如MPEG2Audio AAC之類的編碼處理，從而產(chǎn)生包括編碼的音頻數(shù)據(jù)的音頻基本流。將此音頻基本流提供給多路復(fù)用器117。
[0095]根據(jù)從數(shù)據(jù)提取單元111輸出的圖像數(shù)據(jù)，在圖形產(chǎn)生單元115中，產(chǎn)生要在圖像(視圖)上疊加的圖形信息(包括字幕信息)的數(shù)據(jù)(圖形數(shù)據(jù))。將此圖形數(shù)據(jù)提供給圖形編碼器116。在圖形編碼器116中，對(duì)此圖形數(shù)據(jù)進(jìn)行預(yù)定的編碼處理，從而產(chǎn)生包括編碼數(shù)據(jù)的圖形基本流。將此圖形基本流提供給多路復(fù)用器117。
[0096]在多路復(fù)用器117中，從各個(gè)編碼器提供的基本流被分組和多路復(fù)用，從而產(chǎn)生傳輸流TS。當(dāng)發(fā)送二維(2D)圖像時(shí)，此傳輸流TS中容納包括二維圖像數(shù)據(jù)的AVC(2D)視頻基本流。另一方面，當(dāng)發(fā)送三維(3D)圖像時(shí)，此傳輸流TS中容納MVC基本子流和連同此MVC基本子流一起的預(yù)定數(shù)量的擴(kuò)展子流。
[0097]進(jìn)一步，在多路復(fù)用器117中，當(dāng)發(fā)送三維(3D)圖像并且如果將子流配置為使得它們由單個(gè)視頻流構(gòu)成時(shí)，將MVC擴(kuò)展描述符(參見(jiàn)圖2)插入至節(jié)目映射表下與基本視頻流對(duì)應(yīng)的視頻基本環(huán)路的描述符部分。另一方面，在多路復(fù)用器117中，當(dāng)發(fā)送三維(3D)圖像并且如果將子流配置為使得它們由多個(gè)流構(gòu)成時(shí)，將MVC擴(kuò)展描述符(參見(jiàn)圖2)插入至節(jié)目映射表下與擴(kuò)展視頻流對(duì)應(yīng)的視頻基本環(huán)路的描述符部分。
[0098]圖6圖示當(dāng)發(fā)送二維(2D)圖像時(shí)傳輸流TS的配置的示例。在配置的此示例中，在傳輸流TS中，容納包括用于進(jìn)行二維(2D)圖像顯示的圖像數(shù)據(jù)的視頻基本流的PES分組"Video PESl "。注意，在配置的此示例中，為了繪圖的簡(jiǎn)單表示，未示出其他的PES分組。
[0099]而且，在傳輸流TS中，PMT (Program Map Table,節(jié)目映射表)被容納作為PSI (Program Specific Information,節(jié)目特定信息)。此PSI是指示傳輸流TS中容納的每個(gè)基本流屬于哪個(gè)節(jié)目的信息。另外，在傳輸流TS中，用于進(jìn)行事件的管理的EIT(EventInformation Table,事件信息表)被容納作為 SI (Serviced Information,服務(wù)信息)。
[0100]在PMT中，存在用于描述有關(guān)整個(gè)節(jié)目的信息的節(jié)目描述符(ProgramDescriptor)。此外，在此PMT中，存在具有有關(guān)每個(gè)基本流的信息的基本環(huán)路。在配置的此示例中，存在與PES分組"Video PES1"對(duì)應(yīng)的視頻基本環(huán)路。在此視頻基本環(huán)路中，布置諸如分組標(biāo)識(shí)符(PID)和視頻基本流的流類型(Stream_Type)之類的信息，并且還布置了用于描述有關(guān)此視頻基本流的信息的描述符，盡管其沒(méi)有示出。
[0101]圖7圖示當(dāng)發(fā)送三維(3D)圖像時(shí)傳輸流TS的配置的示例。此配置示例示出將子流配置為使得它們由單個(gè)視頻流構(gòu)成的情況(1-PID情況)。在此配置示例中，在傳輸流TS中，容納包括基本視圖的圖像數(shù)據(jù)和預(yù)定數(shù)量的非基本視圖的圖像數(shù)據(jù)的MVC視頻基本流(基本視頻流)的PES分組"Video PESl "。注意，在此配置示例中，為了繪圖的簡(jiǎn)單表示，未示出其他的PES分組。[0102]在PMT中，存在與PES分組"Video PESl "對(duì)應(yīng)的視頻基本環(huán)路。在此視頻基本環(huán)路中，布置諸如分組標(biāo)識(shí)符(PID)和視頻基本流的流類型(StreamJYpe)之類的信息。然后作為用于描述有關(guān)此視頻基本流的信息的描述符之一，將MVC擴(kuò)展描述符(MVC_extension_descriptor)(如圖2中示出的)插入至此視頻基本環(huán)路。
[0103]圖8圖示當(dāng)發(fā)送三維(3D)圖像時(shí)傳輸流TS的配置的示例。此配置示例示出將子流配置為使得它們由多個(gè)流構(gòu)成的情況，這里為它們由兩個(gè)流構(gòu)成的情況(2-PID情況)。在此配置示例中，在傳輸流TS中，容納包括基本視圖的圖像數(shù)據(jù)的MVC視頻基本流(基本子流)的PES分組"Video PES1"。此外，在此配置示例中，在傳輸流TS中，容納包括非基本視圖的圖像數(shù)據(jù)的MVC視頻基本流(擴(kuò)展子流)的PES分組"Video PES2"。注意，在此配置示例中，為了繪圖的簡(jiǎn)單表示，未示出其他的PES分組。
[0104]在PMT中，存在與PES分組"Video PESl "對(duì)應(yīng)的視頻基本環(huán)路。在此視頻基本環(huán)路中，布置諸如分組標(biāo)識(shí)符(PID)和視頻基本流的流類型(StreamJYpe)之類的信息，并且還布置了用于描述有關(guān)此視頻基本流的信息的描述符，盡管其沒(méi)有示出。
[0105]在PMT中，還存在與PES分組"Video PES2"對(duì)應(yīng)的視頻基本環(huán)路。在此視頻基本環(huán)路中，布置諸如分組標(biāo)識(shí)符(PID)和視頻基本流的流類型(StreamJYpe)之類的信息。然后，作為描述有關(guān)此視頻基本流的信息的描述符之一，將MVC擴(kuò)展描述符(MVC_extenSion_descriptor)(如圖2中示出的)插入至此視頻基本環(huán)路。
[0106]"接收器的配置的示例"
[0107]圖9示出接收器200的配置的示例。此接收器200包括CPU 201、閃存ROM 202、DRAM 203、內(nèi)部總線204、遙控器接收單元205和遙控器發(fā)送器206。此接收器200還包括容納器緩沖器213、解多路 復(fù)用器214、編碼緩沖器215、視頻解碼器216、子流視頻緩沖器
217-1，? ? ?，217-N,伸縮器 218-1，? ? ?，218-N 和 3D 視圖顯示處理單元 219。
[0108]接收器200還包括編碼緩沖器221、視差解碼器222、視差緩沖器223和視差信息轉(zhuǎn)換單元224。接收器200還包括編碼緩沖器225、圖形解碼器226、像素緩沖器227、伸縮器228和圖形平移器229。接收器200還包括編碼緩沖器230、音頻解碼器231和聲道混合單元232。
[0109]CPU 201控制接收器200的各個(gè)元件的操作。閃存ROM 202在其之中存儲(chǔ)控制軟件并保留數(shù)據(jù)。DRAM 203形成CPU 201的工作區(qū)。CPU 201加載從閃存ROM 202讀取至DRAM 203的軟件和數(shù)據(jù)，并且啟動(dòng)軟件，從而控制接收器200的各個(gè)元件。遙控接收單元205接收從遙控發(fā)送器206發(fā)送的遙控信號(hào)(遙控代碼)，并且將遙控信號(hào)提供給CPU 201。CPU 201基于此遙控代碼控制接收器200的各個(gè)元件。CPU 201、閃存ROM 202和DRAM 203連接至內(nèi)部總線204。
[0110]容納器緩沖器213臨時(shí)存儲(chǔ)由數(shù)字調(diào)諧器等接收到的傳輸流TS。當(dāng)發(fā)送二維(2D)圖像時(shí)，此傳輸流TS例如包含AVC(2D)視頻基本流。在此流中，容納用于進(jìn)行二維圖像顯示的圖像數(shù)據(jù)。
[0111]當(dāng)發(fā)送三維(3D)圖像時(shí)，此傳輸流TS例如容納MVC基本子流和連同此MVC基本子流一起的預(yù)定數(shù)量的擴(kuò)展子流。如果將子流配置為使得它們由單個(gè)視頻流構(gòu)成，則在單個(gè)MVC視頻流中容納基本視圖的圖像數(shù)據(jù)和預(yù)定數(shù)量的非基本視圖的圖像數(shù)據(jù)。另一方面，當(dāng)將子流配置為使得它們由多個(gè)流構(gòu)成時(shí)，在此MVC基本子流中容納基本視圖的圖像數(shù)據(jù)，并且在預(yù)定數(shù)量的擴(kuò)展子流的每個(gè)中容納非基本視圖的圖像數(shù)據(jù)。
[0112]而且，當(dāng)發(fā)送三維(3D)圖像時(shí)，將特定的消息插入至此傳輸流TS的層中有關(guān)基本視頻流或擴(kuò)展視頻流的信息所位于的位置。在此實(shí)施例中，當(dāng)將子流配置為使得它們由單個(gè)視頻流構(gòu)成時(shí)，將MVC擴(kuò)展描述符插入至PMT下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路的描述符部分。當(dāng)將子流配置為使得它們由多個(gè)流構(gòu)成時(shí)，將MVC擴(kuò)展描述符插入至PMT下對(duì)應(yīng)于擴(kuò)展視頻流的視頻基本環(huán)路的描述符部分。
[0113]解多路復(fù)用器214從容納器緩沖器213中臨時(shí)存儲(chǔ)的傳輸流TS提取視頻、視差和音頻流。當(dāng)發(fā)送三維(3D)圖像時(shí)，解多路復(fù)用器214還從此傳輸流TS提取上述MVC擴(kuò)展描述符，并且將此MVC擴(kuò)展描述符發(fā)送至CPU 201。
[0114]CPU 201能夠依據(jù)此MVC擴(kuò)展描述符的存在或不存在，確定進(jìn)行三維(3D)圖像傳輸還是二維(2D)圖像傳輸。另外，當(dāng)將MVC擴(kuò)展描述符插入至對(duì)應(yīng)于MVC基本視頻流的視頻基本環(huán)路時(shí)，CPU 201能夠確定子流被配置為使得它們由單個(gè)視頻流構(gòu)成。另一方面，當(dāng)將MVC擴(kuò)展描述符插入至對(duì)應(yīng)于MVC擴(kuò)展視頻流的視頻基本環(huán)路時(shí)，CPU 201能夠確定子流被配置為使得它們由多個(gè)流構(gòu)成。
[0115]CPU 201基于上述MVC擴(kuò)展描述符的存在和插入位置進(jìn)行控制，使得編碼緩沖器215的管理、視頻解碼器216的操作等可以匹配接收到的圖像數(shù)據(jù)。
[0116]編碼緩沖器215臨時(shí)存儲(chǔ)解多路復(fù)用器214提取出的一個(gè)或多個(gè)視頻流。在編碼緩沖器215中，依據(jù)進(jìn)行二維(2D)圖像傳輸還是三維(3D)圖像傳輸，緩沖器的管理配置的系統(tǒng)不同。而且，在編碼緩沖器215中，即使當(dāng)進(jìn)行三維(3D)圖像傳輸時(shí)，依據(jù)子流被配置為使得它們由單個(gè)流還是多個(gè)流構(gòu)成，緩沖器的管理配置的系統(tǒng)不同。
[0117]S卩，當(dāng)從解多路復(fù)用器214提供編碼數(shù)據(jù)(子流)作為具有單個(gè)PID值的一個(gè)基本流時(shí)，總共只進(jìn)行一次寫(xiě)/讀地址管理。相比之下，當(dāng)從解多路復(fù)用器214提供編碼數(shù)據(jù)(子流)作為具有不同PID值的多個(gè)基本流時(shí)，針對(duì)具有各個(gè)PID的每一項(xiàng)編碼數(shù)據(jù)，獨(dú)立地進(jìn)行寫(xiě)/讀地址管理。
[0118]視頻解碼器216對(duì)編碼緩沖器215中存儲(chǔ)的視頻基本流進(jìn)行解碼處理，從而獲得圖像數(shù)據(jù)。在這種情況下，當(dāng)發(fā)送二維(2D)圖像時(shí)，通過(guò)解碼器對(duì)AVC(2D)視頻基本流進(jìn)行解碼處理，從而獲得用于進(jìn)行二維(2D)圖像顯示的圖像數(shù)據(jù)。
[0119]相比之下，當(dāng)發(fā)送三維(3D)圖像并且如果將子流配置為使得它們由單個(gè)視頻流構(gòu)成時(shí)，按照如下那樣進(jìn)行解碼處理。即，對(duì)于包括多個(gè)視圖的各項(xiàng)圖像數(shù)據(jù)的編碼數(shù)據(jù)的一個(gè)MVC視頻流，解碼器216基于"NAL unit header"的” view_id”，切換從緩沖器215提供給解碼器216的待處理分組，然后對(duì)每一項(xiàng)圖像數(shù)據(jù)進(jìn)行解碼處理。作為其結(jié)果，獲得用于進(jìn)行三維(3D)圖像顯示的多個(gè)視圖的多項(xiàng)圖像數(shù)據(jù)。
[0120]另一方面，當(dāng)將子流配置為使得它們由多個(gè)流構(gòu)成時(shí)，按照如下那樣進(jìn)行解碼處理。即，視頻解碼器216基于從解多路復(fù)用器214接收到的NAL分組的"NAL unit header"的"View_id"，切換要存儲(chǔ)在緩沖器215中的數(shù)據(jù)。此后，與單個(gè)視圖(視圖)的解碼類似地進(jìn)行來(lái)自緩沖器215的壓縮數(shù)據(jù)的讀取和解碼器216的處理。通過(guò)使用相關(guān)聯(lián)的解碼器，對(duì)包括基本視圖的圖像數(shù)據(jù)的編碼數(shù)據(jù)的MVC基本子流和包括非基本視圖的圖像數(shù)據(jù)的編碼數(shù)據(jù)的預(yù)定數(shù)量的MVC擴(kuò)展子流進(jìn)行解碼處理。作為其結(jié)果，獲得用于進(jìn)行三維(3D)圖像顯示的多個(gè)視圖的多項(xiàng)圖像數(shù)據(jù)。[0121]子流視頻緩沖器217-1，217-N每一個(gè)均臨時(shí)存儲(chǔ)視頻解碼器216獲得的、用于進(jìn)行二維(2D)圖像顯示的圖像數(shù)據(jù)或者用于進(jìn)行三維(3D)圖像顯示的多個(gè)視圖的多項(xiàng)圖像數(shù)據(jù)。這里，在3D的情況下，N的最小值為2。伸縮器218-1，218-N每一個(gè)均將從子流視頻緩沖器217-1，217-N輸出的各個(gè)視圖的多項(xiàng)圖像數(shù)據(jù)的輸出分辨率的級(jí)別調(diào)整至預(yù)定級(jí)別的分辨率。
[0122]編碼緩沖器221臨時(shí)存儲(chǔ)解多路復(fù)用器214提取出的視差流。視差解碼器222進(jìn)行與上述傳輸數(shù)據(jù)產(chǎn)生器110的視差編碼器113 (參見(jiàn)圖3)進(jìn)行的處理相反的處理。SP，視差解碼器222對(duì)編碼緩沖器221中存儲(chǔ)的視差流進(jìn)行解碼處理，從而獲得與各個(gè)視圖的圖像數(shù)據(jù)的每一項(xiàng)對(duì)應(yīng)的視差信息。視差緩沖器223臨時(shí)存儲(chǔ)視差解碼器222獲得的視差信息。
[0123]視差信息轉(zhuǎn)換單元224基于視差緩沖器223中存儲(chǔ)的視差信息，產(chǎn)生關(guān)于每個(gè)像素匹配伸縮的圖像數(shù)據(jù)的尺寸的視差信息。例如，如果發(fā)送的視差信息是關(guān)于每個(gè)塊的信息，則其被轉(zhuǎn)換為關(guān)于每個(gè)像素的視差信息?？商鎿Q地，例如，如果發(fā)送的視差信息是關(guān)于每個(gè)像素的信息但是不匹配伸縮的圖像數(shù)據(jù)的尺寸，則其以適當(dāng)?shù)姆绞缴炜s。或者，當(dāng)在接收器中進(jìn)行圖形的疊加等時(shí)，利用關(guān)于疊加位置處的塊的視差信息。
[0124]編碼緩沖器225臨時(shí)存儲(chǔ)解多路復(fù)用器214提取出的圖形流。圖形解碼器226進(jìn)行與上述傳輸數(shù)據(jù)產(chǎn)生器110的圖形編碼器116 (參見(jiàn)圖3)進(jìn)行的處理相反的處理。SP，圖形解碼器226對(duì)編碼緩沖器225中存儲(chǔ)的圖形流進(jìn)行解碼處理，從而獲得圖形數(shù)據(jù)(包括字幕數(shù)據(jù))。圖形解碼器226基于此圖形數(shù)據(jù)產(chǎn)生要疊加在視圖(圖像)上的圖形位圖數(shù)據(jù)。
[0125]像素緩沖器227臨時(shí)存儲(chǔ)圖形解碼器226產(chǎn)生的圖形位圖數(shù)據(jù)。伸縮器228將像素緩沖器227中存儲(chǔ)的位圖數(shù)據(jù)圖形的尺寸調(diào)整為伸縮的圖像數(shù)據(jù)的尺寸。
[0126]圖形平移器229基于視差信息轉(zhuǎn)換單元224獲得的視差信息，對(duì)經(jīng)歷尺寸調(diào)整的圖形位圖數(shù)據(jù)進(jìn)行平移處理。然后，圖形平移器229產(chǎn)生要在從3D視圖顯示處理單元219輸出的各個(gè)視圖的每一項(xiàng)圖像數(shù)據(jù)上疊加的圖形位圖數(shù)據(jù)。
[0127]當(dāng)發(fā)送二維(2D)圖像并且如果進(jìn)行二維(2D)圖像顯示時(shí)，3D視圖顯示處理單元219將從圖形平移器229輸出的圖形位圖數(shù)據(jù)疊加在例如通過(guò)伸縮器218-1輸入的用于進(jìn)行二維(2D)圖像顯示的伸縮的圖像數(shù)據(jù)上，并且將圖像數(shù)據(jù)輸出至顯示器。
[0128]另一方面，當(dāng)發(fā)送三維(3D)圖像并且如果進(jìn)行立體三維圖像顯示時(shí)，3D視圖顯示處理單元219將從圖形平移器229輸出的經(jīng)歷平移處理的圖形位圖數(shù)據(jù)分別疊加在例如通過(guò)伸縮器218-1和218-2輸入的伸縮的左眼圖像數(shù)據(jù)和縮放的右眼圖像數(shù)據(jù)的每一個(gè)上，并且將圖像數(shù)據(jù)輸出至顯示器。
[0129]另一方面，當(dāng)發(fā)送三維(3D)圖像并且如果進(jìn)行多視圖三維圖像顯示時(shí)，基于視差數(shù)據(jù)轉(zhuǎn)換單元224獲得的視圖間視差數(shù)據(jù)，從例如分別通過(guò)伸縮器218-1到218-N輸入的各個(gè)視圖的伸縮的圖像數(shù)據(jù)的各項(xiàng)當(dāng)中，3D視圖顯示處理單元219進(jìn)行視圖間內(nèi)插和預(yù)定數(shù)量視圖的圖像數(shù)據(jù)的各項(xiàng)的合成，并且將圖像數(shù)據(jù)輸出至顯示器。然后，在這種情況下，3D視圖顯示處理單元219進(jìn)一步將從圖形平移器229輸出的經(jīng)歷平移處理的圖形位圖數(shù)據(jù)疊加在各個(gè)視圖的圖像數(shù)據(jù)的內(nèi)插和合成項(xiàng)的每一個(gè)上，并且將圖像數(shù)據(jù)輸出至顯示器。
[0130]編碼緩沖器230臨時(shí)存儲(chǔ)解多路復(fù)用器214提取出的音頻流。音頻解碼器231進(jìn)行與上述傳輸數(shù)據(jù)產(chǎn)生器110的音頻編碼器114 (參見(jiàn)圖3)進(jìn)行的處理相反的處理。SP，音頻解碼器231對(duì)編碼緩沖器230中存儲(chǔ)的音頻流進(jìn)行解碼處理，從而獲得聲音數(shù)據(jù)。聲道混合單元232針對(duì)音頻解碼器231獲得的聲音數(shù)據(jù)，生成用于例如實(shí)現(xiàn)5.1聲道環(huán)繞的每個(gè)聲道的聲音數(shù)據(jù)，并且輸出聲音數(shù)據(jù)。
[0131]將簡(jiǎn)要描述圖9中所示的接收器200的操作。將數(shù)字調(diào)諧器等接收到的傳輸流TS臨時(shí)存儲(chǔ)在容納器緩沖器213中。當(dāng)發(fā)送二維(2D)圖像時(shí)，在此傳輸流TS中，例如容納AVC(2D)視頻基本流。另一方面，當(dāng)發(fā)送三維(3D)圖像時(shí)，在此傳輸流TS中，例如僅容納MVC基本視頻流，或者連同此MVC基本視頻流一起的預(yù)定數(shù)量的擴(kuò)展視頻流。
[0132]在解多路復(fù)用器214中，從容納器緩沖器213中臨時(shí)存儲(chǔ)的傳輸流TS提取視頻、視差和音頻流。而且，在解多路復(fù)用器214中，當(dāng)發(fā)送三維(3D)圖像時(shí)，從此傳輸流TS提取MVC擴(kuò)展描述符，并將其發(fā)送至CPU 201。
[0133]在CPU 201中，基于此MVC擴(kuò)展描述符的存在和插入位置，控制編碼緩沖器215的管理、視頻解碼器216的操作等，使得它們可匹配二維(2D)圖像傳輸或三維(3D)圖像傳輸。
[0134]將解多路復(fù)用器214提取出的一個(gè)或多個(gè)視頻基本流提供給編碼緩沖器215，并且臨時(shí)存儲(chǔ)在其中。在視頻解碼器216中，對(duì)編碼緩沖器215中存儲(chǔ)的視頻基本流進(jìn)行解碼處理，從而獲得圖像數(shù)據(jù)。
[0135]在這種情況下，在視頻解碼器216中，當(dāng)發(fā)送二維(2D)圖像時(shí)，通過(guò)使用一個(gè)解碼器對(duì)AVC(2D)視頻基本流進(jìn)行解碼處理，從而獲得用于進(jìn)行二維(2D)圖像顯示的圖像數(shù)據(jù)。
[0136]此外，在這種情況下，當(dāng)發(fā)送三維(3D)圖像并且如果子流配置為使得它們由單個(gè)視頻流構(gòu)成時(shí)，通過(guò)按照如下那樣進(jìn)行解碼處理，獲得用于進(jìn)行三維(3D)圖像顯示的多個(gè)視圖的多項(xiàng)圖像數(shù)據(jù)。即，針對(duì)包括多個(gè)視圖的多項(xiàng)圖像數(shù)據(jù)的編碼數(shù)據(jù)的MVC基本視頻流，解碼器216基于"NAL unit header"的"viewjd"，切換從緩沖器215提供給解碼器216的待處理分組，然后對(duì)每一項(xiàng)圖像數(shù)據(jù)進(jìn)行解碼處理。
[0137]此外，在這種情況下，當(dāng)發(fā)送三維(3D)圖像并且如果將子流配置為使得它們由多個(gè)流構(gòu)成時(shí)，通過(guò)按照如下那樣進(jìn)行解碼處理，獲得用于進(jìn)行三維(3D)圖像顯示的多個(gè)視圖的多項(xiàng)圖像數(shù)據(jù)。即，基于從解多路復(fù)用器214接收到的NAL分組的"NAL unitheader"的"View_id"切換要存儲(chǔ)在緩沖器215中的數(shù)據(jù)。此后，與單個(gè)視圖(視圖)的解碼的類似地進(jìn)行來(lái)自緩沖器215的壓縮數(shù)據(jù)的讀取和解碼器216的處理。通過(guò)使用相關(guān)聯(lián)的解碼器，對(duì)包括基本視圖的圖像數(shù)據(jù)的編碼數(shù)據(jù)的MVC基本子流和包括非基本視圖的圖像數(shù)據(jù)的編碼數(shù)據(jù)的預(yù)定數(shù)量MVC擴(kuò)展子流進(jìn)行解碼處理。
[0138]將視頻解碼器216獲得的用于進(jìn)行二維(2D)圖像顯示的圖像數(shù)據(jù)或用于進(jìn)行三維(3D)圖像顯示的多個(gè)視圖的多項(xiàng)圖像數(shù)據(jù)提供至子流視頻緩沖器217-1，...，217-N，并且臨時(shí)存儲(chǔ)在其中。然后，圖像數(shù)據(jù)經(jīng)伸縮器218-1，218-N調(diào)整為具有預(yù)定級(jí)別的分辨率，并提供給3D視圖顯示處理單元219。
[0139]進(jìn)一步，將解多路復(fù)用器214提取出的視差數(shù)據(jù)流提供給編碼緩沖器221，并且臨時(shí)存儲(chǔ)在其中。在視差解碼器222中，進(jìn)行關(guān)于視差數(shù)據(jù)流的解碼處理，從而獲得與每個(gè)視圖的圖像數(shù)據(jù)對(duì)應(yīng)的視差信息。將此視差信息提供至視差緩沖器223，并臨時(shí)存儲(chǔ)在其中。
[0140]在視差信息轉(zhuǎn)換單元224中，基于視差緩沖器223中存儲(chǔ)的視差信息，產(chǎn)生關(guān)于匹配伸縮的圖像數(shù)據(jù)的尺寸的每個(gè)像素的視差信息。在這種情況下，如果視差解碼器222獲得的視差信息是關(guān)于每個(gè)塊的信息，則其被轉(zhuǎn)換為關(guān)于每個(gè)像素的視差信息?；蛘?，當(dāng)在接收器中進(jìn)行圖形的疊加等時(shí)，利用關(guān)于疊加位置處的塊的視差信息。可替換地，在這種情況下，如果視差解碼器222獲得的視差信息是關(guān)于每個(gè)像素但是不匹配伸縮的圖像數(shù)據(jù)的尺寸的信息，則其以適當(dāng)?shù)姆绞缴炜s。將此視差信息提供給3D視圖顯示處理單元219和圖形平移器229。
[0141]而且，將解多路復(fù)用器214提取出的圖形流提供給編碼緩沖器225，并且臨時(shí)存儲(chǔ)在其中。在圖形解碼器226中，對(duì)編碼緩沖器225中存儲(chǔ)的圖形流進(jìn)行解碼處理，從而獲得圖形數(shù)據(jù)(包括字幕數(shù)據(jù))。在圖形解碼器226中，基于此圖形數(shù)據(jù)，還產(chǎn)生要在視圖(圖像)上疊加的圖形位圖數(shù)據(jù)。
[0142]將此圖形位圖數(shù)據(jù)提供給像素緩沖器227，并且臨時(shí)存儲(chǔ)在其中。在伸縮器228中，將像素緩沖器227中存儲(chǔ)的圖形位圖數(shù)據(jù)的尺寸調(diào)整為伸縮的圖像數(shù)據(jù)的尺寸。
[0143]在圖形平移器229中，基于視差信息轉(zhuǎn)換單元224獲得的視差信息，對(duì)經(jīng)歷尺寸調(diào)整的圖形位圖數(shù)據(jù)進(jìn)行平移處理。然后，在此圖形平移器229中，產(chǎn)生要在從3D視圖顯示處理單元219輸出的各個(gè)視圖的每項(xiàng)圖像數(shù)據(jù)上疊加的圖形位圖數(shù)據(jù)。將此位圖數(shù)據(jù)提供給3D視圖顯示處理單元219。
[0144]在3D視圖顯示單元219中，當(dāng)發(fā)送二維(2D)圖像并且如果進(jìn)行二維(2D)圖像顯示時(shí)，進(jìn)行如下的處理。即，將從圖形平移器229輸出的圖形位圖數(shù)據(jù)疊加在例如通過(guò)伸縮器218-1輸入的用于進(jìn)行二維(2D)圖像顯示的伸縮的圖像數(shù)據(jù)上，并且將圖像數(shù)據(jù)輸出至顯示器。
[0145]另一方面，在3D視圖顯示處理單元219中，當(dāng)發(fā)送三維(3D)圖像并且如果進(jìn)行立體三維圖像顯示時(shí)，進(jìn)行如下的處理。即，將從圖形平移器229輸出的經(jīng)歷平移處理的圖形位圖數(shù)據(jù)疊加在例如分別通過(guò)伸縮器218-1和218-2輸入的伸縮的左眼圖像數(shù)據(jù)和伸縮的右眼圖像數(shù)據(jù)的每一個(gè)上，并且將圖像數(shù)據(jù)輸出至顯示器。
[0146]另一方面，在3D視圖顯示處理單元219中，當(dāng)發(fā)送三維(3D)圖像并且如果進(jìn)行多視圖三維圖像顯示時(shí)，進(jìn)行如下的處理。即，基于視差信息轉(zhuǎn)換單元224獲得的視圖間視差數(shù)據(jù)，從例如分別通過(guò)伸縮器218-1到218-N輸入的伸縮的視圖圖像數(shù)據(jù)的各項(xiàng)當(dāng)中，進(jìn)行預(yù)定數(shù)量視圖的各項(xiàng)圖像數(shù)據(jù)的視圖間內(nèi)插和合成，并且將圖像數(shù)據(jù)輸出至顯示器。然后，在這種情況下，將從圖形平移器229輸出的經(jīng)歷平移處理的圖形位圖數(shù)據(jù)疊加在各個(gè)視圖的圖像數(shù)據(jù)的內(nèi)插和合成項(xiàng)的每一個(gè)上，并且將圖像數(shù)據(jù)輸出至顯示器。
[0147]而且，將解多路復(fù)用器214提取出的音頻流提供至編碼緩沖器230，并且臨時(shí)存儲(chǔ)在其中。在音頻解碼器231中，對(duì)編碼緩沖器230中存儲(chǔ)的音頻流進(jìn)行解碼處理，從而獲得解碼的聲音數(shù)據(jù)。將此聲音數(shù)據(jù)提供給聲道混合單元232。在聲道混合單元232中，針對(duì)聲音數(shù)據(jù)，產(chǎn)生例如用于實(shí)現(xiàn)5.1聲道環(huán)繞的每個(gè)聲道的聲音數(shù)據(jù)。將此聲音數(shù)據(jù)例如提供給揚(yáng)聲器，并且聲音根據(jù)圖像顯示而輸出。
[0148]如上面說(shuō)明的，在CPU 201中，基于MVC擴(kuò)展描述符的存在和內(nèi)插位置，進(jìn)行控制使得編碼緩沖器215的管理以及還有視頻解碼器216的操作等可以匹配二維(2D)圖像傳輸或三維(3D)圖像傳輸。
[0149]圖10的流程圖圖示CPU 201執(zhí)行的控制處理的示例。CPU 201在諸如聲道切換之類的服務(wù)改變的時(shí)刻，執(zhí)行由此流程圖指示的控制處理。
[0150]CPU 201在步驟STl開(kāi)始處理，并且前往步驟ST2的處理。在步驟ST2，CPU 201確定PMT下對(duì)應(yīng)于基本視頻流(Stream_type=OxlB)的視頻基本環(huán)路(第一 ES環(huán)路)的描述符部分中是否存在MVC擴(kuò)展描述符。
[0151]如果在第一 ES環(huán)路中存在MVC擴(kuò)展描述符，則在步驟ST3，CPU 201識(shí)別出正在進(jìn)行三維(3D)圖像傳輸，并且子流被配置為使得它們由單個(gè)視頻流構(gòu)成。即，CPU 201識(shí)別出正在提供使用一個(gè)基本流(基本流)的服務(wù)。然后，CPU 201進(jìn)行控制，使得所有子流的各項(xiàng)編碼數(shù)據(jù)將經(jīng)由公共緩沖器經(jīng)歷解碼處理。
[0152]圖11(b)示意性圖示這種情況下接收器200中的流程的示例。注意，此示例是具有"OxlB"的流類型(Stream type)的基本視頻流中容納基本視圖的圖像數(shù)據(jù)的編碼數(shù)據(jù)和非基本視圖的圖像數(shù)據(jù)的編碼數(shù)據(jù)的示例。此示例也是通過(guò)使用不同解碼器對(duì)各個(gè)視圖的各項(xiàng)編碼數(shù)據(jù)進(jìn)行解碼處理的示例。實(shí)線a表示基本視圖的圖像數(shù)據(jù)的處理的流程，而虛線b指示非基本視圖的圖像數(shù)據(jù)的處理的流程。術(shù)語(yǔ)“渲染”是指伸縮器和3D視圖顯示處理單元219中的處理。
[0153]進(jìn)一步，在步驟ST2，如果第一 ES環(huán)路中不存在MVC擴(kuò)展描述符，則CPU 201在步驟ST4確定是否存在擴(kuò)展視頻流(Stream_type=0X20)。如果存在擴(kuò)展視頻流，則CPU 201在步驟ST5確定PMT下對(duì)應(yīng)于擴(kuò)展視頻流的視頻基本環(huán)路(第二 ES環(huán)路)的描述符部分中是否存在MVC擴(kuò)展描述符。
[0154]如果在第二 ES環(huán)路中存在MVC擴(kuò)展描述符，則在步驟ST6，CPU 201識(shí)別出正在進(jìn)行三維(3D)圖像傳輸，并且子流被配置為使得它們由多個(gè)流構(gòu)成。即，CPU 201識(shí)別出正在提供使用多個(gè)基本流(基本流)的服務(wù)。然后，CPU 201進(jìn)行控制，使得針對(duì)每個(gè)子流(Substream)進(jìn)行用于編碼數(shù)據(jù)的緩沖器的管理，并且子流將經(jīng)歷解碼處理。
[0155]圖11(c)示意性圖示這種情況下接收器200中的流程的示例。注意，此示例是存在兩個(gè)視頻流的示例:一個(gè)基本視頻流，其包括具有"OxlB"的流類型(Stream type)的基本視圖的圖像數(shù)據(jù)的編碼數(shù)據(jù)；以及擴(kuò)展視頻流，其包括具有"0x20"的流類型(Streamtype)的非基本視圖的圖像數(shù)據(jù)的編碼數(shù)據(jù)。實(shí)線a指示基本視圖的圖像數(shù)據(jù)的處理的流程，而虛線b指示非基本視圖的圖像數(shù)據(jù)的處理的流程。術(shù)語(yǔ)“渲染”是指伸縮器和3D視圖顯示處理單元219中的處理。
[0156]另一方面，如果在步驟ST4不存在擴(kuò)展視頻流或者在步驟ST5在第二 ES環(huán)路中不存在MVC擴(kuò)展描述符，則CPU 201在步驟SI7進(jìn)行控制，使得進(jìn)行已知的、基本的處理。圖11 (a)示意性圖示這種情況下接收器200中的流程的示例。注意，此示例是僅存在包括具有"OxlB"的流類型(Stream type)的二維(2D)圖像數(shù)據(jù)的編碼數(shù)據(jù)的基本視頻流的示例。實(shí)線a指示二維圖像數(shù)據(jù)的處理的流程。術(shù)語(yǔ)“渲染”是指伸縮器和3D視圖顯示處理單元219中的處理。
[0157]如上面討論的，在圖1中所示的圖像發(fā)送/接收系統(tǒng)10中，當(dāng)將子流配置為使得它們由單個(gè)視頻流構(gòu)成時(shí)，將MVC擴(kuò)展描述符插入至PMT下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路的描述符部分。另一方面，當(dāng)將子流配置為使得它們由多個(gè)流構(gòu)成時(shí)，將MVC擴(kuò)展描述符插入至PMT下對(duì)應(yīng)于擴(kuò)展視頻流的視頻基本環(huán)路的描述符部分。
[0158]于是，接收方可以在進(jìn)行解碼前可靠地并且容易地識(shí)別出是將子流配置為使得它們由單個(gè)視頻流還是多個(gè)視頻流構(gòu)成。這使得接收方可以在進(jìn)行解碼前精確地確定進(jìn)行解碼時(shí)緩沖存儲(chǔ)器的配置以及解碼模式和顯示模式，從而使得可以平滑地獲得圖像數(shù)據(jù)。
[0159]〈2.修正的示例〉
[0160]注意，在上述實(shí)施例中，已經(jīng)描述了將本技術(shù)應(yīng)用于MVC流的示例。S卩，第一圖像數(shù)據(jù)是用于進(jìn)行三維(3D)圖像顯示的基本視圖的圖像數(shù)據(jù)并且第二圖像數(shù)據(jù)是用于進(jìn)行三維(3D)圖像顯示的非基本視圖的圖像數(shù)據(jù)的示例。
[0161]然而，本技術(shù)可按相似的方式應(yīng)用于SVC流。SVC流包括最底層的圖像數(shù)據(jù)的視頻基本流，其形成可伸縮編碼的圖像數(shù)據(jù)。此SVC流還包括除了最底層之外的預(yù)定數(shù)量的高層的各項(xiàng)圖像數(shù)據(jù)的視頻基本流，其形成可伸縮編碼的圖像數(shù)據(jù)。
[0162]在此SVC流的情況下，第一圖像數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底層的圖像數(shù)據(jù)，第二圖像數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底層以外的層的圖像數(shù)據(jù)。如在上述MVC流中那樣，同樣在此SVC流中，也可以考慮子流被配置為使得它們由單個(gè)流構(gòu)成的情況(參見(jiàn)圖4(a))和子流被配置為使得它們由多個(gè)流構(gòu)成的情況(參見(jiàn)圖4(b))。
[0163]當(dāng)子流被配置為使得它們由單個(gè)流構(gòu)成時(shí)，通過(guò)對(duì)作為一個(gè)畫(huà)面的最底層的圖像數(shù)據(jù)和最底層以外的層的圖像數(shù)據(jù)編碼而獲得的視頻流被發(fā)送為SVC基本視頻流。在這種情況下，將SVC擴(kuò)展描述符插入至PMT下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路的描述符部分。
[0164]通過(guò)以此方式插入SVC擴(kuò)展描述符，接收方能夠識(shí)別出正在發(fā)送SVC流并且子流被配置為使得它們由單個(gè)視頻流構(gòu)成。即，接收方能夠識(shí)別出傳輸流TS容納通過(guò)對(duì)作為一個(gè)畫(huà)面的最底層的圖像數(shù)據(jù)和最底層以外的層的圖像數(shù)據(jù)編碼所獲得的基本視頻流。
[0165]另一方面，當(dāng)將子流配置為使得它們由多個(gè)流構(gòu)成時(shí)，通過(guò)對(duì)作為一個(gè)畫(huà)面的最底層的圖像數(shù)據(jù)編碼所獲得的基本視頻流被發(fā)送為SVC基本視頻流。而且，通過(guò)對(duì)作為一個(gè)畫(huà)面的最底層以外的層的圖像數(shù)據(jù)編碼所獲得的基本視頻流被發(fā)送為擴(kuò)展視頻流。在這種情況下，將SVC擴(kuò)展描述符插入至PMT下對(duì)應(yīng)于擴(kuò)展視頻流的視頻基本環(huán)路的描述符部分。
[0166]通過(guò)以此方式插入SVC擴(kuò)展描述符，接收方能夠識(shí)別出正在發(fā)送SVC流并且子流被配置為使得它們由多個(gè)流構(gòu)成。即，接收方能夠識(shí)別出傳輸流TS容納包括最底層的圖像數(shù)據(jù)的基本視頻流和每一個(gè)均包括最底層以外的層的圖像數(shù)據(jù)的擴(kuò)展視頻流。
[0167]圖12圖示SVC擴(kuò)展描述符的結(jié)構(gòu)(Syntax)的示例，盡管整體描述符的詳細(xì)描述予以省略。字段"view order index_start"指示最底層編號(hào)，而"view order index_end"指示最頂層編號(hào)。通過(guò)這些信息項(xiàng)，可以識(shí)別所有層的編號(hào)。字段"cbpendencyjd"指示對(duì)應(yīng)于此描述符的層的序數(shù)編號(hào)。
[0168]圖 13 圖不 NAL 單兀首標(biāo)(NAL unit header SVC extension)的配置(Syntax)的示例。字段"dependency_id"指示對(duì)應(yīng)層的序數(shù)編號(hào)。S卩，當(dāng)進(jìn)行解碼時(shí),接收方能夠基于關(guān)于該字段"cbpendencyjd"的字段信息，識(shí)別每項(xiàng)編碼數(shù)據(jù)對(duì)應(yīng)于圖像數(shù)據(jù)的哪個(gè)層。
[0169]圖14圖示應(yīng)對(duì)上述SVC流的接收器200A的配置的示例。在圖14中，與圖9中所示的元件對(duì)應(yīng)的元件用類似的附圖標(biāo)記指定，并且其詳細(xì)說(shuō)明將適當(dāng)?shù)赜枰允÷浴?br>
[0170]接收器200A通過(guò)廣播波從廣播站100接收傳輸流TS。在此傳輸流TS中，當(dāng)發(fā)送普通圖像時(shí)，容納AVC (2D)視頻基本流。另一方面，當(dāng)發(fā)送SVC流時(shí)，此傳輸流TS中僅容納SVC基本視頻流或者與此SVC基本視頻流一起的預(yù)定數(shù)量的擴(kuò)展視頻流。
[0171]基于傳輸流TS的層中特定信息的存在和插入位置，接收器200A處理此傳輸流TS中容納的視頻流。即，確定進(jìn)行解碼時(shí)緩沖存儲(chǔ)器的配置以及解碼模式和顯示模式。接收器200A獲得用于進(jìn)行普通圖像顯示的圖像數(shù)據(jù)或者最底層的圖像數(shù)據(jù)和更高層的圖像數(shù)據(jù)，然后顯示普通圖像或高質(zhì)量圖像。
[0172]接收器200A確定PMT下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路(第一 ES環(huán)路)的描述符部分中是否存在SVC擴(kuò)展描述符。然后，當(dāng)?shù)谝?ES環(huán)路中存在描述符時(shí)，接收器200A識(shí)別出正在發(fā)送SVC流并且此基本視頻流包括最底層的圖像數(shù)據(jù)和更高層的圖像數(shù)據(jù)。在這種情況下，接收器200A對(duì)傳輸流TS中容納的基本視頻流解碼，以便獲得用于進(jìn)行高質(zhì)量的圖像顯示的各個(gè)層的各項(xiàng)圖像數(shù)據(jù)，然后顯示高質(zhì)量的圖像。
[0173]另一方面，當(dāng)?shù)谝?ES環(huán)路中不存在SVC擴(kuò)展描述符時(shí)，接收器200A確定傳輸流TS中是否包括擴(kuò)展視頻流。然后，當(dāng)容納擴(kuò)展視頻流時(shí)，接收器200A確定在PMT下對(duì)應(yīng)于擴(kuò)展視頻流的視頻基本環(huán)路(第二 ES環(huán)路)的描述符部分中是否存在SVC擴(kuò)展描述符。
[0174]然后，當(dāng)?shù)诙?ES環(huán)路中存在描述符時(shí)，接收器200A識(shí)別出正在發(fā)送SVC流并且此擴(kuò)展視頻流和基本視頻流包括最底層的圖像數(shù)據(jù)和更高層的圖像數(shù)據(jù)。在這種情況下，接收器200A對(duì)傳輸流TS中容納的多個(gè)視頻流解碼，以便獲得用于進(jìn)行高質(zhì)量圖像顯示的各個(gè)層的各項(xiàng)圖像數(shù)據(jù)，然后顯示高質(zhì)量圖像。
[0175]另一方面，當(dāng)傳輸流TS中未容納擴(kuò)展視頻流時(shí)或者當(dāng)?shù)诙?ES環(huán)路中不存在SVC擴(kuò)展描述符時(shí)，接收器200A識(shí)別出正在發(fā)送普通圖像。在這種情況下，接收器200A對(duì)傳輸流TS中容納的視頻流解碼，以便獲得普通圖像數(shù)據(jù)，然后顯示普通圖像。
[0176]在解多路復(fù)用器214中，當(dāng)發(fā)送SVC流時(shí)，從傳輸流TS提取SVC擴(kuò)展描述符，并且將其發(fā)送至CPU 201。在CPU 201中，基于此SVC擴(kuò)展描述符的存在和插入位置，控制編碼緩沖器215的管理并且還有視頻解碼器216的操作，使得它們可以與普通圖像傳輸或SVC流傳輸匹配。
[0177]將解多路復(fù)用器214提取出的一個(gè)或多個(gè)視頻基本流提供給編碼緩沖器215，并且臨時(shí)存儲(chǔ)在其中。在視頻解碼器216中，對(duì)編碼緩沖器215中存儲(chǔ)的視頻基本流進(jìn)行解碼處理，從而獲得圖像數(shù)據(jù)。
[0178]在這種情況下，在視頻解碼器216中，當(dāng)發(fā)送普通圖像時(shí)，通過(guò)使用一個(gè)解碼器對(duì)AVC視頻基本流進(jìn)行解碼處理，從而獲得用于進(jìn)行普通圖像顯示的圖像數(shù)據(jù)。
[0179]此外，在這種情況下，當(dāng)發(fā)送SVC幀并且如果子流被配置為使得它們由單個(gè)視頻流構(gòu)成時(shí)，通過(guò)按照如下那樣進(jìn)行解碼處理，獲得用于進(jìn)行高質(zhì)量圖像顯示的多個(gè)層的各項(xiàng)圖像數(shù)據(jù)。即，針對(duì)包括多個(gè)層的各項(xiàng)圖像數(shù)據(jù)的編碼數(shù)據(jù)的SVC基本視頻流，解碼器216基于NAL單元首標(biāo)的dependency_id,切換從緩沖器215提供至解碼器216的待處理分組，然后對(duì)每項(xiàng)圖像數(shù)據(jù)進(jìn)行解碼處理。
[0180]此外，在這種情況下，當(dāng)發(fā)送SVC幀并且如果子流被配置為使得它們由多個(gè)流構(gòu)成時(shí)，通過(guò)按照如下那樣進(jìn)行解碼處理，獲得用于進(jìn)行高質(zhì)量圖像顯示的多個(gè)層的各項(xiàng)圖像數(shù)據(jù)。S卩，基于從解多路復(fù)用器214接收到的NAL分組的NAL單元首標(biāo)的dependency_id，切換要在緩沖器215中存儲(chǔ)的數(shù)據(jù)。此后，與單個(gè)流的解碼的類似地進(jìn)行來(lái)自緩沖器215的壓縮數(shù)據(jù)的讀取和解碼器216的處理。以此方式，通過(guò)使用相關(guān)聯(lián)的解碼器，對(duì)包括最底層的圖像數(shù)據(jù)的編碼數(shù)據(jù)的SVC基本視頻流和包括更高層的各項(xiàng)圖像數(shù)據(jù)的編碼數(shù)據(jù)的預(yù)定數(shù)量的SVC擴(kuò)展視頻流進(jìn)行解碼處理。
[0181]在質(zhì)量增強(qiáng)處理單元233中，當(dāng)發(fā)送普通圖像并且如果進(jìn)行正常的圖像顯示時(shí)，進(jìn)行下列的處理。即，將從圖形平移器229輸出的圖形位圖數(shù)據(jù)疊加在例如通過(guò)伸縮器
218-1輸入的伸縮的圖像數(shù)據(jù)上，并且將圖像數(shù)據(jù)輸出至顯示器。
[0182]另一方面，在質(zhì)量增強(qiáng)處理單元233中，當(dāng)發(fā)送SVC流并且如果進(jìn)行高質(zhì)量圖像顯示時(shí)，進(jìn)行下列的處理。即，從例如通過(guò)伸縮器218-1到218-N輸入的各個(gè)級(jí)的伸縮圖像數(shù)據(jù)的各項(xiàng)產(chǎn)生用于進(jìn)行高質(zhì)量圖像顯示的圖像數(shù)據(jù)，并且將從圖形平移器229輸出的經(jīng)歷平移處理的圖形位圖數(shù)據(jù)疊加在圖像數(shù)據(jù)上，并且將圖像數(shù)據(jù)輸出至顯示器。
[0183]以此方式，即使當(dāng)將本技術(shù)應(yīng)用于SVC流時(shí)，接收方也可以在進(jìn)行解碼前可靠地并且容易地識(shí)別出子流被配置為使得它們由單個(gè)視頻流還是多個(gè)視頻流構(gòu)成。這使得接收方可以在進(jìn)行解碼前精確地確定進(jìn)行解碼時(shí)緩沖存儲(chǔ)器的配置以及解碼模式和顯示模式，從而使得可以平滑地獲得圖像數(shù)據(jù)。
[0184]另外，在上述實(shí)施例中，描述了通過(guò)廣播波分發(fā)傳輸流TS的示例。然而，當(dāng)經(jīng)由諸如因特網(wǎng)之類的網(wǎng)絡(luò)分發(fā)此傳輸流TS時(shí)，本技術(shù)可按類似的方式適用。另一方面，無(wú)需而言的是，本技術(shù)可適用于除了傳輸流TS之外的容納器文件格式的因特網(wǎng)分發(fā)的情況。
[0185]注意，本技術(shù)也可以通過(guò)下列配置實(shí)現(xiàn)。
[0186](I) 一種圖像數(shù)據(jù)發(fā)送裝置，包括:
[0187]發(fā)送單元，其發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)和與第一圖像數(shù)據(jù)有關(guān)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的基本視頻流的容納器；
[0188]信息插入單元，其將特定信息插入至所述容納器的層中有關(guān)基本視頻流的信息所位于的位置。
[0189](2)根據(jù)(I)所述圖像數(shù)據(jù)發(fā)送裝置，其中，所述特定信息是具有關(guān)于第一圖像數(shù)據(jù)和預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的信息的描述符。
[0190](3)根據(jù)(2)所述的圖像數(shù)據(jù)發(fā)送裝置，其中:
[0191]所述容納器是傳輸流；以及
[0192]所述信息插入單元將所述描述符插入至節(jié)目映射表下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路的描述符部分。
[0193](4)根據(jù)⑵或(3)所述的圖像數(shù)據(jù)發(fā)送裝置，其中:
[0194]所述第一圖像數(shù)是用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)；
[0195]所述第二圖像數(shù)據(jù)是用于進(jìn)行三維圖像顯示的基本視圖以外的視圖的圖像數(shù)據(jù)；以及
[0196]所述描述符是具有關(guān)于每個(gè)視圖的信息的MVC擴(kuò)展描述符。
[0197](5)根據(jù)⑵或(3)所述的圖像數(shù)據(jù)發(fā)送裝置，其中:
[0198]所述第一圖像數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)的圖像數(shù)據(jù)；
[0199]所述第二圖像數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)以外的分層級(jí)的圖像數(shù)據(jù)；
[0200]所述描述符是具有關(guān)于每個(gè)分層級(jí)的圖像數(shù)據(jù)的信息的SVC擴(kuò)展描述符。
[0201](6) 一種圖像數(shù)據(jù)發(fā)送方法，包括:[0202]當(dāng)發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)和與第一圖像數(shù)據(jù)有關(guān)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的基本視頻流的容納器時(shí)，將特定信息插入至所述容納器的層中有關(guān)基本視頻流的信息所位于的位置。
[0203](7) 一種圖像數(shù)據(jù)發(fā)送裝置，包括:
[0204]發(fā)送單元，其發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)的基本視頻流和預(yù)定數(shù)量的擴(kuò)展視頻流的容納器，所述擴(kuò)展視頻流包括與第一圖像數(shù)據(jù)有關(guān)的預(yù)定數(shù)量的各項(xiàng)第二圖像數(shù)據(jù)；
[0205]信息插入單元，其將特定信息插入至所述容納器的層中有關(guān)預(yù)定數(shù)量的擴(kuò)展視頻流中每一個(gè)的信息所位于的位置。
[0206](8)根據(jù)(7)所述圖像數(shù)據(jù)發(fā)送裝置，其中，所述特定信息是具有關(guān)于第一圖像數(shù)據(jù)和預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的信息的描述符。
[0207](9)根據(jù)⑶所述的圖像數(shù)據(jù)發(fā)送裝置，其中:
[0208]所述容納器是傳輸流；以及
[0209]所述信息插入單元將所述描述符插入至節(jié)目映射表下對(duì)應(yīng)于預(yù)定數(shù)量的擴(kuò)展視頻流中每一個(gè)的視頻基本環(huán)路的描述符部分。
[0210](10)根據(jù)⑶或(9)所述的圖像數(shù)據(jù)發(fā)送裝置，其中:
[0211]所述第一圖像數(shù)是用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)；
[0212]所述第二圖像數(shù)據(jù)是用于進(jìn)行三維圖像顯示的基本視圖以外的視圖的圖像數(shù)據(jù)；以及
[0213]所述特定信息是具有關(guān)于每個(gè)視圖的信息的MVC擴(kuò)展描述符。
[0214](11)根據(jù)⑶或(9)所述的圖像數(shù)據(jù)發(fā)送裝置，其中:
[0215]所述第一圖像數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)的圖像數(shù)據(jù)；
[0216]所述第二圖像數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)以外的分層級(jí)的圖像數(shù)據(jù)；
[0217]所述特定信息是具有關(guān)于每個(gè)分層級(jí)的圖像數(shù)據(jù)的信息的SVC擴(kuò)展描述符。
[0218](12) 一種圖像數(shù)據(jù)發(fā)送方法，包括:
[0219]當(dāng)發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)的基本視頻流和預(yù)定數(shù)量的擴(kuò)展視頻流時(shí)，將特定信息插入至所述容納器的層中有關(guān)預(yù)定數(shù)量的擴(kuò)展視頻流中每一個(gè)的信息所位于的位置，其中所述擴(kuò)展視頻流包括與第一圖像數(shù)據(jù)有關(guān)的預(yù)定數(shù)量的各項(xiàng)第二圖像數(shù)據(jù)。
[0220](13) 一種圖像數(shù)據(jù)接收裝置，包括:
[0221]接收單元，其接收具有預(yù)定格式的容納器；以及
[0222]處理單元，其基于所述容納器的層中特定信息的存在和插入位置，處理所述容納器中容納的視頻流，以便獲得與彼此有關(guān)的預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。
[0223](14)根據(jù)(13)所述的圖像數(shù)據(jù)接收裝置，其中，當(dāng)所述特定信息插入至所述容納器的層中與所述容納器中容納的基本視頻流有關(guān)的信息所位于的位置時(shí)，所述處理單元處理基本視頻流，以便獲得預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。
[0224](15)根據(jù)(13)或(14)所述圖像數(shù)據(jù)接收裝置，其中，當(dāng)所述特定信息插入至所述容納器的層中與所述容納器中容納的擴(kuò)展視頻流有關(guān)的信息所位于的位置時(shí)，所述處理單元處理所述容納器中容納的擴(kuò)展視頻流和基本視頻流，以便獲得預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。
[0225](16)根據(jù)(13)到(15)中任何一個(gè)所述的圖像數(shù)據(jù)接收裝置，其中，圖像數(shù)據(jù)的預(yù)定數(shù)量的條目形成用于進(jìn)行三維顯示的圖像數(shù)據(jù)或者可伸縮編碼的數(shù)據(jù)的圖像數(shù)據(jù)。
[0226](17) 一種圖像數(shù)據(jù)接收方法，包含:
[0227]接收具有預(yù)定格式的容納器的步驟；以及
[0228]通過(guò)基于容納器的層中特定信息的存在和插入位置處理容納器中容納的視頻流來(lái)獲得彼此有關(guān)的預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)的步驟。
[0229]本技術(shù)的主要特點(diǎn)在于，通過(guò)將MVC擴(kuò)展描述符插入至PMT下與MVC基本視頻流或擴(kuò)展視頻流對(duì)應(yīng)的視頻基本環(huán)路的描述符部分，接收方能夠可靠地和容易地在進(jìn)行解碼前識(shí)別出子流被配置為使得它們由單個(gè)視頻流還是多個(gè)視頻流構(gòu)成(參見(jiàn)圖5、7和8)。
[0230]附圖標(biāo)記列表
[0231]10 圖像發(fā)送/接收系統(tǒng)
[0232]100廣播站
[0233]110傳輸數(shù)據(jù)產(chǎn)生器
[0234]111數(shù)據(jù)提取單元
[0235]Illa數(shù)據(jù)記錄介質(zhì)
[0236]112視頻編碼器
[0237]113視差編碼器
[0238]114音頻編碼器
[0239]115圖形產(chǎn)生單元
[0240]116圖形編碼器
[0241]117多路復(fù)用器
[0242]200, 200A 接收器
[0243]201 CPU
[0244]213容納器緩沖器
[0245]214解多路復(fù)用器
[0246]215編碼緩沖器
[0247]216視頻解碼器
[0248]217-1到217-N子流緩沖器
[0249]218-1 到 218-N 伸縮器
[0250]219 3D視圖顯示處理單元
[0251]221編碼緩沖器
[0252]222視差解碼器
[0253]223視頻解碼器
[0254]224視差信息轉(zhuǎn)換單元
[0255]225編碼緩沖器
[0256]226圖形解碼器
[0257]227像素緩沖器
[0258]228伸縮器[0259]229圖形平移器
[0260]230編碼緩沖器
[0261]231音頻解碼器
[0262]232聲道混合單元
[0263]233質(zhì)量增強(qiáng)處理單元`
【權(quán)利要求】
1.一種圖像數(shù)據(jù)發(fā)送裝置，包括: 發(fā)送單元，其發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)和與第一圖像數(shù)據(jù)有關(guān)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的基本視頻流的容納器；以及 信息插入單元，其將特定信息插入至所述容納器的層中有關(guān)基本視頻流的信息所位于的位置。
2.如權(quán)利要求1所述的圖像數(shù)據(jù)發(fā)送裝置，其中，所述特定信息是具有關(guān)于第一圖像數(shù)據(jù)和預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的信息的描述符。
3.如權(quán)利要求2所述的圖像數(shù)據(jù)發(fā)送裝置，其中: 所述容納器是傳輸流；以及 所述信息插入單元將所述描述符插入至節(jié)目映射表下對(duì)應(yīng)于基本視頻流的視頻基本環(huán)路的描述符部分。
4.如權(quán)利要求2所述的圖像數(shù)據(jù)發(fā)送裝置，其中: 所述第一圖像數(shù)據(jù)是用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)； 所述第二圖像數(shù)據(jù)是用于進(jìn)行三維圖像顯示的基本視圖以外的視圖的圖像數(shù)據(jù)；以及 所述描述符是具有關(guān)于每個(gè)視圖的信息的MVC擴(kuò)展描述符。
5.如權(quán)利要求2所述的圖像數(shù)據(jù)發(fā)送裝置，其中: 所述第一圖像 數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)的圖像數(shù)據(jù)； 所述第二圖像數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)以外的分層級(jí)的圖像數(shù)據(jù)；以及 所述描述符是具有關(guān)于每個(gè)分層級(jí)的圖像數(shù)據(jù)的信息的SVC擴(kuò)展描述符。
6.一種圖像數(shù)據(jù)發(fā)送方法，包括: 當(dāng)發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)和與第一圖像數(shù)據(jù)有關(guān)的預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的基本視頻流的容納器時(shí)，將特定信息插入至所述容納器的層中有關(guān)基本視頻流的信息所位于的位置。
7.一種圖像數(shù)據(jù)發(fā)送裝置，包括: 發(fā)送單元，其發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)的基本視頻流和預(yù)定數(shù)量的擴(kuò)展視頻流的容納器，所述擴(kuò)展視頻流包括與第一圖像數(shù)據(jù)有關(guān)的預(yù)定數(shù)量的各項(xiàng)第二圖像數(shù)據(jù)；以及 信息插入單元，其將特定信息插入至所述容納器的層中有關(guān)預(yù)定數(shù)量的擴(kuò)展視頻流中的每一個(gè)的信息所位于的位置。
8.如權(quán)利要求7所述圖像數(shù)據(jù)發(fā)送裝置，其中，所述特定信息是具有關(guān)于第一圖像數(shù)據(jù)和預(yù)定項(xiàng)數(shù)的第二圖像數(shù)據(jù)的信息的描述符。
9.如權(quán)利要求8所述的圖像數(shù)據(jù)發(fā)送裝置，其中: 所述容納器是傳輸流；以及 所述信息插入單元將所述描述符插入至節(jié)目映射表下對(duì)應(yīng)于預(yù)定數(shù)量的擴(kuò)展視頻流中的每一個(gè)的視頻基本環(huán)路的描述符部分。
10.如權(quán)利要求8所述的圖像數(shù)據(jù)發(fā)送裝置，其中: 所述第一圖像數(shù)據(jù)是用于進(jìn)行三維圖像顯示的基本視圖的圖像數(shù)據(jù)； 所述第二圖像數(shù)據(jù)是用于進(jìn)行三維圖像顯示的基本視圖以外的視圖的圖像數(shù)據(jù)；以及所述特定信息是具有關(guān)于每個(gè)視圖的信息的MVC擴(kuò)展描述符。
11.如權(quán)利要求8所述的圖像數(shù)據(jù)發(fā)送裝置，其中: 所述第一圖像數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)的圖像數(shù)據(jù)； 所述第二圖像數(shù)據(jù)是形成可伸縮編碼的圖像數(shù)據(jù)的最底分層級(jí)以外的分層級(jí)的圖像數(shù)據(jù)；以及 所述特定信息是具有關(guān)于每個(gè)分層級(jí)的圖像數(shù)據(jù)的信息的SVC擴(kuò)展描述符。
12.—種圖像數(shù)據(jù)發(fā)送方法，包括: 當(dāng)發(fā)送具有預(yù)定格式的、容納包括第一圖像數(shù)據(jù)的基本視頻流和預(yù)定數(shù)量的擴(kuò)展視頻流的容納器時(shí)，將特定信息插入至所述容納器的層中有關(guān)預(yù)定數(shù)量的擴(kuò)展視頻流中的每一個(gè)的信息所位于的位置，其中所述擴(kuò)展視頻流包括與第一圖像數(shù)據(jù)有關(guān)的預(yù)定數(shù)量的各項(xiàng)第二圖像數(shù)據(jù)。
13.一種圖像數(shù)據(jù)接收裝置，包括: 接收單元，其接收具有預(yù)定格式的容納器；以及 處理單元，其基于所述容納器的層中特定信息的存在和插入位置，處理所述容納器中容納的視頻流，以便獲得彼此有關(guān)的預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。
14.如權(quán)利要求13所述的圖像數(shù)據(jù)接收裝置，其中，當(dāng)所述特定信息插入至所述容納器的層中與所述容納器中容納的基本視頻流有關(guān)的信息所位于的位置時(shí)，所述處理單元處理基本視頻流，以便獲得預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。
15.如權(quán)利要求13所述的圖`像數(shù)據(jù)接收裝置，其中，當(dāng)所述特定信息插入至所述容納器的層中與所述容納器中容納的擴(kuò)展視頻流有關(guān)的信息所位于的位置時(shí)，所述處理單元處理所述容納器中容納的擴(kuò)展視頻流和基本視頻流，以便獲得預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)。
16.如權(quán)利要求13所述的圖像數(shù)據(jù)接收裝置，其中，預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)形成用于進(jìn)行三維圖像顯示的圖像數(shù)據(jù)或者可伸縮編碼的數(shù)據(jù)的圖像數(shù)據(jù)。
17.一種圖像數(shù)據(jù)接收方法，包含: 接收具有預(yù)定格式的容納器的步驟；以及 通過(guò)基于容納器的層中特定信息的存在和插入位置處理容納器中容納的視頻流來(lái)獲得彼此有關(guān)的預(yù)定項(xiàng)數(shù)的圖像數(shù)據(jù)的步驟。
【文檔編號(hào)】H04N19/597GK103621075SQ201380001729
【公開(kāi)日】2014年3月5日 申請(qǐng)日期:2013年3月15日 優(yōu)先權(quán)日:2012年4月24日
【發(fā)明者】塚越郁夫 申請(qǐng)人:索尼公司