專利名稱：視頻合成設(shè)備及程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及在輸入第一和第二視頻時(shí)通過將第二視頻與第一視頻組合來顯示合 成視頻的視頻合成設(shè)備和程序。
背景技術(shù)：
隨著高速網(wǎng)絡(luò)基礎(chǔ)設(shè)施的發(fā)展和大容量記錄介質(zhì)的發(fā)展，用戶或用戶視頻設(shè)備可 以一次性處理的視頻數(shù)據(jù)的絕對(duì)數(shù)量已大幅度增加。對(duì)于這種趨勢(shì)，新興出現(xiàn)了使用多組 視頻數(shù)據(jù)獲得的多種功能和基于這些功能的高性能應(yīng)用程序。這些功能之一是稱作"畫中 畫"的功能。"畫中畫"是通過將較小的子幀疊加在屏幕(父幀)上以同時(shí)顯示兩個(gè)視頻的功 能。例如，該功能用于"多角度表征"，以在子幀中顯示從與父幀視頻的角度不同的角度提取 的視頻，或者該功能用于"評(píng)注顯示"，以評(píng)注形式顯示關(guān)于父幀視頻的附加信息(例如，在 子幀中顯示針對(duì)電影拍攝期間未講述的故事而記錄的導(dǎo)演的評(píng)注視頻等)。
例如，如圖17所示，通過在兩個(gè)不同層上解碼兩組視頻數(shù)據(jù)并疊加這些解碼視頻 來實(shí)現(xiàn)畫中畫。在這種情況下，調(diào)整子幀視頻的顯示尺寸和顯示位置，以將其放置在父幀 上。此外，畫中畫時(shí)的子幀可以具有任意形狀的視頻，而不是圖17所示的矩形視頻。例如， 專利文獻(xiàn)1中描述了畫中畫功能及實(shí)現(xiàn)該功能的方法。
專利文獻(xiàn)1 :日本專利申請(qǐng)公開2005-12377
發(fā)明內(nèi)容
本發(fā)明要解決的問題 在傳統(tǒng)畫中畫中，子幀的顯示位置可能是預(yù)先確定的，子幀顯示在該位置處。
在畫中畫中，子幀中的視頻是交疊并顯示在父幀中的視頻上的。因此，當(dāng)顯示子幀 時(shí)，部分父幀視頻將被子幀視頻隱藏。因此，優(yōu)選的是可以根據(jù)父幀視頻的變化的內(nèi)容來切 換子幀在父幀中的顯示位置。 此外，作為使用畫中畫的一種應(yīng)用，可以存在如下配置在特定時(shí)間段內(nèi)的任意時(shí) 間點(diǎn)上，能夠自由地開始播放、暫停和重新開始子幀視頻。子幀僅在播放視頻時(shí)才顯示。例 如，上述配置用于當(dāng)子幀視頻作為特許視頻添加至父幀視頻，從而子幀視頻不必與父幀精 確同步，而應(yīng)該允許僅在特定持續(xù)時(shí)間上在父幀視頻中播放該子幀視頻(特許視頻)時(shí)。此 外，在這種情況下，優(yōu)選的是根據(jù)每次顯示子幀時(shí)的父幀視頻的內(nèi)容來適當(dāng)?shù)亟o定子幀應(yīng) 該在父幀上顯示的顯示位置。 然而，雖然存在這種需求，但是還沒有如上所述的根據(jù)父幀視頻的改變來給定子幀的可改變顯示位置的傳統(tǒng)方法。因此，不可能使上述應(yīng)用可行。 鑒于上述問題，設(shè)計(jì)了本發(fā)明，目的是提供在畫中畫回放期間對(duì)關(guān)于子幀的顯示 位置的可顯示時(shí)間段、每個(gè)時(shí)刻要顯示區(qū)域或可顯示區(qū)域進(jìn)行指定的顯示用數(shù)據(jù)。此外，目 的是提供一種視頻合成設(shè)備和程序，即使在如上所述地自由改變子幀視頻的回放時(shí)間和停 止時(shí)間時(shí)，也能夠基于顯示用數(shù)據(jù)來提供適當(dāng)?shù)淖訋@示位置。
解決問題的手段 為了解決上述問題，第一發(fā)明是一種視頻合成設(shè)備，用于接收第一視頻和第二視 頻，并輸出與第二視頻合成的第一視頻，該裝置包括指定裝置，用于接收包括時(shí)間信息和 顯示區(qū)域信息的顯示用數(shù)據(jù)，并基于所述顯示用數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視頻內(nèi) 的顯示位置，所述時(shí)間信息表示第一視頻中可以顯示第二視頻的時(shí)間，所述顯示區(qū)域信息 表示對(duì)應(yīng)于所述時(shí)間而給予的、第二視頻的顯示區(qū)域；以及合成裝置，用于在由指定裝置指 定的第一視頻內(nèi)的顯示位置上放置并合成第二視頻。 第二發(fā)明是第一發(fā)明的視頻合成設(shè)備，其特征在于所述顯示用數(shù)據(jù)包括第二顯示 區(qū)域信息，第二顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻中的時(shí)間而給予的、第二視頻的顯示區(qū) 域；在顯示第二視頻時(shí)，指定裝置執(zhí)行如下過程根據(jù)所述顯示用數(shù)據(jù)中包括的顯示區(qū)域 信息和/或第二顯示區(qū)域信息來指定顯示位置。 第三發(fā)明是第一發(fā)明的視頻合成設(shè)備，其特征在于所述顯示用數(shù)據(jù)包括可顯示區(qū) 域信息，可顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻中的時(shí)間而給予的、第二視頻的可顯示區(qū)域； 在顯示第二視頻時(shí)，指定裝置執(zhí)行如下過程根據(jù)所述顯示用數(shù)據(jù)中包括的顯示區(qū)域信息 和/或可顯示區(qū)域信息來指定顯示位置。 第四發(fā)明是一種視頻合成設(shè)備，用于接收第一視頻和第二視頻，并輸出與第二視 頻合成的第一視頻，該裝置包括指定裝置，用于接收包括時(shí)間信息和可顯示區(qū)域信息的顯 示用數(shù)據(jù)，并基于所述顯示用數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視頻內(nèi)的顯示位置，所述時(shí) 間信息表示第一視頻中可以顯示第二視頻的時(shí)間，所述可顯示區(qū)域信息表示對(duì)應(yīng)于所述時(shí) 間而給予的、第二視頻的可顯示區(qū)域；以及合成裝置，用于在由指定裝置指定的第一視頻內(nèi) 的顯示位置上放置并合成第二視頻。 第五發(fā)明是第四發(fā)明的視頻合成設(shè)備，其特征在于所述顯示用數(shù)據(jù)包括顯示區(qū)域 信息，顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻中的時(shí)間而給予的、第二視頻的顯示區(qū)域；在顯示 第二視頻時(shí)，指定裝置執(zhí)行如下過程根據(jù)所述顯示用數(shù)據(jù)中包括的可顯示區(qū)域信息和/ 或顯示區(qū)域信息來指定顯示位置。 第六發(fā)明是第四發(fā)明的視頻合成設(shè)備，其特征在于所述顯示用數(shù)據(jù)包括第二可顯 示區(qū)域信息，第二可顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻中的時(shí)間而給予的、第二視頻的可 顯示區(qū)域；在顯示第二視頻時(shí)，指定裝置執(zhí)行如下過程根據(jù)所述顯示用數(shù)據(jù)中包括的可 顯示區(qū)域信息和/或第二可顯示區(qū)域信息來指定顯示位置。 第七發(fā)明是一種視頻合成設(shè)備，用于接收第一視頻和第二視頻，并輸出與第二視 頻合成的第一視頻，該裝置包括指定裝置，用于接收包括時(shí)間信息和顯示區(qū)域信息的顯示 用數(shù)據(jù)，并基于所述顯示用數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視頻內(nèi)的顯示位置，所述時(shí)間 信息表示與第一視頻中的時(shí)間不同的第二視頻中的時(shí)間，所述顯示區(qū)域信息表示對(duì)應(yīng)于第 二視頻中的時(shí)間而給予的、第二視頻的顯示區(qū)域；以及合成裝置，用于在由指定裝置指定的
5第一視頻內(nèi)的顯示位置上放置并合成第二視頻。 第八發(fā)明是一種視頻合成設(shè)備，用于接收第一視頻和第二視頻，并輸出與第二視 頻合成的第一視頻，該裝置包括指定裝置，用于接收包括時(shí)間信息和可顯示區(qū)域信息的顯 示用數(shù)據(jù)，并基于所述顯示用數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視頻內(nèi)的顯示位置，以使第 二視頻包括在可顯示區(qū)域信息中，所述時(shí)間信息表示與第一視頻中的時(shí)間不同的第二視頻 中的時(shí)間，所述可顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻中的時(shí)間而給予的、第二視頻的可顯 示區(qū)域；以及合成裝置，用于在由指定裝置指定的第一視頻內(nèi)的顯示位置上放置并合成第 二視頻。 第九發(fā)明是第一到第八發(fā)明之一的視頻合成設(shè)備，其特征在于合成的輸出視頻是 畫中畫格式的視頻，第一視頻對(duì)應(yīng)于要在父幀上顯示的視頻，第二視頻對(duì)應(yīng)于要在子幀上 顯示的視頻。 第十發(fā)明的特征在于，使計(jì)算機(jī)能夠接收第一視頻和第二視頻，并對(duì)輸出與第二
視頻合成的第一視頻進(jìn)行控制，以實(shí)現(xiàn)指定功能，用于通過接收包括時(shí)間信息和顯示區(qū)域
信息的顯示用數(shù)據(jù)，來執(zhí)行如下控制基于所述顯示用數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視
頻內(nèi)的顯示位置，其中所述時(shí)間信息表示第一視頻中可以顯示第二視頻的時(shí)間，所述顯示
區(qū)域信息表示對(duì)應(yīng)于所述時(shí)間而給予的、第二視頻的顯示區(qū)域；以及合成功能，用于執(zhí)行如
下控制在由指定裝置指定的第一視頻內(nèi)的顯示位置上放置并合成第二視頻。 第十一發(fā)明是第一或第七發(fā)明的視頻合成設(shè)備，其特征在于所述顯示區(qū)域信息包
括用于顯示第二視頻的矩形區(qū)域的左上頂點(diǎn)的坐標(biāo)集。 第十二發(fā)明是第四或第八發(fā)明的視頻合成設(shè)備，其特征在于所述可顯示區(qū)域信息
包括其中顯示第二視頻的矩形區(qū)域的左上頂點(diǎn)的坐標(biāo)集。 本發(fā)明有益效果 本發(fā)明提供了與畫中畫回放期間子幀的顯示位置有關(guān)的顯示用數(shù)據(jù)，給出了可顯 示時(shí)間和顯示區(qū)域或可顯示區(qū)域。該顯示用數(shù)據(jù)可以包括在子幀視頻或父幀視頻的視頻數(shù) 據(jù)中，或者可以存儲(chǔ)在獨(dú)立于視頻數(shù)據(jù)并在視頻傳輸或分發(fā)期間與視頻數(shù)據(jù)一并處理的管 理數(shù)據(jù)中。在該視頻顯示設(shè)備和方法中，顯示用數(shù)據(jù)用于在每次讀出父(子)幀視頻時(shí)與 父(子)幀視頻的回放時(shí)間相對(duì)應(yīng)地確定子幀的顯示位置。當(dāng)合成子幀視頻以采用畫中畫 形式將其顯示在父幀視頻上時(shí)，這些配置能夠通過在適當(dāng)顯示位置顯示子幀視頻，來進(jìn)行 回放顯示。由此，可以在可顯示時(shí)間的范圍內(nèi)對(duì)子幀視頻自由地進(jìn)行顯示和不顯示之間的 切換。此外，每次對(duì)子幀視頻自由地進(jìn)行顯示和不顯示之間的切換時(shí)，可以合成子幀視頻， 以在適當(dāng)位置進(jìn)行顯示。因此，可以按照分發(fā)者的意圖執(zhí)行畫中畫期間的回放。


圖1是示出了根據(jù)本發(fā)明第一、第二和第三實(shí)施例的視頻顯示設(shè)備的示意性配置 的功能框圖。 圖2是示出了在根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備中使用的顯示用數(shù)據(jù)的 示例的圖。 圖3是示出了在根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備中使用的顯示用數(shù)據(jù)的 另一示例的圖。
圖4是示出了在根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備中使用的顯示用數(shù)據(jù)的 變體的圖。 圖5是示出了在根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備中使用的顯示用數(shù)據(jù)的 另一示例的圖。 圖6是示出了在根據(jù)本發(fā)明第一、第二和第三實(shí)施例的視頻顯示設(shè)備上顯示視頻 時(shí)的處理的流程圖。 圖7是示出了當(dāng)在根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備上顯示視頻時(shí)的第一 顯示狀態(tài)的示例圖。 圖8是示出了當(dāng)在根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備上顯示視頻時(shí)的第二 顯示狀態(tài)的示例圖。 圖9是示出了當(dāng)在根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備上顯示視頻時(shí)的第三 顯示狀態(tài)的示例圖。 圖10是示出了當(dāng)在根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備上顯示視頻時(shí)的第四 顯示狀態(tài)的示例圖。 圖11是示出了在根據(jù)本發(fā)明第二實(shí)施例的視頻顯示設(shè)備中使用的顯示用數(shù)據(jù)的 示例的圖。 圖12是示出了當(dāng)在根據(jù)本發(fā)明第二實(shí)施例的視頻顯示設(shè)備上顯示視頻時(shí)的第一 顯示狀態(tài)的示例圖。 圖13是示出了當(dāng)在根據(jù)本發(fā)明第二實(shí)施例的視頻顯示設(shè)備上顯示視頻時(shí)的第二 顯示狀態(tài)的示例圖。 圖14是示出了當(dāng)在根據(jù)本發(fā)明第二實(shí)施例的視頻顯示設(shè)備上顯示視頻時(shí)的第三 顯示狀態(tài)的示例圖。 圖15是示出了當(dāng)在根據(jù)本發(fā)明第二實(shí)施例的視頻顯示設(shè)備上顯示視頻時(shí)的第四 顯示狀態(tài)的示例圖。 圖16是示出了在根據(jù)本發(fā)明第三實(shí)施例的視頻顯示設(shè)備上顯示視頻時(shí)的過程的 圖。 圖17是示出了用于實(shí)現(xiàn)傳統(tǒng)畫中畫功能的方法的示例圖。 附圖標(biāo)記說明 1，2，3視頻顯示設(shè)備 101,103解碼器 102,104緩沖單元 105合成器 106調(diào)整器 107顯示單元 108輸入單元 109處理控制器 110， 210， 310位置指定器
具體實(shí)施例方式
下面，參照附圖，詳細(xì)描述在根據(jù)本發(fā)明的視頻合成設(shè)備應(yīng)用于顯示合成視頻的
視頻顯示設(shè)備時(shí)的視頻合成設(shè)備。(第一實(shí)施例) 參照?qǐng)D1到10描述根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備、方法和顯示用數(shù)據(jù)。
圖1是根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備1的示意性配置的功能框圖。視頻 顯示設(shè)備1接收兩個(gè)視頻數(shù)據(jù)集(編碼視頻流)，對(duì)其進(jìn)行解碼和組合，以按照所謂的"畫 中畫表征"狀態(tài)進(jìn)行顯示。在如下說明書部分中，畫中畫表征中顯示在父幀中的視頻和顯示 在子幀中的視頻分別稱為"主視頻"和"子視頻"，以彼此區(qū)別。 視頻顯示設(shè)備1包括解碼器101和緩沖單元102，用于解碼主視頻的視頻數(shù)據(jù)和 控制其輸出；解碼器103和緩沖單元104，用于解碼子視頻的視頻數(shù)據(jù)和控制其輸出；合成 器105，其中結(jié)合有調(diào)整器106，用于將子視頻與主視頻組合；以及顯示單元107，用于顯示 輸出視頻。此外，該裝置還包括輸入單元108，用于接收子視頻(子幀)的顯示/不顯示 之間的用戶切換指令；處理控制器109，用于根據(jù)該切換來控制解碼器103和/緩沖單元 104的處理；以及位置指定器IIO，用于根據(jù)分別輸入的有關(guān)子視頻的顯示用數(shù)據(jù)和回放期 間的時(shí)間信息，指定子視頻(子幀)的顯示位置。在本說明書中，用于指定子視頻(子幀) 的顯示位置的顯示用數(shù)據(jù)稱作與視頻數(shù)據(jù)相對(duì)的"元數(shù)據(jù)"。 這里，視頻顯示設(shè)備1描述為包括解碼器101和103，但是這不是必不可少的。例 如，如果輸入視頻數(shù)據(jù)是尚未編碼的視頻數(shù)據(jù)，則視頻顯示設(shè)備1無需包括解碼器101和 103。此外，圖1中的視頻顯示設(shè)備1僅由關(guān)于視頻數(shù)據(jù)(與視頻信號(hào)有關(guān)的數(shù)據(jù))處理的 功能塊構(gòu)成。但是，除了涉及視頻信號(hào)的數(shù)據(jù)之外，實(shí)際的視頻數(shù)據(jù)還包括音頻數(shù)據(jù)和管理 數(shù)據(jù)(對(duì)編碼數(shù)據(jù)進(jìn)行解碼所必需的信息，例如編碼系統(tǒng)等；以及播放視頻所必需的信息， 例如指定視頻剪輯和聯(lián)結(jié)等播放列表等)，實(shí)際的視頻顯示設(shè)備的構(gòu)造還包括對(duì)音頻數(shù)據(jù) 和管理數(shù)據(jù)進(jìn)行處理的功能塊。在這種情況下，圖1中的配置是作為實(shí)際視頻顯示設(shè)備的 內(nèi)部結(jié)構(gòu)而安裝的。 首先，描述無子視頻(子幀)顯示時(shí)視頻顯示設(shè)備1中的處理。在這種情況下，沒 有子視頻的視頻數(shù)據(jù)輸入，或者即使輸入，也對(duì)該視頻數(shù)據(jù)進(jìn)行不顯示處理。
輸入的主視頻的視頻數(shù)據(jù)由解碼器101解碼，由緩沖單元102對(duì)解碼視頻進(jìn)行有 關(guān)定時(shí)的調(diào)整，輸出解碼視頻。因?yàn)椴伙@示子視頻，所以從緩沖單元102輸出的解碼視頻通過 合成器105而并不在其中受到任何處理，并提供至顯示單元107。由此，按照原樣顯示主視頻。
接下來，描述顯示子視頻(子幀)時(shí)視頻顯示設(shè)備1中的處理。
在解碼器103中解碼輸入子視頻的視頻數(shù)據(jù)，由緩沖單元104對(duì)解碼視頻進(jìn)行有 關(guān)定時(shí)的調(diào)整，輸出解碼視頻。子視頻的解碼畫面輸入至合成器105內(nèi)的調(diào)整器106。
作為合成子視頻和主視頻的預(yù)處理，調(diào)制器106轉(zhuǎn)換并調(diào)整圖像大小、以及子視 頻的解碼畫面在屏幕上的顯示位置。在這種情況下，調(diào)整子視頻(子幀)，以將其合成在主 視頻(父幀)內(nèi)由稍后所述的位置指定器110指定的顯示位置上。此后，將調(diào)整后的子視 頻與輸入主視頻的解碼畫面合成，以通過顯示單元107輸出和顯示合成視頻。此外，也可以 設(shè)定合成時(shí)的透光率，以通過合成的子視頻看到主視頻。 視頻顯示設(shè)備1包括輸入單元108，用于從用戶接收子視頻(子幀)的顯示/不顯示的切換指令。然后，輸入單元108基于輸入的切換指令，產(chǎn)生顯示狀態(tài)信息并將其傳送至 處理控制器109和位置指定器IIO，顯示狀態(tài)信息指示了在當(dāng)前時(shí)間點(diǎn)應(yīng)該顯示還是不顯 示子視頻(子幀)。 處理控制器109接收來自輸入單元108的顯示狀態(tài)信息，并基于該信息控制解碼 器103和/緩沖單元104的處理。例如，當(dāng)顯示狀態(tài)信息是"不顯示狀態(tài)"時(shí)，控制器停止解 碼器103中的解碼處理和/或從緩沖單元104的輸出，并在顯示狀態(tài)信息變?yōu)?顯示狀態(tài)" 時(shí)重新開始這些處理，從而在不顯示時(shí)間段中暫停子視頻。 位置指定器110接收來自輸入單元108的顯示狀態(tài)信息，當(dāng)子視頻(子幀)處于 顯示狀態(tài)時(shí)，使用上述元數(shù)據(jù)確定要在主視頻(父幀)中顯示的子視頻(子幀)的顯示位 置，并將結(jié)果通知給調(diào)整器106。 當(dāng)主視頻在時(shí)間上變化時(shí)，主視頻中要顯示或可以顯示子視頻的顯示位置隨著主
視頻的變化而在時(shí)間上變化。因此，如果在上述處理控制器109和由處理控制器109控制
的解碼器103和/或緩沖單元104停止顯示子視頻并將其設(shè)定為暫停之后，經(jīng)過一些時(shí)間
時(shí)重新開始子視頻的回放和顯示，并不總是希望與之前停止子視頻顯示時(shí)的位置相同的位
置上顯示該子視頻。在本發(fā)明中給出的子視頻的顯示用數(shù)據(jù)(即，元數(shù)據(jù))是具有在主視
頻中的每個(gè)時(shí)間位置應(yīng)該或可以在主視頻中的哪個(gè)位置顯示子視頻的有關(guān)信息的數(shù)據(jù)。位
置指定器110使用與子視頻的視頻數(shù)據(jù)一并輸入的元數(shù)據(jù)，輸出與回放期間的時(shí)間信息所
指示的時(shí)間位置相對(duì)應(yīng)的、子視頻(子幀)的顯示位置。 參照?qǐng)D2到5，具體描述在本實(shí)施例中處理的視頻顯示用的元數(shù)據(jù)。 圖2和3示出了根據(jù)本發(fā)明中給出的子視頻顯示的元數(shù)據(jù)示例。視頻數(shù)據(jù)中包含
的視頻流(子視頻流)包括首部和視頻數(shù)據(jù)部分。首部包括關(guān)于該流的多種信息，該首部
包括元數(shù)據(jù)。 圖2和3各自均示出了元數(shù)據(jù)的具體結(jié)構(gòu)(圖2(a)，圖3(a))以及由元數(shù)據(jù)指定 的顯示區(qū)域或可顯示區(qū)域(圖2(b)，圖3(b))。此外，添加了示意性地示出一維的顯示區(qū)域 或可顯示區(qū)域的圖(圖2(c)，圖3(c))，以便容易理解顯示區(qū)域或可顯示區(qū)域的時(shí)間變化。 即，圖2(c)和圖3(c)中的縱軸表示屏幕上的二維位置，所示帶狀垂直寬度對(duì)應(yīng)于顯示區(qū)域 或可顯示區(qū)域的大小。 圖2(a)示出了元數(shù)據(jù)結(jié)構(gòu)的示例。元數(shù)據(jù)包括子視頻的總播放時(shí)間200 ;可顯示 時(shí)間信息201 ，其表示基于主視頻中的回放時(shí)間(基于"OO: 00: OO"的回放時(shí)間，回放開始位 置)而允許顯示子視頻的主視頻時(shí)間范圍；以及顯示區(qū)域信息202，示出了在可顯示時(shí)間范 圍中的每個(gè)時(shí)刻，子視頻在主視頻中的顯示位置。這里，假設(shè)子視頻(子幀)具有預(yù)定的固 定顯示尺寸，圖2的顯示區(qū)域信息202給出了該子幀的左上頂點(diǎn)。例如，從時(shí)間"00:00:10" 開始顯示子視頻，并且其左上頂點(diǎn)定位在(xl，yl)。當(dāng)然，應(yīng)該理解頂點(diǎn)坐標(biāo)并不限于左上 點(diǎn)的坐標(biāo)，而可以使用例如子視頻中心的坐標(biāo)。 圖2(b)示出了在主視頻的各個(gè)時(shí)間段顯示子視頻時(shí)顯示區(qū)域的二維表征。例如， 從時(shí)間"00:00:15"到時(shí)間"00:00:30"，在主視頻中左上頂點(diǎn)設(shè)定為坐標(biāo)(x2， y2)的區(qū)域
中合成和顯示子視頻。 圖2(c)示出了其中顯示子視頻的顯示區(qū)域的一維表征。垂直方向示出了主視 頻中的空間位置(區(qū)域)，水平方向示出了時(shí)間(主視頻的時(shí)間位置)。例如，在時(shí)間"00:00:15"，子視頻的左上頂點(diǎn)從坐標(biāo)(xl， yl)轉(zhuǎn)移到(x2， y2)。在圖2(c)中，由在時(shí)間 "00:00:15"和"00:00:30"改變位置的帶狀區(qū)域給定子視頻在主視頻中的顯示區(qū)域。
圖3(a)也示出了元數(shù)據(jù)結(jié)構(gòu)的示例。圖3(a)所示的元數(shù)據(jù)包括子視頻的總播 放時(shí)間300 ;可顯示時(shí)間信息301，其表示基于主視頻中的回放時(shí)間允許顯示子視頻的主視 頻時(shí)間范圍；以及可顯示區(qū)域信息302，示出了在可顯示時(shí)間范圍中的每個(gè)時(shí)刻主視頻中 可以顯示(允許顯示)子視頻的區(qū)域。這里，圖3所示的可顯示區(qū)域信息302給出了兩個(gè) 點(diǎn)的坐標(biāo)，即其中可以顯示子幀的區(qū)域的左上和右下頂點(diǎn)。例如，參照?qǐng)D3(b)，示出了從時(shí) 間"00:00:10"開始，可以在坐標(biāo)為(xl， yl)的左上頂點(diǎn)和坐標(biāo)為(xl'， yl')的右下頂點(diǎn) 的矩形區(qū)域中顯示子視頻(子幀)。如果子視頻(子幀)具有預(yù)定的固定顯示尺寸，當(dāng)圖 3中可顯示區(qū)域信息302所指定的可顯示區(qū)域大于子幀的顯示尺寸時(shí)，則在顯示子視頻時(shí)， 能夠在可顯示區(qū)域內(nèi)的任意位置顯示子視頻。此外，可以在可顯示區(qū)域范圍內(nèi)移動(dòng)或放大 正在顯示的子視頻(子幀)。例如，在圖3(c)中，主視頻中可以顯示子視頻的區(qū)域由在時(shí)間 "00:00:15 "和"00:00:30 "改變位置的帶狀區(qū)域指定。 雖然圖2和3示出了兩個(gè)示例中由元數(shù)據(jù)指定的顯示(可顯示)區(qū)域是基于子視 頻(子幀)具有固定尺寸而描述的，但是子視頻尺寸不限于此；調(diào)整顯示區(qū)域信息，以給出 子視頻本身的顯示尺寸。即，類似于圖3，顯示區(qū)域由左上和右下頂點(diǎn)這兩個(gè)點(diǎn)的坐標(biāo)指定， 并可以顯示子視頻，從而放大或縮小子視頻以滿足顯示區(qū)域的尺寸。 圖4中的表相對(duì)于本發(fā)明所給的元數(shù)據(jù)，示出了對(duì)其中指定顯示(可顯示)區(qū)域 的時(shí)間范圍進(jìn)行設(shè)定的變化形式以及顯示(可顯示)區(qū)域的描述格式的變化形式。這里， 圖4示出了顯示(可顯示)區(qū)域僅限于矩形的情況。 存在不同方式來設(shè)定時(shí)間范圍；一種方式是指定任意區(qū)間，另一種方式是向每個(gè) 固定單位的區(qū)間給定顯示(可顯示)區(qū)域。這里，當(dāng)指定任意區(qū)間時(shí)，如果假設(shè)連續(xù)期間內(nèi) 沒有時(shí)間間隙或交疊，則可以省略區(qū)間的開始和結(jié)束時(shí)間之一。此外，在圖4的表中，使用 通用時(shí)間記法"小時(shí)分鐘秒"來作為示例。但是，時(shí)間記法不限于此；例如，可以采用 "秒"或"毫秒"格式來給出總時(shí)間。另一方面，當(dāng)向每個(gè)固定單位的區(qū)間給定顯示(可顯示) 區(qū)域時(shí)，向每任意時(shí)間單位給定一個(gè)顯示(可顯示)區(qū)域，例如，每秒、每250毫秒、每分鐘 等，而不一定是圖4中的示例每5秒。此外，也可以使用時(shí)間之外的、視頻編碼期間的單位， 諸如幀單位和GOP(畫面組)單位。依據(jù)所存視頻的性質(zhì)來適當(dāng)設(shè)定單位區(qū)間的長度。
可以采用多種方式指定顯示(可顯示)區(qū)域的描述格式，包括多個(gè)坐標(biāo)集、兩個(gè)坐 標(biāo)集以及具有尺寸的坐標(biāo)集。其中，可以用單個(gè)坐標(biāo)集確定區(qū)域的情況是子視頻的顯示尺 寸已預(yù)先確定的情況。當(dāng)用兩個(gè)坐標(biāo)集或具有給定尺寸的坐標(biāo)集指定區(qū)域時(shí)，則存在兩種 情況子視頻的顯示尺寸小于指定的區(qū)域，或者指定了所謂的可顯示區(qū)域；以及將子視頻 的尺寸調(diào)整(放大或縮小尺寸)為指定的區(qū)域或顯示區(qū)域。也可以指定主視頻中從上到下 或從左到右的帶狀區(qū)域(例如，屏幕上半部分或下半部分區(qū)域)作為可顯示區(qū)域。雖然圖4 中顯示(可顯示)區(qū)域的示例指定為矩形區(qū)域，但是除此之外，可以給定顯示(可顯示)區(qū) 域其他形狀，例如多邊形和橢圓形，或者顯示(可顯示)區(qū)域可以形成為任意形狀。例如， 可以使用任意形狀的屏蔽圖像來形成該形狀的區(qū)域。這里，省略了對(duì)任意形狀的具體描述 格式的說明。 此外，也可以指定如圖5所示的隨時(shí)間持續(xù)移動(dòng)的顯示(可顯示)區(qū)域，而不是圖2和3所示的顯示(可顯示)區(qū)域的位置在離散的特定時(shí)間點(diǎn)改變的情況。在這種情況下， 如圖5所示，例如，可以通過時(shí)間區(qū)間、該時(shí)間區(qū)間開始時(shí)間位置處的顯示(可顯示)區(qū)域 位置、以及該時(shí)間區(qū)間結(jié)束時(shí)間位置處的顯示(可顯示)區(qū)域位置的組合，給定元數(shù)據(jù)(圖 5(a))中包括的顯示(可顯示)區(qū)域信息502。作為示例，圖5(b)示出了子幀的顯示區(qū)域。 這里，在時(shí)間"00:00:10"，子幀顯示在左上頂點(diǎn)坐標(biāo)為(xl，yl)的顯示區(qū)域中。然后，顯示 區(qū)域持續(xù)移動(dòng)，從而在時(shí)間"00:00:20"，子幀顯示在左上頂點(diǎn)坐標(biāo)為(x2， y2)的顯示區(qū)域 中。此外，顯示區(qū)域還持續(xù)移動(dòng)，從而在時(shí)間"00:00:40"，子幀顯示在左上頂點(diǎn)坐標(biāo)為(x3， y3)的顯示區(qū)域中。圖5(c)示意性地示出了上述情況，其中以一維形式表示出顯示區(qū)域或 可顯示區(qū)域。 應(yīng)該注意，用于指定持續(xù)改變的區(qū)域的方法不限于此。也可以通過給定開始時(shí)間 位置的位置連同單位變化量(移動(dòng)矢量)來指定顯示(可顯示)區(qū)域。 此外，在本發(fā)明中，將元數(shù)據(jù)指定的區(qū)域作為顯示區(qū)域(其中進(jìn)行顯示的區(qū)域)或 可顯示區(qū)域(其中允許顯示的區(qū)域)進(jìn)行處理。相反，也可以將除了上述指定區(qū)域之外的 其他區(qū)域理解為禁止顯示區(qū)域(其中不允許顯示的區(qū)域)。即，本發(fā)明可以類似地應(yīng)用于對(duì) 可顯示時(shí)間和禁止顯示區(qū)域進(jìn)行指定的元數(shù)據(jù)。 下面參照?qǐng)D6到IO，描述使用上述顯示用元數(shù)據(jù)來回放和顯示與主視頻合成的子 視頻時(shí)的具體操作。 圖6是示出了顯示子視頻時(shí)的處理的流程圖，其中包括子視頻(子幀)的顯示/ 不顯示之間的切換。該流程圖主要示出了圖l所示視頻顯示設(shè)備的設(shè)備組件中位置指定器 110、處理控制器109和合成器105的操作。圖7到10示出了根據(jù)圖6流程圖，當(dāng)在圖1的 視頻顯示設(shè)備上合成并顯示子視頻時(shí)的操作結(jié)果的示例。在圖7到10中，黑色填充部分指 示子視頻的顯示時(shí)間和此時(shí)的顯示位置。 在以下描述中，以圖2所示的元數(shù)據(jù)為例，描述回放和顯示處理，其中顯示區(qū)域的 尺寸等于子視頻的顯示尺寸。但是，即使使用對(duì)所謂的可顯示區(qū)域進(jìn)行描述的元數(shù)據(jù)，即， 顯示區(qū)域的尺寸大于子視頻的顯示尺寸的情況，基本操作也未改變，除了由指定器110從 可顯示區(qū)域中選擇適當(dāng)?shù)娘@示位置并將其輸出。 位置指定器110讀取元數(shù)據(jù)(步驟S1)，接著基于元數(shù)據(jù)中包括的可顯示時(shí)間信息 (圖2中201)確定主視頻的當(dāng)前回放時(shí)間是否落入可顯示時(shí)間內(nèi)(步驟S2和S3)。如果該 時(shí)間在可顯示時(shí)間的開始時(shí)間之前，則不顯示子視頻，并等待可顯示時(shí)間的開始(步驟S2 : 否)。 如果主視頻中的當(dāng)前回放時(shí)間在可顯示時(shí)間內(nèi)(步驟S2 :是一步驟S3 :否)，則位 置指定器110從輸入單元108獲取子視頻顯示和不顯示狀態(tài)之間的切換指令。這里，當(dāng)接 收到顯示子視頻的指令，從而子視頻處于顯示狀態(tài)時(shí)(步驟S4 :是)，則執(zhí)行子視頻解碼過 程，以輸出解碼畫面(步驟S5)。此外，位置指定器110基于元數(shù)據(jù)，獲取與主視頻中的當(dāng)前 回放時(shí)間位置有關(guān)的時(shí)間信息(步驟S6)，并確定與當(dāng)前回放時(shí)間位置相對(duì)應(yīng)的子視頻顯 示位置(步驟S7)。然后，合成器105在主視頻中指定的顯示位置處合成并顯示子視頻(步 驟S8)。當(dāng)子視頻的數(shù)據(jù)未結(jié)束時(shí)(步驟S9 :否)，操作轉(zhuǎn)向步驟S3，繼續(xù)該過程。
另一方面，當(dāng)用戶使用子視頻顯示和不顯示狀態(tài)之間的切換指令來命令將子視頻 設(shè)定到不顯示狀態(tài)時(shí)(S4 :否)，則停止子視頻的解碼和輸出處理(步驟S10)，以使子視頻
11的顯示本身暫時(shí)停止。 當(dāng)完成子視頻回放時(shí)(S9 :是)或主視頻的回放時(shí)間已超過子視頻可顯示時(shí)間的 結(jié)束時(shí)間時(shí)(S3:是)，子視頻顯示處理結(jié)束。 圖7到10是示意性地示出了主視頻與子視頻之間的位置關(guān)系的圖。垂直方向示 出了主視頻中的空間位置，水平方向示出了時(shí)間?，F(xiàn)在，在時(shí)間"00:00:00 "開始輸出主視 頻。這些圖也示出了在使用圖2(a)中的元數(shù)據(jù)結(jié)構(gòu)時(shí)子視頻的顯示狀態(tài)。
首先，圖7是示出了直到時(shí)間"00:00:13"的狀況。參照?qǐng)D2(a)中的元數(shù)據(jù)結(jié)構(gòu)， 子視頻可顯示時(shí)間從時(shí)間"00:00:10"開始。接著，當(dāng)用戶在時(shí)間"00:00:13"做出顯示子 視頻的控制時(shí)(圖6中，步驟S2 :是一步驟S3 :否一步驟S4 :是)，解碼子視頻(步驟S5)。 將子視頻與主視頻合成，并在由元數(shù)據(jù)指定的對(duì)應(yīng)于時(shí)間"00:00:13"的顯示位置上開始子 視頻顯示(圖7中的黑色填充部分)。 圖8是示出了直到時(shí)間"00:00:20"的狀況的圖。參照?qǐng)D2(a)中的元數(shù)據(jù)結(jié)構(gòu)， 描述在時(shí)間"00:00:15"時(shí)的子視頻顯示區(qū)域改變的過程。相應(yīng)地，位置指定器110根據(jù)元 數(shù)據(jù)中的顯示區(qū)域信息202改變子視頻顯示區(qū)域(步驟S7)。然后，當(dāng)在時(shí)間"00:00:20" 通過輸入單元108輸入將子視頻狀態(tài)設(shè)定為不顯示狀態(tài)的信號(hào)時(shí)(步驟S4 :否)，從位置指 定器IIO向合成器105輸出用于停止子視頻輸出的信號(hào)。由此，合成器105停止子視頻輸 出(步驟S10)。 接下來，圖9是示出了直到時(shí)間"00:00:28"的狀況的圖，其中顯示再次切換到子 視頻(子幀)顯示狀態(tài)。在這種情況下，子視頻從暫停狀態(tài)返回到回放狀態(tài)，并播放在時(shí)間 "00:00:20"播放的子視頻的繼續(xù)部分。此時(shí)，在元數(shù)據(jù)指定的對(duì)應(yīng)于時(shí)間"OO: 00:28"的顯 示位置上顯示子視頻(子幀)。 接下來，圖10是示出了直到時(shí)間"00:00:36"的狀況的圖，其中完成了總回放時(shí) 間為"15秒"的子視頻回放。首先參照?qǐng)D2(a)中所示的元數(shù)據(jù)，子視頻顯示區(qū)域在時(shí)間 "00:00:30"改變(步驟S7)。然后，在時(shí)間"OO: 00:36"，已經(jīng)過了總回放時(shí)間"15秒"，子視 頻的輸出停止(步驟S9:是)。 如上所述，在根據(jù)本發(fā)明第一實(shí)施例的視頻顯示設(shè)備1中，當(dāng)利用給定了子視頻 顯示區(qū)域或可顯示區(qū)域的元數(shù)據(jù)來合成和顯示子視頻和主視頻時(shí)，可以適當(dāng)?shù)刂付ㄖ饕曨l 內(nèi)部與顯示時(shí)間相對(duì)應(yīng)的子視頻顯示位置。由此，可以在可顯示時(shí)間的范圍內(nèi)自由地將子 視頻在顯示與不顯示狀態(tài)之間切換。此外，即使自由地進(jìn)行顯示與不顯示狀態(tài)之間的切換， 也可以避免在對(duì)主視頻不利的位置上合成和顯示子視頻。 在本實(shí)施例的圖1中，上述元數(shù)據(jù)是例如獨(dú)立于每個(gè)視頻數(shù)據(jù)集而輸入的。例如， 當(dāng)用于管理視頻數(shù)據(jù)的管理數(shù)據(jù)(諸如解碼系統(tǒng)等對(duì)編碼數(shù)據(jù)進(jìn)行解碼所需的信息；以及 播放視頻所需的信息，例如指定視頻剪輯和聯(lián)結(jié)的播放列表)給定為獨(dú)立于視頻數(shù)據(jù)的流 時(shí)，可以將元數(shù)據(jù)存儲(chǔ)到管理數(shù)據(jù)中，以給予視頻顯示設(shè)備1。備選地，如圖2(a)或圖3(a) 所示，可以將上述元數(shù)據(jù)存儲(chǔ)在包括子視頻的視頻數(shù)據(jù)的視頻流中，以提供該元數(shù)據(jù)。在這 種情況下，必需提供在視頻流輸入視頻顯示設(shè)備1之前將元數(shù)據(jù)與子視頻的視頻流相分離 的處理。 此外，因?yàn)樯鲜鲈獢?shù)據(jù)是在回放子視頻時(shí)消耗的，所以一般認(rèn)為元數(shù)據(jù)與子視頻 是一一對(duì)應(yīng)的。但是，例如，也可以考慮一種使用方法，以使主視頻具有共同應(yīng)用于多個(gè)子視頻集的元數(shù)據(jù)集。在這種情況下，元數(shù)據(jù)可以存儲(chǔ)在主視頻的視頻數(shù)據(jù)(視頻數(shù)據(jù)流)
中。此外，雖然圖2(a)和3(a)中前述元數(shù)據(jù)存儲(chǔ)在視頻流的首部位置，但是存儲(chǔ)位置不限
于此。例如，當(dāng)將視頻數(shù)據(jù)劃分成多個(gè)分組以進(jìn)行傳輸時(shí)，元數(shù)據(jù)可以作為新的分組嵌入在
一個(gè)視頻分組與下一個(gè)之間，或者存儲(chǔ)到每個(gè)視頻分組的分組首部中。 通過以上述方式提供元數(shù)據(jù)連同視頻數(shù)據(jù)，視頻分發(fā)者能夠在希望的顯示位置上
以畫中畫模式顯示子視頻。 此外，雖然圖1所示視頻顯示設(shè)備1的合成器105只調(diào)整子視頻，而不調(diào)整主視 頻(即，主視頻是全屏顯示的)，但是可以在主視頻的解碼視頻的輸入側(cè)使用包括調(diào)整器 106a(與子視頻的調(diào)整器106相分離的附加調(diào)整器)的合成器105a，以通過調(diào)整主和子視 頻來產(chǎn)生輸出(未具體示出合成器105a和調(diào)整器106a)。然而，在這種情況下，因?yàn)樵獢?shù)據(jù) 表示主視頻上合成和顯示子視頻的顯示(可顯示)區(qū)域，所以當(dāng)前述調(diào)整器106a調(diào)整主視 頻時(shí)，必需與該調(diào)整相符合地調(diào)整由元數(shù)據(jù)給定的子視頻顯示(可顯示)區(qū)域。例如，如果 將主視頻在垂直和水平方向上縮小一半，以進(jìn)行顯示，則與主視頻合成和顯示的子視頻顯 示(可顯示)區(qū)域也在垂直和水平方向上壓縮一半。雖然在其他實(shí)施例中并未具體提及該 內(nèi)容，但是該內(nèi)容應(yīng)該類似地應(yīng)用于其他實(shí)施例。
(第二實(shí)施例) 接下來，使用圖1、6和11到15，描述根據(jù)本發(fā)明第二實(shí)施例的視頻顯示設(shè)備、方法 和顯示用數(shù)據(jù)。 類似于第一實(shí)施例，根據(jù)本發(fā)明第二實(shí)施例的視頻顯示設(shè)備2的示意性配置可以 由圖l功能框圖給出。但是，在第二實(shí)施例中，所處理的元數(shù)據(jù)不同于第一實(shí)施例的元數(shù) 據(jù)。至于顯示裝置的操作，視頻顯示設(shè)備1(位置指定器110)和視頻顯示設(shè)備2(位置指定 器210)之間只有位置指定器的操作不同。因此，以下對(duì)第二實(shí)施例的視頻顯示設(shè)備2中使 用的元數(shù)據(jù)和使用該元數(shù)據(jù)的回放期間的具體操作的描述主要集中在與第一實(shí)施例的不 同之處。 圖11示出了第二實(shí)施例中處理的元數(shù)據(jù)的示例。第一實(shí)施例中舉例的元數(shù)據(jù)(圖 2和3)給定在可顯示時(shí)間內(nèi)顯示子視頻時(shí)對(duì)主視頻有利的主視頻中的子視頻(子幀)顯示 區(qū)域。因此，在圖2和3示出的元數(shù)據(jù)中，子視頻顯示區(qū)域是基于主視頻的有關(guān)回放時(shí)間軸 而與主視頻的每個(gè)回放時(shí)間點(diǎn)相對(duì)應(yīng)而給出的。相反，根據(jù)圖ll所示的第二實(shí)施例的元數(shù) 據(jù)給出了優(yōu)選的顯示區(qū)域，其中在顯示子視頻時(shí)，可以依據(jù)子視頻的內(nèi)容和創(chuàng)意，以優(yōu)選的 方式顯示子視頻本身。因此，在根據(jù)第二實(shí)施例的元數(shù)據(jù)中，子視頻顯示區(qū)域是基于子視頻 的有關(guān)回放時(shí)間軸而與子視頻中的每個(gè)回放時(shí)間點(diǎn)相對(duì)應(yīng)地給出的。 這里，將依據(jù)子視頻內(nèi)容的優(yōu)選顯示位置應(yīng)用于如下使用情況例如，當(dāng)IO秒的 子視頻包括人物A在前4秒面向右的場景以及人物B在剩余5秒面向左的另一場景時(shí)，在 前5秒將子視頻畫面顯示在屏幕左手側(cè)，而在剩余5秒將子視頻畫面顯示在屏幕右手側(cè)，以 使人物A和B都面向屏幕中心。當(dāng)然，這只是示例，而并不總是希望兩個(gè)人都面向中心，而 是顯示子視頻畫面的位置依據(jù)視頻導(dǎo)演的指示性意圖?？傊?，要理解根據(jù)圖ll所示第二實(shí) 施例的元數(shù)據(jù)是附加信息，用于指示子視頻自身的回放過程中子視頻導(dǎo)演的創(chuàng)意。
類似于針對(duì)第一實(shí)施例的圖2，圖ll(a)示出了具體元數(shù)據(jù)結(jié)構(gòu)，圖ll(b)示出了 由該元數(shù)據(jù)指定的顯示區(qū)域，圖ll(c)示意性地示出了采用一維表征的顯示區(qū)域的時(shí)間改變，以便于理解。如上所述，圖11(b)和圖11(c)中的橫軸表示子視頻的回放時(shí)間位置。圖 11(c)的縱軸表示屏幕上的二維空間位置，所示帶狀的垂直寬度對(duì)應(yīng)于顯示區(qū)域的尺寸。
圖11(a)所示的元數(shù)據(jù)包括可顯示時(shí)間信息1101，表示允許顯示子視頻的主視 頻時(shí)間范圍；以及顯示區(qū)域信息1102，示出了基于子視頻的回放時(shí)間軸，在子視頻的每個(gè) 回放時(shí)間點(diǎn)應(yīng)該顯示子視頻的主視頻中的位置。但是，可顯示時(shí)間信息1101不是必不可少 的，而可以省略。如果將其省略，則將主視頻的整個(gè)部分理解為子視頻的可顯示時(shí)間。
圖11中，假設(shè)子視頻(子幀)的顯示尺寸具有預(yù)定的固定尺寸，描述了簡單地用 子幀的左上頂點(diǎn)(或子幀的中心)坐標(biāo)指定顯示區(qū)域的情況，作為顯示區(qū)域信息1102的示 例。但是，顯示區(qū)域信息不限于此。類似于第一實(shí)施例，可以給定兩個(gè)坐標(biāo)集來指定可顯示 區(qū)域(見圖3)，或者可以給定兩個(gè)坐標(biāo)集來指定將子視頻放大或縮小顯示的顯示區(qū)域。在 圖ll(c)中，其中應(yīng)該顯示子視頻的顯示區(qū)域表示為在子視頻回放時(shí)間"00:00:05"(艮卩， 總共在子視頻回放開始之后5秒)和"00:00:10"(即，總共在子視頻回放開始之后10秒) 改變位置的帶狀區(qū)域。 接著參照?qǐng)D6、 12到15，描述使用圖11所示的元數(shù)據(jù)將子視頻與主視頻合成、回放 和顯示時(shí)的具體操作。 類似于第一實(shí)施例，圖6中的流程圖示出了當(dāng)根據(jù)本實(shí)施例的視頻顯示設(shè)備2執(zhí) 行包括有子視頻(子幀)的顯示/不顯示切換的子視頻顯示時(shí)的處理。該流程圖示出了圖 1所示的視頻顯示設(shè)備2的設(shè)備組件中位置指定器210、處理控制器109和合成器105的操 作。 類似于第一實(shí)施例中的描述，在以下描述中，將說明使用給定了顯示區(qū)域的元數(shù)
據(jù)的回放和顯示處理。但是，即使使用描述了可顯示區(qū)域的元數(shù)據(jù)，基本操作也不改變，除
了由位置指定器210從可顯示區(qū)域中選擇合適的顯示位置以輸出之外。 位置指定器210讀取輸入的元數(shù)據(jù)(步驟Sl)，然后基于該元數(shù)據(jù)中包括的可顯示
時(shí)間信息1101，確定主視頻中的當(dāng)前回放時(shí)間是否落在可顯示時(shí)間內(nèi)(步驟S2和S3)。如
果當(dāng)前回放時(shí)間在可顯示時(shí)間的開始時(shí)間之前，則不顯示子視頻，并等待可顯示時(shí)間的開
始(步驟S2 :否)。 如果主視頻中的當(dāng)前回放時(shí)間在可顯示時(shí)間內(nèi)(步驟S2 :是一步驟S3 :否)，則位 置指定器210從輸入單元108獲取子視頻顯示和不顯示狀態(tài)之間的切換指令。這里，當(dāng)接 收到顯示子視頻的指令，并且子視頻處于顯示狀態(tài)時(shí)(步驟S4 :是)，則執(zhí)行子視頻解碼過 程，以輸出解碼畫面(步驟S5)。此外，位置指定器210基于元數(shù)據(jù)，獲取與子視頻中的當(dāng)前 回放時(shí)間位置有關(guān)的時(shí)間信息(步驟S6)，并確定與子視頻中的當(dāng)前回放時(shí)間位置相對(duì)應(yīng) 的顯示位置(步驟S7)。然后，合成器105在主視頻中指定的顯示位置處合成并顯示子視 頻(步驟S8)。采用上述方式，有兩點(diǎn)與第一實(shí)施例不同在步驟S6，獲取子視頻本身的總 回放時(shí)間位置作為時(shí)間信息；以及在步驟S7，使用元數(shù)據(jù)確定與子視頻的回放時(shí)間位置相 對(duì)應(yīng)的顯示位置。 圖12到15是示意性地示出了在視頻顯示設(shè)備2上合成和顯示子視頻時(shí)的操作結(jié) 果示例。這里，在本實(shí)施例的視頻顯示設(shè)備2中，與主視頻回放時(shí)間相分離地基于子視頻回 放時(shí)間來控制元數(shù)據(jù)，該子視頻回放時(shí)間表示已再現(xiàn)和顯示了子視頻的位置。因此，圖12 到15的各幅圖中，(a)示出了如何基于子視頻回放時(shí)間來由元數(shù)據(jù)指定顯示區(qū)域，(b)示出了如何基于主視頻回放時(shí)間將子視頻與主視頻合成并顯示。在圖12到15的圖(b)中，黑 色填充部分指示子視頻的顯示時(shí)間段和此時(shí)的顯示位置。 首先，圖12是示出了直到時(shí)間"00:00:13"的狀況。參照?qǐng)D11(a)中的元數(shù)據(jù)結(jié) 構(gòu)，子視頻可顯示時(shí)間從時(shí)間"00:00:10 "開始。接著，當(dāng)用戶在時(shí)間"00:00:13 "做出顯示 子視頻的控制時(shí)(圖6中，步驟S2 :是一步驟S3 :否一步驟S4 :是)，解碼子視頻(步驟S5)。 將子視頻與主視頻合成，并在由元數(shù)據(jù)指定的對(duì)應(yīng)于時(shí)間"00:00:13"的顯示位置上開始子 視頻顯示。這里，圖12(a)示出了從子視頻回放時(shí)間中的"OO:OO:OO"開始輸出視頻時(shí)的狀 態(tài)。圖12(b)示出了在主視頻回放時(shí)間為"00:00:13"時(shí)開始輸出子視頻的狀態(tài)。
其次，圖13是示出了直到時(shí)間"00:00:20"的狀況的圖。參照?qǐng)Dll(a)中的元數(shù) 據(jù)結(jié)構(gòu)的顯示區(qū)域信息1102，在子視頻回放時(shí)間"00:00:05"改變子視頻顯示區(qū)域。相應(yīng) 地，如圖13(a)所示，顯示區(qū)域在子視頻回放時(shí)間"00:00:05"時(shí)改變。結(jié)果，在合成的視頻 上，顯示位置在時(shí)間"00:00:18"改變，如圖13(b)所示，該時(shí)間與子視頻回放(顯示)開始 之后5秒時(shí)的時(shí)間點(diǎn)相對(duì)應(yīng)。然后，當(dāng)在主視頻回放時(shí)間"00:00:20"將子視頻設(shè)定到不顯 示狀態(tài)時(shí)，停止在主視頻中顯示子視頻。在這種條件下，子視頻已播放到"00:00:07"。
接下來，圖14是示出了直到時(shí)間"00:00:28"的狀況的圖，其中顯示再次切換到子 視頻(子幀)顯示狀態(tài)。在這種情況下，子視頻從暫停狀態(tài)返回到回放狀態(tài)，并播放在主視 頻時(shí)間"00:00:20"播放的子視頻的繼續(xù)部分，換言之，開始從子視頻時(shí)間"00:00:07"(對(duì) 應(yīng)于總回放時(shí)間7秒的時(shí)間位置)播放子視頻。由元數(shù)據(jù)給定子視頻(子幀)的顯示位 置，以便在對(duì)應(yīng)于子視頻時(shí)間位置"00:00:07"(對(duì)應(yīng)于總回放時(shí)間7秒的時(shí)間位置)的顯 示位置上顯示子視頻。 接下來，圖15是示出了直到主視頻時(shí)間"00:00:36"的狀況的圖，其中完成了總 回放時(shí)間為"15秒"的子視頻回放。參照?qǐng)Dll(a)中所示的元數(shù)據(jù)中包括的顯示區(qū)域信息 1102，子視頻顯示區(qū)域在子視頻時(shí)間"00:00:30"(在對(duì)應(yīng)于總回放時(shí)間10秒的時(shí)間位置) 改變。因此，在子視頻時(shí)間"00:00:10"或在主視頻時(shí)間"00:00:31 "，子視頻的顯示位置改 變。 如上所述，在根據(jù)本實(shí)施例的視頻顯示設(shè)備2中，當(dāng)使用給定了子視頻顯示區(qū)域 (或可顯示區(qū)域)的元數(shù)據(jù)將子視頻與主視頻合成并顯示時(shí)，可以通過指定應(yīng)該顯示子視 頻的位置將子視頻與主視頻合成并顯示，該位置是依據(jù)子視頻內(nèi)容和/或創(chuàng)意而預(yù)先確定 的。由此，子視頻可以在顯示和不顯示狀態(tài)之間自由切換。此外，如果在顯示和不顯示狀態(tài) 之間自由切換，則可以在符合子視頻內(nèi)容和/或創(chuàng)意的顯示位置上合成和顯示子視頻。
此外，對(duì)于本實(shí)施例的元數(shù)據(jù)而言，可以通過類似于第一實(shí)施例的、將元數(shù)據(jù)存儲(chǔ) 在獨(dú)立于視頻數(shù)據(jù)的管理數(shù)據(jù)的數(shù)據(jù)流中的形式來提供元數(shù)據(jù)，或者如圖ll(a)所示，通 過將元數(shù)據(jù)存儲(chǔ)在包括有子視頻的視頻數(shù)據(jù)的視頻流中的形式來提供元數(shù)據(jù)。當(dāng)存儲(chǔ)在視 頻流中時(shí)，有必要提供在子視頻的視頻流輸入視頻顯示設(shè)備2之前將元數(shù)據(jù)與其分離的處 理。應(yīng)該注意，因?yàn)楦鶕?jù)第二實(shí)施例的元數(shù)據(jù)是與子視頻一一對(duì)應(yīng)地給出的，所以通常將元 數(shù)據(jù)添加到子視頻的視頻數(shù)據(jù)中或添加到關(guān)于子視頻的管理數(shù)據(jù)中。此外，雖然圖ll(a) 中元數(shù)據(jù)存儲(chǔ)在視頻流的首部位置，但是存儲(chǔ)位置不限于此。例如，當(dāng)將視頻數(shù)據(jù)劃分成多 個(gè)分組以進(jìn)行傳輸時(shí)，元數(shù)據(jù)可以作為新的分組嵌入在一個(gè)視頻分組與下一個(gè)之間，或者 存儲(chǔ)到每個(gè)視頻分組的分組首部中。
(第三實(shí)施例) 接下來，使用圖1、6和16，描述根據(jù)本發(fā)明第三實(shí)施例的視頻顯示設(shè)備、方法和顯 示用數(shù)據(jù)。 類似于第一和第二實(shí)施例，根據(jù)本發(fā)明第三實(shí)施例的視頻顯示設(shè)備3的示意性配 置可以由圖1功能框圖給出。但是，因?yàn)橹挥形恢弥付ㄆ?10的操作不同，所以在本實(shí)施例 中位置指定器指定為310。類似于第一和第二實(shí)施例，在根據(jù)第三實(shí)施例的視頻顯示設(shè)備3 上執(zhí)行子視頻顯示的過程也可以由圖6所示的流程圖給出。以下對(duì)根據(jù)第三實(shí)施例的視頻 顯示設(shè)備3的操作的描述主要集中在與第一實(shí)施例的視頻顯示設(shè)備1的不同之處。
在本實(shí)施例的視頻顯示設(shè)備3中，輸入第一和第二實(shí)施例中描述的兩種元數(shù)據(jù)作 為用于顯示子視頻的元數(shù)據(jù)，以便基于這兩個(gè)元數(shù)據(jù)集的組合來確定子視頻的顯示區(qū)域。 相應(yīng)地，視頻顯示設(shè)備3的位置指定器310接收兩種元數(shù)據(jù)和兩個(gè)時(shí)間信息集(主視頻的 回放時(shí)間位置信息和子視頻的回放時(shí)間位置信息)(流程圖中步驟S6)，并確定子視頻的適 當(dāng)顯示區(qū)域(流程圖中步驟S7)。 圖16是示意性地示出了主和子視頻的狀態(tài)的圖。圖16(a)示出了相對(duì)于主視頻而 指定的子視頻可顯示區(qū)域，該區(qū)域由第一實(shí)施例中描述的元數(shù)據(jù)給定，而圖16(b)示出了 相對(duì)于子視頻本身而指定的顯示區(qū)域，該區(qū)域由第二實(shí)施例中描述的元數(shù)據(jù)指定。圖16(c) 是示出了圖16(b)的元數(shù)據(jù)如何指定回放期間的子視頻顯示區(qū)域。圖16(d)是示出了通過 圖16(a)和16(b)的元數(shù)據(jù)將主視頻和子視頻合成并顯示的狀況的圖。
類似于第一和第二實(shí)施例，圖16(c)和16(d)示出了使用前述兩種元數(shù)據(jù)的子視 頻的顯示位置，其中子視頻在時(shí)間"00:00:13"開始顯示，在時(shí)間"00:00:20"停止顯示，在 時(shí)間"00:00:28"重新開始顯示，并在時(shí)間"00:00:36"結(jié)束顯示。此外，在圖16(c)中給出 了對(duì)應(yīng)于(b)中所示子視頻的顯示區(qū)域16B，在圖16(d)中示出了 (a)中所示的主視頻中的 子視頻的可顯示區(qū)域16A。圖16(d)中的陰影區(qū)域或黑色填充區(qū)域示出了子視頻的顯示時(shí) 間段和這些時(shí)間段上的顯示位置。 通常將子視頻作為增值附加內(nèi)容給予主視頻。因此，一般希望在執(zhí)行子視頻回放 時(shí)盡可能地保持主視頻不受到破壞。因此，當(dāng)給出前述兩種元數(shù)據(jù)時(shí)，通過優(yōu)先考慮相對(duì)于 主視頻而給定的子視頻可顯示區(qū)域16A，而不是相對(duì)于子視頻本身而給定的顯示區(qū)域16B， 確定顯示區(qū)域。在圖16(d)中，在時(shí)間范圍1601 ( "00:00:13"到"00:00:15")中，可顯示區(qū)域16A
和顯示區(qū)域16B彼此精確交疊，從而基于兩個(gè)元數(shù)據(jù)集來確定子視頻的顯示區(qū)域。在時(shí)間范圍1602 ( "00:00:15"到"00:00:20"以及"00:00:28"到"00:00:30")
中，顯示區(qū)域16B完全包括在可顯示區(qū)域16A中。因此，在范圍1602中，基于與第二實(shí)施例 中所示的元數(shù)據(jù)類似的元數(shù)據(jù)，在相對(duì)于子視頻本身而給定的顯示區(qū)域中顯示子視頻。
在時(shí)間范圍1603( "00:00:30"到"00:00:36")中，相對(duì)于主視頻而給定的子視 頻可顯示區(qū)域16A與符合子視頻內(nèi)容本身而指定的子視頻顯示區(qū)域16B分離在不同區(qū)域 中。在這種情況下，優(yōu)先考慮相對(duì)于主視頻而給定的子視頻可顯示區(qū)域16A。 S卩，在時(shí)間范 圍1603中，基于與第一實(shí)施例中所示的元數(shù)據(jù)類似的元數(shù)據(jù)，在相對(duì)于主視頻而給定的子 視頻可顯示區(qū)域中顯示子視頻。 雖然未示出，但是當(dāng)用于指定子視頻顯示位置的圖16(a)所示的可顯示區(qū)域和圖
1616(b)所示的顯示區(qū)域位于不同區(qū)域時(shí)，以及當(dāng)圖16(a)所示的可顯示區(qū)域大于子視頻(子幀)的顯示尺寸時(shí)，可以添加如下處理通過確定包括在圖16(a)可顯示區(qū)域中并靠近圖16(b)顯示區(qū)域的區(qū)域，設(shè)定子視頻顯示區(qū)域。當(dāng)然，如果情況相反，子視頻的創(chuàng)意非常重要，則可以通過優(yōu)選考慮圖16(b)的顯示區(qū)域，基于圖16(b)的顯示區(qū)域來強(qiáng)制設(shè)定子視頻的顯示位置。 這里，在本發(fā)明的上述每個(gè)實(shí)施例中，輸入至視頻顯示設(shè)備的視頻數(shù)據(jù)(和管理數(shù)據(jù))和元數(shù)據(jù)可以是通過廣播和/或通信之類的傳輸路徑提供的，或者可以是已預(yù)先存儲(chǔ)記錄在記錄介質(zhì)上，從而可以相繼讀出該記錄介質(zhì)上記錄的視頻數(shù)據(jù)(和管理數(shù)據(jù))和元數(shù)據(jù)以對(duì)其進(jìn)行回放顯示。對(duì)于通過傳輸路徑在記錄介質(zhì)上記錄一次數(shù)據(jù)并隨后讀出記錄的視頻數(shù)據(jù)(和管理數(shù)據(jù))和元數(shù)據(jù)以進(jìn)行回放的情況而言，上述狀況也是相同的。艮卩，本發(fā)明的視頻顯示設(shè)備、方法和顯示用數(shù)據(jù)可以應(yīng)用為廣播視頻接收機(jī)、視頻通信接收機(jī)、以及具有記錄介質(zhì)的記錄和再現(xiàn)裝置的一個(gè)組件，也可以應(yīng)用于記錄有上述每個(gè)實(shí)施例中描述的元數(shù)據(jù)的記錄介質(zhì)。 還可以與視頻數(shù)據(jù)(和管理)相分離地控制本發(fā)明每個(gè)實(shí)施例中示出的元數(shù)據(jù)。根據(jù)這一特征，當(dāng)在再現(xiàn)端產(chǎn)生元數(shù)據(jù)時(shí)，也可以在以畫中畫形式回放視頻時(shí)，在再現(xiàn)端與通過廣播、通信或記錄介質(zhì)獨(dú)立輸入的視頻數(shù)據(jù)相組合地使用所產(chǎn)生的視頻數(shù)據(jù)。在這種情況下，例如，元數(shù)據(jù)可以通過針對(duì)區(qū)域的用戶偏好設(shè)定之類的處理來形成，這些區(qū)域是在顯示子視頻期間，主視頻中用戶不在乎將其隱藏的區(qū)域以及不希望隱藏的區(qū)域。當(dāng)在記錄介質(zhì)上記錄通過廣播、通信等傳輸路徑輸入的視頻數(shù)據(jù)(和管理數(shù)據(jù))時(shí)，或者緊接在從記錄介質(zhì)中讀出視頻數(shù)據(jù)(和管理數(shù)據(jù))后回放視頻數(shù)據(jù)(和管理數(shù)據(jù))之前，在再現(xiàn)端執(zhí)行元數(shù)據(jù)的產(chǎn)生。該產(chǎn)生過程可以通過用戶的直接輸入來進(jìn)行，或者可以使用J肌a(注冊(cè)商標(biāo))等程序來動(dòng)態(tài)地進(jìn)行。即，無論元數(shù)據(jù)最終是在哪里設(shè)定的，本發(fā)明均可以應(yīng)用于使用每個(gè)實(shí)施例中描述的元數(shù)據(jù)的視頻顯示設(shè)備和方法。 這里，所公開的實(shí)施例從各個(gè)方面而言均是示例性而非限制性的。本發(fā)明的范圍由權(quán)利要求的范圍限定，而不是前述內(nèi)容限定，落入權(quán)利要求范圍的等同含義和范圍中的所有改變都應(yīng)理解為由所附權(quán)利要求所涵蓋。
權(quán)利要求
一種視頻合成設(shè)備，用于接收第一視頻和第二視頻，并輸出與第二視頻合成的第一視頻，所述視頻合成設(shè)備包括指定裝置，用于接收包括時(shí)間信息和顯示區(qū)域信息的顯示用數(shù)據(jù)，并基于所述顯示用數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視頻內(nèi)的顯示位置，所述時(shí)間信息表示可以顯示第二視頻的第一視頻中的時(shí)間，所述顯示區(qū)域信息表示對(duì)應(yīng)于所述時(shí)間而給予的、第二視頻的顯示區(qū)域；以及合成裝置，用于在由指定裝置指定的第一視頻內(nèi)的顯示位置上放置并合成第二視頻。
2. 根據(jù)權(quán)利要求l所述的視頻合成設(shè)備，其中所述顯示用數(shù)據(jù)包括第二顯示區(qū)域信息，第二顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻中的 時(shí)間而給予的、第二視頻的顯示區(qū)域；以及在顯示第二視頻時(shí)，指定裝置執(zhí)行如下處理根據(jù)所述顯示用數(shù)據(jù)中包括的顯示區(qū)域 信息和/或第二顯示區(qū)域信息來指定顯示位置。
3. 根據(jù)權(quán)利要求l所述的視頻合成設(shè)備，其中所述顯示用數(shù)據(jù)包括可顯示區(qū)域信息，可顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻中的時(shí)間 而給予的、第二視頻的可顯示區(qū)域；以及在顯示第二視頻時(shí)，指定裝置執(zhí)行如下處理根據(jù)所述顯示用數(shù)據(jù)中包括的顯示區(qū)域 信息和/或可顯示區(qū)域信息來指定顯示位置。
4. 一種視頻合成設(shè)備，用于接收第一視頻和第二視頻，并輸出與第二視頻合成的第一 視頻，所述視頻合成設(shè)備包括指定裝置，用于接收包括時(shí)間信息和可顯示區(qū)域信息的顯示用數(shù)據(jù)，并基于所述顯示 用數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視頻內(nèi)的顯示位置，所述時(shí)間信息表示可以顯示第二 視頻的第一視頻中的時(shí)間，所述可顯示區(qū)域信息表示對(duì)應(yīng)于所述時(shí)間而給予的、第二視頻 的可顯示區(qū)域；以及合成裝置，用于在由指定裝置指定的第一視頻內(nèi)的顯示位置上放置并合成第二視頻。
5. 根據(jù)權(quán)利要求4所述的視頻合成設(shè)備，其中所述顯示用數(shù)據(jù)包括顯示區(qū)域信息，顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻中的時(shí)間而給 予的、第二視頻的顯示區(qū)域；以及在顯示第二視頻時(shí)，指定裝置執(zhí)行如下處理根據(jù)所述顯示用數(shù)據(jù)中包括的可顯示區(qū) 域信息和/或顯示區(qū)域信息來指定顯示位置。
6. 根據(jù)權(quán)利要求4所述的視頻合成設(shè)備，其中所述顯示用數(shù)據(jù)包括第二可顯示區(qū)域信息，第二可顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻 中的時(shí)間而給予的、第二視頻的可顯示區(qū)域；以及在顯示第二視頻時(shí)，指定裝置執(zhí)行如下處理根據(jù)所述顯示用數(shù)據(jù)中包括的可顯示區(qū) 域信息和/或第二可顯示區(qū)域信息來指定顯示位置。
7. —種視頻合成設(shè)備，用于接收第一視頻和第二視頻，并輸出與第二視頻合成的第一 視頻，所述視頻合成設(shè)備包括指定裝置，用于接收包括時(shí)間信息和顯示區(qū)域信息的顯示用數(shù)據(jù)，并基于所述顯示用 數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視頻內(nèi)的顯示位置，所述時(shí)間信息表示與第一視頻中的 時(shí)間不同的第二視頻中的時(shí)間，所述顯示區(qū)域信息表示對(duì)應(yīng)于第二視頻中的時(shí)間而給予的、第二視頻的顯示區(qū)域；以及合成裝置，用于在由指定裝置指定的第一視頻內(nèi)的顯示位置上放置并合成第二視頻。
8. —種視頻合成設(shè)備，用于接收第一視頻和第二視頻，并輸出與第二視頻合成的第一 視頻，所述視頻合成設(shè)備包括指定裝置，用于接收包括時(shí)間信息和可顯示區(qū)域信息的顯示用數(shù)據(jù)，并基于所述顯示 用數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視頻內(nèi)的顯示位置，以使第二視頻包括在可顯示區(qū)域 信息中，所述時(shí)間信息表示與第一視頻中的時(shí)間不同的第二視頻中的時(shí)間，所述可顯示區(qū) 域信息表示對(duì)應(yīng)于第二視頻中的時(shí)間而給予的、第二視頻的可顯示區(qū)域；以及合成裝置，用于在由指定裝置指定的第一視頻內(nèi)的顯示位置上放置并合成第二視頻。
9. 根據(jù)權(quán)利要求1到8之一所述的視頻合成設(shè)備，其中合成的輸出視頻是畫中畫格式 的視頻，第一視頻對(duì)應(yīng)于要在父幀上顯示的視頻，第二視頻對(duì)應(yīng)于要在子幀上顯示的視頻。
10. —種程序，使計(jì)算機(jī)能夠接收第一視頻和第二視頻，并對(duì)輸出與第二視頻合成的第 一視頻進(jìn)行控制，以實(shí)現(xiàn)指定功能，用于通過接收包括時(shí)間信息和顯示區(qū)域信息的顯示用數(shù)據(jù)，來執(zhí)行如下控 制基于所述顯示用數(shù)據(jù)，指定在顯示第二視頻時(shí)第一視頻內(nèi)的顯示位置，其中所述時(shí)間信 息表示可以顯示第二視頻的第一視頻中的時(shí)間，所述顯示區(qū)域信息表示對(duì)應(yīng)于所述時(shí)間而 給予的、第二視頻的顯示區(qū)域；以及合成功能，用于執(zhí)行如下控制在由指定裝置指定的第一視頻內(nèi)的顯示位置上放置并 合成第二視頻。
11. 根據(jù)權(quán)利要求1或7所述的視頻合成設(shè)備，其中所述顯示區(qū)域信息包括用于顯示第 二視頻的矩形區(qū)域的左上頂點(diǎn)的坐標(biāo)集。
12. 根據(jù)權(quán)利要求4或8所述的視頻合成設(shè)備，其中所述可顯示區(qū)域信息包括其中顯示 第二視頻的矩形區(qū)域的左上頂點(diǎn)的坐標(biāo)集。
全文摘要
本發(fā)明提供了當(dāng)在畫中畫回放中將子幀與父幀合成并顯示時(shí)關(guān)于子幀顯示區(qū)域的顯示用數(shù)據(jù)，以給定與父幀中的視頻內(nèi)容符合的子幀顯示區(qū)域，本發(fā)明還提供了一種視頻顯示設(shè)備，用于使用顯示用數(shù)據(jù)在適當(dāng)?shù)娘@示位置顯示子幀。視頻顯示設(shè)備1包括解碼器101和103，用于解碼兩個(gè)視頻數(shù)據(jù)集；合成器105，用于合成解碼視頻以輸出；輸入單元108，用于命令子幀的顯示/不顯示；處理控制器109，用于根據(jù)該命令控制解碼器101和103操作；以及位置指定器110，用于接收命令、顯示用數(shù)據(jù)和時(shí)間信息，并向合成器105指定子幀的顯示位置。位置指定器110根據(jù)顯示用數(shù)據(jù)中包括的子幀視頻的可顯示時(shí)間信息和依據(jù)時(shí)間的顯示區(qū)域或可顯示區(qū)域的有關(guān)信息，確定子幀的顯示位置。
文檔編號(hào)H04N7/173GK101790058SQ20101014493
公開日2010年7月28日 申請(qǐng)日期2006年7月19日 優(yōu)先權(quán)日2005年7月27日
發(fā)明者山口孝好, 木山次郎, 渡部秀一 申請(qǐng)人:夏普株式會(huì)社