專利名稱：用于提供視頻節(jié)目的多媒體概要的系統(tǒng)和方法
技術(shù)領(lǐng)域：
本發(fā)明針對(duì)概要視頻節(jié)目的系統(tǒng)和方法，具體講，涉及用轉(zhuǎn)錄本信息和視頻段提供視頻節(jié)目的多媒體概要的系統(tǒng)和方法。
背景技術(shù)：
在電視的較早的年代里，只有幾個(gè)電視廣播頻道可提供觀看。隨著電視技術(shù)進(jìn)步，包括甚高頻(UHF)頻道、超高頻(VHF)頻道、有線電視、衛(wèi)星電視接收、和基于互聯(lián)網(wǎng)的技術(shù)，可提供的電視頻道數(shù)目大大地增加。
可提供觀看的電視節(jié)目的數(shù)目也大大地增加。在高清晰度電視方面，這個(gè)量共達(dá)到每天每個(gè)頻道超過二百千兆比特(200GB)的信息量。使觀眾具有快速瀏覽電視節(jié)目的內(nèi)容說明的能力，以使得觀眾能夠找到他們感興趣觀看的節(jié)目或節(jié)目段，正變得越來越重要。主要的問題在于，許多視頻節(jié)目的內(nèi)容說明是不容易接入的。
希望觀看記錄的視頻節(jié)目的觀眾的當(dāng)前的任選項(xiàng)包括(1)觀看整個(gè)視頻節(jié)目，(2)快速前進(jìn)通過整個(gè)視頻節(jié)目的記錄，以便找到感興趣的節(jié)目部分。以及(3)使用來自電子節(jié)目指南的數(shù)據(jù)，它只提供總的節(jié)目說明。
當(dāng)前還沒有可提供的系統(tǒng)或方法，借此能使觀眾可以容易地找出視頻節(jié)目的內(nèi)容。具體地，還沒有可提供的系統(tǒng)或方法，通過它們觀眾可以得到足夠詳細(xì)的視頻節(jié)目的內(nèi)容概要。
在技術(shù)上有需要提供一種改進(jìn)的視頻節(jié)目概要的系統(tǒng)和方法。在技術(shù)上也有需要提供一種利用視頻節(jié)目的轉(zhuǎn)錄本信息和視頻段來提供多媒體概要的系統(tǒng)和方法。在技術(shù)上還需要一種改進(jìn)的提供視頻節(jié)目多媒體概要的系統(tǒng)和方法，它可由觀眾在視頻節(jié)目的任何主題或副題的開始處接入。
發(fā)明概要為了克服上面討論的現(xiàn)有技術(shù)的這個(gè)缺陷，本發(fā)明的主要目的是提供一種在能夠顯示視頻節(jié)目的視頻顯示系統(tǒng)中使用的、用于接入視頻節(jié)目的多媒體概要的系統(tǒng)和方法。
本發(fā)明包括一種能夠創(chuàng)建視頻節(jié)目的多媒體概要的多媒體概要產(chǎn)生器。該多媒體概要產(chǎn)生器能夠獲得視頻節(jié)目的轉(zhuǎn)錄本并能獲得所述視頻節(jié)目的視頻段。該多媒體概要產(chǎn)生器識(shí)別在視頻節(jié)目轉(zhuǎn)錄本中的主題線索和副題線索。該多媒體概要產(chǎn)生器還識(shí)別與該主題線索和副題線索有關(guān)的視頻段。通過組合主題線索和副題線索以及其相關(guān)的視頻段，該多媒體概要產(chǎn)生器就創(chuàng)建多媒體概要。在每個(gè)主題和副題的多媒體概要中提供進(jìn)入點(diǎn)，這樣，多媒體概要的觀眾就可直接訪問各主題和副題。
根據(jù)本發(fā)明的一個(gè)優(yōu)選實(shí)施例，多媒體概要產(chǎn)生器能夠?qū)⒁曨l節(jié)目的轉(zhuǎn)錄本部分與視頻節(jié)目的視頻段部分，以創(chuàng)建一個(gè)視頻節(jié)目的多媒體概要。
根據(jù)本發(fā)明的再一個(gè)優(yōu)選實(shí)施例，多媒體概要產(chǎn)生器能選擇與視頻節(jié)目轉(zhuǎn)錄本中的主題相關(guān)的視頻段，并將該主題和視頻段加到該多媒體概要中去。
根據(jù)本發(fā)明的另一個(gè)優(yōu)選實(shí)施例，多媒體概要產(chǎn)生器能夠選擇與視頻節(jié)目的轉(zhuǎn)錄本中的主題的副題有關(guān)的視頻段，并將該副題和視頻段加到該多媒體概要中。
根據(jù)本發(fā)明的再另一個(gè)優(yōu)選實(shí)施例，該多媒體概要產(chǎn)生器能夠創(chuàng)建在多媒體概要中的進(jìn)入點(diǎn)，以使觀眾能訪問該多媒體概要中的每個(gè)主題和副題。
以上相當(dāng)廣泛地列出本發(fā)明的特征和技術(shù)優(yōu)點(diǎn)，以使得本領(lǐng)域技術(shù)人員可以更好地了解下面的本發(fā)明的詳細(xì)說明。下面將描述本發(fā)明的附加特征和優(yōu)點(diǎn)，它們構(gòu)成本發(fā)明的權(quán)利要求的主題。本領(lǐng)域技術(shù)人員應(yīng)當(dāng)看到，他們可以容易地使用所公開的概念和具體的實(shí)施例作為修正或設(shè)計(jì)用于實(shí)現(xiàn)本發(fā)明的同樣目的的其他結(jié)構(gòu)的基礎(chǔ)。本領(lǐng)域技術(shù)人員還應(yīng)當(dāng)看到，這種等同結(jié)構(gòu)在廣義上并不背離本發(fā)明的精神和范圍。
在進(jìn)行發(fā)明詳細(xì)說明之前，闡述在本專利文件中使用的某些單字和詞組的定義可能是有利的術(shù)語“include(包括)”和“comprise(包含)”及其派生詞是指包括而并不加以限制；術(shù)語“or(或)”是包括，意思是和/或；詞組“associated with(與有關(guān))”和“associated therewith(與其有關(guān))”及其派生詞可以是指包括，被包括在內(nèi)，與其關(guān)聯(lián)，被包含在內(nèi)，與其有聯(lián)系，與其相耦合，可與其通信，與其合作，交織，并列，接近于，束縛于，具有，具有性質(zhì)，等等；以及術(shù)語“controller(控制器)”是指控制至少一個(gè)運(yùn)行的任意裝置，系統(tǒng)，和系統(tǒng)的部件，這樣的裝置可以以硬件，固件或軟件，或他們的至少兩個(gè)的組合來實(shí)施。應(yīng)當(dāng)指出，無論是本地地或遠(yuǎn)程地與任何特定的控制器有關(guān)的功能可以被集中或分散。具體講，控制器可以包括一個(gè)或多個(gè)數(shù)據(jù)處理器，和相關(guān)的輸入/輸出識(shí)別與存儲(chǔ)器，它們執(zhí)行一個(gè)或多個(gè)應(yīng)用程序和/或操作系統(tǒng)程序。對(duì)于某些單字和詞組的定義被提供在本專利文件全文中，本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，在許多情形下(如果不是大多數(shù)情形)，這樣的定義將應(yīng)用到對(duì)這樣定義的單字和詞組的先前的以及將來的使用中。
附圖簡述為了更全面地了解本發(fā)明及其優(yōu)點(diǎn)，現(xiàn)在結(jié)合附圖參考以下的說明，其中相同的數(shù)字標(biāo)號(hào)表示相同的物體，其中

圖1示出示例性視頻顯示系統(tǒng)；圖2示出在圖1所示的示例性視頻顯示系統(tǒng)中實(shí)施的一種用于創(chuàng)建視頻節(jié)目的觀眾互動(dòng)多媒體概要的系統(tǒng)有利的實(shí)施例；圖3示出可被使用于觀眾互動(dòng)的多媒體概要系統(tǒng)的有利實(shí)施例的本發(fā)明的計(jì)算機(jī)軟件；圖4示出在示例性視頻顯示系統(tǒng)中的本發(fā)明的觀眾互動(dòng)的多媒體概要系統(tǒng)的有利實(shí)施例的運(yùn)行流程圖；以及圖5示出用于接入視頻節(jié)目的觀眾互動(dòng)的多媒體概要的本發(fā)明有利實(shí)施例的示例性顯示頁。
發(fā)明詳細(xì)說明圖1到5，下面討論的，以及在本專利文件中為了描述本發(fā)明的原理而闡述的各種實(shí)施例僅僅是用作說明，而無論如何不應(yīng)當(dāng)被看作對(duì)本發(fā)明范圍的限制。在下面的有利的實(shí)施例的說明中，本發(fā)明被集成在電視接收機(jī)中，或與電視接收機(jī)一起使用。然而，本實(shí)施例僅僅是作為例子，而不應(yīng)當(dāng)看作為把本發(fā)明的范圍僅限制于電視接收機(jī)。事實(shí)上，本領(lǐng)域技術(shù)人員將認(rèn)識(shí)到，本發(fā)明的示例性實(shí)施例可以容易地被修改成可使用于任何類型的視頻顯示系統(tǒng)。
圖1顯示按照本發(fā)明實(shí)施例的示例性錄像機(jī)150和電視機(jī)105。錄像機(jī)150從外部源接收進(jìn)入的電視信號(hào)，諸如有線電視業(yè)務(wù)提供商(有線公司)，本地天線，衛(wèi)星，互聯(lián)網(wǎng)，或數(shù)字多用途軟盤(DVD)或家庭視頻系統(tǒng)(VHS)錄像帶放像機(jī)。錄像機(jī)150把來自選擇頻道的電視信號(hào)發(fā)送到電視機(jī)105。頻道可以由觀眾人工地選擇，或可以由觀眾事先編程的記錄設(shè)備自動(dòng)地選擇。換種方式，頻道和視頻節(jié)目可被記錄設(shè)備根據(jù)來自在觀眾的個(gè)人觀看歷史中的節(jié)目資料的信息自動(dòng)地選擇。
在記錄模式中，錄像機(jī)150可以解調(diào)進(jìn)入的射頻(RF)電視信號(hào)，產(chǎn)生基帶視頻信號(hào)，被記錄和被存儲(chǔ)在錄像機(jī)150內(nèi)的存貯媒體上，或被連接到錄像機(jī)150上。在放像模式下，錄像機(jī)150從存貯媒體讀出由觀眾選擇的存儲(chǔ)的基帶視頻信號(hào)(即，節(jié)目)，并把它發(fā)送到電視機(jī)105。錄像機(jī)150還可包括能夠接收、記錄、互動(dòng)和顯示數(shù)字信號(hào)的那種類型的錄像機(jī)。
錄像機(jī)150可包括利用錄像帶，或利用硬盤，或利用固態(tài)存儲(chǔ)器，或利用任何其他類型的記錄設(shè)備的那種類型的錄像機(jī)。如果錄像機(jī)150是盒式錄像機(jī)(VCR)，則錄像機(jī)150將進(jìn)入的電視信號(hào)存儲(chǔ)到盒式磁帶并從盒式磁帶上檢索進(jìn)入的電視信號(hào)。如果錄像機(jī)150基于軟盤驅(qū)動(dòng)的設(shè)備，諸如ReplayTVTM錄像機(jī)或TiVOTM錄像機(jī)，則錄像機(jī)150在計(jì)算機(jī)硬盤，而不是盒式磁帶上對(duì)進(jìn)入的電視信號(hào)進(jìn)行存儲(chǔ)和檢索。在再一個(gè)實(shí)施例中，錄像機(jī)150可以對(duì)本地讀/寫(R/W)數(shù)字多用途軟盤(DVD)或讀/寫(R/W)緊湊軟盤(CD-RW)存儲(chǔ)和檢索。本地存貯媒體可以是固定的(例如，硬盤驅(qū)動(dòng))，或可以是可卸下的(例如，DVD，CD-RW)。
錄像機(jī)150包括紅外(IR)傳感器160，它從由觀眾操縱的遙控裝置125接收命令(諸如頻道向上，頻道向下，音量向上，音量向下，記錄，重放，快速前進(jìn)(FF)，倒帶等等)。電視機(jī)105是傳統(tǒng)的電視機(jī)，包括屏幕110，紅外(IR)傳感器115，以及一個(gè)或多個(gè)人工控制器120(由虛線表示)。IR傳感器115還接收來自由觀眾操縱的遙控裝置125的命令(音量向上，音量向下，接通電源，關(guān)斷電源等等)。
應(yīng)當(dāng)指出，錄像機(jī)150不限于從特定類型的源接收特定類型的進(jìn)入電視信號(hào)。如上所述，外部源可以是有線業(yè)務(wù)提供商，傳統(tǒng)的RF廣播天線，衛(wèi)星碟形天線，互聯(lián)網(wǎng)連接，或諸如DVD放像機(jī)或VHS磁帶放像機(jī)的其他本地貯存裝置。進(jìn)入的信號(hào)可以是數(shù)字信號(hào)，模擬信號(hào)，互聯(lián)網(wǎng)協(xié)議(IP)分組，或具有其他類型的格式的信號(hào)。
為了在說明本發(fā)明的原理時(shí)簡化和簡明的目的，下面的說明總的針對(duì)實(shí)施例，其中錄像機(jī)150(從有線業(yè)務(wù)提供商)接收進(jìn)入的模擬電視信號(hào)，包含封閉字幕文本信息。無論如何，本領(lǐng)域技術(shù)人員將會(huì)看到，本發(fā)明的原理可以容易地適用于數(shù)字電視信號(hào)、無線廣播電視信號(hào)、本地貯存系統(tǒng)、進(jìn)入的包含MPEG數(shù)據(jù)的IP分組數(shù)據(jù)流等等。
另外，本領(lǐng)域技術(shù)人員將會(huì)看到，本發(fā)明的原理可以容易地適用于其他文本源，包括但并不限于，來自語言到文本變換器的文本，來自第三方源的文本，來自提取的視頻文本的文本，來自嵌入的屏幕文本的文本等等。所以，術(shù)語“transcript(轉(zhuǎn)錄本)”將被定義為是指，起源于任何文本源的文本文件，包括但并不限于，封閉字幕文本，來自語言-文本變換器的文本，來自第三方源的文本，來自提取的視頻文本的文本，來自嵌入的屏幕文本的文本等等。
圖2更詳細(xì)地顯示按照本發(fā)明的一個(gè)實(shí)施例的示例性錄像機(jī)150。錄像機(jī)150包括IR傳感器160，視頻處理器210，MPEG2編碼器220，硬盤驅(qū)動(dòng)230，MPEG2編碼器/譯碼器240，和控制器250。錄像機(jī)150還包括視頻單元260，文本概要產(chǎn)生器270和存儲(chǔ)器280?？刂破?50操縱錄像機(jī)150的總的運(yùn)行，包括觀看模式，記錄模式，重放模式，快速前進(jìn)(FF)模式，反轉(zhuǎn)模式，和其他類似的功能?？刂破?50還按照本發(fā)明的原理操縱多媒體概要的創(chuàng)建，顯示和互動(dòng)。
在觀看模式下，控制器250使得來自有線業(yè)務(wù)提供商的進(jìn)入的電視信號(hào)由視頻處理器210進(jìn)行解調(diào)和處理并發(fā)送到電視機(jī)105，把視頻信號(hào)存儲(chǔ)或不存儲(chǔ)在硬盤驅(qū)動(dòng)230(或從硬盤驅(qū)動(dòng)230檢索信號(hào))。視頻處理器210包含射頻前端電路，用于接收來自有線業(yè)務(wù)提供商的進(jìn)入電視信號(hào)、調(diào)諧到用戶選擇的頻道和把選擇的RF信號(hào)變換成適合于在電視機(jī)105上顯示的基帶電視信號(hào)(例如，超級(jí)視頻信號(hào))。視頻處理器210還能夠接收來自MPEG2編碼器/譯碼器240的傳統(tǒng)的信號(hào)和來自存儲(chǔ)器280的視頻幀，以及把基帶信號(hào)(例如，超級(jí)視頻信號(hào))發(fā)送到電視機(jī)105。
在記錄模式下，控制器250使得進(jìn)入電視信號(hào)被記錄在硬盤驅(qū)動(dòng)230上。在控制器250的控制下，MPEG2編碼器220接收來自有線業(yè)務(wù)提供商的進(jìn)入的模擬電視信號(hào)以及把接收的RF信號(hào)變換成MPEG格式用于存貯在硬盤驅(qū)動(dòng)230上。應(yīng)當(dāng)指出，在數(shù)字電視信號(hào)的情形下，信號(hào)可被直接存儲(chǔ)在硬盤驅(qū)動(dòng)230上，而不用在MPEG2編碼器220中進(jìn)行編碼。
在重放模式下，控制器250引導(dǎo)硬盤驅(qū)動(dòng)230，把存儲(chǔ)的電視信號(hào)(即，節(jié)目)流到MPEG2編碼器/譯碼器240，它把來自硬盤驅(qū)動(dòng)230的MPEG2數(shù)據(jù)變換成超級(jí)視頻(S-視頻)信號(hào)，視頻處理器210再把它發(fā)送到電視機(jī)105。
應(yīng)當(dāng)指出，用于MPEG2編碼器220和MPEG2編碼器/譯碼器240的MPEG2標(biāo)準(zhǔn)的選擇是僅僅用作說明的。在本發(fā)明的替換的實(shí)施例中，MPEG編碼器和譯碼器可以遵從MPEG-1，MPEG-2，和MPEG-4標(biāo)準(zhǔn)中的一個(gè)或多個(gè)標(biāo)準(zhǔn)，或遵從一個(gè)或多個(gè)其他類型的標(biāo)準(zhǔn)。
為了申請(qǐng)和要求權(quán)利，硬盤驅(qū)動(dòng)230被規(guī)定為包括任何可讀出和可寫入的貯存裝置，包括但并不限于，用于讀寫數(shù)字多用途光盤(DVD-RW)，可讀寫CD-ROM，VCR磁帶等的傳統(tǒng)的磁盤驅(qū)動(dòng)和光盤驅(qū)動(dòng)。事實(shí)上，硬盤驅(qū)動(dòng)230不需要是在永久地被嵌入錄像機(jī)150的傳統(tǒng)的意義上固定的。而是，硬盤驅(qū)動(dòng)230包括對(duì)于錄像機(jī)150專用的任何大容量貯存裝置，用于存儲(chǔ)記錄的視頻節(jié)目的目的。因此，硬盤驅(qū)動(dòng)230可以包括附著的外圍設(shè)備或可拆卸的軟盤驅(qū)動(dòng)(無論是嵌入的或附著的)，諸如投幣式自動(dòng)唱機(jī)(未示出)，保持幾個(gè)讀寫DVD或可讀寫CD-ROM。如圖2上示意地顯示的，這種類型的可拆卸軟盤驅(qū)動(dòng)能夠接收和讀出可讀寫CD-ROM盤235。
而且，在本發(fā)明的有利的實(shí)施例中，硬盤驅(qū)動(dòng)230可包括外部大容量存貯裝置，錄像機(jī)150可以通過網(wǎng)絡(luò)連接(例如，互聯(lián)網(wǎng)協(xié)議(IP)連接)接入和控制，包括，例如，在觀眾家中的個(gè)人計(jì)算機(jī)(PC)或在觀眾的互聯(lián)網(wǎng)業(yè)務(wù)提供商(ISP)處的服務(wù)器上的軟盤驅(qū)動(dòng)。
控制器250從視頻處理器210得到有關(guān)由視頻處理器210接收的視頻信號(hào)的信息。當(dāng)控制器250確定錄像機(jī)150正在接收視頻節(jié)目時(shí)，控制器250確定視頻節(jié)目是否已選擇為要被記錄的視頻節(jié)目。如果視頻節(jié)目是要被記錄的，則控制器250使得視頻節(jié)目以先前描述的方式被記錄在硬盤驅(qū)動(dòng)230。如果視頻節(jié)目不是要被記錄的，則控制器250使得視頻節(jié)目被視頻處理器210處理以及先前描述的方式被發(fā)送到電視機(jī)105。
存儲(chǔ)器280可以包括隨機(jī)存取存儲(chǔ)器(RAM)或隨機(jī)存取存儲(chǔ)器(RAM)與只讀存儲(chǔ)器(ROM)的組合。存儲(chǔ)器280可以包括非易失性隨機(jī)存取存儲(chǔ)器(RAM)，諸如閃存器。在電視接收機(jī)105的另一個(gè)有利的實(shí)施例中，存儲(chǔ)器280可包括大容量貯存數(shù)據(jù)裝置，諸如硬盤驅(qū)動(dòng)(未示出)。存儲(chǔ)器280還可包括用來讀出讀寫DVD或可讀寫CD-ROM的附著的外圍設(shè)備或可拆卸的軟盤驅(qū)動(dòng)(無論是嵌入的或附著的)。如圖2上示意地顯示的，這種類型的可拆卸軟盤驅(qū)動(dòng)能夠接收和讀出可讀寫CD-ROM盤285。
當(dāng)視頻節(jié)目被記錄在硬盤驅(qū)動(dòng)230時(shí)(或在視頻節(jié)目被記錄在硬盤驅(qū)動(dòng)230后)，控制器250通過使用文本概要產(chǎn)生器270得到記錄的視頻節(jié)目的文本概要。文本概要產(chǎn)生器270使用在[提交日期]提交的、題目為“Method and Apparatus for the Summarization andIndexing of Video Programs Using Transcript Information(通過使用轉(zhuǎn)錄本信息對(duì)視頻節(jié)目進(jìn)行概述和加索引的方法和設(shè)備)”的美國專利申請(qǐng)序列號(hào)[代理卷號(hào)No.PHA 701137]中闡述和描述的、用于概述視頻節(jié)目的方法和系統(tǒng)。文本概要產(chǎn)生器270接收視頻節(jié)目作為視頻/音頻/數(shù)據(jù)信號(hào)。從該視頻/音頻/數(shù)據(jù)信號(hào)，文本概要產(chǎn)生器270產(chǎn)生視頻節(jié)目的節(jié)目概要，內(nèi)容表，和節(jié)目索引。文本概要產(chǎn)生器270使用與文本每行有關(guān)的時(shí)間印記來識(shí)別對(duì)應(yīng)于文本的選定關(guān)鍵幀。
多媒體概要是視頻/音頻/文本概要?？刂破?50創(chuàng)建多媒體概要，它顯示概述視頻節(jié)目的內(nèi)容的信息?？刂破?50使用由文本概要產(chǎn)生器270產(chǎn)生的節(jié)目概要，通過加上適當(dāng)?shù)囊曨l圖象創(chuàng)建視頻節(jié)目的多媒體概要。多媒體概要能夠顯示(1)文本和(2)靜止視頻圖象，包括單個(gè)視頻幀，和(3)活動(dòng)視頻圖象(稱為視頻“片段部分”即視頻“段”)，包括一系列視頻幀，和(4)音頻，和(5)它們的任何組合。
控制器250通過使用視頻單元260從要被概述的視頻節(jié)目得到視頻圖象。視頻單元260使用在[1999年7月9日]提交的、題目為“Methodand Apparatus for Linking Video Segment to Another Segment orInformation Source(用于鏈接視頻段到另一個(gè)視頻段或信息源的方法和設(shè)備)”美國專利申請(qǐng)序列號(hào)09/351,086中闡述和描述的、用于鏈接視頻段的方法和設(shè)備。
控制器250必須識(shí)別要被使用來創(chuàng)建多媒體概要的適當(dāng)?shù)囊曨l圖象。本發(fā)明的有利的實(shí)施例包括計(jì)算機(jī)軟件300，能夠識(shí)別要被使用來創(chuàng)建多媒體概要的適當(dāng)?shù)囊曨l圖象。圖3顯示包含本發(fā)明的計(jì)算機(jī)軟件300的存儲(chǔ)器280的選定部分。存儲(chǔ)器280包含操作系統(tǒng)接口程序310，域識(shí)別應(yīng)用程序320，主題線索識(shí)別應(yīng)用程序330，副題線索識(shí)別應(yīng)用程序340，可聽見-看見的樣板識(shí)別應(yīng)用程序350，多媒體概要貯存單元360。
控制器250和計(jì)算機(jī)軟件300一起包括能夠?qū)崿F(xiàn)本發(fā)明的多媒體概要產(chǎn)生器。在被存儲(chǔ)在存儲(chǔ)器280內(nèi)的計(jì)算機(jī)軟件300中的指令的引導(dǎo)下，控制器250創(chuàng)建視頻節(jié)目多媒體概要，把多媒體概要存儲(chǔ)在多媒體概要貯存單元360，以及在觀眾的請(qǐng)求下重放存儲(chǔ)的多媒體概要。操作系統(tǒng)接口程序310協(xié)調(diào)計(jì)算機(jī)軟件300與控制器250的操作系統(tǒng)的運(yùn)行。
為了創(chuàng)建多媒體概要，控制器250首先接入文本概要產(chǎn)生器270得到記錄的視頻節(jié)目的文本概要?？刂破?50然后識(shí)別被包括在文本概要中的、要被選擇的適當(dāng)?shù)囊曨l圖象，以便創(chuàng)建多媒體概要。為了做到這一點(diǎn)，控制器250首先識(shí)別視頻節(jié)目的類型(被稱為“domain(域)”或“category(類別)”或“genre(種類)”)。例如，視頻節(jié)目的域(“類別”或“種類”)可以是“脫口秀(talk show)”或“新聞節(jié)目”。在下面的說明中，將使用術(shù)語“域”。
在軟件300中的域識(shí)別應(yīng)用程序320，包括域的類型的數(shù)據(jù)庫(“域數(shù)據(jù)庫”)。域數(shù)據(jù)庫包含被存儲(chǔ)在域數(shù)據(jù)庫中的每種類型的域的識(shí)別特性?？刂破?50接入域識(shí)別應(yīng)用程序320來識(shí)別被概述的視頻節(jié)目的類型。域識(shí)別應(yīng)用程序320把每種類型的域的識(shí)別特性與被概述的視頻節(jié)目的類型進(jìn)行比較。使用比較的結(jié)果，域識(shí)別應(yīng)用程序320識(shí)別視頻節(jié)目的域。
控制器250然后識(shí)別與視頻節(jié)目的主題有關(guān)的單字或詞組(稱為“主題線索”)。例如，對(duì)于“脫口秀”視頻節(jié)目的主題線索可以是單字“第一嘉賓”或單字“下一個(gè)嘉賓”。同樣地，對(duì)于“新聞節(jié)目”視頻節(jié)目的標(biāo)題線索可以是單字“l(fā)ive from(來自實(shí)況)”或單字“我們現(xiàn)在切到”。被選擇為主題線索的特定的單字或詞組被選擇來表示視頻節(jié)目中的過渡點(diǎn)(即，主題改變)。這允許視頻節(jié)目被劃分成涉及不同的主題的部分。
在軟件300中的主題線索識(shí)別應(yīng)用程序330包括主題線索的數(shù)據(jù)庫(“主題線索數(shù)據(jù)庫”)。主題線索數(shù)據(jù)庫包含被存儲(chǔ)在域數(shù)據(jù)庫中的每種類型的域的主題線索?？刂破?50接入主題線索識(shí)別應(yīng)用程序330來識(shí)別被概述的視頻節(jié)目中的主題線索。主題線索識(shí)別應(yīng)用程序330把主題線索數(shù)據(jù)庫中每個(gè)主題線索與被概述的視頻節(jié)目中的文本概要進(jìn)行比較。
當(dāng)找到主題線索時(shí)，控制器250接入可聽見-看見的樣板識(shí)別應(yīng)用程序350中，來識(shí)別與主題線索有關(guān)的音頻-視頻段(稱為可聽見-看見的樣板)。在脫口秀視頻節(jié)目中“第一嘉賓”主題線索的適當(dāng)?shù)目陕犚?看見的樣板是顯示嘉賓的音頻-視頻段?！暗谝患钨e”的識(shí)別號(hào)可以從在文本中提到的嘉賓的名字得出。例如，當(dāng)脫口秀的主持人說，“我們的第一嘉賓唯一的嘉賓Dolly Parton”時(shí)，則主題線索識(shí)別應(yīng)用程序330識(shí)別單字“第一嘉賓”為主題線索。第一嘉賓Dolly Parton的識(shí)別號(hào)從文本概要中得出。
可聽見-看見的樣板識(shí)別應(yīng)用程序350然后必須識(shí)別和得到DollyParton的音頻-視頻段作為要被選擇的可聽見-看見的樣板，以便加到多媒體概要中。在她的介紹后的幾秒內(nèi)，Dolly Parton走上舞臺(tái)。她的面孔將是可看見的，并占據(jù)一部分視頻圖象。正如下面更充分地描述的，可聽見-看見的樣板識(shí)別應(yīng)用程序350識(shí)別Dolly Parton的面孔圖象，提取帶有Dolly Parton的面孔的圖象的可聽見-看見的樣板，以及把它加到多媒體概要中。
可聽見-看見的樣板識(shí)別應(yīng)用程序350以以下的方式識(shí)別DollyParton的面孔圖象。從介紹Dolly Parton后立即顯示的視頻圖象，可聽見-看見的樣板識(shí)別應(yīng)用程序350選擇一個(gè)人的面孔圖象，該圖象不是脫口秀的主持人(或脫口秀的任何“已有人員”，諸如音樂師等等)的面孔圖象。然后，可聽見-看見的樣板識(shí)別應(yīng)用程序350就假設(shè)那個(gè)人的圖象是Dolly Parton的圖象。
如果可聽見-看見的樣板識(shí)別應(yīng)用程序350得到一個(gè)觀眾成員的圖象(其圖象在介紹Dolly Parton后立即出現(xiàn)在視頻圖象上)。所以必須通過在幾分鐘過去后檢驗(yàn)在一開始選擇的圖象中的人的身份，來確認(rèn)這種假設(shè)。這可以通過檢驗(yàn)識(shí)別特性，諸如嘉賓的臉、說話聲音，名字板的圖象，或某些其他類似的識(shí)別特性而完成。
因?yàn)镈olly Parton將出現(xiàn)在脫口秀接下來的十或二十分鐘期間，有時(shí)間分析嘉賓的圖象，確認(rèn)選擇的初始的圖象實(shí)際上是DollyParton的圖象。如果以后的檢驗(yàn)表明該假設(shè)是錯(cuò)誤的且最初選定的圖象不是Dolly Parton的圖象，則通過用Dolly Parton的圖象來代替，從而作出校正。
在本發(fā)明的另一個(gè)有利的實(shí)施例中，著名人物的臉的圖象數(shù)據(jù)庫(未示出)可以結(jié)合可聽見-看見的樣板識(shí)別應(yīng)用程序350來使用。來自視頻的人臉圖象(例如，脫口秀的嘉賓)與數(shù)據(jù)庫中每個(gè)著名人物的面孔的圖象進(jìn)行比較。臉的匹配可以通過使用主要成分分析(PCA)技術(shù)或其他類似的等同技術(shù)來完成的。如果發(fā)現(xiàn)匹配，則該人就被識(shí)別出來。如果發(fā)現(xiàn)不匹配，則該人的面孔的圖象就不在著名人物數(shù)據(jù)庫中。在這種情形下，就要用上述被用來識(shí)別Dolly Parton的程序來識(shí)別此人。
在不處在著名人物數(shù)據(jù)庫中的著名人物被識(shí)別出來以后，該著名人物就被加到數(shù)據(jù)庫中。著名人物數(shù)據(jù)庫的內(nèi)容可以通過把個(gè)人加到數(shù)據(jù)庫或從數(shù)據(jù)庫中刪除某個(gè)人而被不斷地改變。在這種情形下，在著名人物數(shù)據(jù)庫中著名人物表總是保持最新的。
用于檢測和識(shí)別視頻段中的面孔的其他方法在V.vilaplana，F(xiàn).Marques，P.Salembier L.Garrido的題目為“Region-BasedSegmentation and Tracking of Human Faces(基于區(qū)域的分段和跟蹤人的面孔)”的文章，在第九次歐洲信號(hào)處理會(huì)議EUSIPCO-98，Rhodes(1998)提交的文章和在S.Satoh，Y.Nakamura和T.Kanade的題目為“Name-ItNaming and Detecting Faces in News Videos(命名它命名和檢測在新聞視頻中的面孔)”的文章中描述。
在另一個(gè)應(yīng)用中，用于體育節(jié)目的音頻-視頻樣板可包括(1)在一定的時(shí)間間隔內(nèi)預(yù)先規(guī)定的總的運(yùn)動(dòng)或(2)一系列類型的運(yùn)動(dòng)。例如，在“足球比賽”視頻節(jié)目中的標(biāo)題線索可以是單字“進(jìn)球”或“第一進(jìn)球”。在標(biāo)題線索被識(shí)別后，可聽見-看見的樣板識(shí)別應(yīng)用程序350然后必須識(shí)別和得到被得分的第一進(jìn)球的音頻視頻的片段，作為要被選擇的音頻視頻樣板，加到多媒體概要中。
為了標(biāo)識(shí)進(jìn)球得分的時(shí)間，可聽見-看見的樣板識(shí)別應(yīng)用程序350首先以快速運(yùn)動(dòng)檢測進(jìn)球，然后，以慢速運(yùn)動(dòng)檢測進(jìn)球。當(dāng)進(jìn)球的時(shí)間位置被找到時(shí)，音頻視頻片段就可被提取出來，它包括的正是其間進(jìn)球得分的那段時(shí)間間隔。例如，音頻視頻片段可以從進(jìn)球得分以前5秒的時(shí)間點(diǎn)到進(jìn)球得分以后5秒的時(shí)間點(diǎn)，在這種情形下，體育節(jié)目的多媒體概要可包含其中進(jìn)球被得分的一系列節(jié)目段的重放。
在另一個(gè)例子中，在“新聞演播”視頻節(jié)目中的標(biāo)題線索可以是單字“來自實(shí)況”。對(duì)于“來自實(shí)況”標(biāo)題線索的適當(dāng)?shù)目陕犚?看見的樣板可以是其中進(jìn)行“來自實(shí)況”報(bào)告的位置的音頻視頻段。換種方式，可聽見-看見的樣板可以是正在進(jìn)行“來自實(shí)況”報(bào)告的報(bào)告員的音頻-視頻段。
當(dāng)新聞節(jié)目的新聞主持人說，“現(xiàn)在是來自Las Vegas的實(shí)況”時(shí)，則主題線索識(shí)別應(yīng)用程序330識(shí)別單字“來自實(shí)況”作為標(biāo)題線索，以及可聽見-看見的樣板識(shí)別應(yīng)用程序350識(shí)別Las Vegas的音頻-視頻段作為要被選擇的可聽見-看見的樣板，加到多媒體概要中。
可聽見-看見的樣板識(shí)別應(yīng)用程序350把一組可聽見-看見的樣板與被包含在特定的類型的域的標(biāo)題線索數(shù)據(jù)庫內(nèi)的每組標(biāo)題線索相聯(lián)系?？刂破?50和可聽見-看見的樣板識(shí)別應(yīng)用程序350接入到視頻單元260，以便得到要被包括在該主題的多媒體概要中的適當(dāng)?shù)目陕犚?看見的樣板。
可聽見-看見的樣板包括視頻信號(hào)和音頻信號(hào)。然而，有可能在某些應(yīng)用中可聽見-看見的樣板可能只包含一種類型的信號(hào)(即，或者是音頻信號(hào)或者是視頻信號(hào)，但不是二者)。對(duì)于只具有一種類型的信號(hào)的可聽見-看見的樣板的運(yùn)行的原理是和對(duì)于具有視頻信號(hào)與音頻信號(hào)二者的可聽見-看見的樣板的運(yùn)行的原理相同的。
在控制器250和可聽見-看見的樣板識(shí)別應(yīng)用程序350識(shí)別并得到適當(dāng)?shù)目陕犚?看見的樣板以后，控制器250隨后把標(biāo)題線索和相應(yīng)的可聽見-看見的樣板加到多媒體概要中。多媒體概要中標(biāo)題線索的位置被規(guī)定為多媒體概要中的一個(gè)“進(jìn)入點(diǎn)”。進(jìn)入點(diǎn)是可直接被以后觀看多媒體概要的觀眾接入的多媒體概要中的一個(gè)位置。觀眾被給予一個(gè)用戶接口，它提供接入到多媒體概要中所有的進(jìn)入點(diǎn)的清單。如果觀眾對(duì)多媒體概要中特定的標(biāo)題感興趣，則觀眾可以通過接入該標(biāo)題的進(jìn)入點(diǎn)而使得多媒體概要中的標(biāo)題得以顯示。
在控制器250識(shí)別一個(gè)標(biāo)題后，控制器250然后識(shí)別與主題的副題有關(guān)的單字或詞組(被稱為“副題線索”)。例如，在脫口秀視頻節(jié)目中主題線索“第一嘉賓”的副題線索可以是單字“新電影”或單字“新書”。副題可以是指“第一嘉賓”的工作課題或他的生活中的感興趣的片斷情景。被選擇為副題線索的特定的單字或詞組被選擇來表示主題中的過渡點(diǎn)(即，副題的改變)。這允許主題被劃分成涉及不同的副題的部分。
軟件300中副題線索識(shí)別應(yīng)用程序340包括副題線索的數(shù)據(jù)庫(“副題線索數(shù)據(jù)庫”)。副題線索數(shù)據(jù)庫包含對(duì)于被存儲(chǔ)在主題線索數(shù)據(jù)庫中的每種類型的主題線索的副題線索。控制器250接入副題線索識(shí)別應(yīng)用程序340，以便識(shí)別在所概述的主題中的副題線索。副題線索識(shí)別應(yīng)用程序340把在副題線索數(shù)據(jù)庫中的每個(gè)副題線索與所概述的主題的文本概要進(jìn)行比較。
當(dāng)找到副題線索時(shí)，控制器250然后接入可聽見-看見的樣板識(shí)別應(yīng)用程序350，以便識(shí)別與副題線索有關(guān)的可聽見-看見的樣板。例如，在脫口秀視頻節(jié)目中對(duì)于“新電影”副題線索的可聽見-看見的樣板可以是靜止視頻圖象，顯示新電影的名稱。替換地，在脫口秀視頻節(jié)目中對(duì)于“新電影”副題線索的可聽見-看見的樣板可以是來自新電影的音頻-視頻段(或“片段”)。
當(dāng)脫口秀的主持人說“現(xiàn)在我們可以看到來自Tom Hank的新的電影的片段”時(shí)，則副題線索識(shí)別應(yīng)用程序340就把單字“新電影”標(biāo)識(shí)為副題線索，且可聽見-看見的樣板識(shí)別應(yīng)用程序350，把新電影的音頻視頻段標(biāo)識(shí)為要被選擇為加到多媒體概要中的可聽見-看見的樣板。
可聽見-看見的樣板識(shí)別應(yīng)用程序350把一組可聽見-看見的樣板與被包含在特定的類型的域的副題線索數(shù)據(jù)庫內(nèi)的每組副題線索相聯(lián)系?？刂破?50和可聽見-看見的樣板識(shí)別應(yīng)用程序350接入到視頻單元260，以便得到要被包括在該副題的多媒體概要中的適當(dāng)?shù)目陕犚?看見的樣板。
在控制器250和可聽見-看見的樣板識(shí)別應(yīng)用程序350識(shí)別與得到適當(dāng)?shù)目陕犚?看見的樣板以后，控制器250然后把副題線索和相應(yīng)的可聽見-看見的樣板加到多媒體概要中。正如在主題線索的情形下，多媒體概要中副題線索的位置被規(guī)定為多媒體概要中的一個(gè)“進(jìn)入點(diǎn)”。如果觀眾對(duì)多媒體概要中特定的副題感興趣，則觀眾可以通過接入該副題的進(jìn)入點(diǎn)而使得多媒體概要中的副題得以顯示。
控制器250繼續(xù)上述的處理過程，用于識(shí)別與視頻節(jié)目的域有關(guān)的主題線索和副題線索。隨著處理過程的繼續(xù)，控制器250創(chuàng)建視頻節(jié)目的多媒體概要?？刂破?50把多媒體概要存儲(chǔ)在存儲(chǔ)器280中多媒體概要貯存單元360中?？刂破?50也可以把一個(gè)或多個(gè)多媒體概要傳送到硬盤驅(qū)動(dòng)230，用于長期貯存。
參照?qǐng)D4可以更清楚的了解創(chuàng)建多媒體概要的處理過程。圖4是顯示本發(fā)明的有利的實(shí)施例的方法的運(yùn)行的流程圖400。流程圖400中的處理步驟在控制器250中執(zhí)行?？刂破?50使得文本概要產(chǎn)生器270以前面描述的方式概述視頻節(jié)目的文本(處理步驟405)?？刂破?50然后識(shí)別視頻節(jié)目的域(處理步驟410)?？刂破?50把視頻節(jié)目的文本與主題線索的數(shù)據(jù)庫進(jìn)行比較，以便找出與視頻節(jié)目的識(shí)別的域相關(guān)的主題線索(處理步驟415)。
當(dāng)找到主題線索時(shí)，控制器250得到對(duì)于主題線索的相關(guān)的可聽見-看見的樣板以及把可聽見-看見的樣板與主題線索相鏈接?？刂破?50然后把主題線索與它的相關(guān)的可聽見-看見的樣板保存在多媒體概要中(處理步驟420)。
控制器250然后把視頻節(jié)目的文本與副題線索的數(shù)據(jù)庫進(jìn)行比較，以便找出與視頻節(jié)目的識(shí)別的主題線索相關(guān)的副題線索(處理步驟425)。當(dāng)找到副題線索時(shí)，控制器250得到對(duì)于副題線索的相關(guān)的可聽見-看見的樣板并把可聽見-看見的樣板與副題線索相鏈接?？刂破?50然后把副題線索和與它的相關(guān)的可聽見-看見的樣板保存在多媒體概要中(處理步驟430)。
控制器250繼續(xù)進(jìn)行搜索下一個(gè)副題線索或下一個(gè)主題線索(判決步驟435)。如果控制器250確定不再有副題線索或主題線索，或如果已達(dá)到視頻節(jié)目的末尾，則概述處理過程結(jié)束。
如果控制器250找到下一個(gè)線索，則控制器250確定下一個(gè)線索是否為副題線索(判決步驟440)。如果下一個(gè)線索是副題線索，控制則進(jìn)到處理步驟430，且副題線索和與它的相關(guān)的可聽見-看見的樣板被加到多媒體概要中。如果下一線索不是副題線索，則它就是一個(gè)主題線索?？刂苿t進(jìn)到步驟420，將主題線索和與它相關(guān)的可聽見-看見的樣板加到多媒體概要中。以這種方式，使多媒體概要與主題和副題相組合。
圖5示出本發(fā)明的觀眾互動(dòng)的多媒體概要的有利實(shí)施例的示例性顯示頁。圖5顯示對(duì)于整個(gè)多媒體概要的進(jìn)入點(diǎn)可以如何被顯示在單頁上。例如，假設(shè)圖5所示的頁描述脫口秀視頻節(jié)目的多媒體概要。圖象A 520顯示第一嘉賓的臉部，圖象B 540顯示第二嘉賓的臉部，以及圖象C 560顯示第三嘉賓的臉部。文本部分510包含由第一嘉賓520討論的副題的列表。在圖5所示的例子中，這些副題是電影，新的CD，和新的家庭。同樣地，文本部分530包含由第二嘉賓540討論的副題的列表，以及文本部分550包含由第三嘉賓560討論的副題的列表。
觀眾可選擇在三個(gè)文本列表510，530，550的任一個(gè)列表中的任何副題，以用多媒體概要進(jìn)行顯示。當(dāng)每個(gè)副題順序地加亮顯示作為菜單項(xiàng)目時(shí)，觀眾可以通過使用遙控器125發(fā)送信號(hào)來選擇一個(gè)副題，來表示要被顯示的、想要的副題。換種方式，觀眾可以用指點(diǎn)裝置(諸如計(jì)算機(jī)鼠標(biāo))(未示出)在這樣裝備的視頻顯示系統(tǒng)中表示想要的副題。
當(dāng)觀眾選擇特定的副題時(shí)，對(duì)于該副題的概要被顯示在屏幕的部分，被標(biāo)識(shí)為工作的概要580。與副題有關(guān)的音頻-視頻片段同時(shí)被顯示在屏幕的部分，被標(biāo)識(shí)為視頻重放590。例如，如果副題是“電影”，則音頻-視頻片段可以是來自該電影的片段。如果副題是“足球比賽”，則音頻-視頻片段可以是在比賽中得分的進(jìn)球的片段。工作的概要580被產(chǎn)生來顯示與觀眾選擇的主題有關(guān)的主題和副題的概要。如果觀眾選擇新的主題或新的副題，則在工作的概要580中顯示的概要反映與新選擇的主題或副題有關(guān)的主題和副題的概要。
文本部分570包含視頻節(jié)目的所有的主題的清單。例如，對(duì)于脫口秀視頻節(jié)目，文本部分570包含脫口秀視頻節(jié)目的所有的主題的清單。在本例中，在文本部分570的清單中的三個(gè)項(xiàng)目是三個(gè)嘉賓的名字。在文本部分570中列出的其他項(xiàng)目涉及到脫口秀視頻節(jié)目中的其他主題。觀眾可以選擇在文本部分570中列出的任何主題進(jìn)行顯示。當(dāng)主題被選定時(shí)，與該主題有關(guān)的音頻-視頻片段就被重放在標(biāo)識(shí)為“視頻重放”(部分590)的屏幕部分。
多媒體概要的這種顯示模式牽涉到與觀眾互動(dòng)來選擇多媒體概要的各個(gè)部分進(jìn)行顯示。多媒體概要的另一種顯示模式是“重放全部”模式。在“重放全部”模式，多媒體概要在視頻節(jié)目的開始點(diǎn)開始，以及重放全部內(nèi)容，而不與觀眾進(jìn)行任何互動(dòng)。觀眾可以在任何時(shí)間進(jìn)行干預(yù)，通過選擇用于顯示的主題或副題而停止“重放全部”模式。
本發(fā)明的多媒體概要也可以結(jié)合用于預(yù)訂在視頻節(jié)目期間討論的產(chǎn)品和業(yè)務(wù)的方法和設(shè)備一起使用。例如，觀眾可能希望購買已在脫口秀視頻節(jié)目期間討論的一本書。產(chǎn)品和業(yè)務(wù)可以直接通過在[提交日期]提交的、題目為“System and Method for Ordering OnlineUtilizing a Digital Television Receiver(利用數(shù)字電視接收機(jī)進(jìn)行在線預(yù)定的系統(tǒng)和方法)”的美國專利申請(qǐng)序列號(hào)[代理卷號(hào)No.PHA 701071]中闡述的和描述的方法和設(shè)備進(jìn)行預(yù)訂。
本發(fā)明的多媒體概要也可以結(jié)合用于得到有關(guān)觀眾的興趣的附加信息的方法和設(shè)備來加以利用。例如，如果觀眾選擇一個(gè)描述不久將發(fā)行的新的電影的副題，則這個(gè)觀眾詢問可被記錄供將來參考。當(dāng)電影被推出時(shí)，多媒體概要可隨后通知該觀眾，以及提供附近電影院的演出時(shí)間和電影票價(jià)格。替換地，可以通過電子郵件或類似的通信鏈路把通知發(fā)送給觀眾。該通知也可以在個(gè)人計(jì)算機(jī)、個(gè)人數(shù)字助理、或其他相似的類型的通信設(shè)備上產(chǎn)生可聽見的報(bào)警(例如，“嘟嘟”聲)。
事件匹配機(jī)可被使用來找出在本地地理區(qū)域內(nèi)發(fā)生的事件。例如，在脫口秀節(jié)目表演期間，演員Kevin Spacey說，他當(dāng)前正出現(xiàn)在名為“American Beauty(美國麗人)”的電影中。如果觀眾選擇副題“American Beauty”，則多媒體概要可以使用觀眾感興趣的指示搜索在一個(gè)時(shí)間間隔(例如，幾個(gè)月)內(nèi)在其他節(jié)目(例如，新聞節(jié)目)上或在本地網(wǎng)頁上關(guān)于電影“American Beauty(美國麗人)”的信息。
當(dāng)找出有關(guān)電影“American Beauty”的演出時(shí)間和價(jià)格的附加信息時(shí)，多媒體概要可以疊加顯示電話號(hào)碼1-800-FILM-777，和/或可通知觀眾電影被安排在每次觀看付費(fèi)節(jié)目上，和/或能自動(dòng)地發(fā)送電子郵件或顯示有關(guān)電影在本地電影院的演出時(shí)間和價(jià)格的信息。演出票可以通過使用上述的方法直接預(yù)訂。
本發(fā)明的多媒體概要使得觀眾能夠使用來自多媒體概要的主題和副題，找出在擴(kuò)展的時(shí)間間隔內(nèi)感興趣的附加信息。多媒體概要保持積極工作和搜索觀眾感興趣的信息。如果第二節(jié)目具有與第一節(jié)目相似的主題、副題或關(guān)鍵字，則根據(jù)第一節(jié)目的多媒體概要找出的任何新的附加信息也可被附加到第二節(jié)目的多媒體概要上。
雖然已詳細(xì)地描述了本發(fā)明，但本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，他們可在這里可作出各種改變、替換和更改，而在廣義上并不背離本發(fā)明的精神和范圍。
權(quán)利要求
1.一種在能夠顯示視頻節(jié)目的視頻顯示系統(tǒng)(105)中使用的用于創(chuàng)建視頻節(jié)目的多媒體概要的系統(tǒng)(250，300)，所述系統(tǒng)(250，300)包括多媒體概要產(chǎn)生器(250，300)，能夠獲得所述視頻節(jié)目的轉(zhuǎn)錄本并能獲得所述視頻節(jié)目的音頻-視頻段，其中所述多媒體概要產(chǎn)生器(250，300)，能夠?qū)⑺鲛D(zhuǎn)錄本的部分和所述音頻-視頻段相組合以創(chuàng)建一個(gè)所述視頻節(jié)目的多媒體概要(500)。
2.如權(quán)利要求1中要求的系統(tǒng)(250，300)，其中所述多媒體概要產(chǎn)生器(250，300)能夠通過選擇與所述視頻節(jié)目的主題有關(guān)的音頻-視頻段并將所述主題和所述音頻-視頻段加到所述多媒體概要(500)上而創(chuàng)建所述多媒體概要(500)。
3.如權(quán)利要求2的系統(tǒng)(250，300)，其中所述多媒體概要發(fā)生器(250，300)包括控制器(250)，該控制器能執(zhí)行包含在與之相連接的存儲(chǔ)器(280)上的計(jì)算機(jī)軟件指令，通過識(shí)別在所述視頻節(jié)目的所述轉(zhuǎn)錄本中的至少一個(gè)主題線索；選擇與所述至少一個(gè)主題線索有關(guān)的音頻-可視模板并將所述主題線索和所述音頻-可視模板加到所述多媒體概要(500)上面創(chuàng)建所述視頻節(jié)目的所述多媒體概要(500)。
4.如權(quán)利要求3的系統(tǒng)(250，300)，其中所述控制器(250)能執(zhí)行包含在與之相連接的存儲(chǔ)器(280)上的計(jì)算機(jī)軟件指令，通過識(shí)別所述視頻節(jié)目的所述至少一個(gè)主題的至少一個(gè)副題線索，選擇與至少一個(gè)副題線索有關(guān)的至少一個(gè)音頻-可視模板并將所述副題線索與所述音頻-可視模板加到所述多媒體概要(500)上而創(chuàng)造所述視頻節(jié)目的所述多媒體概要(500)。
5.如權(quán)利要求3的系統(tǒng)(250，300)，其中所述控制器(250)能執(zhí)行可以識(shí)別所述視頻節(jié)目類型的域識(shí)別應(yīng)用程序(320)；可以識(shí)別在所述視頻節(jié)目的所述轉(zhuǎn)錄本中的至少一個(gè)主題線索的主題線索識(shí)別應(yīng)用程序(330)；可以識(shí)別在所述視頻節(jié)目的至少一個(gè)主題中的至少一個(gè)副題線索的副題線索識(shí)別應(yīng)用程序(340)；以及可以識(shí)別與所述至少一個(gè)主題線索有關(guān)的至少一個(gè)音頻-可視模板，并可以識(shí)別與所述至少一個(gè)副題線索有關(guān)的至少一個(gè)音頻-可視模板的音頻-可視模板識(shí)別應(yīng)用程序(350)。
6.如權(quán)利要求4的系統(tǒng)(250，300)，其中所述控制器(250)能夠執(zhí)行與之相連接的存儲(chǔ)器(280)中所含的計(jì)算機(jī)軟件指令，以創(chuàng)建允許觀眾接入所述多媒體概要(500)的每個(gè)主題的每個(gè)主題的進(jìn)入點(diǎn)，還創(chuàng)建允許觀眾接入所述多媒體概要(500)中的每個(gè)副題的每個(gè)副題的進(jìn)入點(diǎn)。
7.一種視頻顯示系統(tǒng)(105)，包括用于創(chuàng)建如權(quán)利要求1-6之一的視頻節(jié)目的多媒體概要(500)的系統(tǒng)。
8.一種在能夠顯示視頻節(jié)目的視頻顯示系統(tǒng)(105)中使用的用于創(chuàng)建所述視頻節(jié)目的多媒體概要(500)的方法，所述方法包括步驟獲得在多媒體概要發(fā)生器(250，300)中的所述視頻節(jié)目的轉(zhuǎn)錄本；獲得在所述多媒體概要發(fā)生器(250，300)中的所述視頻節(jié)目的音頻-視頻片段；以及將所述轉(zhuǎn)錄本的部分與所述多媒體概要發(fā)生器(250，300)中的所述音頻-視頻片段的部分組合，以創(chuàng)建所述視頻節(jié)目的所述多媒體概要(500)。
9.如權(quán)利要求8的方法，其中將所述轉(zhuǎn)錄本的部分與在所述多媒體概要發(fā)生器(250，300)中的音頻-視頻片段部分組合以創(chuàng)建所述視頻節(jié)目的所述多媒體概要(500)的步驟包括選擇一個(gè)與所述視頻節(jié)目的主題有關(guān)的音頻-視頻片段；將所述主題和所述音頻-視頻片段加到所述多媒體概要(500)中。
10.如權(quán)利要求9的方法，還包括步驟在多媒體概要發(fā)生器(250，300)中接收來自與所述多媒體概要發(fā)生器(250，300)相連接的存儲(chǔ)器(280)中所存儲(chǔ)的計(jì)算機(jī)軟件(300)的指令；在所述多媒體概要發(fā)生器(250，300)中執(zhí)行所達(dá)指令，以識(shí)別在所述視頻節(jié)目的所述轉(zhuǎn)錄本中的至少一個(gè)主題線索；在所述多媒體概要發(fā)生器(250，300)中執(zhí)行所述指令，以選擇與所述至少一個(gè)主題線索有關(guān)的至少一個(gè)音頻-可視模板；以及在所述多媒體概要發(fā)生器(250，300)中執(zhí)行所述指令，以將所述主題線索和所述音頻-可視模板加到所述多媒體概要(500)中。
11.如權(quán)利要求10的方法，還包括步驟在多媒體概要發(fā)生器(250，300)中接收來自與所述多媒體概要發(fā)生器(250，300)相連接的存儲(chǔ)器(280)中所存儲(chǔ)的計(jì)算機(jī)軟件(300)的指令；在所述多媒體概要發(fā)生器(250，300)中執(zhí)行所述指令，以識(shí)別在所述視頻節(jié)目的至少一個(gè)主題的至少一個(gè)副題線索；在所述多媒體概要發(fā)生器(250，300)中執(zhí)行所述指令，以選擇與所述至少一個(gè)副題線索有關(guān)的至少一個(gè)音頻-可視模板；以及在所述多媒體概要發(fā)生器(250，300)中執(zhí)行所述指令，以將所述副題線索和所述音頻-可視模板加到所述多媒體概要(500)中。
12.如權(quán)利要求11的方法，還包括步驟用域識(shí)別應(yīng)用程序(320)去識(shí)別所述視頻節(jié)目的類型；用主題線索識(shí)別應(yīng)用程序(330)識(shí)別在所述視頻節(jié)目的所述轉(zhuǎn)錄本中的至少一個(gè)主題線索；用副題線索識(shí)別應(yīng)用程序(340)識(shí)別在所述視頻節(jié)目的至少一個(gè)主題中的至少一個(gè)副題線索；用音頻-可視模板識(shí)別應(yīng)用程序(350)識(shí)別與所述至少一個(gè)主題線索有關(guān)的至少一個(gè)音頻-可視模板；以及用所述音頻-可視模板識(shí)別應(yīng)用程序(350)識(shí)別與所述至少一個(gè)副題線索有關(guān)的至少一個(gè)音頻-可視模板。
13.如權(quán)利要求12的方法，還包括步驟在所述多媒體概要發(fā)生器(250，300)中接收與所述多媒體概要發(fā)生器(250，300)相連接的存儲(chǔ)器(280)中存儲(chǔ)的計(jì)算機(jī)軟件(300)的指令；在所述多媒體概要發(fā)生器(250，300)中執(zhí)行所述指令，以創(chuàng)建允許觀眾接入在所述多媒體概要(500)的每個(gè)主題的每個(gè)主題的進(jìn)入點(diǎn)；以及在所述多媒體概要發(fā)生器(250，300)中執(zhí)行指令，以創(chuàng)建允許觀眾接入在所述多媒體概要(500)中的每個(gè)副題中的每個(gè)副題的進(jìn)入點(diǎn)。
14.如權(quán)利要求8的方法，所述方法還包括步驟在所述視頻節(jié)目中人首次出現(xiàn)之后，用音頻-可視模板識(shí)別應(yīng)用程序(350)獲得在所述視頻節(jié)目中該人的臉部圖象；通過檢查該人的至少一個(gè)區(qū)別特征確認(rèn)對(duì)該人的識(shí)別；以及在確認(rèn)之后，將該人的圖象加到所述多媒體概要(500)中。
15.一種可以使能可編程裝置的計(jì)算機(jī)程序產(chǎn)品，在執(zhí)行所述計(jì)算機(jī)產(chǎn)品時(shí)能起到如權(quán)利要求1-6之一的系統(tǒng)的作用的功能。
16.一種包括所述視頻節(jié)目的轉(zhuǎn)錄本的至少一部分的視頻節(jié)目的多媒體概要(500)。
17.如權(quán)利要求16的視頻節(jié)目的多媒體概要(500)，包括與在所述視頻節(jié)目的至少一個(gè)主題中的至少一個(gè)副題有關(guān)的所述視頻節(jié)目的至少一個(gè)音頻-可視片段。
18.如權(quán)利要求17的多媒體概要(500)，還包括一個(gè)與主題有關(guān)的所述音頻-可視片段相關(guān)的主題進(jìn)入點(diǎn)，其中每個(gè)主題進(jìn)入點(diǎn)允許觀眾接入與所述主題有關(guān)的音頻-可視片段。
全文摘要
公開了一種在能夠顯示視頻節(jié)目的視頻顯示系統(tǒng)中使用的、用于使用視頻節(jié)目的轉(zhuǎn)錄本數(shù)據(jù)和音頻－視頻段創(chuàng)建視頻節(jié)目的多媒體概要的系統(tǒng)和方法。該系統(tǒng)包括多媒體概要產(chǎn)生器，能夠獲得視頻節(jié)目的轉(zhuǎn)錄本和音頻－視頻段。該多媒體概要產(chǎn)生器識(shí)別在視頻節(jié)目的轉(zhuǎn)錄本中的主題線索和副題線索。該多媒體概要產(chǎn)生器還識(shí)別與該主題線索和副題線索有關(guān)的音頻－視頻段。多媒體概要產(chǎn)生器通過組合主題線索和副題線索以及其相關(guān)的音頻－視頻段而創(chuàng)建多媒體概要。在多媒體概要中對(duì)各主題和副題提供進(jìn)入點(diǎn)，這樣，多媒體概要的觀眾就可以直接訪問各主題和副題。
文檔編號(hào)H04N5/445GK1425180SQ01808287
公開日2003年6月18日 申請(qǐng)日期2001年12月10日 優(yōu)先權(quán)日2000年12月21日
發(fā)明者L·阿格尼霍特里, N·迪米特羅瓦 申請(qǐng)人:皇家菲利浦電子有限公司