專利名稱：通過節(jié)目圖像內(nèi)容產(chǎn)生隱式tv推薦器的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種用于推薦電視節(jié)目的系統(tǒng)和方法，尤其涉及一種用于基于根據(jù)用戶偏好或簡檔產(chǎn)生的圖像推薦來提供感興趣的特定節(jié)目的系統(tǒng)和方法。
當(dāng)今的大量多媒體給電視觀眾非常多樣的選擇范圍。當(dāng)前，存在超過500個(gè)不同的通過有線電視服務(wù)示出的節(jié)目頻道。由于電視觀眾可獲得的頻道數(shù)目的增加，以及隨著在這樣的頻道上可獲得的節(jié)目內(nèi)容的多樣性，對于電視觀眾來說，確定電視節(jié)目或者檢索他們感興趣的信息變得日益復(fù)雜了。
存在不同類型的可獲得的電視節(jié)目指南(即電子節(jié)目指南(EPG))，其允許電視觀眾根據(jù)個(gè)人的偏好對可獲得的電視節(jié)目進(jìn)行分類或搜索。該EPG比傳統(tǒng)的印刷指南更有效地使觀眾確定想要的節(jié)目。由于許多觀眾對于某種類型的節(jié)目有特殊的偏好或者有偏見，因而可以將觀眾的偏好應(yīng)用于該EPG以便獲得一組可能是特定觀眾感興趣的推薦節(jié)目。
這些TV節(jié)目推薦器幫助用戶更好地管理大量選擇。然而，用戶不總是相信這些推薦器工作順利或者它們最能體現(xiàn)用戶的意圖。因此，本發(fā)明提供一種增加推薦器信任度的新穎方法，這是通過使推薦器顯得與用戶“在同一方”以及通過就由用戶和推薦器在過去觀察到的相關(guān)節(jié)目或事件對用戶進(jìn)行提醒。
本發(fā)明涉及一種用于根據(jù)一個(gè)特定主題的過去觀看歷史來提供內(nèi)容推薦的方法和系統(tǒng)。
根據(jù)本發(fā)明的一方面，提供推薦的方法包括以下步驟從多個(gè)頻道接收多個(gè)節(jié)目；提取由用戶觀看的節(jié)目的關(guān)鍵幀和內(nèi)容以便確定用戶的偏好；基于所提取的節(jié)目的關(guān)鍵幀和內(nèi)容產(chǎn)生用戶簡檔；以及基于用戶簡檔提供多個(gè)觀看推薦。響應(yīng)于用戶的輸入交互地執(zhí)行特定節(jié)目的關(guān)鍵幀，并且用戶簡檔的內(nèi)容被更新以便反映所述用戶偏好的改變。
根據(jù)本發(fā)明的另一方面，提供推薦的方法包括以下步驟基于視頻圖像內(nèi)容和嵌入其中的該視頻圖像內(nèi)容的電子節(jié)目指南(EPG)數(shù)據(jù)來產(chǎn)生至少一個(gè)指示用戶對于特定節(jié)目的偏好的用戶簡檔；將該用戶簡檔與來自多個(gè)頻道的輸入節(jié)目作比較以便確定一個(gè)期望的節(jié)目；以及如果兩者匹配的話，將該期望的節(jié)目推薦給觀眾。
根據(jù)本發(fā)明的另一方面，提供推薦的系統(tǒng)包括一個(gè)輸入裝置，用于提供用戶的觀看偏好；以及一個(gè)處理器，用于從多個(gè)頻道接收多個(gè)節(jié)目、提取用戶觀看的節(jié)目的關(guān)鍵幀和內(nèi)容以便確定用戶偏好、基于所提取的節(jié)目的關(guān)鍵幀和內(nèi)容產(chǎn)生用戶簡檔、以及基于用戶簡檔提供多個(gè)觀看推薦。
根據(jù)本發(fā)明的另一方面，提供推薦的系統(tǒng)包括一個(gè)用于提供用戶的觀看偏好的輸入裝置以及一個(gè)處理器。該處理器用于基于視頻圖像內(nèi)容和嵌入其中的該視頻圖像內(nèi)容的電子節(jié)目指南(EPG)數(shù)據(jù)來產(chǎn)生至少一個(gè)指示用戶對于特定節(jié)目的偏好的用戶簡檔；將該用戶簡檔與來自多個(gè)頻道的輸入節(jié)目作比較以便確定一個(gè)期望的節(jié)目；以及如果兩者匹配的話，將該期望的節(jié)目推薦給觀眾。


圖1示出根據(jù)本發(fā)明一個(gè)實(shí)施例的系統(tǒng)的簡化框圖。
圖2示出根據(jù)本發(fā)明一個(gè)實(shí)施例的系統(tǒng)的各主要部件。
圖3是解釋根據(jù)本發(fā)明的用戶簡檔產(chǎn)生過程的流程圖。
在下面的說明中，處于說明而不是限制的目的，陳述諸如特定的結(jié)構(gòu)、界面、技術(shù)等等具體的細(xì)節(jié)，以便提供對本發(fā)明的詳盡的理解。然而，本領(lǐng)域的熟練技術(shù)人員將明白，本發(fā)明可以實(shí)施為脫離這些具體的細(xì)節(jié)之外其它的實(shí)施例。然而，為了簡化的目的，省略了對公知的裝置、電路和方法的詳細(xì)說明，以便不以不必要的細(xì)節(jié)混淆本發(fā)明的說明。
圖1示出可以應(yīng)用本發(fā)明的優(yōu)選實(shí)施例的傳統(tǒng)電視系統(tǒng)2和接收機(jī)10。接收機(jī)10還可以包括其它的個(gè)人記錄裝置，諸如ReplayTV(加州Palo Alto的REPLAY NETWORKS公司的商標(biāo))和TiVo(加州Sunnyvale的TIVO公司的商標(biāo))，其給電視觀眾提供新的能力以獲得和操縱來自他們的有線電視和衛(wèi)星系統(tǒng)的電視節(jié)目流。
如圖1中所示，接收機(jī)10被設(shè)置為從傳統(tǒng)的電視(TV)廣播以及其它種類的源(包括有線電視服務(wù)提供商、數(shù)字高清晰度電視(HDTV)和/或數(shù)字標(biāo)準(zhǔn)高清晰度電視(SDTV)信號、圓盤式衛(wèi)星電視天線、傳統(tǒng)的RF廣播、因特網(wǎng)連接或者諸如VHS播放器或DVD播放器的其它存儲裝置)接收音頻和視頻節(jié)目。該音頻和視頻節(jié)目可以按照模擬、數(shù)字或數(shù)字壓縮格式通過任何傳輸裝置(包括衛(wèi)星、電纜、電線、電視廣播)來傳送或者通過網(wǎng)絡(luò)發(fā)送。應(yīng)該注意，本系統(tǒng)還能夠連接到其它可能的網(wǎng)絡(luò)，諸如直接私人網(wǎng)絡(luò)和無線網(wǎng)絡(luò)。
根據(jù)本發(fā)明的教導(dǎo)，接收機(jī)10可以根據(jù)過去的觀看歷史、偏好、或用戶簡檔來向觀眾推薦他們感興趣的節(jié)目。為了實(shí)現(xiàn)此目的，接收機(jī)10檢測來自多個(gè)不同頻道的輸入電視節(jié)目，并且基于所述節(jié)目的視頻圖像和/或任何可選的與EPG有關(guān)的信息來維持一個(gè)包含特定觀眾的觀看歷史的數(shù)據(jù)庫，然后確定觀眾觀看的或沒有觀看的TV節(jié)目的類型。注意，接收機(jī)10可以包括一個(gè)單獨(dú)的頻道，該單獨(dú)的頻道可被用于從不同的源接收電子節(jié)目指南(EPG)。此后，根據(jù)過去的觀看歷史產(chǎn)生關(guān)于觀眾喜歡觀看的節(jié)目類型或頻道的推薦。
現(xiàn)在，以下將詳細(xì)描述本發(fā)明。
圖2更詳細(xì)地示出根據(jù)本發(fā)明實(shí)施例的示例接收機(jī)10。接收機(jī)10包括一個(gè)輸入接口(也就是IR傳感器)12、MPEG-2編碼器14、硬盤驅(qū)動(dòng)器16、MPEG-2解碼器18、控制器20、特征提取器22、視頻處理器24、存儲器26和重放部分28。應(yīng)注意，MPEG編碼器/解碼器可以遵照其它的MPEG標(biāo)準(zhǔn)，也就是MPEG-1、MPEG-2、MPEG-4和MPEG-7。該控制器20監(jiān)督接收機(jī)10的全部操作，包括特征提取模式、記錄模式、播放模式和其它典型接收裝置中的普通模式。應(yīng)注意，接收機(jī)10可以包含在電視系統(tǒng)2中。
在正常模式期間，控制器20使輸入電視信號被解調(diào)并且被視頻處理器24處理，并且將它們傳送到電視機(jī)2用于以用于顯示。接著，視頻處理器24將輸入TV信號轉(zhuǎn)換為適合于在電視機(jī)2上顯示的相應(yīng)的基帶電視信號。
在記錄模式期間，控制器20使MPEG-2編碼器14接收從衛(wèi)星、電纜、電線和電視廣播或網(wǎng)絡(luò)傳送來的輸入電視信號，并且將所接收的TV信號轉(zhuǎn)換為MPEG格式以用于存儲在硬盤驅(qū)動(dòng)器16上。此后，控制器20使硬盤驅(qū)動(dòng)器16將所存儲的電視信號流送到MPEG-2解碼器，該MPEG-2解碼器通過重放部分28將待傳送的解碼TV信號傳送到電視機(jī)2以便用于顯示。
在特征提取模式期間，特征提取器22處理并且產(chǎn)生代表給定用戶的觀看歷史的數(shù)據(jù)以便確定觀眾觀看最多的節(jié)目的類型，其接著產(chǎn)生用戶的觀看習(xí)慣以便在存儲器26中建立一個(gè)用戶簡檔?？蛇x擇地，當(dāng)產(chǎn)生用戶簡檔時(shí)，觀眾可以明確地指定他或她更喜歡的節(jié)目類型。
為了建立用戶簡檔，將視頻信息輸入到特征提取器22，其中根據(jù)下列類型分析視頻信息的內(nèi)容(1)節(jié)目圖像內(nèi)容和(2)預(yù)先設(shè)置的分類。一個(gè)公知的電子節(jié)目指南(EPG)協(xié)議可以被用于規(guī)定預(yù)先設(shè)置的分類。EPG是一種被設(shè)計(jì)成幫助電視觀眾在TV環(huán)境內(nèi)可用的廣播素材中進(jìn)行導(dǎo)航和選擇的標(biāo)準(zhǔn)應(yīng)用。EPG提供關(guān)于每個(gè)節(jié)目的信息以及包括諸如頻道號、節(jié)目標(biāo)題、開始時(shí)間、結(jié)束時(shí)間、經(jīng)過的時(shí)間、剩余的時(shí)間、評級(如果可用的話)、主題、主旋律以及節(jié)目內(nèi)容簡要描述之類的節(jié)目特征。特征提取器22使用所述EPG特征把輸入節(jié)目分類成預(yù)設(shè)類別中的一個(gè)，即體育、懷舊經(jīng)典電影、動(dòng)作電影等。
除EPG特征之外，根據(jù)本發(fā)明實(shí)施例，通過評估包括色彩、紋理、對象、對象運(yùn)動(dòng)以及場景等視覺數(shù)據(jù)特征來分析視頻圖像，以便了解和識別特定用戶感興趣的節(jié)目。應(yīng)注意到，EPG特征不總是提供足夠的數(shù)據(jù)以用于隨后推薦準(zhǔn)確的用戶感興趣的節(jié)目類型。
因此，特征提取器22一旦接收到輸入視頻信號就提取關(guān)鍵幀(縮略圖像等等)。該輸入可以與EPG信息一起被用作優(yōu)選的用戶類別。
應(yīng)注意到，根據(jù)視頻信息的內(nèi)容檢測關(guān)鍵幀在本領(lǐng)域是眾所周知的，其可以通過多種途徑執(zhí)行。比如Borko Furht、Stephen W.Smoliar以及Hongjiang Zhang的“Video and image processing in multimediasystem(在多媒體系統(tǒng)中的視頻和圖像處理)”(Kluwer AcademiaPublishers，1995)，在本文中引用其內(nèi)容以作參考。簡要地說，包括多個(gè)攝影機(jī)鏡頭或者場景變化的視頻序列經(jīng)歷用于提取關(guān)鍵幀的場景變化檢測。一個(gè)檢測關(guān)鍵幀的方法是基于直方圖比較方法，其中，對連續(xù)幀中的對應(yīng)像素或者區(qū)域進(jìn)行比較來產(chǎn)生強(qiáng)度級直方圖。由于直方圖會從一個(gè)視頻源到另一個(gè)視頻源發(fā)生變化，所以把對應(yīng)于一幀的每個(gè)直方圖和下一幀的直方圖進(jìn)行比較。接著，選擇一個(gè)閾值以便確定在所述各連續(xù)幀之間像素或者區(qū)域是否已經(jīng)發(fā)生改變。超出閾值的關(guān)鍵幀被選作所述關(guān)鍵幀。對場景中的所有幀以及對每個(gè)場景變化重復(fù)這個(gè)處理過程。最終，對來自每個(gè)場景變化的關(guān)鍵幀進(jìn)行對比并將其分成塊，然后提取諸如平均值、標(biāo)準(zhǔn)偏差、熵以及主導(dǎo)色彩之類的特征。在一個(gè)替換實(shí)施例中，電視觀眾可以規(guī)定一個(gè)要經(jīng)受特征提取處理的視頻序列的開始以及結(jié)束片斷，或者可以通過接收機(jī)10的輸入接口12提供特定的攝影機(jī)鏡頭或關(guān)鍵幀。
如上所述由特征提取器22提取的視頻特征在與EPG信息組合后被提供給存儲器26，以便配置用戶感興趣的視頻節(jié)目的類型。來自特征提取器22的所提取的視頻關(guān)鍵幀的內(nèi)容和關(guān)鍵幀被提供到存儲器16的用戶的簡檔，以便建立個(gè)人的觀看偏好。對于特定節(jié)目的該觀看偏好接著在隨后的觀看模式中用于向觀眾推薦。在這方面，可以采用諸如隱藏馬爾可夫模型(HMM)、貝葉斯網(wǎng)絡(luò)、基因算法和神經(jīng)網(wǎng)絡(luò)之類的學(xué)習(xí)范例以便建立一個(gè)用戶簡檔。例如，由本申請的發(fā)明者于1999年12月17日提交的標(biāo)題為“Method and Apparatus for RecommendingTelevision Programming using Decision Trees(用于使用決策樹推薦電視節(jié)目的方法和設(shè)備)”的US專利申請NO.09/466,406，在此引用該文獻(xiàn)的內(nèi)容以作參考。
應(yīng)注意到，也可以使用對于本領(lǐng)域的普通技術(shù)人員來說明顯的其它學(xué)習(xí)模型及其組合。
圖3示出根據(jù)本發(fā)明實(shí)施例的用戶簡檔的產(chǎn)生步驟。接收機(jī)10在一段時(shí)間內(nèi)觀察用戶的觀看習(xí)慣(步驟100)，在此期間，每個(gè)輸入視頻節(jié)目被如上所述地分類(步驟120)。這里，用戶的觀看偏好包括最常觀看的節(jié)目類型，并且該信息被用于建立存儲器26中的用戶簡檔。此后，用戶簡檔被更新(步驟140)。因此，可以基于用戶的觀看模式來獲得一個(gè)反映該用戶喜歡或不喜歡各種節(jié)目的數(shù)據(jù)庫，以使得接收機(jī)10以后可以基于過去的觀看歷史來向觀眾推薦其更喜歡的節(jié)目列表。
雖然已經(jīng)示出和描述了本發(fā)明的優(yōu)選實(shí)施例，但是應(yīng)該理解，本領(lǐng)域的熟練技術(shù)人員可以在不脫離本發(fā)明的真實(shí)范圍的情況下做出各種改變和修改，以及可以用等效元件替換本發(fā)明的元件。另外，在不脫離中心范圍的情況下，可以做出各種修改以適應(yīng)于特定的情況和本發(fā)明的教導(dǎo)。因此，本發(fā)明不意圖限制于作為執(zhí)行本發(fā)明的最佳模式而公開的特定實(shí)施例，相反，本發(fā)明包括落入所附權(quán)利要求書范圍內(nèi)的所有實(shí)施例。
權(quán)利要求
1.一種向用戶提供推薦的方法，該方法包括以下步驟從多個(gè)頻道接收多個(gè)節(jié)目；提取用戶觀看的所述多個(gè)節(jié)目的關(guān)鍵幀和內(nèi)容，以便確定所述用戶的偏好；基于所述多個(gè)節(jié)目的所述提取的關(guān)鍵幀和內(nèi)容產(chǎn)生一個(gè)用戶簡檔；以及，基于所述用戶簡檔提供多個(gè)觀看推薦。
2.如權(quán)利要求1所述的方法，還包括由所述用戶選擇至少一個(gè)觀看推薦的步驟。
3.如權(quán)利要求1所述的方法，還包括顯示至少一個(gè)觀看推薦的步驟。
4.如權(quán)利要求1所述的方法，其中響應(yīng)于所述用戶輸入交互地執(zhí)行提取特定節(jié)目的關(guān)鍵幀的步驟。
5.如權(quán)利要求1所述的方法，還包括更新所述用戶簡檔的內(nèi)容以便反映所述用戶的改變的偏好的步驟。
6.如權(quán)利要求1所述的方法，其中根據(jù)電子節(jié)目指南(EPG)數(shù)據(jù)來執(zhí)行提取所述多個(gè)節(jié)目的內(nèi)容的步驟。
7.一種用于提供推薦的方法，該方法包括以下步驟基于視頻圖像內(nèi)容和嵌入其中的該視頻圖像內(nèi)容的電子節(jié)目指南(EPG)數(shù)據(jù)來產(chǎn)生至少一個(gè)指示用戶對于特定節(jié)目的偏好的用戶簡檔；將所述用戶簡檔與來自多個(gè)頻道的輸入節(jié)目作比較，以便確定一個(gè)期望的節(jié)目；以及，如果兩者匹配的話，將所述期望的節(jié)目推薦給所述觀眾。
8.如權(quán)利要求7所述的方法，還包括選擇至少一個(gè)期望的節(jié)目以用于在特定時(shí)間觀看的步驟。
9.如權(quán)利要求8所述的方法，還包括在一個(gè)存儲介質(zhì)中存儲所述選擇的節(jié)目以用于隨后重放的步驟。
10.如權(quán)利要求8所述的方法，其中響應(yīng)于所述用戶輸入交互地執(zhí)行所述選擇所述期望的節(jié)目的步驟。
11.如權(quán)利要求7所述的方法，還包括顯示所述期望的節(jié)目以用于觀看的步驟。
12.如權(quán)利要求7所述的方法，還包括更新所述至少一個(gè)用戶簡檔的內(nèi)容以便反映用戶的改變的偏好的步驟。
13.一種用于提供推薦的系統(tǒng)，包括一個(gè)輸入裝置，用于提供用戶的觀看偏好；以及一個(gè)處理器，用于用于從多個(gè)頻道接收多個(gè)節(jié)目；提取用戶觀看的所述多個(gè)節(jié)目的關(guān)鍵幀和內(nèi)容，以便確定所述用戶的偏好；基于所述多個(gè)節(jié)目的所述提取的關(guān)鍵幀和內(nèi)容產(chǎn)生一個(gè)用戶簡檔；以及基于所述用戶簡檔提供多個(gè)觀看推薦。
14.如權(quán)利要求13所述的系統(tǒng)，還包括一個(gè)用于存儲所述用戶的偏好的存儲器。
15.如權(quán)利要求13所述的系統(tǒng)，其中該處理器還用來更新所述用戶簡檔的內(nèi)容以便反映所述用戶的改變的偏好。
16.一種用于提供推薦的系統(tǒng)，包括一個(gè)輸入裝置，用于提供用戶的觀看偏好；以及一個(gè)處理器，用于基于視頻圖像內(nèi)容和嵌入其中的該視頻圖像內(nèi)容的電子節(jié)目指南(EPG)數(shù)據(jù)來產(chǎn)生至少一個(gè)指示用戶對于特定節(jié)目的偏好的用戶簡檔；將所述用戶簡檔與來自多個(gè)頻道的輸入節(jié)目作比較，以便確定一個(gè)期望的節(jié)目；以及，如果兩者匹配的話，將所述期望的節(jié)目推薦給所述觀眾。
17.如權(quán)利要求16所述的系統(tǒng)，還包括一個(gè)用于存儲所述至少一個(gè)用戶簡檔的存儲器。
18.如權(quán)利要求16所述的系統(tǒng)，還包括一個(gè)用于顯示所述期望的節(jié)目以供觀看的顯示器。
19.如權(quán)利要求16所述的系統(tǒng)，其中該處理器還用來更新所述用戶簡檔的內(nèi)容，以便反映所述用戶的改變的偏好。
全文摘要
本發(fā)明涉及一種用于根據(jù)基于用戶的過去觀看歷史的用戶偏好來提供推薦的系統(tǒng)和方法。該系統(tǒng)跟蹤由用戶觀看的節(jié)目圖像內(nèi)容，以便產(chǎn)生用戶偏好。然后，基于存儲在用戶簡檔中的該觀眾的觀看習(xí)慣向用戶提供多個(gè)推薦，以使得用戶可以選擇性地觀看他或她感興趣的節(jié)目。
文檔編號H04N5/445GK1774916SQ200480009913
公開日2006年5月17日 申請日期2004年4月2日 優(yōu)先權(quán)日2003年4月14日
發(fā)明者S·古塔 申請人:皇家飛利浦電子股份有限公司