交互式視頻流的制作方法
【專利摘要】本文公開的實施例涉及交互式視頻流。在一個實施例中，處理器可以確定與視頻流的場景的用戶交互的特性?？梢曰诖鎯ζ髦械男畔⒋_定對該用戶交互的響應(yīng)。所確定的響應(yīng)可以由處理器執(zhí)行。
【專利說明】交互式視頻流
【背景技術(shù)】
[0001]視頻流是一種用于接收媒體內(nèi)容的流行方法。例如，電視節(jié)目可以經(jīng)由無線電信號從有線電視公司以流形式流到電視機。網(wǎng)站可允許用戶觀看從服務(wù)器流出的內(nèi)容。內(nèi)容流可以允許單獨實體來維持內(nèi)容的控制，并且可以使用用戶顯示設(shè)備上的較少存儲空間。
【專利附圖】

【附圖說明】
[0002]附圖描述了示例性實施例。以下具體描述參考附圖，其中:
[0003]圖1是示出計算系統(tǒng)的一個示例的框圖。
[0004]圖2是示出響應(yīng)與視頻流場景中的項目的用戶交互的方法的一個示例的流程圖。
[0005]圖3A和3B是示出識別視頻流中的可選項目并將該可選項目與響應(yīng)關(guān)聯(lián)起來的一個示例的示意圖。
[0006]圖4A和4B是示出 用戶與視頻流場景交互以及對該用戶交互的自動響應(yīng)的一個示例的示意圖。
【具體實施方式】
[0007]在一個實施例中，用戶可以與視頻流場景中顯示的項目交互，例如索要關(guān)于該項目的信息或購買該項目。通過視頻流場景中顯示的項目或情況，傳感器可以檢測用戶交互。例如，演員可以使用視頻流場景中的產(chǎn)品，并且用戶可以觸摸該場景中的產(chǎn)品，以接收關(guān)于該產(chǎn)品的更多信息。交互式視頻流可允許用戶在舒適的環(huán)境中接收與視頻節(jié)目關(guān)聯(lián)的信息，諸如不需要在附加設(shè)備上查找信息。這可以為用戶提供對信息和服務(wù)的快速且方便的訪問，并且可以提供另外的廣告場所。交互式視頻流可以被用于提供與諸如電視節(jié)目、視頻流服務(wù)或網(wǎng)絡(luò)直播的各種媒體類型的用戶交互。交互式視頻流可允許內(nèi)容提供者維持對視頻的控制，并且可以在用戶的顯示設(shè)備上使用較少存儲空間。
[0008]交互式視頻流通過允許不同類型的系統(tǒng)配置而可以提供靈活性。例如，視頻流場景中關(guān)于可選項目的信息可以與視頻流信號一起被傳送。在某些情況下，關(guān)于視頻流場景內(nèi)可選項目的信息可以與視頻流分開傳送，例如，通過電視邊帶信號分開傳送?？蛇x項目信息可以被存儲在數(shù)據(jù)庫中，以使信息不被傳送至顯示設(shè)備。例如，數(shù)據(jù)庫可以包括關(guān)于視頻流中與特定可選項目和響應(yīng)相關(guān)聯(lián)的位置和時間的信息，并且可以將用戶交互信息與數(shù)據(jù)庫相比較，以確定關(guān)聯(lián)響應(yīng)。來自用于感測用戶與視頻場景的交互的傳感器的信息可以在用戶的顯示設(shè)備本地處理，或者可以被傳送至另一個實體，在某些情況下，被傳送至用于傳送視頻流的實體。
[0009]圖1是示出計算系統(tǒng)100的一個示例的框圖。計算系統(tǒng)100可以被用來響應(yīng)與諸如視頻流場景中顯示的演員、產(chǎn)品或位置的項目的用戶交互。用戶的交互可以基于來自傳感器的信息來分析，并且對該交互做出的響應(yīng)可以基于用于將與視頻流內(nèi)的特定項目的用戶交互和響應(yīng)關(guān)聯(lián)起來的數(shù)據(jù)庫來確定。然后，該計算系統(tǒng)可以執(zhí)行所確定的對用戶交互的響應(yīng)。作為示例，用戶可以觸摸視頻流中顯示的產(chǎn)品以購買該產(chǎn)品，這可以簡化購買過程。
[0010]計算系統(tǒng)100可以包括裝置107、存儲器103、傳感器106和顯示設(shè)備105。顯示設(shè)備105可以是適用于顯示視頻流的任意顯示設(shè)備。例如，顯示設(shè)備105可以是客戶端設(shè)備，諸如位于移動計算設(shè)備上的、用于顯示從服務(wù)器流出的視頻的監(jiān)視器或顯示器，或者可以是具有從有線電視公司發(fā)出的視頻的電視機。
[0011]傳感器106可以是用于收集關(guān)于相對于顯示設(shè)備105上顯示的視頻流場景的用戶交互的信息的傳感器。例如，傳感器106可以是照相機、紅外、聲學(xué)或運動傳感器。傳感器106可以將收集的信息例如經(jīng)由網(wǎng)絡(luò)或有線連接發(fā)送至裝置107，以用于解釋。在某些實施方式中，傳感器106可以包括用于分析所收集的數(shù)據(jù)的處理器，并且關(guān)于該分析的信息可以被發(fā)送至裝置107。在一個實施方式中，裝置107遠(yuǎn)離顯示設(shè)備105。例如，顯示設(shè)備105或傳感器106可以經(jīng)由網(wǎng)絡(luò)將關(guān)于用戶交互的信息發(fā)送至裝置107，以使不在用戶的位置處做出處理。
[0012]裝置107可以是適用于解釋并響應(yīng)與視頻流場景內(nèi)顯示的項目的用戶交互的任意裝置。裝置107 可以包括處理器102和機器可讀存儲介質(zhì)101。處理器102可以是任意適合的處理器，諸如中央處理器(CPU)、基于半導(dǎo)體的微處理器或適用于讀取并執(zhí)行指令的任意其它設(shè)備。在一個實施例中，裝置107包括替代處理器102的邏輯電路，或者除了處理器102之外，裝置107還包括邏輯電路。作為提取、解碼和執(zhí)行指令的替代例或除提取、解碼和執(zhí)行指令之外，處理器102可以包括一個或多個集成電路(IC)或包括用于執(zhí)行以下所述功能的多個電子部件的其它電子電路。在一個實施方式中，裝置107包括多個處理器。例如，一個處理器可以執(zhí)行一些功能，而另一個處理器可以執(zhí)行其它功能。
[0013]機器可讀存儲介質(zhì)101可以是任意適合的機器可讀介質(zhì)，諸如電子、磁性、光學(xué)或存儲可執(zhí)行指令或其它數(shù)據(jù)的其它物理存儲設(shè)備(例如硬盤驅(qū)動器、隨機存取存儲器、閃存等)。機器可讀存儲介質(zhì)101可以是例如計算機可讀非臨時性介質(zhì)。機器可讀存儲介質(zhì)101可以包括由處理器102可執(zhí)行的指令。
[0014]存儲器103可以是由處理器102可訪問的任意適合的存儲器。在某些情況下，存儲器103可以與機器可讀存儲介質(zhì)101相同。存儲器103可以被包括在裝置107內(nèi)，或可以經(jīng)由網(wǎng)絡(luò)由處理器102訪問。該存儲器可以包括用戶交互信息104。裝置107可以將用戶交互信息與響應(yīng)關(guān)聯(lián)起來，并將其存儲在存儲器103中。例如，指向視頻流場景中特定項目的手勢可以與以電子郵件的形式向用戶發(fā)送關(guān)于該項目的更多信息的響應(yīng)關(guān)聯(lián)起來。
[0015]處理器102可以從傳感器105接收信息，并確定用戶交互相對于顯示設(shè)備105上顯示的視頻流場景的特性。處理器102可以將用戶交互與存儲器103中的信息相比較，以確定對用戶交互的響應(yīng)。例如，觸摸視頻流的場景內(nèi)顯示的產(chǎn)品可以產(chǎn)生被顯示的標(biāo)題，詢問用戶是否想要購買該產(chǎn)品。該處理器可以執(zhí)行所確定的響應(yīng)。在某些情況下，執(zhí)行關(guān)聯(lián)的響應(yīng)可以包括將關(guān)于選擇的信息傳送至之后可以執(zhí)行行為的另一個實體。
[0016]在不需要控制內(nèi)容和降低用戶設(shè)備上所用存儲量的情況下，交互式視頻流可以允許實體提供交互式媒體。除此之外，交互式內(nèi)容流在實體如何分析并響應(yīng)用戶交互方面提供了靈活性。例如，在一個實施方式中，提供交互式服務(wù)的實體可以與視頻流實體分開。在不需要包含視頻流實體的情況下，單獨的處理器可以分析用戶交互，并將用戶交互與具有關(guān)聯(lián)響應(yīng)的存儲器相比較。在一個實施方式中，視頻流實體接收信息，以分析用戶交互和/或確定關(guān)聯(lián)響應(yīng)。在一個實施方式中，視頻流實體可以將關(guān)于可選項目的信息和/或關(guān)聯(lián)響應(yīng)與視頻信號一起發(fā)送至用戶的顯示設(shè)備，或者可以將其作為附加信息發(fā)送至用戶的顯示設(shè)備。
[0017]圖2是示出用于響應(yīng)與視頻流場景中的項目的用戶交互的方法的一個示例的流程圖200。例如，可以通過用戶交互(諸如通過目光接觸、面部表情、觸摸、運動、語音或遠(yuǎn)程控制)選擇視頻流場景中的項目。處理器可以從傳感器接收關(guān)于用戶的相對于視頻流場景的用戶交互的信息，并且該處理器可以通過在存儲器中查找關(guān)于該交互的信息來確定對該交互的響應(yīng)。交互式視頻流可允許用戶以直觀方式與視頻媒體交互。例如，用戶在觀看視頻流的同時，可以請求服務(wù)、對廣告做出響應(yīng)或接收附加信息。該方法可以通過例如圖1中的處理器102實施。
[0018]開始于201，處理器基于來自傳感器的信息確定與視頻流內(nèi)特定時間期間該視頻流內(nèi)的場景區(qū)域之間的用戶交互的特性。傳感器可以是用于收集關(guān)于用戶交互的信息的任意傳感器。例如，傳感器可以檢測相對于視頻流場景的目光接觸、觸摸、手勢、聲音或運動。該傳感器例如可以是光學(xué)、紅外或聲學(xué)傳感器。該傳感器可以包括處理器或用于傳送關(guān)于所感測的交互的信息的其它硬件。該傳感器可以連接至用于解釋所感測的交互的處理器，可以將關(guān)于該交互的信息和視頻流一起傳送至處理器網(wǎng)絡(luò)，和/或可以經(jīng)由網(wǎng)絡(luò)將其傳送至另一個站點，諸如傳送至與有線電視公司關(guān)聯(lián)的處理器或其它實體。
[0019]在特定時間的場景區(qū)域可以對應(yīng)于場景中的項目。視頻流的場景可以是節(jié)目的一部分，諸如情景或動畫，并且用戶可以與場景中的項目交互，以選擇它。例如，用戶可以注視場景中顯示的演員、樹、產(chǎn)品或網(wǎng)店的圖像超過特定的時間數(shù)量，以選擇它。處理器可以使用從傳感器收集的信 息，來確定用戶交互的特性。例如，處理器可以確定用戶觸摸顯示設(shè)備的地方和當(dāng)時顯示的視頻流場景。
[0020]視頻流場景可以包括哪些項目是可選的指示，諸如通過將其做成不同顏色或使其呈現(xiàn)輪廓。在某些情況下，沒有指示向用戶顯示項目是可選的。在一個實施方式中，諸如通過電視邊帶信號或以諸如經(jīng)由因特網(wǎng)的另一方式，可以將關(guān)于可選項目的信息與視頻流分開傳送至與電視機關(guān)聯(lián)的處理器。在一個實施方式中，可選項目信息被存儲在單獨的數(shù)據(jù)庫中，以使與顯示視頻流的顯示設(shè)備相關(guān)聯(lián)的處理器不參與確定用戶是否選擇可選項目，并且顯示設(shè)備和/或傳感器將用戶交互信息傳送至用于處理該信息的另一設(shè)備。
[0021]繼續(xù)至202，處理器基于所確定的用戶交互的特性、視頻流區(qū)域和視頻流時間與存儲器中的信息的比較，選擇對用戶交互的響應(yīng)。用于分析傳感器數(shù)據(jù)的相同處理器可以將用戶交互信息與存儲器相比較，或者處理器可以將用戶交互信息發(fā)送至用于比較的另一處理器。例如，交互數(shù)據(jù)可以被發(fā)送至另一個實體，以確定用戶行為的含義。
[0022]處理器可以使用來自傳感器的信息，來確定用戶交互的含義，諸如確定視頻流場景內(nèi)的項目是否被選擇。處理器可以確定被選擇的對象是否是可選對象。在某些情況下，處理器可以基于存儲器中的信息確定用戶交互是否與可選項目相關(guān)聯(lián)。例如，存儲器可以包括與可選項目相關(guān)聯(lián)的顯示區(qū)域和對應(yīng)的視頻流時間。
[0023]存儲器可以是用于將用戶交互與響應(yīng)關(guān)聯(lián)起來的數(shù)據(jù)庫或其它存儲器類型。例如，如果在視頻流場景中對象A被選擇，則存儲器可以存儲對應(yīng)的響應(yīng)，諸如顯示關(guān)于對象A的信息，如果對象B被選擇，則顯示關(guān)于對象B的信息。顯示設(shè)備經(jīng)由網(wǎng)絡(luò)可利用存儲器。在某些實施方式中，與顯示設(shè)備不關(guān)聯(lián)的處理器基于從傳感器接收的信息確定與顯示設(shè)備之間的交互。在某些實施方式中，響應(yīng)信息被存儲在可以被顯示設(shè)備訪問的地方。
[0024]為了填充存儲器，可以識別視頻流的場景內(nèi)的項目，并且將該項目與針對與該項目的特定用戶交互做出的響應(yīng)關(guān)聯(lián)起來。處理器，諸如用于使視頻以流形式流向顯示設(shè)備的處理器或單獨的處理器，可以提供用戶界面，以允許用戶通過視頻流更容易地提供自動信息和服務(wù)。例如，用戶界面可以允許用戶觀看視頻場景并將項目標(biāo)記為可選。用戶還可以指示對對象進(jìn)行選擇的響應(yīng)。關(guān)于選擇和響應(yīng)的信息可以被存儲。例如，在場景中演員可以握著軟飲料，并且用戶可以加亮軟飲料，并指示軟飲料的選擇應(yīng)當(dāng)導(dǎo)致軟飲料的優(yōu)惠券代碼顯示在電視機屏幕的底部。
[0025]在一個實施方式中，處理器自動識別場景中的對象。該處理器可以顯示具有可獲取可選對象的場景，并允許用戶選擇哪個應(yīng)該是可選或確定對選擇對象做出的響應(yīng)。項目可以是例如視頻流中顯示的演員、地點或產(chǎn)品。在某些情況下，選擇項目可以指示請求關(guān)于由項目執(zhí)行的活動的更多信息，諸如演員做運動的地方。
[0026]響應(yīng)可以是任意適合的響應(yīng)。例如，響應(yīng)可以包含變更視頻流以顯示附加信息、通過諸如電子郵件將信息傳送至視頻流之外的用戶、或者接觸之后可以響應(yīng)用戶的另一個實體。例如，可以聯(lián)系與產(chǎn)品有關(guān)聯(lián)的公司，并且然后該公司可以將產(chǎn)品的優(yōu)惠券以郵件或電子郵件的形式發(fā)送給用戶。在某些情況下，特定的響應(yīng)可以依賴于指示選擇項目的用戶交互的類型。例如，目光與項目接觸超過特定的時間數(shù)量可以產(chǎn)生與觸摸項目不同的響應(yīng)。在某些情況下，響應(yīng)包括變更視頻流，以使選擇的項目呈現(xiàn)已經(jīng)被選擇。例如，這可以改變顏色。在某些情況下，響應(yīng)可以包括多個步驟，諸如顯示詢問用戶是否要購買選中的項目的菜單。 [0027]移至203，處理器執(zhí)行所選擇的響應(yīng)。處理器可以將關(guān)于用戶交互的信息傳送至另一個實體。例如，處理器可以將諸如電子郵件或自動電話留言的信息傳送至用戶。處理器可以變更視頻流，例如響應(yīng)于選擇而改變場景、以彈出或標(biāo)題的形式顯示附加信息以指示該項目被選擇、或者使另外的項目成為可選。響應(yīng)可以是購買所選擇的項目。例如，用戶可以具有存檔的信用卡信息，并且處理器可以指示使用信用卡的購買過程。處理器可以將指示用戶選擇產(chǎn)品的信息傳送至與該產(chǎn)品關(guān)聯(lián)的公司的處理器，并且該公司可以例如聯(lián)系用戶。在某些實施方式中，處理器可以將關(guān)于選擇的信息存儲到另一個處理器可訪問的存儲器中，諸如與另一個實體相關(guān)聯(lián)的處理器。
[0028]圖3A和3B是示出用于識別視頻流中的可選項目并將該可選項目與響應(yīng)相關(guān)聯(lián)的一個示例的示意圖。圖3A示出視頻流的場景300。場景300是在機場的乘客即將登機的場景。圈301識別乘客手里的公文包。圈301指示場景300內(nèi)的可選項目。
[0029]圖3B示出視頻流中的項目和響應(yīng)的表302。例如，觸摸在I小時、I分鐘和10秒鐘時于X坐標(biāo)200和y坐標(biāo)1000處拍攝到視頻中的公文包應(yīng)該具有顯示在視頻流底部的標(biāo)題的響應(yīng)，以允許用戶購買類似的公文包。
[0030]圖4A和4B是示出用戶與視頻流交互以及自動響應(yīng)的一個示例的示意圖。在圖3A中，視頻流場景400示出機場的視頻流場景。用戶的手401觸摸視頻流機場場景中顯示的公文包402。在圖4B中，視頻流場景400顯示有選擇的公文包402和給用戶提供機會購買與所示公文包402類似的公文包的標(biāo)題403。例如，處理器可以確定對選擇做出的響應(yīng)將變更視頻流， 以顯示該標(biāo)題。處理器可以例如通過在圖3B的表302中查找關(guān)于交互的信息來做出決定。
【權(quán)利要求】
1.一種機器可讀存儲介質(zhì)，包括由處理器可執(zhí)行的指令，以: 基于來自傳感器的信息，確定與視頻流內(nèi)特定時間期間所述視頻流內(nèi)場景的區(qū)域的用戶交互的特性； 基于所確定的所述用戶交互的特性、視頻流區(qū)域和視頻流時間與存儲器中的信息的比較，選擇對所述用戶交互的響應(yīng)；以及執(zhí)行所選擇的響應(yīng)。
2.根據(jù)權(quán)利要求1所述的機器可讀存儲介質(zhì)，其中所選擇的響應(yīng)包括以下中的至少一種:將關(guān)于所述用戶交互的信息傳送至另一個實體、將信息傳送至所述用戶、變更所述視頻流、購買項目。
3.根據(jù)權(quán)利要求1所述的機器可讀存儲介質(zhì)，其中執(zhí)行所選擇的響應(yīng)包括執(zhí)行所選擇的響應(yīng)和/或傳送關(guān)于所選擇的響應(yīng)的信息。
4.根據(jù)權(quán)利要求1所述的機器可讀存儲介質(zhì)，其中所述用戶交互包括以下中的至少一種:面部表情、目光接觸、手勢和觸摸。
5.根據(jù)權(quán)利要求1所述的機器可讀存儲介質(zhì)，其中所述用戶交互指示購買在所述特定時間顯示在所述場景的所述區(qū)域中的項目的詢問和/或指示。
6.一種方法，包括: 處理器基于從傳感器 收集的信息，確定與顯示設(shè)備上視頻流場景中顯示的可選項目的用戶交互的性質(zhì)； 處理器將所述項目和用戶交互性質(zhì)與存儲器中的信息相比較，以確定對所述用戶交互的響應(yīng)；以及 處理器執(zhí)行所確定的響應(yīng)。
7.根據(jù)權(quán)利要去6所述的方法，進(jìn)一步包括: 識別所述場景中顯示的所述可選項目； 將關(guān)于響應(yīng)的信息與選擇所述可選項目關(guān)聯(lián)起來；并且 將所關(guān)聯(lián)的信息存儲在所述存儲器中。
8.根據(jù)權(quán)利要求7所述的方法，進(jìn)一步包括使視頻以流形式流向所述顯示設(shè)備。
9.根據(jù)權(quán)利要求8所述的方法，進(jìn)一步包括基于所述可選項目的選擇變更所述視頻流。
10.根據(jù)權(quán)利要求8所述的方法，進(jìn)一步包括變更所述視頻流，以使所述可選項目呈現(xiàn)為可選。
11.一種計算系統(tǒng)，包括: 顯示設(shè)備，用于顯示從遠(yuǎn)程設(shè)備流出的視頻； 傳感器，用于收集有關(guān)與以流形式流向所述顯示設(shè)備的所述視頻的用戶交互的信息；以及 處理器，用于: 基于所述傳感器收集的信息確定與所述顯示設(shè)備上顯示的視頻流的場景中的項目的用戶交互的特性； 基于所確定的特性與存儲器中的信息的比較，確定對所述用戶交互的響應(yīng)；以及 輸出所確定的響應(yīng)。
12.根據(jù)權(quán)利要求11所述的計算系統(tǒng)，其中所述場景中的所述項目表示以下中的至少一種:位置、人和產(chǎn)品。
13.根據(jù)權(quán)利要求11所述的計算系統(tǒng)，進(jìn)一步包括第二處理器，所述第二處理器用于: 識別所述場景中的所述項目； 將所述項目與所述響應(yīng)關(guān)聯(lián)起來；以及 使所述視頻以流形式流向所述顯示設(shè)備。
14.根據(jù)權(quán)利要求11所述的計算系統(tǒng)，其中所述傳感器包括以下中的至少一種:照相機、紅外傳感器、遠(yuǎn)程控制傳感器和聲學(xué)傳感器。
15.根據(jù)權(quán)利要求11所述的計算系統(tǒng)，其中輸出所選擇的響應(yīng)包括經(jīng)由網(wǎng)絡(luò)將關(guān)于所述用戶選擇的信息傳送至 響應(yīng)于所述選擇的實體。
【文檔編號】H04N21/4728GK104025615SQ201180076193
【公開日】2014年9月3日 申請日期:2011年12月21日 優(yōu)先權(quán)日:2011年12月21日
【發(fā)明者】邁克爾·A·普羅文徹, 杰弗里·A·布蘭肯希普, 威廉姆·詹姆斯·布蘭肯希普, 肯特·E·比格斯, 基·普羅文徹 申請人:惠普發(fā)展公司，有限責(zé)任合伙企業(yè)