合作增強現(xiàn)實的制作方法
【專利說明】
【背景技術】
[0001]增強現(xiàn)實提供被諸如音頻數(shù)據(jù)、視頻數(shù)據(jù)、圖像數(shù)據(jù)、文本數(shù)據(jù)等等的附加信息增強的物理的、現(xiàn)實世界環(huán)境的呈現(xiàn)。例如，電子設備的照相機可以捕獲物理目標的圖像或視頻。物理目標的增強現(xiàn)實呈現(xiàn)然后可以被電子設備顯示，其中所述物理目標的增強現(xiàn)實呈現(xiàn)包括物理目標的圖像或視頻，連同諸如上文列出的那些數(shù)據(jù)中的任何數(shù)據(jù)的附加數(shù)據(jù)。
【附圖說明】
[0002]關于以下附圖描述了某些實施例。
[0003]圖1圖示了根據(jù)某些實施的示例布置，所述示例布置包括與可以顯示合作增強現(xiàn)實會話的增強現(xiàn)實呈現(xiàn)的顯示器相關聯(lián)的多個電子設備；
圖2是根據(jù)某些實施的能夠顯示合作增強現(xiàn)實呈現(xiàn)的電子設備的過程的流程圖；
圖3和4是根據(jù)某些實施的、由增強現(xiàn)實服務器執(zhí)行以支持合作增強現(xiàn)實會話的過程的流程圖；
圖5是根據(jù)某些實施的電子設備的框圖；以及圖6是根據(jù)某些實施的增強現(xiàn)實服務器的框圖。
【具體實施方式】
[0004]一般地，可以響應于捕獲現(xiàn)實世界物理目標的圖像或視頻來創(chuàng)建增強現(xiàn)實呈現(xiàn)。作為示例，物理目標可以是在雜志或報紙中的圖像、在產品盒上的圖像、地理地標等等。用戶可以將電子設備的照相機指向所述物理目標，并且響應于捕獲(圖像捕獲或視頻捕獲)物理目標，所述電子設備可以產生基于所述物理目標的增強現(xiàn)實呈現(xiàn)。
[0005]增強現(xiàn)實呈現(xiàn)可以包括視覺輸出，所述視覺輸出包含基于以附加信息增強的、所捕獲的物理目標(此后稱為“增強現(xiàn)實內容”)觸發(fā)的圖像或視頻。所述增強現(xiàn)實內容可以包括被添加到所述視覺輸出的音頻數(shù)據(jù)、其他的視頻數(shù)據(jù)、其他的圖像數(shù)據(jù)、文本數(shù)據(jù)等等。所捕獲的物理目標的視覺輸出可以包括所捕獲的物理目標(所捕獲的物理目標的全部或者所捕獲的物理目標的一部分)的圖像或視頻，或者所捕獲的物理目標的再現(xiàn)，或者不同的視覺內容。在視覺輸出包含所捕獲的物理目標的圖像或視頻或者包含所捕獲的物理目標的再現(xiàn)的情況下，其他視頻數(shù)據(jù)、其他圖像數(shù)據(jù)和/或文本數(shù)據(jù)可以覆蓋視覺輸出，而音頻數(shù)據(jù)可以是連同所述視覺輸出的作為聲音的輸出。因此，增強現(xiàn)實呈現(xiàn)可以是多媒體呈現(xiàn)的形式，其除增強現(xiàn)實內容之外還可以包括所捕獲的物理目標的視覺輸出。
[0006]作為示例，電子設備當指向在報紙或雜志中的給定圖片時，可以使得在線電子游戲開始進行游戲。在報紙或雜志中的給定圖像可以是游戲人物、廣告或者與在線電子游戲相關聯(lián)的其他信息。由電子設備的照相機捕獲這樣的游戲人物或其他游戲信息提供了對所述電子設備的觸發(fā)以啟動在線電子游戲。作為另一示例，所捕獲的物理目標可以是地理地標。基于地理地標的捕獲，可以觸發(fā)增強現(xiàn)實呈現(xiàn)，所述增強現(xiàn)實呈現(xiàn)可以提供以解釋所述地理地標的各方面的歷史意義的圖像或視頻數(shù)據(jù)、音頻數(shù)據(jù)和/或文本數(shù)據(jù)增強的地理地標的虛擬游覽。
[0007]作為另一示例，電子設備可以捕獲棋盤，其可以使得棋局在增強現(xiàn)實呈現(xiàn)中顯得逼真，使得用戶可以開始下棋。作為又一示例，電子設備可以捕獲畫布，其可以觸發(fā)增強現(xiàn)實呈現(xiàn)，以允許在所述畫布上虛擬地制作畫筆。在其他示例中，其他類型的增強現(xiàn)實呈現(xiàn)可以被其他類型的物理目標的捕獲觸發(fā)。
[0008]傳統(tǒng)上，尚未提供慮及在增強現(xiàn)實上下文中的多個用戶之中的合作的有效機制。在某些情況下，多個用戶可能必須共享相同的電子設備來觀看特定的增強現(xiàn)實呈現(xiàn)。
[0009]根據(jù)某些實施，提供了合作增強現(xiàn)實技術或機制，以慮及在多個不同電子設備處的用戶關于在所述電子設備中的每個處呈現(xiàn)的增強現(xiàn)實呈現(xiàn)彼此合作。圖1描繪了包括電子設備102和104的示例布置。雖然在圖1中僅描繪了兩個電子設備，但是應注意在替代實施中，可以采用多于兩個電子設備。電子設備102和104可以位于相同房間中，或者替代地，電子設備102和104可以彼此遠程地定位，諸如在城市的不同位置中、在國家的不同城市中或者跨越世界的不同位置中。
[0010]在某些示例中，電子設備102和104可以包括任何以下內容:計算機(例如，平板計算機、筆記本計算機、臺式計算機等等)、個人數(shù)據(jù)助理、智能電話等等。電子設備102和104可以具有各自的顯示器106和108 ο在其他示例中，與各個電子設備相關聯(lián)的顯示器可以與所述電子設備分離。例如，電子設備可以是游戲器具、機頂盒或者連接到外部顯示器的其他設備。
[0011]如在圖1中進一步描繪的那樣，電子設備102和104也包括各自的照相機110和112。照相機110和112可以被用于捕獲物理目標的圖像或視頻以提供所述物理目標的視覺輸出。電子設備102和104兩者可以捕獲相同的物理目標114。替代地，在電子設備102和104彼此遠程地定位的實施中，電子設備102可以捕獲物理目標114，而遠程定位的電子設備104可以捕獲物理目標114的復制品114-1。例如，如果物理目標是在報紙或雜志上的圖片，則復制品114-1可以是在相同的報紙或雜志的另一副本上的相同圖片。
[0012]在某些示例中，假設增強現(xiàn)實應用在電子設備102和104中的每個中運行，由各個照相機110或112捕獲某些物理目標可以觸發(fā)電子設備102或104來基于所捕獲的物理目標呈現(xiàn)增強現(xiàn)實呈現(xiàn)116或118。
[0013]電子設備102和104可以存儲涉及可以觸發(fā)增強現(xiàn)實呈現(xiàn)的候選觸發(fā)項目的信息。在捕獲物理目標的圖像或視頻時，電子設備可以將所述圖像或視頻與候選觸發(fā)項目比較以確定是否應該觸發(fā)增強現(xiàn)實呈現(xiàn)。
[0014]涉及候選觸發(fā)項目的信息可以從增強現(xiàn)實服務器120獲得，所述增強現(xiàn)實服務器120能夠訪問存儲關于候選觸發(fā)項目的集合的信息的觸發(fā)項目數(shù)據(jù)庫125。電子設備102和104通過網(wǎng)絡121耦合到增強現(xiàn)實服務器120。網(wǎng)絡121可以是局域網(wǎng)(LAN)、廣域網(wǎng)(WAN)、無線網(wǎng)絡或者上述的某種組合。
[0015]在觸發(fā)項目數(shù)據(jù)庫125中的信息的至少一部分可以被傳送到每個電子設備102或104，并且被本地存儲在電子設備102或104處。電子設備102或104因此可以將物理目標的所捕獲的圖像或視頻的特性與本地存儲的候選觸發(fā)項目信息比較以確定是否檢測到匹配，使得觸發(fā)相應的增強現(xiàn)實呈現(xiàn)。
[0016]在替代示例中，物理目標的所捕獲的圖像或視頻與候選觸發(fā)項目信息的比較可以在增強現(xiàn)實服務器120處執(zhí)行。
[0017]在(電子設備或者增強現(xiàn)實服務器處)執(zhí)行物理目標的所捕獲的圖像或視頻與候選觸發(fā)項目信息的比較中，可以提取來自所捕獲的圖像或視頻的各種特征用于與被包含在候選觸發(fā)項目信息中的候選觸發(fā)項目的相應的特征進行匹配。與特定候選觸發(fā)項目的匹配使得相應的增強現(xiàn)實呈現(xiàn)被呈現(xiàn)在電子設備102或104處。
[0018]在所觸發(fā)的增強現(xiàn)實呈現(xiàn)中，呈現(xiàn)了物理目標114 (或者復制品114-1)的視覺輸出，連同相應的增強現(xiàn)實內容?？梢詮脑鰪姮F(xiàn)實內容數(shù)據(jù)庫123取回(retrieve)增強現(xiàn)實內容。在某些示例中，增強現(xiàn)實內容可以由增強現(xiàn)實服務器120從增強現(xiàn)實內容數(shù)據(jù)庫123取回，并且被傳送到電子設備102或104，用于包括在所觸發(fā)的增強現(xiàn)實呈現(xiàn)116或118中。如上所述，增強現(xiàn)實內容可以包括以下內容的任何或某個組合:音頻數(shù)據(jù)、視頻數(shù)據(jù)、圖像數(shù)據(jù)、文本數(shù)據(jù)等等。
[0019]在某些示例中，增強現(xiàn)實內容數(shù)據(jù)庫123和觸發(fā)項目數(shù)據(jù)庫125被存儲在增強現(xiàn)實服務器120的存儲子系統(tǒng)中。替代地，增強現(xiàn)實內容數(shù)據(jù)庫123和觸發(fā)項目數(shù)據(jù)庫125中的任一個或兩者可以位于由增強現(xiàn)實服務器120或電子設備102和104通過網(wǎng)絡121可訪問的遠程系統(tǒng)處。
[0020]根據(jù)某些實施，在檢測到電子設備102和104已經(jīng)捕獲相同的物理目標的視頻輸出時(其中捕獲相同的物理目標可以指電子設備102和104兩者捕獲相同的物理目標114，或者分別捕獲物理目標114和所述物理目標的復制品114-1)，可以發(fā)起合作增強現(xiàn)實會話。在合作增強現(xiàn)實會話中，電子設備102和104的多個用戶能夠關于增強現(xiàn)實呈現(xiàn)116和118彼此交互或合作。
[0021]響應于增強現(xiàn)實服務器120檢測到電子設備102和104已經(jīng)捕獲相同的物理目標，可以由增強現(xiàn)實服務器120指示合作增強現(xiàn)實會話。在這樣的檢測時，增強現(xiàn)實服務器120可以向電子設備102和104提供指示:增強現(xiàn)實呈現(xiàn)116和118是相同的合作增強現(xiàn)實會話的一部分。
[0022]替代地，增強現(xiàn)實呈現(xiàn)116和118基于相同的