專利名稱：一種使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種終端上的顯示技術(shù)，尤其涉及在跨平臺(tái)多顯示終端上顯示個(gè)人虛擬化身和真實(shí)形象融入場(chǎng)景并與用戶交互的技術(shù)。
背景技術(shù)：
從表現(xiàn)效果上看，當(dāng)前有比較多的產(chǎn)品分別提供了 “虛擬化身”和“真實(shí)形象”的功能和服務(wù)，“虛擬化身”可以嵌入到場(chǎng)景里進(jìn)行互動(dòng)，“真實(shí)形象”可以讓用戶1對(duì)1、1對(duì)多、多對(duì)多的進(jìn)行音視頻互動(dòng)。也有些產(chǎn)品提供了最簡單的“真實(shí)形象”嵌入到場(chǎng)景里的功能，但無法提供“虛擬化身”和“真實(shí)形象”進(jìn)一步的互動(dòng)功能。在互聯(lián)網(wǎng)上現(xiàn)有的各種實(shí)時(shí)音視頻互動(dòng)軟件有9158多人視頻、呱呱、新浪SHOW、 9158-星光、盛大-巨星、多玩-YY、盛大-ET、SecondLife, HabboHotel, IMVU,由我世界、摩爾莊園、盒子世界、第6大陸、QQ秀聊天室、TinyChat等。1. 9158、呱呱、新浪秀等傳統(tǒng)的音視頻聊天軟件，真實(shí)形象之間的音視頻互動(dòng)(1 對(duì)1，1對(duì)多，多對(duì)多)，但是無法實(shí)現(xiàn)真實(shí)形象嵌入場(chǎng)景、支持虛擬化身等功能；需要下載安裝客戶端軟件，用戶注冊(cè)、使用成本較高；2.盛大-巨星，9158-星光等真實(shí)形象嵌入到場(chǎng)景里，技術(shù)實(shí)現(xiàn)使用最簡單的視頻窗口嵌入，場(chǎng)景不支持定義坐標(biāo)點(diǎn)，無法支持真實(shí)形象進(jìn)一步融入場(chǎng)景里、虛擬化身和真實(shí)形象互動(dòng)的功能；需要下載安裝較大的客戶端軟件(通常IOOM以上)，用戶注冊(cè)、使用成本高；3. Second-Life, IMVU,由我世界，HabboHotel，摩爾莊園，盒子世界，QQ秀聊天室等虛擬化身嵌入到場(chǎng)景里進(jìn)行互動(dòng)，不支持真實(shí)形象的嵌入；HabboHotel、摩爾莊園、盒子世界、QQ秀聊天室使用2D Avatar, Second-Life, IMVU、由我世界使用3DAvatar，通常需要下載安裝較大的客戶端，用戶注冊(cè)、使用成本高；4.多玩-YY，盛大-ET等多人語音互動(dòng)，為了保證大多數(shù)用戶網(wǎng)游時(shí)的順暢體驗(yàn)， 采用純語音互動(dòng)，減少了系統(tǒng)資源的消耗，所以不支持虛擬化身、不支持真實(shí)形象嵌入場(chǎng)
旦
足；5. Tinychat等多人音視頻互動(dòng)，不需要安裝客戶端軟件，不支持真實(shí)形象嵌入場(chǎng)景、不支持虛擬化身；6.第6大陸-酒吧K歌等類似于盛大-巨星、9158-星光的2D版本?，F(xiàn)實(shí)中存在大量用戶無法通過真實(shí)形象來爽快地表達(dá)情感，需要借助虛擬化身來滿足情緒隨時(shí)隨地的宣泄，獲得朋友、其他用戶的認(rèn)可和贊賞；用戶和企業(yè)品牌都需要虛擬化身、真實(shí)形象可以嵌入各種各樣的場(chǎng)景里并提供互動(dòng)的功能。這些需求在現(xiàn)有的各類技術(shù)方案中無法得到滿足。

發(fā)明內(nèi)容
本發(fā)明的目的在于解決上述問題，提供了一種使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，解決現(xiàn)有技術(shù)中真實(shí)形象無法融入場(chǎng)景，虛擬化身無法和真實(shí)形象互動(dòng)的缺
點(diǎn)ο本發(fā)明的技術(shù)方案為本發(fā)明揭示了一種使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，包括初始化虛擬場(chǎng)景；生成虛擬化身以供用戶操作；生成實(shí)時(shí)影像以供用戶操作；用戶自由操控虛擬化身與影像互動(dòng)。根據(jù)本發(fā)明的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法的一實(shí)施例，在初始化虛擬場(chǎng)景的步驟中，先加載場(chǎng)景圖片和對(duì)應(yīng)的地理信息數(shù)據(jù)，然后解析地理信息數(shù)據(jù)后顯不。根據(jù)本發(fā)明的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法的一實(shí)施例，其場(chǎng)景圖片是照片、全景圖或設(shè)計(jì)圖片，也包括空白場(chǎng)景。根據(jù)本發(fā)明的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法的一實(shí)施例，將定義的虛擬化身位置和區(qū)域的數(shù)據(jù)包含在地理信息數(shù)據(jù)中。根據(jù)本發(fā)明的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法的一實(shí)施例，虛擬化身交付給用戶操作，或者用戶不使用虛擬化身和實(shí)時(shí)影像互動(dòng)。根據(jù)本發(fā)明的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法的一實(shí)施例，實(shí)時(shí)影像包括通過以下的幾種方式來傳遞數(shù)據(jù)RTMP、MMS、RTSP。根據(jù)本發(fā)明的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法的一實(shí)施例，實(shí)時(shí)影像是嵌入在虛擬場(chǎng)景中或浮動(dòng)在場(chǎng)景之上。根據(jù)本發(fā)明的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法的一實(shí)施例，用戶可以互動(dòng)的方式包括以下方式通過虛擬形象做動(dòng)作、表情；通過虛擬形象對(duì)其他用戶的虛擬形象蓋印章、送禮。根據(jù)本發(fā)明的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法的一實(shí)施例，該發(fā)明可以應(yīng)用于包括PC、移動(dòng)電子設(shè)備、平板電話或電視中。根據(jù)本發(fā)明的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法的一實(shí)施例，該發(fā)明應(yīng)用在基于互聯(lián)網(wǎng)的應(yīng)用中。本發(fā)明對(duì)比現(xiàn)有技術(shù)有如下的有益效果本發(fā)明是將原有實(shí)時(shí)音視頻互動(dòng)軟件里集成了虛擬化身，或者可以在原有的虛擬化身中融入了真實(shí)形象。對(duì)比現(xiàn)有技術(shù)，本發(fā)明能滿足用戶在多種顯示終端上通過虛擬化身或真實(shí)形象實(shí)時(shí)互動(dòng)表達(dá)情感信息的需求


圖1是本發(fā)明的虛擬化身和真實(shí)形象進(jìn)行實(shí)時(shí)互動(dòng)的方法的第一實(shí)施例的流程圖。圖2是本發(fā)明的虛擬化身和真實(shí)形象進(jìn)行實(shí)時(shí)互動(dòng)的方法的第二實(shí)施例的流程圖。圖3是本發(fā)明的本發(fā)明的虛擬化身和真實(shí)形象進(jìn)行實(shí)時(shí)互動(dòng)的裝置的第一實(shí)施例的框圖。圖4是本發(fā)明的本發(fā)明的虛擬化身和真實(shí)形象進(jìn)行實(shí)時(shí)互動(dòng)的裝置的第二實(shí)施例的框圖。圖5是本發(fā)明的真實(shí)形象嵌入到虛擬場(chǎng)景中的示意圖。圖6是本發(fā)明的虛擬化身和真實(shí)形象在虛擬場(chǎng)景中互動(dòng)的示意圖。
具體實(shí)施例方式下面結(jié)合附圖和實(shí)施例對(duì)本發(fā)明作進(jìn)一步的描述。獻(xiàn)·傭輔取■誠白魄一棚列圖1示出了本發(fā)明的虛擬化身和真實(shí)形象進(jìn)行實(shí)時(shí)互動(dòng)的方法的第一實(shí)施例的流程。請(qǐng)參見圖1，下面是對(duì)本實(shí)施例的方法的各個(gè)步驟的詳細(xì)描述。步驟SlO 初始化虛擬場(chǎng)景。請(qǐng)參見圖5所示，程序初始化一個(gè)虛擬場(chǎng)景①，一般來說，這個(gè)虛擬場(chǎng)景是由一張圖片和一組標(biāo)記有地理信息數(shù)據(jù)構(gòu)成，程序加載圖片和地理信息數(shù)據(jù)，解析地理信息數(shù)據(jù)后，即可顯示給用戶。同時(shí)，程序會(huì)根據(jù)系統(tǒng)預(yù)置或用戶提交的參數(shù)來生成一個(gè)虛擬形象給用戶操作。步驟S12 在虛擬場(chǎng)景中定義視頻位置和區(qū)域。在虛擬場(chǎng)景①中定義一個(gè)坐標(biāo)點(diǎn)③，并定義一個(gè)嵌入視頻的大小?？梢詫⑦@個(gè)定義的視頻位置和區(qū)域的數(shù)據(jù)包含在地理信息數(shù)據(jù)中，這樣，程序在初始化虛擬場(chǎng)景的時(shí)候， 就一起初始化視頻位置和區(qū)域。步驟S14 創(chuàng)建視頻對(duì)象。創(chuàng)建一個(gè)視頻對(duì)象②，在Flash 中，采用 var video: Video = new Video (width, height)；來創(chuàng)建視頻對(duì)象。將這個(gè)視頻對(duì)象按照步驟S12定義的位置和大小嵌入進(jìn)去。在這里，只需要定義video對(duì)象的χ、y、width、height即可。步驟S16 將服務(wù)器直播的視頻顯示到創(chuàng)建的視頻對(duì)象中。通過特定的數(shù)據(jù)傳輸協(xié)議(RTMP、MMS或RTSP)將服務(wù)器中直播視頻顯示到視頻對(duì)象②中。通過類似這樣的方式將一個(gè)視頻流加到視頻窗口中
var nc :NetConnection = new NetConnection()； var ns:NetStream = new NetStream(nc); var video: Video = new Video(320, 240); video.attachNetStream(ns); nc. connect("rtmp: "localhost: 1935/live/");
ns.play(streamName);步驟S18 用戶在操控虛擬化身的同時(shí)收看到真實(shí)形象的視頻內(nèi)容。請(qǐng)參見圖6，此時(shí)，用戶可以在操控虛擬形象的同時(shí)，收看到真實(shí)的視頻內(nèi)容，從而可以進(jìn)行互動(dòng)。
獻(xiàn)·傭輔取■誠白魄二棚列圖2示出了本發(fā)明的虛擬化身和真實(shí)形象進(jìn)行實(shí)時(shí)互動(dòng)的方法的第二實(shí)施例的流程。請(qǐng)參見圖2，下面是對(duì)本實(shí)施例的方法的各個(gè)步驟的詳細(xì)描述。步驟S20 將服務(wù)器中直播的視頻作為場(chǎng)景顯示。通過特定的數(shù)據(jù)傳輸協(xié)議(RTMP、MMS或RTSP)將服務(wù)器中直播視頻顯示舞臺(tái)中， 將這個(gè)視頻作為一個(gè)真實(shí)的場(chǎng)景。類似第一實(shí)施例的步驟S16，通過同樣的代碼可以獲得一個(gè)視頻數(shù)據(jù)，并作為場(chǎng)景顯示。步驟S22 添加一可供用戶操作的虛擬化身到視頻中。添加一個(gè)用戶可以操控的虛擬形象到該視頻上。虛擬形象可以是系統(tǒng)預(yù)置或用戶定義好的，實(shí)例化后添加到視頻窗口上。步驟S24 用戶在收看視頻中真實(shí)形象的視頻內(nèi)容。用戶可以一邊操控虛擬形象，一般可以收看視頻，從而進(jìn)行雙向的互動(dòng)。在虛擬形象中，系統(tǒng)將提供一些預(yù)置的動(dòng)作和文字，當(dāng)用戶看到視頻中真實(shí)的節(jié)目時(shí)，處于對(duì)節(jié)目的真實(shí)情感表達(dá)，他/她可以操作虛擬形象來做一些“鼓掌”、“獻(xiàn)花”等動(dòng)作。獻(xiàn)·傭輔碰一棚列圖3示出了本發(fā)明的虛擬化身和真實(shí)形象進(jìn)行實(shí)時(shí)互動(dòng)的裝置的第一實(shí)施例。請(qǐng)參見圖3，本實(shí)施例的裝置包括虛擬場(chǎng)景初始化模塊10、視頻位置和區(qū)域定義模塊12、視頻對(duì)象創(chuàng)建模塊14、視頻信號(hào)傳輸模塊16以及交互模塊18。這些模塊之間的連接關(guān)系是虛擬場(chǎng)景初始化模塊10的輸出端連接視頻位置和區(qū)域定義模塊12，視頻位置和區(qū)域定義模塊12的輸出端連接視頻對(duì)象創(chuàng)建模塊14，視頻對(duì)象創(chuàng)建模塊14的輸出端連接視頻信號(hào)傳輸模塊16，視頻信號(hào)傳輸模塊16的輸出端連接交互模塊18。虛擬場(chǎng)景初始化模塊10初始化虛擬場(chǎng)景，并生成虛擬化身以供用戶操作。請(qǐng)參見圖5所示，程序初始化一個(gè)虛擬場(chǎng)景①，一般來說，這個(gè)虛擬場(chǎng)景是由一張圖片和一組標(biāo)記有地理信息數(shù)據(jù)構(gòu)成，程序加載圖片和地理信息數(shù)據(jù)，解析地理信息數(shù)據(jù)后，即可顯示給用戶。同時(shí)，程序會(huì)根據(jù)系統(tǒng)預(yù)置或用戶提交的參數(shù)來生成一個(gè)虛擬形象給用戶操作。視頻位置和區(qū)域定義模塊12在虛擬場(chǎng)景中定義視頻位置和區(qū)域。在虛擬場(chǎng)景① 中定義一個(gè)坐標(biāo)點(diǎn)③，并定義一個(gè)嵌入視頻的大小?？梢詫⑦@個(gè)定義的視頻位置和區(qū)域的數(shù)據(jù)包含在地理信息數(shù)據(jù)中，這樣，程序在初始化虛擬場(chǎng)景的時(shí)候，就一起初始化視頻位置和區(qū)域。視頻對(duì)象創(chuàng)建模塊14創(chuàng)建視頻對(duì)象。創(chuàng)建一個(gè)視頻對(duì)象②，在Flash中，采用var video Video = new Video (width, height)；來創(chuàng)建視頻對(duì)象。將這個(gè)視頻對(duì)象按照視頻位置和區(qū)域定義模塊12定義的位置和大小嵌入進(jìn)去。在這里，只需要定義video對(duì)象的χ、 y、width、height 艮口可。視頻信號(hào)傳輸模塊16將服務(wù)器直播的視頻顯示到創(chuàng)建的視頻對(duì)象中。通過特定的數(shù)據(jù)傳輸協(xié)議01111\1^￥ 、匪5或肌5 將服務(wù)器中直播視頻顯示到視頻對(duì)象②中。通過類似這樣的方式將一個(gè)視頻流加到視頻窗口中(ns); nc. connect("rtmp: "localhost: 1935/live/");
ns.play(streamName)。交互模塊18用戶在操控虛擬化身的同時(shí)收看到真實(shí)形象的視頻內(nèi)容。請(qǐng)參見圖 6，此時(shí)，用戶可以在操控虛擬形象的同時(shí)，收看到真實(shí)的視頻內(nèi)容，從而可以進(jìn)行互動(dòng)。獻(xiàn)·傭輔碰二棚列圖4示出了本發(fā)明的虛擬化身和真實(shí)形象進(jìn)行實(shí)時(shí)互動(dòng)的裝置的第二實(shí)施例。請(qǐng)參見圖4，本實(shí)施例的裝置包括場(chǎng)景定義模塊20、虛擬化身添加模塊22以及交互模塊24。這些模塊之間的連接關(guān)系是場(chǎng)景定義模塊20的輸出端連接虛擬化身添加模塊 22，虛擬化身添加模塊22的輸出端連接交互模塊M。場(chǎng)景定義模塊20將服務(wù)器中直播的視頻作為場(chǎng)景顯示。通過特定的數(shù)據(jù)傳輸協(xié)議(HTTP、RTMP、MMS或RTSP)將服務(wù)器中直播視頻顯示舞臺(tái)中，將這個(gè)視頻作為一個(gè)真實(shí)的場(chǎng)景。虛擬化身添加模塊22添加一供用戶操作的虛擬化身到視頻中。添加一個(gè)用戶可以操控的虛擬形象到該視頻上。虛擬形象可以是系統(tǒng)預(yù)置或用戶定義好的，實(shí)例化后添加到視頻窗口上。交互模塊M用戶在收看視頻中真實(shí)形象的同時(shí)操作虛擬化身。用戶可以一邊操控虛擬形象，一般可以收看視頻，從而進(jìn)行雙向的互動(dòng)。在虛擬形象中，系統(tǒng)將提供一些預(yù)置的動(dòng)作和文字，當(dāng)用戶看到視頻中真實(shí)的節(jié)目時(shí)，處于對(duì)節(jié)目的真實(shí)情感表達(dá)，他/她可以操作虛擬形象來做一些“鼓掌”、“獻(xiàn)花”等動(dòng)作。上述實(shí)施例是提供給本領(lǐng)域普通技術(shù)人員來實(shí)現(xiàn)或使用本發(fā)明的，本領(lǐng)域普通技術(shù)人員可在不脫離本發(fā)明的發(fā)明思想的情況下，對(duì)上述實(shí)施例做出種種修改或變化，因而本發(fā)明的保護(hù)范圍并不被上述實(shí)施例所限，而應(yīng)該是符合權(quán)利要求書提到的創(chuàng)新性特征的最大范圍。
權(quán)利要求
1.一種使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，包括初始化虛擬場(chǎng)景；生成虛擬化身以供用戶操作；生成實(shí)時(shí)影像以供用戶操作；用戶自由操控虛擬化身與影像互動(dòng)。
2.根據(jù)權(quán)利要求1所述的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，其特征在于，在初始化虛擬場(chǎng)景的步驟中，先加載場(chǎng)景圖片和對(duì)應(yīng)的地理信息數(shù)據(jù)，然后解析地理信息數(shù)據(jù)后顯示。
3.根據(jù)權(quán)利要求1所述的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，其特征在于，其場(chǎng)景圖片是照片、全景圖或設(shè)計(jì)圖片，也包括空白場(chǎng)景。
4.根據(jù)權(quán)利要求1所述的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，其特征在于，將定義的虛擬化身位置和區(qū)域的數(shù)據(jù)包含在地理信息數(shù)據(jù)中。
5.根據(jù)權(quán)利要求1所述的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，其特征在于，虛擬化身交付給用戶操作，或者用戶不使用虛擬化身和實(shí)時(shí)影像互動(dòng)。包括對(duì)實(shí)時(shí)影像，使用魔法、送禮、蓋章、聊天。
6.根據(jù)權(quán)利要求1所述的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，其特征在于，實(shí)時(shí)影像包括通過以下的幾種方式來傳遞數(shù)據(jù)RSVP、MIME、RTP、RTCP、RTMP、MMS、RTSP。
7.根據(jù)權(quán)利要求1所述的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，其特征在于，實(shí)時(shí)影像是嵌入在虛擬場(chǎng)景中或浮動(dòng)在場(chǎng)景之上。
8.根據(jù)權(quán)利要求1所述的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，其特征在于，用戶可以互動(dòng)的方式包括以下方式通過虛擬形象做動(dòng)作、表情、坐騎、一對(duì)一 Hi游戲通過虛擬形象對(duì)其他用戶的虛擬形象蓋印章、送禮、魔法和場(chǎng)景特效
9.根據(jù)權(quán)利要求1所述的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，其特征在于，該發(fā)明可以應(yīng)用于包括PC、移動(dòng)電子設(shè)備、平板電話和電視中。
10.根據(jù)權(quán)利要求1所述的使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法，其特征在于，該發(fā)明應(yīng)用在基于互聯(lián)網(wǎng)和移動(dòng)互聯(lián)網(wǎng)的應(yīng)用中。
全文摘要
本發(fā)明公開了一種使用虛擬化身和實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)的方法和裝置，解決現(xiàn)有技術(shù)中虛擬化身、實(shí)時(shí)影像之間無法實(shí)時(shí)互動(dòng)的缺點(diǎn)。其技術(shù)方案為方法包括在虛擬場(chǎng)景(或空白背景)中生成虛擬化身、嵌入實(shí)時(shí)影像以供用戶操作；用戶操控虛擬化身、實(shí)時(shí)影像進(jìn)行實(shí)時(shí)互動(dòng)。
文檔編號(hào)G06F3/01GK102176197SQ20111007144
公開日2011年9月7日 申請(qǐng)日期2011年3月23日 優(yōu)先權(quán)日2011年3月23日
發(fā)明者鄒圣, 陸洋 申請(qǐng)人:上海那里網(wǎng)絡(luò)科技有限公司