專利名稱:視頻圖像數(shù)據(jù)處理方法、裝置及視頻會(huì)議系統(tǒng)及終端的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及視頻控制技術(shù)領(lǐng)域,更具體地說(shuō),涉及一種視頻圖像數(shù)據(jù)處 理方法、裝置及視頻會(huì)議系統(tǒng)及終端。
背景技術(shù):
隨著編碼和信息壓縮技術(shù)的發(fā)展以及數(shù)字網(wǎng)絡(luò)的高速發(fā)展,視頻會(huì)議系
統(tǒng)出現(xiàn)并步入市場(chǎng),從上世紀(jì)90年代初期第一套關(guān)于^L頻會(huì)議系統(tǒng)的國(guó)際標(biāo) 準(zhǔn)(H.320)獲得通過(guò)并實(shí)施以來(lái),視頻會(huì)議系統(tǒng)得到了越來(lái)越廣泛的應(yīng)用, 同時(shí),其所提供的語(yǔ)音體驗(yàn)、視頻體驗(yàn)的需求也越來(lái)越受到關(guān)注。對(duì)于語(yǔ)音 體驗(yàn)需求方面,將向著高保真語(yǔ)音重現(xiàn)方面演進(jìn),而視頻體驗(yàn)需求方面將向 著高分辨率、寬視角方面演進(jìn)。
現(xiàn)有的視頻會(huì)議電視系統(tǒng)中,由發(fā)送端的視頻會(huì)議終端采用單個(gè)高清攝 像頭進(jìn)行圖像的捕獲,捕獲的高清視頻分辨率一般為720p30f、 720p60f、 1080i30f、 1080i60f、 1080p30f、 1080p60f等,然后,將捕獲的視頻進(jìn)行壓縮 編碼,生成視頻碼流;接著,通過(guò)數(shù)據(jù)傳輸網(wǎng)絡(luò),將視頻碼流傳送到接收端 的視頻會(huì)議終端;接收端的視頻會(huì)議終端對(duì)接收到的視頻碼流進(jìn)行解碼,得 到發(fā)送端的高清視頻圖像,并顯示。
上述視頻會(huì)議終端能夠提供比標(biāo)清視頻會(huì)議終端更高的視頻分辨率,能 夠給用戶帶來(lái)更好的視覺體驗(yàn)。但是,提供的視頻圖像視角比較有限。
思科公司的"網(wǎng)真"系統(tǒng)一定程度上解決了上述問(wèn)題,該系統(tǒng)的結(jié)構(gòu)如圖1 所示,包括多臺(tái)視頻終端、各視頻終端配備一臺(tái)高清攝像頭,多臺(tái)攝像頭采 用嚴(yán)格物理位置擺放,以使得在采集到的多路視頻圖像在位于同 一水平面上 的多臺(tái)顯示"i殳備上進(jìn)行顯示時(shí),給觀看者的感覺是連續(xù)的。
然而,發(fā)明人發(fā)現(xiàn),上述方案至少存在以下問(wèn)題
該方案對(duì)會(huì)議室的裝修布局要求比較嚴(yán)格,尤其是對(duì)攝像機(jī)組的位置擺 放、使用者距離攝像機(jī)組間距離的大小都有及其嚴(yán)格的要求,否則,顯示設(shè)備上顯示的圖像將出現(xiàn)重疊的現(xiàn)象,這種嚴(yán)格要求使得系統(tǒng)的安裝過(guò)程比較復(fù)雜。
發(fā)明內(nèi)容
有鑒于此,本發(fā)明實(shí)施例提供一種視頻圖像數(shù)據(jù)處理方法、裝置及視頻會(huì)議系統(tǒng)及終端,以解決現(xiàn)有技術(shù)存在的系統(tǒng)安裝過(guò)程復(fù)雜的問(wèn)題。
本發(fā)明實(shí)施例是這樣實(shí)現(xiàn)的
一種視頻圖像數(shù)據(jù)處理方法,包括
獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;
利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù);
將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)后,發(fā)送給顯示設(shè)備顯示。
一種視頻圖像數(shù)據(jù)處理裝置,包括
數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像
數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù);
數(shù)據(jù)重組單元,用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多
路視頻圖像數(shù)據(jù);
多個(gè)數(shù)據(jù)輸出接口,與外部顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單元處理得到的視頻圖像數(shù)據(jù)傳輸給所述顯示設(shè)備。一種視頻圖像數(shù)據(jù)處理裝置,包括
數(shù)據(jù)輸入接口 ,用于獲取多臺(tái)攝像機(jī)采集的多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;
數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù);
ii數(shù)據(jù)重組單元,用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多
路視頻圖像數(shù)據(jù);
數(shù)據(jù)發(fā)送單元,用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送給遠(yuǎn)端的視頻會(huì)議設(shè)備,以使該視頻會(huì)議設(shè)備通過(guò)相應(yīng)的顯示設(shè)備顯示。
一種視頻圖像數(shù)據(jù)處理裝置,包括
數(shù)據(jù)輸入接口 ,用于獲取編碼后的多路視頻圖像數(shù)據(jù);
多個(gè)數(shù)據(jù)解碼器,同時(shí)對(duì)編碼后的多路視頻圖像數(shù)據(jù)進(jìn)行解碼,解碼后
的多路視頻圖像數(shù)據(jù)包含所述寬景視頻圖像分割成的多個(gè)子圖像及與其相對(duì)
應(yīng)的同步信息和重建信息;
數(shù)據(jù)同步單元,將所述解碼后的子圖像根據(jù)與其對(duì)應(yīng)的同步信息進(jìn)行歸
類;
數(shù)據(jù)重建單元,根據(jù)所述重建信息對(duì)所述歸類后的子圖像進(jìn)行重建,得到多路視頻圖像數(shù)據(jù),其中各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列;
多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重建單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。一種^L頻會(huì)議系統(tǒng),包括
數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像
數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);
數(shù)據(jù)發(fā)送單元,用于將所述寬景視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送;數(shù)據(jù)接收單元,用于接收承載于通信網(wǎng)絡(luò)的寬景視頻圖像數(shù)據(jù);數(shù)據(jù)重組單元,用于將所述數(shù)據(jù)接收單元接收的所述寬景視頻圖像數(shù)據(jù)
重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù);
多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單
元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。一種視頻會(huì)議系統(tǒng),包括
數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)發(fā)送單元,用于將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息通過(guò)通信網(wǎng)絡(luò)發(fā)送;
數(shù)據(jù)接收單元,用于接收承載于通信網(wǎng)絡(luò)的所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;
數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);
數(shù)據(jù)重組單元,用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù);
多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。一種一見頻會(huì)議系統(tǒng),包括
數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像
數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);
數(shù)據(jù)重組單元,用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多
路視頻圖像數(shù)據(jù);
數(shù)據(jù)發(fā)送單元,用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送;
數(shù)據(jù)接收單元,用于接收承載于通信網(wǎng)絡(luò)的所述多路視頻圖像數(shù)據(jù);
多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)接收單元接收到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
一種視頻會(huì)議終端,包括
數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)收發(fā)單元,用于將所述寬景視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送給遠(yuǎn)端的視頻會(huì)議設(shè)備,以及,接收所述視頻會(huì)議設(shè)備通過(guò)所述通信網(wǎng)絡(luò)發(fā)送的單
路寬景視頻圖像數(shù)據(jù);
數(shù)據(jù)重組單元,用于將所述數(shù)據(jù)收發(fā)單元接收到的寬景視頻圖像數(shù)據(jù)重
組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù);
多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
一種視頻會(huì)議終端,包括
數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;
數(shù)據(jù)收發(fā)單元,用于將所述多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息通過(guò)通信網(wǎng)絡(luò)發(fā)送給遠(yuǎn)端的視頻會(huì)議設(shè)備,以及,接收所述視頻會(huì)議設(shè)備通過(guò)所述通信網(wǎng)絡(luò)發(fā)送的多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;
數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);
數(shù)據(jù)重組單元,用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多絲4見頻圖像數(shù)據(jù);
多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
一種視頻會(huì)議終端,包括
數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;
數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);
數(shù)據(jù)重組單元,用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù);
數(shù)據(jù)收發(fā)單元,用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送給遠(yuǎn)端的視頻會(huì)議設(shè)備,以及,接收所述視頻會(huì)議設(shè)備通過(guò)所述通信網(wǎng)絡(luò)發(fā)送的經(jīng)過(guò)重組得到的多路視頻圖像數(shù)據(jù);多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)收發(fā)單元接收到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
從上述的技術(shù)方案可以看出,與現(xiàn)有技術(shù)相比,本發(fā)明實(shí)施例在獲取多個(gè)攝像機(jī)采集的多路視頻圖像數(shù)據(jù)之后,將多路視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù),并根據(jù)顯示需要重組成若干路視頻圖像數(shù)據(jù)進(jìn)行顯示。此過(guò)程中,將多路視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)的操作可以消除各視頻圖像數(shù)據(jù)之間存在的重疊的情況,因此,能夠允許攝像機(jī)采集的各路視頻圖像數(shù)據(jù)之間存在重疊,降低了對(duì)攝像機(jī)擺放位置及使用者與攝像機(jī)組之間的距離的要求,簡(jiǎn)化了系統(tǒng)的安裝復(fù)雜度。
為了更清楚地說(shuō)明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案,下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡(jiǎn)單的介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例,對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講,在不付出創(chuàng)造性勞動(dòng)性的前提下,還可以根據(jù)這些附圖獲得其他的附圖。
圖1為現(xiàn)有技術(shù)提供的視頻會(huì)議系統(tǒng)的結(jié)構(gòu)示意圖2為本發(fā)明實(shí)施例中關(guān)聯(lián)視頻圖像示意圖3為本發(fā)明實(shí)施例中對(duì)關(guān)聯(lián)視頻圖像進(jìn)行組合的示意圖4為本發(fā)明實(shí)施例提供的一種視頻圖像數(shù)據(jù)處理方法的流程圖5a-圖5b為本發(fā)明實(shí)施例提供的一種視頻圖像數(shù)據(jù)處理方法中進(jìn)行視
頻圖像數(shù)據(jù)重組的示意圖6為本發(fā)明實(shí)施例提供的一種視頻圖像數(shù)據(jù)處理方法中視頻圖像數(shù)據(jù)
發(fā)送過(guò)程示意圖7為本發(fā)明實(shí)施例提供的一種視頻圖像數(shù)據(jù)處理方法中視頻圖像數(shù)據(jù)接收過(guò)程示意圖8為本發(fā)明實(shí)施例提供的一種視頻圖像數(shù)據(jù)處理裝置的一種結(jié)構(gòu)示意
15圖9為本發(fā)明實(shí)施例提供的一種視頻圖像數(shù)據(jù)處理裝置的另一種結(jié)構(gòu)示
意圖io為本發(fā)明實(shí)施例提供的一種視頻圖像數(shù)據(jù)處理裝置的另 一種結(jié)構(gòu)示意圖11為本發(fā)明實(shí)施例提供的一種視頻圖像數(shù)據(jù)處理裝置的另一種結(jié)構(gòu)示意圖12為本發(fā)明實(shí)施例提供的一種視頻會(huì)議系統(tǒng)的一種結(jié)構(gòu)示意圖;圖13為本發(fā)明實(shí)施例提供的一種視頻會(huì)議系統(tǒng)的另一種結(jié)構(gòu)示意圖;圖14為本發(fā)明實(shí)施例提供的一種^L頻會(huì)i^系統(tǒng)的另一種結(jié)構(gòu)示意圖;圖15為本發(fā)明實(shí)施例提供的一種視頻會(huì)議終端的一種結(jié)構(gòu)示意圖;圖16為本發(fā)明實(shí)施例提供的一種視頻會(huì)議終端的另一種結(jié)構(gòu)示意圖;圖17為本發(fā)明實(shí)施例提供的一種視頻會(huì)議終端的另一種結(jié)構(gòu)示意圖;圖18為本發(fā)明實(shí)施例提供的一種視頻會(huì)議終端的另一種結(jié)構(gòu)示意圖。
具體實(shí)施例方式
本發(fā)明實(shí)施例提供了一種技術(shù)方案,可以提升用戶的視覺體驗(yàn),并且設(shè)備安裝簡(jiǎn)單,無(wú)需考慮會(huì)議室裝修布局,通用性較好。
為了引用和清楚起見,本文中使用的^R術(shù)名詞、簡(jiǎn)寫或縮寫總結(jié)如下
H.320, ITU-T Recommendation H.320 , Narrow-band visual telephonesystems and terminal equipment,國(guó)際電信聯(lián)盟電信標(biāo)準(zhǔn)部指定的一種標(biāo)準(zhǔn),此標(biāo)準(zhǔn)規(guī)定了基于窄帶交換系統(tǒng)上的多媒體通信系統(tǒng);
H.323 , ITU-T Recommendation H.323 , Packet-based MultimediaCommunications Systems ,國(guó)際電信聯(lián)盟電信標(biāo)準(zhǔn)部指定的 一種標(biāo)準(zhǔn),此標(biāo)準(zhǔn)規(guī)定了基于包交換系統(tǒng)下的多媒體通信系統(tǒng)架構(gòu);
IP, Internet Protocol,即網(wǎng)纟各協(xié)i義;
ISDN, Integrated Services Digital Network,即綜合月良務(wù)數(shù)字網(wǎng);ITU-T , International Telecommunication Union TelecommunicationStandardization Sector,即國(guó)際電信聯(lián)盟電信標(biāo)準(zhǔn)部;RTP , Real-time Transport Protocol ,實(shí)時(shí)傳^T協(xié)議;MCU, Multipoint Control Unit,多點(diǎn)控制單元;
UDP, User Datagram Protocol,用戶數(shù)據(jù)才艮協(xié)議;
YPbPr,亮度(Y)與色差(Pb/Pr);
DVI, Digital Visual Interface, tt字^L頻4妄口;
HDMI, High Definition Multimedia Interface,高清晰多J 某體接口 ;
VGA, Video Graphic Array,顯示繪圖陣列;
MPEG, Moving Pictures Experts Group,即動(dòng)態(tài)圖^f象專家組,MPEGl、 MPEG2和MPEG4都是MPEG標(biāo)準(zhǔn)。
相互關(guān)聯(lián)的視頻圖像(為了方便描述,下文統(tǒng)稱為關(guān)聯(lián)視頻圖像)指 的是多個(gè)攝像機(jī)在同一場(chǎng)景中獲取的視頻圖像, 一般來(lái)說(shuō),由于攝像機(jī)擺設(shè) 位置相對(duì)隨意,因此這些圖像之間存在重疊區(qū)域,如圖2所示,陰影部分為 圖像21和圖像22的重疊區(qū)域,圖像21和圖像22屬于關(guān)聯(lián)圖像。
圖像組合,將多幅來(lái)自同一場(chǎng)景的小尺寸(小視角)圖像合成一幅大尺 寸(廣視角)的圖像;針對(duì)上述互相關(guān)聯(lián)的圖像,拼裝時(shí)將重疊區(qū)域進(jìn)行處 理。例如,對(duì)2所示的圖像21和圖像22進(jìn)行處理后,得到圖像23,如圖3 所示。
圖像重組,將一幅大尺寸的視頻圖像進(jìn)行分割、濾波處理,形成多幅小 尺寸視頻圖像。
下面將結(jié)合本發(fā)明實(shí)施例中的附圖,對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行 清楚、完整地描述,顯然,所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例,而 不是全部的實(shí)施例?;诒景l(fā)明中的實(shí)施例,本領(lǐng)域普通技術(shù)人員在沒有作 出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例,都屬于本發(fā)明保護(hù)的范圍。
本發(fā)明實(shí)施例公開了 一種視頻圖像數(shù)據(jù)處理方法,通過(guò)將獲取的多路相 互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù),然后根據(jù)顯示需要, 將所述寬景視頻圖像數(shù)據(jù)重組成一路或多路(與顯示設(shè)備數(shù)量相等)視頻圖 像數(shù)據(jù),由顯示設(shè)備進(jìn)行顯示。
所述顯示設(shè)備數(shù)量可以為多臺(tái),在將組合成的寬景視頻圖像數(shù)據(jù)重組成 多路視頻圖像數(shù)據(jù)后,可以分別發(fā)送給各臺(tái)顯示設(shè)備。顯示設(shè)備按照各路視頻圖像數(shù)據(jù)在所述寬景視頻圖像數(shù)據(jù)中的位置排列進(jìn)行顯示,即可為用戶提
供寬視角的視覺體驗(yàn)。具體過(guò)程如圖4所示,包括以下步驟
步驟S41、獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及各視頻圖像數(shù)據(jù)之間的關(guān) 聯(lián)信息。
所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)來(lái)自設(shè)置在同 一 場(chǎng)景中的多臺(tái)攝像 機(jī),這些攝像機(jī)架設(shè)于該場(chǎng)景中的不同位置。
所述關(guān)聯(lián)信息包括用于指示所述視頻圖像數(shù)據(jù)的物理位置信息,及所 述視頻圖像數(shù)據(jù)被捕獲的時(shí)間戳信息。
步驟S42、依據(jù)所述關(guān)聯(lián)信息將所述多路視頻圖像數(shù)據(jù)組合成單路寬景視 頻圖像數(shù)據(jù)。
具體地,依據(jù)各路視頻圖像數(shù)據(jù)的物理位置及被捕獲的時(shí)間戳信息,將 各路視頻圖像數(shù)據(jù)進(jìn)行組合,形成單路寬景視頻圖像數(shù)據(jù)。
步驟S43、將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像 數(shù)據(jù)。
針對(duì)顯示設(shè)備的數(shù)量、支持畫面的大小及支持的視頻圖像數(shù)據(jù)格式,將 寬景視頻圖像數(shù)據(jù)重組、濾波成相應(yīng)路數(shù)的視頻圖像數(shù)據(jù)。
步驟S44、將重組得到的各路視頻圖像數(shù)據(jù)分別發(fā)送給各顯示設(shè)備顯示。 如果顯示設(shè)備的數(shù)量為4個(gè),如圖5a所示,分別為51a、 52a、 53a和54a, 將寬景視頻圖像數(shù)據(jù)按照顯示位置重組成4路,然后分別傳輸給對(duì)應(yīng)的顯示 設(shè)備顯示,于是,各顯示設(shè)備依照?qǐng)D像在所述寬景視頻圖像數(shù)據(jù)中的位置排 列即可將顯示的圖像組成一幅廣視角的視頻圖像;如果顯示設(shè)備的數(shù)量為3 個(gè),如圖5b所示,分別為51b、 52b和53b ,將寬景視頻圖像數(shù)據(jù)按照?qǐng)D像 顯示位置重組成3路,然后分別傳輸給對(duì)應(yīng)的顯示設(shè)備顯示。另外,顯示設(shè) 備所支持的顯示畫面大小有可能不同,于是,在進(jìn)行寬景視頻圖像數(shù)據(jù)重組 時(shí),需要根據(jù)顯示設(shè)備所支持的顯示畫面大小將寬景視頻圖像數(shù)據(jù)重組成相 應(yīng)尺寸的視頻圖像數(shù)據(jù),例如顯示設(shè)備支持HDMI視頻輸入接口,同時(shí)支持 1080p視頻格式,而寬景圖像的分辨率為4000*1080,則在進(jìn)行寬景視頻圖像數(shù)據(jù)重組時(shí),將寬景視頻圖像數(shù)據(jù)重組成濾波成兩路分辨率大小為1920*1080 的1080p的視頻圖像數(shù)據(jù)進(jìn)行顯示較為合適。
需要說(shuō)明的是,上述步驟S41中,獲取視頻圖像的視頻接口類型可以為 YPbPr接口、 DVI接口、 HDMI接口或VGA接口中的任意一種或幾種,也就 是說(shuō),各攝像機(jī)提供的視頻輸入接口可以相同,也可以不同。上述步驟S43 中,重組而成的視頻圖像數(shù)據(jù)格式與顯示設(shè)備支持的視頻圖像格式相一致, 根據(jù)顯示設(shè)備所支持視頻圖像格式而定。
另外需要說(shuō)明的是,上述步驟S41中視頻輸入接口類型與步驟S44輸出 的視頻輸出接口類型可以相同(如視頻輸入接口類型為YPbPr接口,輸出視 頻接口類型也為YPbPr接口 )或不同(如視頻輸入接口類型為YPbPr接口 , 輸出視頻接口類型可為HDMI接口 )。當(dāng)各顯示設(shè)備所支持的視頻接口類型、 視頻圖像數(shù)據(jù)格式不同時(shí),在將單路寬景視頻圖像數(shù)據(jù)重組成多路視頻圖像 數(shù)據(jù)之后,還需要根據(jù)對(duì)應(yīng)顯示設(shè)備所支持的視頻接口類型、所支持的視頻 圖像格式,將所述各路視頻圖像數(shù)據(jù)分別進(jìn)行格式轉(zhuǎn)換后,再發(fā)送給相應(yīng)顯 示設(shè)備。
本發(fā)明實(shí)施例在獲取多個(gè)攝像機(jī)采集的多路視頻圖像數(shù)據(jù)之后,將多路 視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù),根據(jù)顯示需要重組成若干路視 頻圖像數(shù)據(jù),然后發(fā)送給顯示設(shè)備顯示。只需要將顯示設(shè)備按照視頻圖像在 所述寬景視頻圖像數(shù)據(jù)中的位置排列即可將顯示的視頻圖像組合成廣視角視 頻圖像,為用戶提供較好的視覺體驗(yàn)。并且,本發(fā)明實(shí)施例將多路視頻圖像 數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù),由于在組合過(guò)程中可以消除各視頻圖像 數(shù)據(jù)之間存在的重疊情況,因此,可以允許各攝像機(jī)獲取的圖像存在重疊現(xiàn) 象,這意味著對(duì)攝像機(jī)擺放位置及使用者與攝像機(jī)組之間的距離沒有特別嚴(yán) 格的要求,降低了安裝攝像機(jī)的復(fù)雜度。
所述顯示設(shè)備也可以為具備適應(yīng)寬景視頻圖像數(shù)據(jù)的顯示設(shè)備,此時(shí), 其數(shù)量可以為一臺(tái),在將組合成的寬景視頻圖像數(shù)據(jù)重組成多路視頻圖像數(shù) 據(jù)后,將所述多路視頻圖像數(shù)據(jù)按照其在寬景視頻圖像數(shù)據(jù)中的位置分路發(fā) 送給所述顯示設(shè)備,由該顯示設(shè)備將各路視頻圖像組合成寬景視頻圖像數(shù)據(jù)
19后進(jìn)行顯示。本發(fā)明實(shí)施例可以應(yīng)用于遠(yuǎn)程寬景視頻會(huì)議過(guò)程,參加會(huì)議各
方都可以將本方視頻圖像數(shù)據(jù)發(fā)送給對(duì)方(即視頻圖像數(shù)據(jù)發(fā)送過(guò)程), 并接收對(duì)方發(fā)送的視頻圖像數(shù)據(jù)并顯示(即視頻圖像數(shù)據(jù)接收過(guò)程)。
所述視頻圖像數(shù)據(jù)發(fā)送過(guò)程可以如圖6所示,包括以下步驟
步驟S61、獲取架設(shè)在本方會(huì)場(chǎng)的多臺(tái)攝像機(jī)采集的視頻圖像數(shù)據(jù)及各視 頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息。
其中,各臺(tái)攝像機(jī)架設(shè)位置不同,但獲取的視頻圖像數(shù)據(jù)相互關(guān)聯(lián),所 述關(guān)聯(lián)信息包括各視頻圖像數(shù)據(jù)的物理位置及獲取時(shí)間戳。
步驟S62、依據(jù)各視頻圖像數(shù)據(jù)的物理位置及獲取時(shí)間戳,將多路視頻圖 像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)。
步驟S63、將所述寬景視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送。
本技術(shù)領(lǐng)域人員可以理解,在上述步驟S61中多臺(tái)攝像機(jī)采集的視頻圖 像數(shù)據(jù)及各視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息的獲取過(guò)程是同時(shí)進(jìn)行的,毋庸置疑, 為了讓多個(gè)顯示器前的用戶能夠看到攝像機(jī)前同 一時(shí)間的畫面,必須保證多 個(gè)攝像機(jī)同步采集場(chǎng)景圖像。另外,為了保證所傳輸?shù)囊曨l圖像的完整性, 必須保證相鄰的攝像機(jī)拍攝的場(chǎng)景不能有脫離的現(xiàn)象,最好有重疊區(qū)域,在 圖像組合過(guò)程中可以消除所述重疊區(qū)域。
本實(shí)施例中,所述通信網(wǎng)絡(luò)的網(wǎng)^^矣口可以是基于電路交換的ISDN、 El接口、 V35接口、基于包交換的以太網(wǎng)接口或基于無(wú)線連接的無(wú)線端口等。
與上述視頻圖像發(fā)送過(guò)程相對(duì)應(yīng),所述視頻圖像數(shù)據(jù)接收過(guò)程可以如圖7 所示,包括以下步驟 ,
步驟S71、從通信網(wǎng)絡(luò)獲取發(fā)自對(duì)方會(huì)場(chǎng)的寬景視頻圖像數(shù)據(jù)。
步驟S72、將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像 數(shù)據(jù)。
步驟S73、將各路視頻圖像發(fā)送給相應(yīng)顯示設(shè)備顯示。
在其他實(shí)施例中,所述視頻圖像數(shù)據(jù)發(fā)送過(guò)程也可以是在獲取多路視 頻圖像數(shù)據(jù)及各視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息后,直接通過(guò)通信網(wǎng)絡(luò)發(fā)送。相 應(yīng)地,所述視頻圖像數(shù)據(jù)接收過(guò)程為接收所述多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息后,依據(jù)所述關(guān)聯(lián)信息將多路視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù), 根據(jù)顯示設(shè)備的數(shù)量,將所述寬景視頻圖像數(shù)據(jù)重組成多路視頻圖像數(shù)據(jù)后 發(fā)送給相應(yīng)顯示設(shè)備顯示。需要說(shuō)明的是,這些實(shí)施例中,所述多路視頻圖 像數(shù)據(jù)間的關(guān)聯(lián)信息可以嵌入視頻圖像數(shù)據(jù)(或者經(jīng)過(guò)壓縮的視頻圖像數(shù)據(jù)) 中進(jìn)行傳輸,例如,當(dāng)所述通信網(wǎng)絡(luò)為以太網(wǎng)時(shí),所述關(guān)聯(lián)信息可以被嵌入 在視頻RTP包中進(jìn)行傳輸,此方式有利于關(guān)聯(lián)信息與視頻圖像數(shù)據(jù)同步。當(dāng) 然,所述關(guān)聯(lián)信息也可以單獨(dú)傳輸,例如通過(guò)獨(dú)立數(shù)據(jù)通道傳輸。
在其他實(shí)施例中,所述視頻圖像數(shù)據(jù)發(fā)送過(guò)程還可以是獲取多路視頻 圖像數(shù)據(jù)及各視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息后,依據(jù)所述關(guān)聯(lián)信息將多路視頻 圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù),根據(jù)顯示設(shè)備(對(duì)方會(huì)場(chǎng)的顯示設(shè) 備)的數(shù)量,將所述寬景視頻圖像數(shù)據(jù)重組成多路視頻圖像數(shù)據(jù)后,通過(guò)通 信網(wǎng)絡(luò)發(fā)送。相應(yīng)地,所述視頻圖像數(shù)據(jù)接收過(guò)程為通過(guò)接收所述重組得 到的多路視頻圖像數(shù)據(jù),直接發(fā)送給本方會(huì)場(chǎng)的顯示設(shè)備顯示。
此外,上述實(shí)施例中,發(fā)送端發(fā)送的寬景視頻圖像數(shù)據(jù)的方式可以是直 接發(fā)送,也可以是通過(guò)編碼后發(fā)送。所述編碼方式可以是H.261、 H.263、 H.264、 MPEG1、 MPEG2或MPEG4。相應(yīng)的,接收端接收的寬景視頻圖像數(shù) 據(jù)可以是沒有經(jīng)過(guò)編碼的原始數(shù)據(jù),也可以是經(jīng)過(guò)編碼的數(shù)據(jù)。需要說(shuō)明的 是,組合后的圖像的尺寸一般情況下是原始圖像的尺寸的幾倍,這種情況下, 即便采用編碼器進(jìn)行編碼,其傳輸?shù)臄?shù)據(jù)量仍然是比較大的,這對(duì)編碼器的 能力提出了苛刻的要求?;诖耍景l(fā)明另外實(shí)施例采用多個(gè)編碼器并列處 理的方式,另外,,由于圖像數(shù)據(jù)的隨機(jī)性,經(jīng)過(guò)編碼之后的數(shù)據(jù)順序已經(jīng)不 能保證同步性了 ,為了保證在顯示端多個(gè)顯示器顯示的圖像為同一時(shí)間拍攝 的,需要對(duì)編碼之后的數(shù)據(jù)進(jìn)行同步處理。
具體的,上述將寬景視頻圖像數(shù)據(jù)重組的過(guò)程實(shí)際上是圖像分割過(guò)程, 包括步驟
a、將所述寬景視頻圖像分割為多個(gè)子圖像,同時(shí)得到生成所述多個(gè)子圖 像的多個(gè)同步信息,每個(gè)子圖像對(duì)應(yīng)一個(gè)同步信息。所述同步信息具體為接收到的所述寬景視頻圖像數(shù)據(jù)的時(shí)間戳,也可以為自定義的序號(hào),所述序號(hào)的定義方式要保證屬于同一寬景視頻圖像數(shù)據(jù) 分割后的多個(gè)子圖像的序號(hào)符合預(yù)先設(shè)定的規(guī)律,例如可以是相同或者相連續(xù)。b、 為每個(gè)子圖像的分割方式分配重建信息,所述重建信息用來(lái)記錄每個(gè) 子圖像的分割方式。c、 將各子圖像及其對(duì)應(yīng)的同步信息和重建信息發(fā)送給其他設(shè)備。于是,上述一種視頻圖像數(shù)據(jù)處理方法進(jìn)一步包括同步過(guò)程和重建過(guò)程, 下面分別進(jìn)行介紹所述同步過(guò)程如下首先,接收所述其他設(shè)備發(fā)送的各子圖像及其對(duì)應(yīng)的同步信息和重建信 息,然后,根據(jù)所述同步信息對(duì)所述子圖像進(jìn)行歸類,找出屬于同一寬景視 頻圖像數(shù)據(jù)分割后的多個(gè)子圖像,即在同 一 時(shí)間得到的圖像信息。執(zhí)行上述方法的設(shè)備具有接收緩存、重建緩存和發(fā)送緩存,接收緩存接 收進(jìn)行分割后的子圖像,屬于同 一幅寬景圖像的子圖像的同步信息符合預(yù)先 設(shè)定的規(guī)律,例如相同或相連續(xù),重建緩存中存儲(chǔ)待重建的子圖像,發(fā)送緩 存存儲(chǔ)重建的圖像。所述重建信息可以是分割方式,所述重建過(guò)程為根據(jù)所述分割對(duì)所述 歸類后的子圖像進(jìn)行重建,得到多路視頻圖像數(shù)據(jù),其中各路視頻圖像數(shù)據(jù) 按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。所述同步和重建的具體過(guò)程可以包括步驟a、初始化4喿作,即確定最小同步信息MinSyinfo;該步驟所述的"最小同步信息"有可能不是最小的,其可以是任意選出 來(lái)的,是々支定的"最小同步信息"。步驟b、從接收緩存中取出未被選取子圖像,獲取其同步信息CurrSyinfo。步驟c、判斷MinSyinfo是否大于CurrSyinfo,如果是,進(jìn)入步驟d;否 則,進(jìn)入步驟e;步驟d、將CurrSyinfo確定為MinSyinfo,返回步驟b;步驟e、進(jìn)行CDT(Check Delay Time, 4企測(cè)處理延時(shí))處理,如果所述處 理延時(shí)大于規(guī)定延時(shí),則進(jìn)入步驟f;否則,進(jìn)入步驟g;步驟f、將發(fā)送緩存中存儲(chǔ)的圖像直接輸出,并返回步驟a;步驟g、判斷MinSyinfo是否小于CurrSyinfo,如果是,返回步驟b;否 則,進(jìn)入步驟h;步驟h、進(jìn)行CDT處理,如果所述處理延時(shí)大于規(guī)定延時(shí),則進(jìn)入步驟 f;否則,進(jìn)入步驟i;步驟i、將該子圖像存儲(chǔ)至重建緩存;步驟j、判斷所述接收緩存中是否還存在未被選取的子圖像,若是,返回 步驟b,若否,進(jìn)入步驟k;步驟k、將重建緩存中存儲(chǔ)的子圖像根據(jù)重建信息進(jìn)行重建,將重建后的 圖像存儲(chǔ)至發(fā)送緩存,并進(jìn)入步驟f。可以理解的是,步驟f中發(fā)送緩存發(fā)送數(shù)據(jù)后,并不立即釋放該緩存,因 此當(dāng)從步驟e或步驟f進(jìn)入步驟f時(shí),所述發(fā)送緩存中存儲(chǔ)的圖像是成功重建 的前一幀圖像;所述發(fā)送緩存中存儲(chǔ)的圖像由步驟k更新,所述更新可以是 數(shù)據(jù)覆蓋的方式,也可以是先釋放所述發(fā)送緩存,再存入數(shù)據(jù)的方式,或者 其他數(shù)據(jù)更新方式。在其他實(shí)施例中,在重組過(guò)程中,在將所述多個(gè)子圖像及其對(duì)應(yīng)的同步 信息和重建信息發(fā)送之前,將所述多個(gè)子圖像及其對(duì)應(yīng)的同步信息和重建信 息進(jìn)行編碼,編碼方式可以是符合現(xiàn)在主流的各種標(biāo)準(zhǔn)的壓縮標(biāo)準(zhǔn)碼流格式, 如h261、 h263、 h263++、 mpegl、 mpeg2或mpeg4等多種方式。相應(yīng)的,在所述同步過(guò)程中,接收所述子圖像及其對(duì)應(yīng)的同步信息和重 建信息后,先進(jìn)行解碼,對(duì)應(yīng)上述重組過(guò)程的多個(gè)編碼器,相應(yīng)的解碼器也 可以設(shè)置有多個(gè)。然后,根據(jù)所述同步信息對(duì)所述解碼后的子圖像進(jìn)行歸類, 找出屬于同 一寬景視頻圖像數(shù)據(jù)分割后的多個(gè)子圖像,即在同 一時(shí)間得到的 圖像信息。本發(fā)明實(shí)施例同時(shí)還公開了 一種視頻圖像數(shù)據(jù)處理裝置,可實(shí)現(xiàn)上述實(shí) 施例7>開的方法。所述視頻圖像數(shù)據(jù)處理裝置的一種結(jié)構(gòu)形式如圖8所示,包括數(shù)據(jù)組 合單元81、數(shù)據(jù)重組單元82、數(shù)據(jù)輸入接口 83和數(shù)據(jù)輸出單元84。
其中
數(shù)據(jù)輸入接口 83的數(shù)量為多個(gè),分別與多臺(tái)攝像機(jī)相連,用于獲取多路 視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息,所述關(guān)聯(lián)信息包括用于 指示所述視頻圖像數(shù)據(jù)的物理位置信息,及所述視頻圖像數(shù)據(jù)被捕獲的時(shí)間 戳信息。
數(shù)據(jù)組合單元81,用于依據(jù)所述關(guān)聯(lián)信息,將所述多路視頻圖像組合成 單路寬景視頻圖像數(shù)據(jù)。具體的,依據(jù)各路視頻圖像數(shù)據(jù)的物理位置及獲取 時(shí)間,將所述多路視頻圖像組合成單路寬景視頻圖像數(shù)據(jù)。
數(shù)據(jù)重組單元82,針對(duì)顯示設(shè)備的數(shù)量和大小及所支持的視頻圖像格式, 將所述單路寬景視頻圖像數(shù)據(jù)重組成適應(yīng)多個(gè)顯示設(shè)備播放的多路視頻圖像 數(shù)據(jù)。
數(shù)據(jù)輸出單元84,用于將數(shù)據(jù)重組單元82處理得到的多路視頻圖像數(shù)據(jù) 通過(guò)通信網(wǎng)絡(luò)發(fā)送給處于遠(yuǎn)端的視頻會(huì)議設(shè)^(可以是終端,也可以是MCU)。
于是,所述處于遠(yuǎn)端的視頻會(huì)議設(shè)備即可將多路視頻圖像數(shù)據(jù)按照視頻 圖像在寬景視頻圖像中的位置排列后,傳輸給所述多個(gè)顯示設(shè)備。所有顯示 設(shè)備顯示的視頻圖像即可組合成一幅廣視角的視頻圖像,為用戶帶來(lái)寬景的 視覺體驗(yàn)。
數(shù)據(jù)輸入接口 83的類型可以是YPbPr接口、 DVI接口、 HDMI接口或 VGA接口等。 .
需要說(shuō)明的是,為了減少發(fā)送的數(shù)據(jù)量并保證發(fā)送的安全性,所述視頻 圖像數(shù)據(jù)處理裝置的另一種結(jié)構(gòu)還可以包括用于進(jìn)行壓縮編碼的功能單元, 如圖9所示,包括it據(jù)組合單元91、數(shù)據(jù)重組單元92、數(shù)據(jù)輸入接口 93、數(shù) 據(jù)輸出單元94和數(shù)據(jù)編碼器95。
其中
24數(shù)據(jù)組合單元91、數(shù)據(jù)重組單元92、數(shù)據(jù)輸入接口 93和數(shù)據(jù)輸出單元 94的功能,分別與數(shù)據(jù)組合單元81、數(shù)據(jù)重組單元82、數(shù)據(jù)輸入接口83和 數(shù)據(jù)輸出單元84的功能基本相同。
數(shù)據(jù)編碼器95,用于獲取數(shù)據(jù)重組單元92重組得到的多路視頻圖像數(shù)據(jù), 進(jìn)行編碼后提供給數(shù)據(jù)輸出單元94。其編碼方式可以是H.261、 H.263、 H.264、 MPEG1、 MPEG2或MPEG4。
為了使數(shù)據(jù)處理的速度更快,以保證數(shù)據(jù)傳輸?shù)膶?shí)時(shí)性,在另外實(shí)施例 中可采用多個(gè)數(shù)據(jù)編碼器同時(shí)對(duì)數(shù)據(jù)重組單元92重組得到的多路視頻圖像數(shù) 據(jù)進(jìn)行編碼處理。這種情況下,數(shù)據(jù)重組單元92處理得到的各路視頻圖像數(shù) 據(jù)均包括所述寬景視頻圖像重組后的每個(gè)子圖像及與其對(duì)應(yīng)的同步信息和 重組信息。在數(shù)據(jù)輸出單元94將多個(gè)編碼器編碼處理的多路視頻圖像數(shù)據(jù)輸 出后,接收所述多路視頻圖像數(shù)據(jù)的設(shè)備即可依據(jù)所述同步信息和重建信息 進(jìn)行同步過(guò)程和重建過(guò)程,所述同步過(guò)程和重建過(guò)程的具體內(nèi)容可參照前文 方法部分的描述,在此不在贅述。
所述接收多路視頻圖像數(shù)據(jù)的設(shè)備即是所述視頻圖像數(shù)據(jù)處理裝置的另 一種結(jié)構(gòu)形式,包括多個(gè)數(shù)據(jù)輸入接口和多個(gè)數(shù)據(jù)輸出接口,另外,還包 括數(shù)據(jù)解碼器、數(shù)據(jù)同步單元和數(shù)據(jù)重建單元,其中
所述數(shù)據(jù)輸入接口用于獲取編碼后的多路視頻圖像數(shù)據(jù);
所述數(shù)據(jù)解碼器數(shù)量為多個(gè),用于同時(shí)對(duì)編碼后的多路視頻圖像數(shù)據(jù)進(jìn) 行解碼,解碼后的多路視頻圖像數(shù)據(jù)包含所述寬景視頻圖像分割成的多個(gè)子 圖{象及與其相對(duì)應(yīng)的同步信息和重建信息;
所述數(shù)據(jù)同步單元用于將所述解碼后的子圖像^4居與其對(duì)應(yīng)的同步信 息進(jìn)行歸類,具體過(guò)程可參照前文方法實(shí)施例部分的描述。
所述數(shù)據(jù)重建單元用于根據(jù)所述重建信息對(duì)所述歸類后的子圖像進(jìn)行 重建,得到多路視頻圖像數(shù)據(jù),并提供給數(shù)據(jù)輸出接口,各路視頻圖像數(shù)據(jù) 按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
25一種結(jié)構(gòu)形式如圖IO所示,包括數(shù)據(jù) 組合單元101、數(shù)據(jù)重組單元102及數(shù)據(jù)輸入接口 103和多個(gè)數(shù)據(jù)輸出接口 104。
其中
數(shù)據(jù)組合單元101和數(shù)據(jù)重組單元102的功能,分別與數(shù)據(jù)組合單元81 和數(shù)據(jù)重組單元82的功能基本相同。
本結(jié)構(gòu)與圖8所示結(jié)構(gòu)的區(qū)別在于數(shù)據(jù)輸入接口 103獲取的多路視頻 圖像數(shù)據(jù)和各路視頻圖像之間的關(guān)聯(lián)信息,是由其他設(shè)備從通信網(wǎng)絡(luò)發(fā)送過(guò) 來(lái)的。多個(gè)數(shù)據(jù)輸出接口 104分別與多個(gè)顯示設(shè)備相連接,用于將數(shù)據(jù)重組 單元102處理得到的多路視頻圖像數(shù)據(jù)按照視頻圖像在寬景視頻圖像中的位 置排列發(fā)送給各顯示設(shè)備,所有顯示設(shè)備顯示的視頻圖像即可組合成一幅廣 視角的視頻圖像。
具體的,數(shù)據(jù)輸入接口 103可以由網(wǎng)絡(luò)接口和數(shù)據(jù)接收單元組成,所述 網(wǎng)絡(luò)接口用于與通信網(wǎng)絡(luò)建立連接,所述數(shù)據(jù)接收單元通過(guò)所述網(wǎng)絡(luò)接口接 收其他設(shè)備從通信網(wǎng)絡(luò)傳送過(guò)來(lái)的視頻圖像數(shù)據(jù)。
所述網(wǎng)絡(luò)接口可以是基于電路交換的ISDN、 El接口、 V35接口、基于 包交換的以太網(wǎng)接口或基于無(wú)線連接的無(wú)線端口。
另外,如果數(shù)據(jù)輸入接口 103接收到的多路視頻圖像數(shù)據(jù)和各路視頻圖 像之間的關(guān)聯(lián)信息是經(jīng)過(guò)編碼的,則所述視頻圖像數(shù)據(jù)處理裝置的另 一種結(jié) 構(gòu)中需要包括用于解碼的功能單元,如圖ll所示,包括數(shù)據(jù)組合單元lll、 數(shù)據(jù)重組單元112、多個(gè)數(shù)據(jù)輸入接口 113和數(shù)據(jù)輸出接口 114,還包括數(shù)據(jù) 解碼器115,其中
數(shù)據(jù)組合單元lll、數(shù)據(jù)重組單元112、數(shù)據(jù)輸入接口 U3和數(shù)據(jù)輸出接 口 114的功能,分別與數(shù)據(jù)組合單元101、數(shù)據(jù)重組單元102、數(shù)據(jù)輸入接口 103和數(shù)據(jù)輸出接口 104的功能基本相同。
數(shù)據(jù)編碼器115,用于對(duì)數(shù)據(jù)輸入接口 113獲取的多路視頻圖像數(shù)據(jù)和各 路視頻圖像之間的關(guān)聯(lián)信息進(jìn)行解碼,然后提供給數(shù)據(jù)組合單元111。
26此外,本發(fā)明實(shí)施例還提供了一種視頻會(huì)議系統(tǒng),該系統(tǒng)的一種具體結(jié)
構(gòu)如圖12所示,包括數(shù)據(jù)組合單元121、數(shù)據(jù)發(fā)送單元122、數(shù)據(jù)接收單 元123、數(shù)據(jù)重組單元124及多個(gè)數(shù)據(jù)輸入接口 125和數(shù)據(jù)輸出接口 126。 其中
數(shù)據(jù)組合單元121、數(shù)據(jù)發(fā)送單元122和數(shù)據(jù)輸入接口 125位于視頻會(huì)議 的一方會(huì)場(chǎng)。多個(gè)數(shù)據(jù)輸入接口 125獲取多路視頻圖像數(shù)據(jù)及各路視頻圖像 數(shù)據(jù)間的關(guān)聯(lián)信息,并由數(shù)據(jù)組合單元121依據(jù)所述關(guān)聯(lián)信息,將所述多路 視頻圖像組合成單路寬景視頻圖像數(shù)據(jù),然后,由數(shù)據(jù)發(fā)送單元122將該單 路寬景視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送給位于遠(yuǎn)端的另 一方會(huì)場(chǎng)。
數(shù)據(jù)接收單元123、數(shù)據(jù)重組單元124及數(shù)據(jù)輸出接口 126位于所述位于 遠(yuǎn)端的另一方會(huì)場(chǎng)。數(shù)據(jù)接收單元123將接收承栽于通信網(wǎng)絡(luò)的單路寬景視 頻圖像數(shù)據(jù),然后提供給數(shù)據(jù)重組單元124,數(shù)據(jù)重組單元124依據(jù)顯示設(shè)備 的數(shù)量、支持的畫面大小及視頻圖像格式,將所述單路寬景視頻圖像數(shù)據(jù)重 組成適應(yīng)多個(gè)顯示設(shè)備播放的多路視頻圖像數(shù)據(jù),由數(shù)據(jù)輸出接口 126提供 給與其對(duì)應(yīng)的顯示設(shè)備。
所述顯示設(shè)備按照所述視頻圖像在寬景視頻圖像中的位置擺放,所有顯 示設(shè)備顯示的視頻圖像即可組合成一幅廣視角的視頻圖像,為用戶帶來(lái)寬景 的視覺體驗(yàn)。
需要說(shuō)明的是,數(shù)據(jù)輸入接口 125和數(shù)據(jù)輸出接口 126的類型可以是 YPbPr接口、 DVI接口、 HDMI接口或VGA接口。另夕卜,數(shù)據(jù)輸入接口 125 和數(shù)據(jù)輸出接口 126的類型可以不一樣,數(shù)據(jù)輸入接口 125獲取的視頻圖像 數(shù)據(jù)可以由數(shù)據(jù)重組單元123在重組時(shí),針對(duì)數(shù)據(jù)輸出接口 126的類型進(jìn)行 格式轉(zhuǎn)換。例如數(shù)據(jù)輸入接口 125為DVI接口,其獲取的視頻圖像數(shù)據(jù)為 DVI格式,而數(shù)據(jù)輸出接口 126是HDMI接口,因此,數(shù)據(jù)重組單元123在 進(jìn)行視頻圖像數(shù)據(jù)重組時(shí),需要將DVI格式視頻圖像數(shù)據(jù)轉(zhuǎn)換為HDMI格式 視頻圖像數(shù)據(jù)。
各方會(huì)場(chǎng)需要同時(shí)擔(dān)當(dāng)發(fā)送方和接收方的工作,也即通過(guò)數(shù)據(jù)輸入接 口 125、數(shù)據(jù)組合單元121和數(shù)據(jù)發(fā)送單元122發(fā)送本方會(huì)場(chǎng)的視頻圖像數(shù)據(jù),通過(guò)數(shù)據(jù)接收單元123、數(shù)據(jù)重組單元124及數(shù)據(jù)輸出接口 126接收、處理對(duì) 方會(huì)場(chǎng)的視頻圖像數(shù)據(jù)。
需要說(shuō)明的是,在其他結(jié)構(gòu)形式的系統(tǒng)中,發(fā)送方的工作僅需通過(guò)數(shù)據(jù) 輸入接口 125獲取多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息, 然后通過(guò)通信網(wǎng)絡(luò)發(fā)送對(duì)方會(huì)場(chǎng)。接收方從通信網(wǎng)絡(luò)獲取所述多路視頻圖像 數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息后,進(jìn)行組合、重組等操作。請(qǐng)參 考圖13,為本發(fā)明實(shí)施例提供的一種視頻會(huì)議系統(tǒng)的另一種結(jié)構(gòu)示意圖,包 括數(shù)據(jù)組合單元131、數(shù)據(jù)發(fā)送單元132、數(shù)據(jù)接收單元133、數(shù)據(jù)重組單 元134及多個(gè)數(shù)據(jù)輸入沖妄口 135和數(shù)據(jù)輸出接口 136。
其中
數(shù)據(jù)發(fā)送單元132和多個(gè)數(shù)據(jù)輸入接口 135位于一方會(huì)場(chǎng),數(shù)據(jù)接收單 元133、數(shù)據(jù)組合單元131、數(shù)據(jù)重組單元134及多個(gè)數(shù)據(jù)輸出接口 136位于 另一方會(huì)場(chǎng)。
多個(gè)數(shù)據(jù)輸入接口 135獲取多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)間的 關(guān)聯(lián)信息,數(shù)據(jù)發(fā)送單元132將所述多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù) 間的關(guān)聯(lián)信息通過(guò)通信網(wǎng)絡(luò)發(fā)送給另一方會(huì)場(chǎng);處于另一方會(huì)場(chǎng)的數(shù)據(jù)接收 單元133接收到所述多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)間的關(guān)聯(lián)信息后, 提供給數(shù)據(jù)組合單元131,數(shù)據(jù)重組單元131依據(jù)所述關(guān)聯(lián)信息將所述多路視 頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù)后,提供給數(shù)據(jù)重組單元134,數(shù)據(jù) 重組單元134依據(jù)顯示設(shè)備的數(shù)量、支持的畫面大小及視頻圖像格式,將所 述單路寬景視頻圖像數(shù)據(jù)重組成適應(yīng)多個(gè)顯示設(shè)備播放的多,路視頻圖像數(shù) 據(jù),由數(shù)據(jù)輸出接口 136提供給與其對(duì)應(yīng)的顯示設(shè)備。
需要說(shuō)明的是,由于上述數(shù)據(jù)發(fā)送單元(數(shù)據(jù)發(fā)送單元122和132 )將視 頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送的,因此,為了減少發(fā)送的數(shù)據(jù)量并保證數(shù)據(jù) 的安全性,所述數(shù)據(jù)發(fā)送單元發(fā)送的數(shù)據(jù)可以經(jīng)過(guò)編碼。相應(yīng)的,所述數(shù)據(jù) 接收單元(數(shù)據(jù)接收單元123和133 )在接收到通信網(wǎng)絡(luò)發(fā)送的數(shù)據(jù)后進(jìn)行解 碼。
28需要說(shuō)明的是,在其他結(jié)構(gòu)形式的系統(tǒng)中,發(fā)送方在接收到多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息后,依據(jù)所述關(guān)聯(lián)信息將所述多路視頻圖像數(shù)據(jù)組合成單
路寬景視頻圖像數(shù)據(jù),然后重組成若干路視頻圖像數(shù)據(jù)并發(fā)送;接收方接收
所述若干路視頻圖像數(shù)據(jù)后提供給本方會(huì)場(chǎng)的顯示設(shè)備顯示。具體結(jié)構(gòu)形式
如圖14所示,包括數(shù)據(jù)組合單元141、數(shù)據(jù)發(fā)送單元142、數(shù)據(jù)接收單元143、數(shù)據(jù)重組單元144及多個(gè)數(shù)據(jù)輸入接口 145和數(shù)據(jù)輸出接口 146。其中
各單元的功能與圖12、圖13中的各單元的功能基本相同,所不同的是數(shù)據(jù)輸入接口 145、數(shù)據(jù)組合單元141、數(shù)據(jù)重組單元144和數(shù)據(jù)發(fā)送單元142處于一方會(huì)場(chǎng),數(shù)據(jù)接收單元143和數(shù)據(jù)輸出接口 146處于另一方會(huì)場(chǎng)。這意味著,處于一方會(huì)場(chǎng)的數(shù)據(jù)重組單元144需要根據(jù)另一方會(huì)場(chǎng)的顯示設(shè)備的數(shù)量、支持的畫面大小及視頻圖像格式進(jìn)行視頻圖像數(shù)據(jù)重組。
此外,在另外的結(jié)構(gòu)中,還可以進(jìn)一步包括數(shù)據(jù)編碼器、數(shù)據(jù)解碼器、數(shù)據(jù)同步單元和數(shù)據(jù)重建單元,其中
所述數(shù)據(jù)編碼器數(shù)量為多個(gè),設(shè)置于數(shù)據(jù)重組單元144所在會(huì)場(chǎng),用于同時(shí)對(duì)數(shù)據(jù)重組單元144重組得到的多路視頻圖像數(shù)據(jù)進(jìn)行處理,所述數(shù)據(jù)重組單元144重組得到的各路視頻圖像數(shù)據(jù)包括所述寬景視頻圖像分割后的每個(gè)子圖像及與其對(duì)應(yīng)的同步信息和重組信息;
所述數(shù)據(jù)解碼器數(shù)量與所述數(shù)據(jù)編碼器的數(shù)量相同,設(shè)置于數(shù)據(jù)接收單元143所在會(huì)場(chǎng),用于同時(shí)對(duì)數(shù)據(jù)接收單元143接收的經(jīng)過(guò)編碼的多路視頻圖像數(shù)據(jù)進(jìn)行解碼;
所述數(shù)據(jù)同步單元用于將經(jīng)過(guò)所述各個(gè)數(shù)據(jù)解碼器解碼后的子圖像根據(jù)與其對(duì)應(yīng)的同步信息進(jìn)行歸類,具體過(guò)程可參照前文方法實(shí)施例部分的描述。
所述數(shù)據(jù)重建單元用于根據(jù)所述重建信息對(duì)所述歸類后的子圖像進(jìn)行重建,得到多路視頻圖像數(shù)據(jù),并提供給數(shù)據(jù)輸出接口,各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列??梢钥闯?,本發(fā)明實(shí)施例比較適合視頻會(huì)議雙方會(huì)場(chǎng)相同(顯示設(shè)備數(shù)量、支持的畫面大小及視頻圖像格式相同)的情況。
針對(duì)上述視頻圖像數(shù)據(jù)處理方法、裝置及會(huì)議系統(tǒng),本發(fā)明實(shí)施例同時(shí)還公開了一種視頻會(huì)議終端,考慮到視頻會(huì)議的各方的角色都是相互的(同時(shí)作為發(fā)送方和接收方),所述視頻會(huì)議終端的一種具體結(jié)構(gòu)如圖15所示,
包括數(shù)據(jù)組合單元151、數(shù)據(jù)收發(fā)單元152、網(wǎng)絡(luò)接口 153、數(shù)據(jù)重組單元154及多個(gè)數(shù)據(jù)輸入接口 155和數(shù)據(jù)輸出接口 156。其中
網(wǎng)絡(luò)接口 153用于與外部通信網(wǎng)絡(luò)建立連接,數(shù)據(jù)收發(fā)單元152用于獲取通信網(wǎng)絡(luò)發(fā)送的數(shù)據(jù),及向所述通信網(wǎng)絡(luò)發(fā)送數(shù)據(jù)。
其他的功能單元,如數(shù)據(jù)組合單元151、數(shù)據(jù)重組單元154、數(shù)據(jù)輸入接口 155和數(shù)據(jù)輸出接口 156的功能,可參照前文視頻圖像數(shù)據(jù)處理裝置及視頻會(huì)議系統(tǒng)部分的內(nèi)容。
作為發(fā)送方,所述視頻會(huì)議終端需要獲取本方會(huì)場(chǎng)的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息,組合成單路寬景視頻圖像數(shù)據(jù)后通過(guò)通信網(wǎng)絡(luò)發(fā)送給對(duì)方會(huì)場(chǎng);同時(shí)作為接收方,所述視頻會(huì)議終端需要接收對(duì)方會(huì)場(chǎng)通過(guò)通信網(wǎng)絡(luò)發(fā)送過(guò)來(lái)的寬景視頻圖像數(shù)據(jù),重組處理成多路視頻數(shù)據(jù)圖像后傳輸給本方會(huì)場(chǎng)的顯示設(shè)備。
圖16示出了所述視頻會(huì)議終端的另一結(jié)構(gòu),包括數(shù)據(jù)組合單元161、數(shù)據(jù)收發(fā)單元162、網(wǎng)絡(luò)接口 163、數(shù)據(jù)重組單元164及多個(gè)數(shù)據(jù)輸入接口 165和數(shù)據(jù)輸出接口 166,還包括數(shù)據(jù)編碼器167和數(shù)據(jù)解碼器168。
其中
數(shù)據(jù)組合單元161、數(shù)據(jù)收發(fā)單元162、網(wǎng)絡(luò)接口 163、數(shù)據(jù)重組單元164、數(shù)據(jù)輸入接口 165和數(shù)據(jù)輸出接口 166的功能,分別與數(shù)據(jù)組合單元151、數(shù)據(jù)收發(fā)單元152、網(wǎng)絡(luò)接口 153、數(shù)據(jù)重組單元154、數(shù)據(jù)輸入接口 155和數(shù)據(jù)輸出接口 156的功能基本相同。
數(shù)據(jù)編碼器167在數(shù)據(jù)收發(fā)單元162發(fā)送數(shù)據(jù)之前,對(duì)數(shù)據(jù)進(jìn)行編碼,數(shù)據(jù)解碼器168在數(shù)據(jù)收發(fā)單元162接收數(shù)據(jù)之后,對(duì)數(shù)據(jù)進(jìn)行解碼。
30所述視頻會(huì)議終端的另一結(jié)構(gòu)如圖17所示,包括數(shù)據(jù)組合單元171、數(shù)據(jù)收發(fā)單元172、網(wǎng)絡(luò)接口 173、數(shù)據(jù)重組單元174及多個(gè)數(shù)據(jù)輸入接口 175和數(shù)據(jù)輸出接口 176。
其中
各單元的功能分別與圖15中各單元的功能基本相同。
所不同的是,所述視頻會(huì)議終端作為發(fā)送方時(shí),獲取本方會(huì)場(chǎng)的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息后,直接通過(guò)通信網(wǎng)絡(luò)發(fā)送給對(duì)方會(huì)場(chǎng)。同時(shí),作為接收方時(shí),接收對(duì)方會(huì)場(chǎng)通過(guò)通信網(wǎng)絡(luò)發(fā)送過(guò)來(lái)的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息,組合成單路寬景視頻圖像數(shù)據(jù)后,再重組處理成多路視頻數(shù)據(jù)圖像后傳輸給本方會(huì)場(chǎng)的顯示設(shè)備。
圖18示出了所述視頻會(huì)議終端的另一結(jié)構(gòu),包括數(shù)據(jù)組合單元181、數(shù)據(jù)收發(fā)單元182、網(wǎng)絡(luò)接口 183、數(shù)據(jù)重組單元184及多個(gè)數(shù)據(jù)輸入接口 185和數(shù)據(jù)輸出接口 186,還包括數(shù)據(jù)編碼器187和數(shù)據(jù)解碼器188,其中各單元的功能與圖16所示的各單元的功能基本相同,所不同的是所述視頻會(huì)議終端作為發(fā)送方時(shí),獲取本方會(huì)場(chǎng)的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息,并進(jìn)行編碼后直接通過(guò)通信網(wǎng)絡(luò)發(fā)送給對(duì)方會(huì)場(chǎng)。同時(shí),作為接收方時(shí),接收對(duì)方會(huì)場(chǎng)通過(guò)通信網(wǎng)絡(luò)發(fā)送過(guò)來(lái)的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息,解碼后組合成單路寬景視頻圖像數(shù)據(jù),然后重組處理成多路視頻數(shù)據(jù)圖像后傳輸給本方會(huì)場(chǎng)的顯示設(shè)備。
在另外的實(shí)施例中,視頻會(huì)議終端作為發(fā)送方時(shí),獲取本方會(huì)場(chǎng)的多路視頻圖像數(shù)據(jù)及各路視頻圖像數(shù)據(jù)之間的關(guān)聯(lián)信息,組合成單路寬景視頻圖像數(shù)據(jù),并依據(jù)對(duì)方會(huì)場(chǎng)的顯示設(shè)備的數(shù)量、支持的畫面大小及視頻圖像格式,將所述單路寬景視頻圖像數(shù)據(jù)重組成適應(yīng)多個(gè)顯示設(shè)備播放的多路視頻圖像數(shù)據(jù),然后通過(guò)通信網(wǎng)絡(luò)(或者進(jìn)行編碼后通過(guò)通信網(wǎng)絡(luò))發(fā)送往對(duì)方會(huì)場(chǎng)。同時(shí),作為接收方時(shí),接收對(duì)方通過(guò)通信網(wǎng)絡(luò)發(fā)送的多路視頻數(shù)據(jù)圖像后,提供給本方會(huì)場(chǎng)的顯示設(shè)備顯示(或者進(jìn)行解碼后提供給本方會(huì)場(chǎng)的
31顯示設(shè)備顯示)。需要說(shuō)明的是,在這種情況下,在進(jìn)行編碼時(shí)可通過(guò)多個(gè)編碼器同時(shí)對(duì)重組得到的多路視頻圖像數(shù)據(jù)進(jìn)行編碼,在進(jìn)行解碼時(shí),通過(guò)多個(gè)解碼器同時(shí)對(duì)經(jīng)過(guò)編碼的多路視頻圖像數(shù)據(jù)進(jìn)行解碼,并且,進(jìn)行同步
過(guò)程和重建過(guò)程,即將經(jīng)過(guò)所述數(shù)據(jù)解碼器解碼后的子圖像根據(jù)與其對(duì)應(yīng)的同步信息進(jìn)行歸類,根據(jù)所述重建信息對(duì)所述歸類后的子圖像進(jìn)行重建,得到多路視頻圖像數(shù)據(jù),其中各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
本說(shuō)明書中各個(gè)實(shí)施例采用遞進(jìn)的方式描述,每個(gè)實(shí)施例重點(diǎn)說(shuō)明的都是與其他實(shí)施例的不同之處,各個(gè)實(shí)施例之間相同相似部分互相參見即可。
對(duì)于實(shí)施例公開的裝置而言,由于其與實(shí)施例公開的方法相對(duì)應(yīng),所以描述的比較簡(jiǎn)單,相關(guān)之處參見方法部分說(shuō)明即可。
本領(lǐng)域技術(shù)人員可以理解,可以使用許多不同的工藝和技術(shù)中的任意一種來(lái)表示信息、消息和信號(hào)。例如,上述說(shuō)明中提到過(guò)的消息、信息都可以表示為電壓、電流、電》茲波、石茲場(chǎng)或》茲性粒子、光場(chǎng)或以上任意組合。
專業(yè)人員還可以進(jìn)一步意識(shí)到,結(jié)合本文中所公開的實(shí)施例描述的各示例的單元及算法步驟,能夠以電子硬件、計(jì)算機(jī)軟件或者二者的結(jié)合來(lái)實(shí)現(xiàn),為了清楚地說(shuō)明硬件和軟件的可互換性,在上述說(shuō)明中已經(jīng)按照功能一般性地描述了各示例的組成及步驟。這些功能究竟以硬件還是軟件方式來(lái)執(zhí)行,取決于技術(shù)方案的特定應(yīng)用和設(shè)計(jì)約束條件。專業(yè)技術(shù)人員可以對(duì)每個(gè)特定的應(yīng)用來(lái)使用不同方法來(lái)實(shí)現(xiàn)所描述的功能,但是這種實(shí)現(xiàn)不應(yīng)認(rèn)為超出本發(fā)明的范圍。 ,
程,是可以通過(guò)計(jì)算機(jī)程序來(lái)指令相關(guān)的硬件來(lái)完成,所述的程序可存儲(chǔ)于一計(jì)算機(jī)可讀取存儲(chǔ)介質(zhì)中,所述程序在執(zhí)行時(shí),可包括如上述各方法的實(shí)施例的流程。其中,所述的存儲(chǔ)介質(zhì)可為磁碟、光盤、只讀存儲(chǔ)記憶體
(Read-Only Memory, ROM)或隨機(jī)存儲(chǔ)記憶體(Random Access Memory,RAM)等。
32對(duì)所公開的實(shí)施例的上述說(shuō)明,使本領(lǐng)域?qū)I(yè)技術(shù)人員能夠?qū)崿F(xiàn)或使用本發(fā)明。對(duì)這些實(shí)施例的多種修改對(duì)本領(lǐng)域的專業(yè)技術(shù)人員來(lái)說(shuō)將是顯而易見的,本文中所定義的一般原理可以在不脫離本發(fā)明的精神或范圍的情況下,在其它實(shí)施例中實(shí)現(xiàn)。因此,本發(fā)明將不會(huì)被限制于本文所示的這些實(shí)施例,而是要符合與本文所公開的原理和新穎特點(diǎn)相一致的最寬的范圍。
權(quán)利要求
1、一種視頻圖像數(shù)據(jù)處理方法,其特征在于,包括獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù);將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù)后,發(fā)送給顯示設(shè)備顯示。
2、 如權(quán)利要求l所述的方法,其特征在于,所述關(guān)聯(lián)信息包括各路視 頻圖像的物理位置關(guān)系信息和時(shí)間戳信息。
3、 如權(quán)利要求l所述的方法,其特征在于,所述獲取多路相互關(guān)聯(lián)的視 頻圖像數(shù)據(jù)及關(guān)聯(lián)信息具體為獲取承載于通信網(wǎng)絡(luò)上的多路相互關(guān)聯(lián)的視 頻圖像數(shù)據(jù)及關(guān)聯(lián)信息。
4、 如權(quán)利要求l所述的方法,其特征在于,所述獲取多路相互關(guān)聯(lián)的視 頻圖像數(shù)據(jù)及關(guān)聯(lián)信息具體為獲取架設(shè)視頻會(huì)議一方現(xiàn)場(chǎng)的多臺(tái)攝像機(jī)采 集的多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息。
5、 如權(quán)利要求l所述的方法,其特征在于,所述將寬景視頻圖像數(shù)據(jù)重 組的過(guò)程包括分割過(guò)程,所述分割過(guò)程包括將所述寬景視頻圖像分割為多個(gè)子圖像,同時(shí)生成各子圖像的同步信息; 按照分割方式為每個(gè)子圖像分配重建信息; 發(fā)送所述多個(gè)子圖像及其對(duì)應(yīng)的同步信息和重建信息; 所述方法還包括,同步過(guò)程和重建過(guò)程,其中 所述同步過(guò)程包括接收所述子圖像、同步信息和重建信息;根據(jù)所述同步信息對(duì)所述子圖像進(jìn)行歸類,屬于同 一幅寬景視頻圖像的 子圖像屬于同一類; 所述重建過(guò)程包括根據(jù)所述重建信息對(duì)所述歸類后的子圖像進(jìn)行重建,得到多路視頻圖像 數(shù)據(jù),其中各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
6、 如權(quán)利要求5所述的方法,其特征在于,所述同步信息為序號(hào)或時(shí)間戳。
7、 如權(quán)利要求5所述的方法,其特征在于,發(fā)送所述多個(gè)子圖像及其對(duì) 應(yīng)的同步信息和重建信息之前先對(duì)所述多個(gè)子圖像及其對(duì)應(yīng)的同步信息和重 建信息進(jìn)行編碼,所述編碼具體為利用多個(gè)編碼器同時(shí)對(duì)所述分割后的多 路子圖像及其對(duì)應(yīng)的同步信息和重建信息進(jìn)行編碼;所述同步過(guò)程中接收所述子圖像、同步信息和重建信息具體為利用多 個(gè)解碼器同時(shí)對(duì)接收到的所述編碼后的信息進(jìn)行解碼。
8、 如權(quán)利要求5所述的方法,其特征在于,所述生成多個(gè)子圖像的多個(gè) 同步信息具體為生成所述寬景視頻圖像數(shù)據(jù)時(shí)的時(shí)間戳,或者,生成自定 義的序號(hào),屬于同 一寬景視頻圖l象數(shù)據(jù)分割后的多個(gè)子圖像的序號(hào)相同。
9、 一種視頻圖像數(shù)據(jù)處理裝置,其特征在于,包括 數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息; 數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)重組單元,用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多 路視頻圖像數(shù)據(jù);多個(gè)數(shù)據(jù)輸出接口,與外部顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單元處 理得到的視頻圖像數(shù)據(jù)傳輸給所述顯示設(shè)備。
10、 如權(quán)利要求9所述的裝置,其特征在于,所述多路相互關(guān)聯(lián)的視頻 圖像數(shù)據(jù)及關(guān)聯(lián)信息來(lái)自外部通信網(wǎng)絡(luò),所述視頻圖像數(shù)據(jù)輸入接口為 ISDN、 El、 V35、基于包交換的以太網(wǎng)接口或基于無(wú)線連接的無(wú)線端口。
11、 如權(quán)利要求9所述的裝置,其特征在于,還包括數(shù)據(jù)解碼器,當(dāng)所述數(shù)據(jù)輸入接口接收到的視頻圖像數(shù)據(jù)為經(jīng)過(guò)編碼后 的視頻圖像數(shù)據(jù)時(shí),對(duì)視頻圖像數(shù)據(jù)進(jìn)行解碼,并提供給所述數(shù)據(jù)組合單元。
12、 如權(quán)利要求9所述的裝置,其特征在于,所述關(guān)聯(lián)信息包括各路 視頻圖像的物理位置關(guān)系信息和時(shí)間戳信息。
13、 一種視頻圖像數(shù)據(jù)處理裝置,其特征在于,包括 數(shù)據(jù)輸入接口 ,用于獲取多臺(tái)攝像機(jī)采集的多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)重組單元,用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多 路視頻圖像數(shù)據(jù);數(shù)據(jù)發(fā)送單元,用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù) 通過(guò)通信網(wǎng)絡(luò)發(fā)送給遠(yuǎn)端的視頻會(huì)議設(shè)備,以使該視頻會(huì)議設(shè)備通過(guò)相應(yīng)的 顯示設(shè)備顯示。
14、 如權(quán)利要求13所述的裝置,其特征在于,所述數(shù)據(jù)重組單元生成的 所述多路視頻圖像數(shù)據(jù)包括所述寬景視頻圖像重組后的各個(gè)子圖像及與各 子圖像對(duì)應(yīng)的同步信息和重組信息。
15、 如權(quán)利要求13所述的裝置,其特征在于,還包括 數(shù)據(jù)編碼器,用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)進(jìn)行編碼后,提供給所述數(shù)據(jù)發(fā)送單元。
16、 如權(quán)利要求15所述的裝置,其特征在于,所述數(shù)據(jù)編碼器的個(gè)數(shù)為 多個(gè),多個(gè)數(shù)據(jù)編碼器同時(shí)對(duì)多路視頻圖像數(shù)據(jù)進(jìn)行編碼。
17、 一種視頻圖像數(shù)據(jù)處理裝置,其特征在于,包括 數(shù)據(jù)輸入接口,用于獲取編碼后的多路視頻圖像數(shù)據(jù); 多個(gè)數(shù)據(jù)解碼器,同時(shí)對(duì)編碼后的多路視頻圖像數(shù)據(jù)進(jìn)行解碼,解碼后的多路視頻圖像數(shù)據(jù)包含所述寬景視頻圖像分割成的多個(gè)子圖像及與其相對(duì) 應(yīng)的同步信息和重建信息;數(shù)據(jù)同步單元,將所述解碼后的子圖^^根據(jù)與其對(duì)應(yīng)的同步信息進(jìn)行歸數(shù)據(jù)重建單元,根據(jù)所述重建信息對(duì)所述歸類后的子圖像進(jìn)行重建,得 到多路視頻圖像數(shù)據(jù),其中各路視頻圖像數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列;多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重建單 元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
18、 一種視頻會(huì)議系統(tǒng),其特征在于,包括數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息; 數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)發(fā)送單元,用于將所述寬景視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送; 數(shù)據(jù)接收單元,用于接收承載于通信網(wǎng)絡(luò)的寬景視頻圖像數(shù)據(jù); 數(shù)據(jù)重組單元,用于將所述數(shù)據(jù)接收單元接收的所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù);多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
19、 如權(quán)利要求18所述的系統(tǒng),其特征在于,還包括數(shù)據(jù)編碼器,用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù)進(jìn) 行編碼后,提供給所述數(shù)據(jù)發(fā)送單元;數(shù)據(jù)解碼器,用于將所述數(shù)據(jù)接收單元接收的寬景視頻圖像數(shù)據(jù)進(jìn)行解 碼后,提供給所述數(shù)據(jù)重組單元。
20、 一種一見頻會(huì)議系統(tǒng),其特征在于,包括數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息; 數(shù)據(jù)發(fā)送單元,用于將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息通 過(guò)通信網(wǎng)絡(luò)發(fā)送;數(shù)據(jù)接收單元,用于接收承載于通信網(wǎng)絡(luò)的所述多路相互關(guān)聯(lián)的視頻圖 像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)重組單元,用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多 路視頻圖像數(shù)據(jù);多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單 元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
21、 如權(quán)利要求20所述的系統(tǒng),其特征在于,還包括數(shù)據(jù)編碼器,用于將所述數(shù)據(jù)輸入接口獲取的多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)及關(guān)聯(lián)信息進(jìn)行編碼后,提供給所述數(shù)據(jù)發(fā)送單元;數(shù)據(jù)解碼器,用于將所述數(shù)據(jù)接收單元接收的多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)及關(guān)聯(lián)信息進(jìn)行解碼后,提供給所述數(shù)據(jù)組合單元。
22、 一種視頻會(huì)議系統(tǒng),其特征在于,包括數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息; 數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)重組單元,用于將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù);數(shù)據(jù)發(fā)送單元,用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送;數(shù)據(jù)接收單元,用于接收承載于通信網(wǎng)絡(luò)的所述多路視頻圖像數(shù)據(jù); 多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)接收單元接收到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
23、 如權(quán)利要求22所述的系統(tǒng),其特征在于,還包括 數(shù)據(jù)編碼器,用于將所述數(shù)據(jù)重組單元重組得到的多路視頻圖像數(shù)據(jù)進(jìn)行編碼后,提供給所述數(shù)據(jù)發(fā)送單元;數(shù)據(jù)解碼器,用于將所述數(shù)據(jù)接收單元接收的多路視頻圖像數(shù)據(jù)進(jìn)行解 碼后,提供給所述數(shù)據(jù)輸出接口。
24、 如權(quán)利要求23所述的系統(tǒng),其特征在于,所述數(shù)據(jù)重組單元重組得 到的各路視頻圖像數(shù)據(jù)包括所述寬景視頻圖像重組后的每個(gè)子圖像及與其 對(duì)應(yīng)的同步信息和重組信息;所述數(shù)據(jù)編碼器和數(shù)據(jù)解碼器的個(gè)數(shù)均為多個(gè),多個(gè)數(shù)據(jù)編碼器同時(shí)對(duì) 多路視頻圖像數(shù)據(jù)進(jìn)行編碼,多個(gè)數(shù)據(jù)解碼器同時(shí)對(duì)多路視頻圖像數(shù)據(jù)進(jìn)行 解碼;所述系統(tǒng)還包括數(shù)據(jù)同步單元,將所述解碼后的子圖像根據(jù)與其對(duì)應(yīng)的同步信息進(jìn)行歸類;數(shù)據(jù)重建單元,根據(jù)所述重建信息對(duì)所述歸類后的子圖像進(jìn)行重建,得 到多路視頻圖像數(shù)據(jù),提供給多個(gè)數(shù)據(jù)輸出接口 ,其中各路視頻圖像數(shù)據(jù)按 照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
25、 一種視頻會(huì)議終端,其特征在于,包括數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)收發(fā)單元,用于將所述寬景視頻圖像數(shù)據(jù)通過(guò)通信網(wǎng)絡(luò)發(fā)送給遠(yuǎn)端 的視頻會(huì)議設(shè)備,以及,接收所述視頻會(huì)議設(shè)備通過(guò)所述通信網(wǎng)絡(luò)發(fā)送的單 路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)重組單元,用于將所述數(shù)據(jù)收發(fā)單元接收到的寬景視頻圖像數(shù)據(jù)重 組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù);多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單 元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
26、 一種視頻會(huì)議終端,其特征在于,包括數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)收發(fā)單元,用于將所述多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息通過(guò)通信網(wǎng)絡(luò) 發(fā)送給遠(yuǎn)端的視頻會(huì)議設(shè)備,以及,接收所述視頻會(huì)議設(shè)備通過(guò)所述通信網(wǎng)絡(luò)發(fā)送的多路視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)重組單元,用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù) 重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù);多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)重組單 元處理得到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
27、 一種視頻會(huì)議終端,其特征在于,包括數(shù)據(jù)輸入接口 ,用于獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;數(shù)據(jù)組合單元,用于利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像 數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù);數(shù)據(jù)重組單元,用于將所述數(shù)據(jù)組合單元處理得到的寬景視頻圖像數(shù)據(jù) 重組成適應(yīng)顯示需求的多路視頻圖像數(shù)據(jù);數(shù)據(jù)收發(fā)單元,用于將所述數(shù)據(jù)重組單元處理得到的多路視頻圖像數(shù)據(jù) 通過(guò)通信網(wǎng)絡(luò)發(fā)送給遠(yuǎn)端的視頻會(huì)議設(shè)備,以及,接收所述視頻會(huì)議設(shè)備通 過(guò)所述通信網(wǎng)絡(luò)發(fā)送的經(jīng)過(guò)重組得到的多路視頻圖像數(shù)據(jù);多個(gè)數(shù)據(jù)輸出接口,與外部多個(gè)顯示設(shè)備相連,用于將所述數(shù)據(jù)收發(fā)單 元接收到的各路視頻圖像數(shù)據(jù)分別傳輸給相應(yīng)的顯示設(shè)備。
28、 如權(quán)利要求27所述的終端,其特征在于,還包括多個(gè)數(shù)據(jù)編碼器,用于將所述數(shù)據(jù)重組單元重組得到的包含的多路視頻 圖像數(shù)據(jù)進(jìn)行編碼后,提供給所述數(shù)據(jù)收發(fā)單元,其中,各路視頻圖像數(shù)據(jù) 包括所述寬景視頻圖像分割后的每個(gè)子圖像及與其對(duì)應(yīng)的同步信息和重組信 息的;數(shù)據(jù)解碼器,用于將所述數(shù)據(jù)收發(fā)單元接收的所述多路視頻圖像數(shù)據(jù)進(jìn) 行解碼后,提供給數(shù)據(jù)同步單元;數(shù)據(jù)同步單元,用于將經(jīng)過(guò)所述數(shù)據(jù)解碼器解碼后的子圖<|^艮據(jù)與其對(duì)應(yīng)的同步信息進(jìn)行歸類;數(shù)據(jù)重建單元,用于根據(jù)所述重建信息對(duì)所述歸類后的子圖像進(jìn)行重建, 得到多路視頻圖像數(shù)據(jù),提供給所述多個(gè)數(shù)據(jù)輸出接口 ,其中各路視頻圖像 數(shù)據(jù)按照其在所述寬景視頻圖像數(shù)據(jù)中的位置排列。
全文摘要
本發(fā)明實(shí)施例公開了一種視頻圖像數(shù)據(jù)處理方法和裝置,所述方法包括獲取多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)及關(guān)聯(lián)信息;利用所述關(guān)聯(lián)信息將所述多路相互關(guān)聯(lián)的視頻圖像數(shù)據(jù)組合成單路寬景視頻圖像數(shù)據(jù);將所述寬景視頻圖像數(shù)據(jù)重組成適應(yīng)多個(gè)顯示設(shè)備顯示的多路視頻圖像數(shù)據(jù)后,分別發(fā)送給各顯示設(shè)備顯示。本發(fā)明實(shí)施例同時(shí)還公開了視頻會(huì)議系統(tǒng)及終端。本發(fā)明實(shí)施例將多路視頻圖像數(shù)據(jù)處理成單路寬景視頻圖像數(shù)據(jù)的過(guò)程,能夠消除各視頻圖像數(shù)據(jù)之間存在的重疊現(xiàn)象,因此,可以允許攝像機(jī)攝取圖像存在重疊現(xiàn)象,從而降低了對(duì)攝像機(jī)擺放位置及使用者與攝像機(jī)組之間的距離的要求。
文檔編號(hào)H04N7/15GK101668160SQ20091016196
公開日2010年3月10日 申請(qǐng)日期2009年9月10日 優(yōu)先權(quán)日2009年9月10日
發(fā)明者源 劉, 凱 李, 靜 王, 嵩 趙, 魏小霞 申請(qǐng)人:深圳華為通信技術(shù)有限公司