用于視頻會議呈現(xiàn)的方法、裝置和系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及通信領(lǐng)域，并且更具體地，涉及一種用于視頻會議呈現(xiàn)的方法、裝置和 系統(tǒng)。
【背景技術(shù)】
[0002] 在目前的各類多點(diǎn)視頻通訊中，視頻會議中視頻圖像的組成都基本是以攝像頭拍 攝區(qū)域?yàn)榛締挝?，進(jìn)行視頻圖像的拼接處理或者直接傳輸發(fā)送給會場屏幕，所以在各個 會場屏幕上看到的內(nèi)容，通常都是要么看到1個攝像頭拍攝的畫面，要么就是多個攝像頭 拍攝組合的畫面效果。這樣帶來的問題是，會議中信息的冗余呈現(xiàn)，以及會議焦點(diǎn)人物信息 和非焦點(diǎn)人物信息會分散在屏幕的不同區(qū)域，沒有在屏幕上進(jìn)行信息焦點(diǎn)的布局區(qū)分，每 個屏幕區(qū)域都可能會出現(xiàn)會議當(dāng)前的焦點(diǎn)人物信息，這樣帶來的溝通的焦點(diǎn)不斷變化，非 焦點(diǎn)信息甚至占據(jù)了屏幕的中間區(qū)域等，這樣會影響溝通效果。
[0003] 觀看內(nèi)容的控制方式上，通常有以下的常見的方式：聲控切換和非聲控切換（手 動切換）機(jī)制。在聲控切換的機(jī)制下，讓屏幕圖像的頻繁無序切換，屏幕區(qū)域沒有焦點(diǎn)區(qū) 分；在非聲控的機(jī)制下，每個會場都需要有專人來隨時切換屏幕內(nèi)容實(shí)時滿足觀看的需要， 所以觀看畫面的效率不是很高，特別是在偏討論和協(xié)作的會議，會議的焦點(diǎn)變化比較快，所 以有時候甚至出現(xiàn)一些極端的觀看效果情況，例如發(fā)言人和材料并沒有合理的出現(xiàn)，"只聞 其聲不見其人"的效果。

【發(fā)明內(nèi)容】

[0004] 本發(fā)明實(shí)施例提供了一種用于視頻會議呈現(xiàn)的方法、裝置和系統(tǒng)，能夠使得顯示 區(qū)域的信息顯示更為合理，避免用戶手動去選擇調(diào)整，讓會議更加高效。
[0005] 第一方面，提供了一種用于視頻會議呈現(xiàn)的方法，包括：
[0006] 接收至少一個發(fā)送端點(diǎn)中每個發(fā)送端點(diǎn)的視頻流；
[0007] 根據(jù)所述每個發(fā)送端點(diǎn)的視頻流，對所述每個發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn) 行等級劃分，以確定所述每個發(fā)送端點(diǎn)對應(yīng)的視頻內(nèi)容等級，其中，所述至少一個發(fā)送端點(diǎn) 對應(yīng)的視頻內(nèi)容等級包括多個視頻內(nèi)容等級；
[0008] 確定視頻布局，所述視頻布局用于指示所述多個視頻內(nèi)容等級中每個視頻內(nèi)容等 級對應(yīng)的顯示區(qū)域，其中，所述顯示區(qū)域是包含于接收端點(diǎn)的多個顯示區(qū)域中的顯示區(qū)域， 所述視頻內(nèi)容等級與所述顯示區(qū)域一一對應(yīng)；
[0009] 根據(jù)所述多個視頻內(nèi)容等級中每一個視頻內(nèi)容等級對應(yīng)的視頻內(nèi)容以及所述視 頻布局，確定所述多個顯示區(qū)域中每一個顯示區(qū)域?qū)?yīng)的待呈現(xiàn)視頻內(nèi)容，以便于通過所 述多個顯示區(qū)域中每個顯示區(qū)域呈現(xiàn)對應(yīng)的待呈現(xiàn)視頻內(nèi)容，其中，不同的顯示區(qū)域?qū)?yīng) 的待呈現(xiàn)視頻內(nèi)容包括不同的視頻內(nèi)容等級對應(yīng)的視頻內(nèi)容。
[0010] 結(jié)合第一方面，在第一方面的第一種可能的實(shí)現(xiàn)方式中，所述方法由控制設(shè)備執(zhí) 行，所述方法還包括： toon] 向所述接收端點(diǎn)發(fā)送所述多個顯示區(qū)域中每個顯示區(qū)域?qū)?yīng)的待呈現(xiàn)視頻內(nèi)容 以及指示信息，其中，所述指示信息用于指示所述顯示區(qū)域與所述待呈現(xiàn)視頻內(nèi)容的對應(yīng) 關(guān)系，以便于所述接收端點(diǎn)通過所述多個顯示區(qū)域中每個顯示區(qū)域呈現(xiàn)對應(yīng)的待呈現(xiàn)視頻 內(nèi)容。
[0012] 結(jié)合第一方面，在第一方面的第二種可能的實(shí)現(xiàn)方式中，所述方法由所述接收端 點(diǎn)執(zhí)行，所述方法還包括：
[0013] 所述接收端點(diǎn)通過所述多個顯示區(qū)域中每個顯示區(qū)域呈現(xiàn)對應(yīng)的待呈現(xiàn)視頻內(nèi) 容。
[0014] 結(jié)合第一方面或第一方面的第一種或第二種可能的實(shí)現(xiàn)方式，在第一方面的第三 種可能的實(shí)現(xiàn)方式中，所述方法還包括：接收所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端 點(diǎn)的事件信息；
[0015] 所述根據(jù)所述每個發(fā)送端點(diǎn)的視頻流，對所述每個發(fā)送端點(diǎn)的視頻流中的視頻內(nèi) 容進(jìn)行等級劃分，包括：
[0016] 根據(jù)所述全部或部分發(fā)送端點(diǎn)的事件信息以及根據(jù)所述全部或部分發(fā)送端點(diǎn)的 視頻流，對所述全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行等級劃分。
[0017] 結(jié)合第一方面的第三種可能的實(shí)現(xiàn)方式，在第一方面的第四種可能的實(shí)現(xiàn)方式 中，所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端點(diǎn)的事件信息用于表明所述全部或部分發(fā) 送端點(diǎn)的參與人事件；
[0018] 所述根據(jù)所述全部或部分發(fā)送端點(diǎn)的事件信息以及根據(jù)所述全部或部分發(fā)送端 點(diǎn)的視頻流，對所述全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行等級劃分，包括：
[0019] 以人為單位對所述全部或部分發(fā)送端點(diǎn)的視頻流進(jìn)行視頻分割，以得到所述全部 或部分發(fā)送端點(diǎn)的各個參與人的視頻內(nèi)容；
[0020] 根據(jù)所述全部或部分發(fā)送端點(diǎn)的參與人事件，對所述全部或部分端點(diǎn)的各個參與 人的視頻內(nèi)容進(jìn)行等級劃分，以確定所述各個參與人的視頻內(nèi)容的視頻內(nèi)容等級。
[0021] 結(jié)合第一方面的第四種可能的實(shí)現(xiàn)方式，在第一方面的第五種可能的實(shí)現(xiàn)方式 中，所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端點(diǎn)的事件信息用于表明所述全部或部分發(fā) 送端點(diǎn)的主講人事件、協(xié)作人事件、發(fā)言者事件或者材料分享者事件。
[0022] 結(jié)合第一方面的第三種至第五種中任一種可能的實(shí)現(xiàn)方式，在第一方面的第六種 可能的實(shí)現(xiàn)方式中，所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端點(diǎn)的事件信息用于表明所 述全部或部分發(fā)送端點(diǎn)需要分享數(shù)據(jù)文檔，所述全部或部分發(fā)送端點(diǎn)的視頻流包括數(shù)據(jù)文 檔；
[0023] 所述根據(jù)所述全部或部分發(fā)送端點(diǎn)的事件信息以及根據(jù)所述全部或部分發(fā)送端 點(diǎn)的視頻流，對所述全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行等級劃分，包括：
[0024] 根據(jù)所述事件信息，分割出所述全部或部分發(fā)送端點(diǎn)的視頻流中的數(shù)據(jù)文檔，以 及對所述全部或部分發(fā)送端點(diǎn)的分割出的數(shù)據(jù)文檔進(jìn)行等級劃分，以確定所述數(shù)據(jù)文檔的 視頻內(nèi)容等級。
[0025] 結(jié)合第一方面的第三種至第六種中任一種可能的實(shí)現(xiàn)方式，在第一方面的第七種 可能的實(shí)現(xiàn)方式中，所述根據(jù)所述全部或部分發(fā)送端點(diǎn)的事件信息以及根據(jù)所述全部或部 分發(fā)送端點(diǎn)的視頻流，對所述全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行等級劃分之 后，所述方法還包括：
[0026] 若所述全部或部分發(fā)送端點(diǎn)中的任一發(fā)送端點(diǎn)的事件信息發(fā)生變化，動態(tài)調(diào)整全 部或部分發(fā)送端點(diǎn)對應(yīng)的視頻內(nèi)容等級。
[0027] 結(jié)合第一方面或第一方面的第一種或第二種可能的實(shí)現(xiàn)方式，在第一方面的第八 種可能的實(shí)現(xiàn)方式中，根據(jù)所述每個發(fā)送端點(diǎn)的視頻流，對所述每個發(fā)送端點(diǎn)的視頻流中 的視頻內(nèi)容進(jìn)行等級劃分，包括：
[0028] 對所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行事 件判斷，并在事件判斷后對所述全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行等級劃 分。
[0029] 結(jié)合第一方面的第八種可能的實(shí)現(xiàn)方式，在第一方面的第九種可能的實(shí)現(xiàn)方式 中，所述對所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行事件 判斷，并在事件判斷后對所述全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行等級劃分， 包括：
[0030] 以人為單位對所述全部或部分發(fā)送端點(diǎn)的視頻流進(jìn)行視頻分割，以得到所述全部 或部分發(fā)送端點(diǎn)的各個參與人的視頻內(nèi)容；
[0031] 對所述各個參與人的視頻內(nèi)容進(jìn)行事件判斷，并在事件判斷后對所述各個參與人 的視頻內(nèi)容進(jìn)行等級劃分，以確定所述各個參與人的視頻內(nèi)容的視頻內(nèi)容等級。
[0032] 結(jié)合第一方面的第九種可能的實(shí)現(xiàn)方式，在第一方面的第十種可能的實(shí)現(xiàn)方式 中，所述對所述各個參與人的視頻內(nèi)容進(jìn)行事件判斷，包括：
[0033] 將所述參與人的視頻內(nèi)容判斷為主講人的視頻內(nèi)容、協(xié)作人的視頻內(nèi)容、發(fā)言者 的視頻內(nèi)容或者材料分享者的視頻內(nèi)容。
[0034] 結(jié)合第一方面的第八種至第十種中任一種可能的實(shí)現(xiàn)方式，在第一方面的第十一 種可能的實(shí)現(xiàn)方式中，所述對所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端點(diǎn)的視頻流中的 視頻內(nèi)容進(jìn)行事件判斷，并在事件判斷后對所述全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi) 容進(jìn)行等級劃分，包括：
[0035] 對所述全部或部分發(fā)送端點(diǎn)的視頻流進(jìn)行視頻分割，確定所述全部或部分發(fā)送端 點(diǎn)中的視頻流存在數(shù)據(jù)文檔；
[0036] 對所述全部或部分發(fā)送端點(diǎn)分割后的視頻流中的數(shù)據(jù)文檔進(jìn)行等級劃分，以確定 所述數(shù)據(jù)文檔的視頻內(nèi)容等級。
[0037] 結(jié)合第一方面或第一方面的第一種至第十一種中任一種可能的實(shí)現(xiàn)方式，在第一 方面的第十二種可能的實(shí)現(xiàn)方式中，所述對所述每個發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行 等級劃分，包括：
[0038] 對所述每個發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn)行等級劃分；其中，所述每個發(fā)送 端點(diǎn)所對應(yīng)的視頻內(nèi)容等級與其他發(fā)送端點(diǎn)所對應(yīng)的視頻內(nèi)容等級不重疊。
[0039] 結(jié)合第一方面或第一方面的第一種至第十二種中任一種可能的實(shí)現(xiàn)方式，在第一 方面的第十三種可能的實(shí)現(xiàn)方式中，所述確定多個顯示區(qū)域中每一個顯示區(qū)域?qū)?yīng)的待呈 現(xiàn)視頻內(nèi)容，包括：
[0040] 根據(jù)所述多個視頻內(nèi)容等級中每一個視頻內(nèi)容等級對應(yīng)的視頻內(nèi)容以及所述視 頻布局，生成全部或部分顯示區(qū)域?qū)?yīng)的待呈現(xiàn)視頻內(nèi)容，其中，通過尺寸變換和/或顏色 標(biāo)記的方式設(shè)置所述全部或部分顯示區(qū)域?qū)?yīng)的待呈現(xiàn)視頻內(nèi)容中的全部或部分內(nèi)容。
[0041] 第二方面，提供了一種用于視頻會議呈現(xiàn)的裝置，包括：
[0042] 接收單元，用于接收至少一個發(fā)送端點(diǎn)中每個發(fā)送端點(diǎn)的視頻流；
[0043] 第一確定單元，用于根據(jù)所述每個發(fā)送端點(diǎn)的視頻流，對所述每個發(fā)送端點(diǎn)的視 頻流中的視頻內(nèi)容進(jìn)行等級劃分，以確定所述每個發(fā)送端點(diǎn)對應(yīng)的視頻內(nèi)容等級，其中，所 述至少一個發(fā)送端點(diǎn)對應(yīng)的視頻內(nèi)容等級包括多個視頻內(nèi)容等級；
[0044] 第二確定單元，用于確定視頻布局，所述視頻布局用于指示所述多個視頻內(nèi)容等 級中每個視頻內(nèi)容等級對應(yīng)的顯示區(qū)域，其中，所述顯示區(qū)域是包含于接收端點(diǎn)的多個顯 示區(qū)域中的顯示區(qū)域，所述視頻內(nèi)容等級與所述顯示區(qū)域一一對應(yīng)；
[0045] 第三確定單元，用于根據(jù)所述多個視頻內(nèi)容等級中每一個視頻內(nèi)容等級對應(yīng)的視 頻內(nèi)容以及所述視頻布局，確定所述多個顯示區(qū)域中每一個顯示區(qū)域?qū)?yīng)的待呈現(xiàn)視頻內(nèi) 容，以便于通過所述多個顯示區(qū)域中每個顯示區(qū)域呈現(xiàn)對應(yīng)的待呈現(xiàn)視頻內(nèi)容，其中，不同 的顯示區(qū)域?qū)?yīng)的待呈現(xiàn)視頻內(nèi)容包括不同的視頻內(nèi)容等級對應(yīng)的視頻內(nèi)容。
[0046] 結(jié)合第二方面，在第二方面的第一種可能的實(shí)現(xiàn)方式中，所述裝置為控制設(shè)備，所 述裝置還包括：
[0047] 發(fā)送單元，用于向所述接收端點(diǎn)發(fā)送所述多個顯示區(qū)域中每個顯示區(qū)域?qū)?yīng)的待 呈現(xiàn)視頻內(nèi)容以及指示信息，其中，所述指示信息用于指示所述顯示區(qū)域與所述待呈現(xiàn)視 頻內(nèi)容的對應(yīng)關(guān)系，以便于所述接收端點(diǎn)通過所述多個顯示區(qū)域中每個顯示區(qū)域呈現(xiàn)對應(yīng) 的待呈現(xiàn)視頻內(nèi)容。
[0048] 結(jié)合第二方面，在第二方面的第二種可能的實(shí)現(xiàn)方式中，所述裝置為所述接收端 點(diǎn)，所述裝置還包括：
[0049] 呈現(xiàn)單元，用于通過所述多個顯示區(qū)域中每個顯示區(qū)域呈現(xiàn)對應(yīng)的待呈現(xiàn)視頻內(nèi) 容。
[0050] 結(jié)合第二方面或第二方面的第一種或第二種可能的實(shí)現(xiàn)方式，在第二方面的第三 種可能的實(shí)現(xiàn)方式中，所述接收單元還用于：接收所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā) 送端點(diǎn)的事件信息；
[0051] 所述第一確定單元具體用于：根據(jù)所述全部或部分發(fā)送端點(diǎn)的事件信息以及根據(jù) 所述全部或部分發(fā)送端點(diǎn)的視頻流，對所述全部或部分發(fā)送端點(diǎn)的視頻流中的視頻內(nèi)容進(jìn) 行等級劃分。
[0052] 結(jié)合第二方面的第三種可能的實(shí)現(xiàn)方式，在第二方面的第四種可能的實(shí)現(xiàn)方式 中，所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端點(diǎn)的事件信息用于表明所述全部或部分發(fā) 送端點(diǎn)的參與人事件；
[0053] 所述第一確定單元具體用于：
[0054] 以人為單位對所述全部或部分發(fā)送端點(diǎn)的視頻流進(jìn)行視頻分割，以得到所述全部 或部分發(fā)送端點(diǎn)的各個參與人的視頻內(nèi)容；
[0055] 根據(jù)所述全部或部分發(fā)送端點(diǎn)的參與人事件，對所述全部或部分端點(diǎn)的各個參與 人的視頻內(nèi)容進(jìn)行等級劃分，以確定所述各個參與人的視頻內(nèi)容的視頻內(nèi)容等級。
[0056] 結(jié)合第二方面的第四種可能的實(shí)現(xiàn)方式，在第二方面的第五種可能的實(shí)現(xiàn)方式 中，所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端點(diǎn)的事件信息用于表明所述全部或部分發(fā) 送端點(diǎn)的主講人事件、協(xié)作人事件、發(fā)言者事件或者材料分享者事件。
[0057] 結(jié)合第二方面的第三種至第五種中任一種可能的實(shí)現(xiàn)方式，在第二方面的第六種 可能的實(shí)現(xiàn)方式中，所述至少一個發(fā)送端點(diǎn)中全部或部分發(fā)送端點(diǎn)的事件信息用于表明所 述全部或部分發(fā)送端點(diǎn)需要分享數(shù)據(jù)文檔，所述全部或部分發(fā)送端點(diǎn)的視頻流包括數(shù)據(jù)文 檔；
[0058] 所述第一確定單元具體用于：
[00