一種內(nèi)容驅(qū)動的智能家居控制方法
【專利摘要】本發(fā)明提供了一種以內(nèi)容驅(qū)動的智能家居控制方法，所述方法通過基于視頻中關(guān)鍵幀的圖像主色調(diào)和/或場景情節(jié)特征對視頻碎片進行標記，或者依據(jù)音頻數(shù)據(jù)特征進行標記，添加相應的標簽，每次播放這些多媒體內(nèi)容時，標記的這些標簽都會驅(qū)動智能家居設(shè)備工作。通過本發(fā)明的方法進行智能家居的驅(qū)動控制可以大大簡化人為控制這一繁瑣的過程，并且本發(fā)明使得控制系統(tǒng)更加靈活。
【專利說明】
-種內(nèi)容驅(qū)動的智能家居控制方法
技術(shù)領(lǐng)域
[0001] 本發(fā)明設(shè)及智能家居技術(shù)領(lǐng)域，具體地，設(shè)及一種內(nèi)容驅(qū)動的智能家居控制方法。
【背景技術(shù)】
[0002] 當人們看到各種視頻感受各種音響時，會不自覺的把運些視覺聽覺感受和其它器 官的感受聯(lián)系起來，運種現(xiàn)象稱為聯(lián)覺，屬于一種異質(zhì)異構(gòu)多一同態(tài)對應現(xiàn)象。一般情況 下，高音區(qū)的音符經(jīng)常和明亮的視覺感受、積極或快樂的情態(tài)感受等聯(lián)系在一起，低音區(qū)的 音符經(jīng)常和昏暗的視覺感受、消沉或哀傷的情態(tài)感受等聯(lián)系在一起；舒緩的節(jié)奏容易讓人 感受到開闊的空間或較為平靜的情緒，而急促的節(jié)奏則容易讓人感到空間狹窄、情緒躁動 等等。
[0003] 隨著智能家居的普及，越來越多的智能設(shè)備W不同的方式影響著我們的生活，例 如西安大雁塔景區(qū)的"音樂噴泉"利用音樂的音調(diào)來控制噴泉的舞姿及高度，Philips公 司推出的智能燈具產(chǎn)品hue可W根據(jù)不同的音樂或不同彩色的圖片控制燈泡的顏色。但 是運些智能家居的控制形式大多需要人為手動的添加控制程序，或者是簡單的根據(jù)聲音的 響度或音調(diào)的高低來控制，運樣做的局限性在于控制靈活性不夠高，重復利用率不高，不夠 智能。再例如在某些晚會場合，音響師和燈光師需要根據(jù)每個表演節(jié)目的不同而做出相應 的音響和燈光效果，由于表演節(jié)目過多或者節(jié)目經(jīng)常變化導致音響師和燈光師的工作量劇 增。

【發(fā)明內(nèi)容】

[0004] 針對現(xiàn)有技術(shù)中的缺陷，本發(fā)明的目的是提供一種內(nèi)容驅(qū)動的智能家居控制方 法，從而解決上述存在的問題，使得控制系統(tǒng)更加靈活。
[0005] 為實現(xiàn)上述的目的，本發(fā)明采用的技術(shù)方案是：一種W內(nèi)容驅(qū)動的智能家居控制 方法，通過在多媒體內(nèi)容中添加相應的標簽，通過運些標簽內(nèi)容來驅(qū)動驅(qū)動智能家居控制 系統(tǒng)，有利于自動控制智能家居系統(tǒng)。
[0006] 具體的，所述方法通過基于視頻中關(guān)鍵帖的圖像主色調(diào)和/或場景情節(jié)特征對 視頻碎片進行標記，或者依據(jù)音頻數(shù)據(jù)特征進行標記，添加相應的標簽，每次播放運些多媒 體內(nèi)容時，標記的運些標簽都會驅(qū)動智能家居設(shè)備工作。
[0007] 優(yōu)選地，所述通過基于視頻中關(guān)鍵帖的圖像主色調(diào)對視頻碎片進行標記，具體為： 提取視頻MPU中關(guān)鍵帖的主色調(diào)并對其進行標記，利用MPUBox中預留的reserved字段定 義colo;r_tag，對于不同的顏色可W用不一樣的colo;r_tag。
[0008] 進一步的，通過視頻MPU中關(guān)鍵主色調(diào)分析而對color_tag進行賦值，或者通過算 法自動對MPU的主色調(diào)提取賦值。
[0009] 進一步的，將MPUBox中的reserved的化it用于colo;r_tag，該bit位根據(jù)需要可 擴展。
[0010] 優(yōu)選地，所述通過基于視頻中場景情節(jié)特征對視頻碎片進行標記，具體為：提取視 頻中某段場景的模式，進而對MPU進行標記，將MPUBox中的reserved字段定義為scene_ tagescene_tag可W通過人工定義的方式進行賦值，也可W通過不同算法，如圖像視頻識別 技術(shù)自動進行賦值。
[0011] 優(yōu)選地，所述依據(jù)音頻數(shù)據(jù)特征進行標記，具體為：提取音頻MPU中的音調(diào)特征， 進而對MPU進行標記，將MPUBox中的reserved字段定義為tone_tag。tone_tag可W通過 人工定義的方式進行賦值，也可W通過不同算法，如聲音識別技術(shù)自動進行賦值。
[0012] 本發(fā)明在使用的多媒體內(nèi)容中添加相應的標簽，每次播放運些多媒體內(nèi)容時運些 標簽都會驅(qū)動智能設(shè)備工作。例如對于某段電影視頻節(jié)目，每個場景的情節(jié)可能發(fā)生變化， 有時比較浪漫有時比較憂傷，對于每個鏡頭的主色調(diào)也可能出現(xiàn)變化，有時主色調(diào)為藍色 有時主色調(diào)為紅色。本發(fā)明可W根據(jù)運些圖像特征和視頻場景特征為每段小的視頻片段增 加相應的標簽。
[0013] 與現(xiàn)有技術(shù)相比，本發(fā)明具有如下的有益效果：
[0014] 本發(fā)明提供了一種W內(nèi)容驅(qū)動的智能家居控制方法，可W通過多媒體內(nèi)容自動的 驅(qū)動智能家居控制系統(tǒng)，目前大多數(shù)需要人為評價多媒體內(nèi)容之后再去手動的控制智能系 統(tǒng)，通過本發(fā)明的內(nèi)容驅(qū)動控制智能家居系統(tǒng)可W大大簡化人為控制運一繁瑣的過程，并 且本發(fā)明使得控制系統(tǒng)更加靈活。
【附圖說明】
[0015] 通過閱讀參照W下附圖對非限制性實施例所作的詳細描述，本發(fā)明的其它特征、 目的和優(yōu)點將會變得更明顯：
[0016] 圖1為本發(fā)明一實施例中利用MPU控制hue系統(tǒng)圖。
【具體實施方式】
[0017] 下面結(jié)合具體實施例對本發(fā)明進行詳細說明。W下實施例將有助于本領(lǐng)域的技術(shù) 人員進一步理解本發(fā)明，但不W任何形式限制本發(fā)明。應當指出的是，對本領(lǐng)域的普通技術(shù) 人員來說，在不脫離本發(fā)明構(gòu)思的前提下，還可W做出若干變形和改進。運些都屬于本發(fā)明 的保護范圍。
[001引 目前智能家居設(shè)備逐漸出現(xiàn)在每個人的家庭中，本發(fā)明W飛利浦（Philips)公司 推出的一款被稱為"世界上最聰明的L邸燈泡"的產(chǎn)品一一化ilips hue為例，給出如何對 視頻和音頻數(shù)據(jù)進行標記W驅(qū)動hue系統(tǒng)的方法。
[0019] 1.飛利浦hue簡介
[0020] 飛利浦hue它表上面看起來和普通的燈泡一樣，但是它可W通過橋接的方式連接 到家里的路由器從而讓用戶可W對照明進行更為個性化的控制。飛利浦hue應用了 L邸照 明技術(shù)和無線互聯(lián)技術(shù)，在提供L邸照明基礎(chǔ)之上，讓燈光在更多方面為人們的生活創(chuàng)造 便利一一通過手機定位功能，hue可W在回家或外出時，自動地開燈、關(guān)燈或是改變燈光顏 色。通過設(shè)置定時提醒功能，hue可W讓每天的生活更有規(guī)律：比如早上通過讓屋里的燈光 逐漸變亮，而晚上燈光會提醒人們?nèi)胨?。飛利浦hue可W提供"深淺不同的白色色調(diào)，從暖 色調(diào)到冷色調(diào)"，同時還有經(jīng)過預編程設(shè)置好的超過1600萬種顏色選擇（紅綠藍組合），同 時還提供了包括放松、閱讀、集中化及活力在內(nèi)的四種不同預設(shè)模式。為特定氛圍創(chuàng)建特定 燈光場景、遠程控制和監(jiān)視家中的燈光情況、設(shè)置計時器管理日常燈光需求、通過燈光助眠 或叫醒家人，運一切飛利浦hue都能幫你完成。除此之外，用戶甚至還可W使用設(shè)備中的某 張照片作為調(diào)色板來進行取色，并設(shè)置程序在一天的特定時間內(nèi)激活特定的顏色。
[0021] hue的功能可W不斷被豐富，有網(wǎng)絡(luò)平臺向開發(fā)者們開放API接口和軟件開發(fā)工 具包SDK,新的應用方案不斷誕生；而用戶也可W通過該平臺分享其個性化的燈光配方，已 經(jīng)有超過40個新的應用程序被開發(fā)出來。運些程序讓hue與更多的設(shè)備和應用程序相聯(lián)： 有的能夠用燈光的變化來顯示屯、跳；有的能夠讓人們通過聲音來控制燈光；有的還能和電 視屏幕的變化同步。
[0022] 本發(fā)明則通過多媒體內(nèi)容自動的驅(qū)動智能家居控制系統(tǒng)，比如上述飛利浦hue。
[0023] 本發(fā)明在使用的多媒體內(nèi)容中添加相應的標簽，每次播放運些多媒體內(nèi)容時運些 標簽都會驅(qū)動智能設(shè)備工作。具體說明如下。
[0024] 2.對媒體數(shù)據(jù)碎片進行標記
[00巧]在異構(gòu)網(wǎng)絡(luò)傳輸協(xié)議Mpeg media transport (MMT)中對所有媒體數(shù)據(jù)W碎片 化MPU格式進行封裝，每個MPU時間長度大約為0. 5秒，并且將多媒體音視頻數(shù)據(jù)的視頻 video和音頻audio分開封裝?；诖嗣襟w數(shù)據(jù)封裝格式，本發(fā)明提出可W按照如下幾種方 法對MPU進行標記。 陽0%] a)對視頻MPU按照關(guān)鍵帖主色調(diào)標記
[0027] 在化i 1 ips hue系統(tǒng)中，可W通過圖片的顏色來控制燈泡顏色的改變，所W本發(fā)明 可W提取視頻MPU中關(guān)鍵帖的主色調(diào)并對其進行標記，利用MPUBox中預留的reserved字 段化it定義colo;r_tag，對于不同的顏色可W用不一樣的colo;r_tag，如下表所示。
[0028]
[0029] colo;r_tag的取值，可W通過視頻MPU中關(guān)鍵主色調(diào)分析而對colo;r_tag進行賦 值，MPUBox要加入所需新屬性?；蛘咄ㄟ^算法自動對MPU的主色調(diào)提取賦值。目前本發(fā)明 將reserved的化it用于colo;r_tag，將來如果需要更多bit位，可W增加擴展。
[0030] b)對視頻MPU按照場景情節(jié)標記
[0031] 在化ilips hue系統(tǒng)中，可W根據(jù)生活中不同的氛圍呈現(xiàn)不同的燈光模式，所W 本發(fā)明可W提取視頻中某段場景的模式，例如是否屬于浪漫或者激烈等等模式，進而對MPU 進行標記。仿照上表，可W將MPUBox中的reserved字段定義為scene_tag，可W采用不同 的算法提取場景中的模式。
[0032]
[0033] c)對音頻MPU按照音調(diào)標記
[0034] 在化i 1 ips hue系統(tǒng)中，可W利用音樂音調(diào)的高低控制燈光模式，所W本發(fā)明可W 提取音頻MPU中的音調(diào)特征，進而對MPU進行標記。仿照上表，可W將MPUBox中的reserved 字段定義為tone_tag，可W采樣各種不同的算法提取音頻數(shù)據(jù)的音調(diào)。 陽035]由于在媒體內(nèi)容中加載了相應的scene_tag, tong_tag,當媒體內(nèi)容在正常播放 時，設(shè)備讀取到相應的新屬性后，會將此屬性信息傳送給照明的控制設(shè)備接口中。此時，照 明設(shè)備將根據(jù)接收到的屬性信息，解析出控制照明系統(tǒng)的指令和參數(shù)。從而實現(xiàn)燈光隨著 媒體內(nèi)容的播放而實時調(diào)節(jié)變化。
[0036] 運里W MPUBox為例，說明如何加入新的屬性，W實現(xiàn)媒體內(nèi)容與燈光的結(jié)合呈 現(xiàn)。但是實際應用中，新屬性可W根據(jù)實際需要加在其它信令位置。本發(fā)明也是W照明為 例，說明傳統(tǒng)的多媒體與智能家居如何結(jié)合。應用于本發(fā)明的思路和方法，也可W擴展應用 于其它智能家居，甚至智慧城市系統(tǒng)中。
[0037] W上對本發(fā)明的具體實施例進行了描述。需要理解的是，本發(fā)明并不局限于上述 特定實施方式，本領(lǐng)域技術(shù)人員可W在權(quán)利要求的范圍內(nèi)做出各種變形或修改，運并不影 響本發(fā)明的實質(zhì)內(nèi)容。
【主權(quán)項】
1. 一種以內(nèi)容驅(qū)動的智能家居控制方法，其特征在于，所述方法通過基于視頻中關(guān)鍵 幀的圖像主色調(diào)和/或場景情節(jié)特征對視頻碎片進行標記，或者依據(jù)音頻數(shù)據(jù)特征進行標 記，添加相應的標簽，每次播放這些多媒體內(nèi)容時，標記的這些標簽都會驅(qū)動智能家居設(shè)備 工作。2. 根據(jù)權(quán)利要求1所述的以內(nèi)容驅(qū)動的智能家居控制方法，其特征在于，所述通過基 于視頻中關(guān)鍵幀的圖像主色調(diào)對視頻碎片進行標記，具體為：提取視頻MPU中關(guān)鍵幀的主 色調(diào)并對其進行標記，利用MPUBox中預留的reserved字段定義color_tag，對于不同的顏 色可以用不一樣的color_tag。3. 根據(jù)權(quán)利要求2所述的以內(nèi)容驅(qū)動的智能家居控制方法，其特征在于，通過視頻MPU 中關(guān)鍵主色調(diào)分析而對c〇l〇r_tag進行賦值，或者通過算法自動對MPU的主色調(diào)提取賦值。4. 根據(jù)權(quán)利要求2所述的以內(nèi)容驅(qū)動的智能家居控制方法，其特征在于，將MPUBox中 的reserved的7bit用于color_tag，該bit位根據(jù)需要可擴展。5. 根據(jù)權(quán)利要求1-4任一項所述的以內(nèi)容驅(qū)動的智能家居控制方法，其特征在于，所 述通過基于視頻中場景情節(jié)特征對視頻碎片進行標記，具體為：提取視頻中某段場景的模 式，進而對MPU進行標記，將MPUBox中的reserved字段定義為scene_tag。6. 根據(jù)權(quán)利要求1-4任一項所述的以內(nèi)容驅(qū)動的智能家居控制方法，其特征在于，所 述依據(jù)音頻數(shù)據(jù)特征進行標記，具體為：提取音頻MPU中的音調(diào)特征，進而對MPU進行標記， 將MPUBox中的reserved字段定義為tone_tag。
【文檔編號】G05B19/418GK105988369SQ201510080011
【公開日】2016年10月5日
【申請日】2015年2月13日
【發(fā)明人】徐異凌, 張文軍, 孫軍, 管云峰, 張小云, 柳寧, 張良慧
【申請人】上海交通大學