移動終端界面圖像的感官反饋方法及其移動終端的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及移動通信領(lǐng)域，尤其涉及一種移動終端界面圖像的感官反饋方法及其移動終端。
【背景技術(shù)】
[0002]當(dāng)前3D、4D電影的風(fēng)靡，使人們能夠身臨其境般的直觀感受到影片帶來的多方位的感官刺激和沖擊力，但這需要對影片進(jìn)行特殊定制處理，并僅限于在電影院觀看。當(dāng)前的游戲產(chǎn)業(yè)也是如此，體感類游戲也需要專門定制的特殊設(shè)備與特制的游戲相匹配，才能感受到游戲中第四維的樂趣。
[0003]可見，目前涉及到感官體驗的產(chǎn)業(yè)都需要特殊的設(shè)備或硬件環(huán)境，雖然移動終端在公眾中已經(jīng)相當(dāng)普及，但僅憑移動終端我們還無法通過實時地檢測電影、游戲等界面圖像中的場景，給予用戶精確細(xì)致的動態(tài)感官反饋。

【發(fā)明內(nèi)容】

[0004]為解決現(xiàn)有技術(shù)中存在的上述問題，本發(fā)明實施例一方面提供了一種移動終端界面圖像的感官反饋方法，其特征在于，方法包括:
[0005]檢測移動終端當(dāng)前界面的音頻參數(shù)和/或圖像參數(shù)；
[0006]分析音頻和/或圖像參數(shù)，確定界面圖像的當(dāng)前顯示場景；
[0007]在移動終端的反饋元素數(shù)據(jù)庫中尋找與當(dāng)前顯示場景相匹配的反饋元素；
[0008]根據(jù)反饋元素，對用戶進(jìn)行相應(yīng)的感官反饋。
[0009]另一方面，本發(fā)明實施例還提供了一種移動終端，包括:
[0010]檢測模塊，用于檢測所述移動終端當(dāng)前界面的音頻參數(shù)和/或圖像參數(shù)；
[0011]分析模塊，用于分析音頻和/或圖像參數(shù)，確定界面圖像的當(dāng)前顯示場景；
[0012]匹配模塊，用于在移動終端的反饋元素數(shù)據(jù)庫中尋找與當(dāng)前顯示場景相匹配的反饋元素；
[0013]反饋模塊，用于根據(jù)反饋元素，對用戶進(jìn)行相應(yīng)的感官反饋。
[0014]本發(fā)明實施例的技術(shù)方案，使用戶通過移動終端觀看視頻影音時能夠體驗到第四維的精準(zhǔn)細(xì)致的感官享受，獲得更好的用戶體驗。
【附圖說明】
[0015]為了更清楚地說明本發(fā)明實施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對實施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實施例，對于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動的前提下，還可以根據(jù)這些附圖獲得其他的附圖。
[0016]圖1為本發(fā)明的移動終端界面圖像的感官反饋方法的第一實施例的流程示意圖；
[0017]圖2為本發(fā)明的移動終端界面圖像的感官反饋方法的第二實施例的流程示意圖；
[0018]圖3為本發(fā)明的移動終端界面圖像的感官反饋方法的第二實施例中雙耳效應(yīng)算法的示意圖；
[0019]圖4為本發(fā)明的移動終端的第一實施例的結(jié)構(gòu)示意圖；
[0020]圖5為本發(fā)明的移動終端的第二實施例的結(jié)構(gòu)示意圖。
【具體實施方式】
[0021]下面將結(jié)合本發(fā)明實施例中的附圖，對本發(fā)明實施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實施例僅僅是本發(fā)明一部分實施例，而不是全部的實施例?；诒景l(fā)明中的實施例，本領(lǐng)域普通技術(shù)人員在沒有作出創(chuàng)造性勞動前提下所獲得的所有其他實施例，都屬于本發(fā)明保護(hù)的范圍。
[0022]請參照圖1，是本發(fā)明的移動終端界面圖像的感官反饋方法的第一實施例的流程示意圖，該方法包括:
[0023]步驟S11:檢測移動終端當(dāng)前界面的音頻參數(shù)和/或圖像參數(shù)。
[0024]本步驟中，所檢測的音頻參數(shù)包括音頻的音色、頻率、功率、過零率等參數(shù)。過零率是信號的符號變化的比率，是常用于語音識別、語音對比、音樂信息檢索領(lǐng)域的參數(shù)。圖像參數(shù)包括對比度、色溫、色相、飽和度等參數(shù)。
[0025]本步驟中，參數(shù)的檢測周期可為2至5毫秒，以形成對音頻或圖像特性的持續(xù)性表現(xiàn)，從而無延遲的得到整段音頻或圖像的實時數(shù)據(jù)。
[0026]步驟S12:分析音頻和/或圖像參數(shù)，確定界面圖像的當(dāng)前顯示場景。
[0027]本步驟中，對于音頻參數(shù)，可基于現(xiàn)有的語音識別技術(shù)，根據(jù)當(dāng)前界面圖像所伴隨的音頻的音色、頻率等參數(shù)，識別出圖像中發(fā)聲主體的類型?？刹捎媚Ｊ狡ヅ浞ǎA(yù)先采集自然界中常見發(fā)聲體的音頻參數(shù)，確定每種發(fā)聲體的合理的音頻范圍，并錄入模板數(shù)據(jù)庫。在識別過程中，將輸入語音的特征與模板數(shù)據(jù)庫中的每個模板進(jìn)行相似度比較，將相似度最高的作為識別結(jié)果輸出，從而可確定發(fā)聲體的類型。根據(jù)確定出的當(dāng)前界面圖像的所有發(fā)聲體的集合，可合理的分析出當(dāng)前顯示場景。該模板數(shù)據(jù)庫可存儲于移動終端的存儲器中，定期進(jìn)行更新，也可存儲于網(wǎng)絡(luò)中，在識別時再實時獲取。
[0028]本步驟中，對于圖像參數(shù)，可提取出當(dāng)前時刻附近的N幀圖像數(shù)據(jù)，進(jìn)行邊緣提取和運(yùn)動檢測，識別出運(yùn)動圖像。運(yùn)動檢測的原理是比較當(dāng)前幀圖像的邊緣圖像與前N幀圖像的邊緣圖像，進(jìn)行圖像減運(yùn)算，對減運(yùn)算圖像進(jìn)行閾值分割，得到運(yùn)動圖像。由于在電影等界面圖像中，各場景中的角色主體經(jīng)常處于運(yùn)動狀態(tài)，因此，通過對運(yùn)動圖像的檢測，很容易獲取場景中角色主體的類型，再對這些角色主體進(jìn)行分析，就可確定出當(dāng)前顯示場景。
[0029]步驟S13:在移動終端的反饋元素數(shù)據(jù)庫中尋找與當(dāng)前顯示場景相匹配的反饋元素。
[0030]本步驟中，反饋元素可包括振動、氣味等感官刺激類型。不同的場景需要匹配不同的反饋元素。在當(dāng)前顯示場景確定下來后，需要在反饋元素數(shù)據(jù)庫中尋找與當(dāng)前顯示場景相匹配的反饋元素。例如，當(dāng)確定出當(dāng)前顯示場景為戰(zhàn)爭中的爆炸場面時，所匹配的反饋元素即為爆炸產(chǎn)生的沖擊波所帶來的振動；當(dāng)確定出當(dāng)前顯示場景為公園的桂花樹下時，所匹配的反饋元素即為桂花的香味。
[0031]本步驟中，對于反饋元素的選擇，移動終端的系統(tǒng)可提供默認(rèn)的匹配元素，也可由用戶根據(jù)需求和偏好進(jìn)行定制，使用戶獲得更加人性化的娛樂體驗。
[0032]步驟S14:根據(jù)反饋元素，對用戶進(jìn)行相應(yīng)的感官反饋。
[0033]本步驟中，感官反饋包括移動終端的不同強(qiáng)度、頻率的振動，或釋放的不同類型、濃度的氣味。振動可體現(xiàn)為移動終端機(jī)身整體或某部分的振動，可利用移動終端中的振動器來實現(xiàn)。振動器是利用偏心裝置做旋轉(zhuǎn)運(yùn)動而產(chǎn)生振動。氣味也可由移動終端釋放出具有特定味道的氣體而產(chǎn)生。不同場景中的振動的強(qiáng)度、頻率可有所不同。例如，與戰(zhàn)爭中爆炸場面所匹配的振動強(qiáng)度顯然要大于“玻璃杯掉在地上后摔碎”這一場面所匹配的振動強(qiáng)度。同理，不同場景中的氣味的類型、濃度也有所不同。
[0034]本發(fā)明實施例的技術(shù)方案，使用戶通過移動終端觀看視頻影音時能夠?qū)崟r的體驗到第四維的精準(zhǔn)細(xì)致的感官享受，獲得更好的用戶體驗。
[0035]請參照圖2，是本發(fā)明的移動終端界面圖像的感官反饋方法的第二實施例的流程示意圖，該方法包括:
[0036]步驟S21:檢測移動終端當(dāng)前界面的音頻參數(shù)和/或圖像參數(shù)。
[0037]本步驟與移動終端界面圖像的感官反饋方法的第一實施例中的對應(yīng)步驟相同，這里不再贅述。
[0038]步驟S22:分析音頻參數(shù)和/或圖像參數(shù)，確定當(dāng)前顯示場景中物體的移動性特征。
[0039]本步驟中，根據(jù)所述音頻參數(shù)中左聲道聲音與右聲道聲音的時間差、音量差、音色差或相位差，計算當(dāng)前顯示場景中運(yùn)動物體的位置、運(yùn)動方向或運(yùn)動速度。這也可稱為雙耳效應(yīng)原理。
[0040]對于雙耳效應(yīng)原理，以時間差為例，如圖3所示，兩個聲壓相同的音源A與音源B，對于進(jìn)入左耳的時間，音源A要短于音源B，A1、A2相當(dāng)于左右聲道，當(dāng)A1比A2短，A1先進(jìn)入左耳時，則先進(jìn)入左耳的是A