識別視頻圖像中的商品和展示其信息的方法、裝置及系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本申請涉及圖像識別領(lǐng)域，具體涉及一種用于識別暫停視頻圖像中的商品的方法和裝置。本申請同時(shí)提供一種用于在暫停視頻圖像上展示商品信息的方法和裝置，以及一種用于在暫停視頻圖像上展示商品信息的系統(tǒng)。
【背景技術(shù)】
[0002]隨著個(gè)人電腦和手機(jī)等終端設(shè)備的硬件技術(shù)的不斷發(fā)展，越來越多的人選擇使用個(gè)人電腦或者手機(jī)等終端設(shè)備觀看由視頻網(wǎng)站提供的各種電視節(jié)目。所謂視頻網(wǎng)站是指在相關(guān)的技術(shù)平臺支持下，讓互聯(lián)網(wǎng)用戶在線流暢發(fā)布、瀏覽和分享視頻作品的網(wǎng)站，眾所周知的視頻網(wǎng)站有優(yōu)酷網(wǎng)、樂視網(wǎng)、愛奇藝等；通常視頻網(wǎng)站也會推出自己的視頻客戶端應(yīng)用程序(也稱視頻客戶端)，專門用于在手機(jī)或者個(gè)人電腦等終端設(shè)備上播放視頻網(wǎng)站提供的視頻作品，例如:優(yōu)酷視頻客戶端、愛奇藝視頻客戶端等。
[0003]在視頻網(wǎng)站快速發(fā)展的同時(shí)，廣告商們開始青睞視頻廣告，而廣告投放也成為視頻網(wǎng)站的主要盈利模式之一，視頻網(wǎng)站通常會在視頻文件播放之前、或者視頻文件播放暫停等時(shí)機(jī)，向終端用戶推送廣告。
[0004]為了更好地吸引終端用戶的注意力，讓用戶更多地關(guān)注視頻廣告，視頻網(wǎng)站開始推出與視頻播放內(nèi)容相關(guān)的商品廣告，即:采用人工的方式在視頻中的特定時(shí)間和位置，標(biāo)注與當(dāng)前視頻圖像中的商品相關(guān)的推廣圖片或者鏈接(該過程也稱為打點(diǎn))，并在視頻播放的過程中顯示上述標(biāo)注好的商品推廣信息，從而能夠定向推廣與當(dāng)前播放視頻深度關(guān)聯(lián)的商品，從而更為有效地吸引用戶的注意力，提升用戶對于廣告投放的觀看體驗(yàn)。
[0005]上述采用人工打點(diǎn)進(jìn)行廣告定向推廣的方式，在具備上述優(yōu)點(diǎn)的同時(shí)，也存在如下缺陷:
[0006]1)過于耗費(fèi)人力成本，當(dāng)視頻文件中需要添加標(biāo)注信息的商品比較多，或者需要處理的視頻文件比較多的情況下，人工處理效率無法滿足要求；
[0007]2)通過人工方式識別視頻圖像中的商品、并與已有商品進(jìn)行匹配的過程，取決于個(gè)人的經(jīng)驗(yàn)以及對已有商品的了解程度，在商品數(shù)量眾多的情況下，上述識別匹配過程的準(zhǔn)確性通常無法控制，因此可能出現(xiàn)在視頻播放過程中展示的商品信息與視頻圖像中的商品不一致的情況，給用戶體驗(yàn)帶來不好的影響。

【發(fā)明內(nèi)容】

[0008]本申請?zhí)峁┮环N用于識別暫停視頻圖像中的商品的方法和裝置，以解決現(xiàn)有的人工打點(diǎn)方式耗費(fèi)人力而且無法控制識別準(zhǔn)確性的問題。本申請另外提供一種用于在暫停視頻圖像上展示商品信息方法和裝置，以及一種用于在暫停視頻圖像上展示商品信息的系統(tǒng)。
[0009]本申請?zhí)峁┮环N用于識別暫停視頻圖像中的商品的方法，包括:
[0010]接收客戶端發(fā)送的暫停視頻的相關(guān)信息；
[0011]根據(jù)所述暫停視頻的相關(guān)信息，獲取處于暫停狀態(tài)的客戶端視頻對應(yīng)的靜態(tài)圖像；
[0012]識別所述靜態(tài)圖像中的商品并獲取商品信息；
[0013]將識別出的商品在所述靜態(tài)圖像中的位置信息和對應(yīng)的商品信息返回給所述客戶端。
[0014]可選的，所述獲取處于暫停狀態(tài)的客戶端視頻對應(yīng)的靜態(tài)圖像是指，從接收到的暫停視頻的相關(guān)信息中提取所述靜態(tài)圖像。
[0015]可選的，所述獲取處于暫停狀態(tài)的客戶端視頻對應(yīng)的靜態(tài)圖像包括:
[0016]根據(jù)接收到的暫停視頻相關(guān)信息中包含的暫停時(shí)間點(diǎn)，向提供所述視頻的視頻服務(wù)端發(fā)送獲取所述視頻與暫停時(shí)間點(diǎn)對應(yīng)的靜態(tài)圖像的請求；
[0017]接收所述視頻服務(wù)端返回的與所述暫停時(shí)間點(diǎn)對應(yīng)的靜態(tài)圖像。
[0018]可選的，如果接收到的暫停視頻的相關(guān)信息中包含的靜態(tài)圖像或者所述視頻服務(wù)端返回的靜態(tài)圖像的幀數(shù)大于1，執(zhí)行下述操作:
[0019]針對每一幀靜態(tài)圖像，通過計(jì)算圖像邊緣點(diǎn)和/或計(jì)算圖像銳度的方式，獲取所述靜態(tài)圖像的清晰度；
[0020]選擇清晰度滿足設(shè)定要求的一幀靜態(tài)圖像作為后續(xù)處理所采用的靜態(tài)圖像。
[0021]可選的，在執(zhí)行所述識別所述靜態(tài)圖像中的商品并獲取商品信息的步驟前，執(zhí)行下述步驟:
[0022]獲取所述靜態(tài)圖像中包含商品圖像的區(qū)域，作為商品圖像區(qū)域；
[0023]相應(yīng)的，所述識別所述靜態(tài)圖像中的商品并獲取商品信息是指，在已獲取的商品圖像區(qū)域中識別商品并獲取商品信息。
[0024]可選的，所述獲取所述靜態(tài)圖像中包含商品圖像的區(qū)域，包括:
[0025]采用圖像分割技術(shù)把所述靜態(tài)圖像劃分成若干個(gè)圖像區(qū)域；
[0026]針對每一個(gè)圖像區(qū)域，執(zhí)行下述操作:
[0027]獲取用于描述該圖像區(qū)域性質(zhì)的特征值；
[0028]判斷所述特征值是否符合預(yù)先設(shè)定的商品圖像區(qū)域的特征；若是，則判定該圖像區(qū)域?yàn)樯唐穲D像區(qū)域，該區(qū)域在所述靜態(tài)圖像中的位置即為其中包含的商品在所述靜態(tài)圖像中的位置。
[0029]可選的，所述圖像分割技術(shù)包括:基于區(qū)域的分割方法或者基于邊緣的分割方法。
[0030]可選的，所述在已獲取的商品圖像區(qū)域中識別商品并獲取商品信息，包括:
[0031]提取所述商品圖像區(qū)域中的圖像特征，作為基準(zhǔn)特征；
[0032]在預(yù)先生成的候選商品特征庫中查找與所述基準(zhǔn)特征相匹配的候選商品特征，并獲取匹配成功的候選商品特征對應(yīng)的商品索引；
[0033]根據(jù)所述向品索引，獲取該向品的相關(guān)?目息。
[0034]可選的，所述圖像特征包括以下特征中的至少一種:顏色特征、形狀特征、紋理特征、或者語義特征。
[0035]可選的，采用尺度不變特征轉(zhuǎn)換SIFT算法執(zhí)行所述提取所述商品圖像區(qū)域中的圖像特征的步驟。
[0036]可選的，所述在預(yù)先生成的候選商品特征庫中查找與所述基準(zhǔn)特征相匹配的候選向品特征包括:
[0037]計(jì)算所述基準(zhǔn)特征與所述候選商品特征庫中的每一個(gè)候選商品特征之間的特征值差異;
[0038]將所述特征值差異滿足設(shè)定要求的候選商品特征，作為與所述基準(zhǔn)特征相匹配的候選商品特征。
[0039]相應(yīng)的，本申請還提供一種用于識別暫停視頻圖像中的商品的裝置，包括:
[0040]視頻信息接收單元，用于接收客戶端發(fā)送的暫停視頻的相關(guān)信息；
[0041]靜態(tài)圖像獲取單元，用于根據(jù)所述暫停視頻的相關(guān)信息，獲取處于暫停狀態(tài)的客戶端視頻對應(yīng)的靜態(tài)圖像；
[0042]商品識別單元，用于識別所述靜態(tài)圖像中的商品并獲取商品信息；
[0043]識別信息返回單元，用于將識別出的商品在所述靜態(tài)圖像中的位置信息和對應(yīng)的商品信息返回給所述客戶端。
[0044]可選的，所述靜態(tài)圖像獲取單元具體用于，從接收到的暫停視頻的相關(guān)信息中提取所述靜態(tài)圖像。
[0045]可選的，所述靜態(tài)圖像獲取單元包括:
[0046]請求發(fā)送子單元，用于根據(jù)接收到的暫停視頻相關(guān)信息中包含的暫停時(shí)間點(diǎn)，向提供所述視頻的視頻服務(wù)端發(fā)送獲取所述視頻與暫停時(shí)間點(diǎn)對應(yīng)的靜態(tài)圖像的請求；
[0047]靜態(tài)圖像接收子單元，用于接收所述視頻服務(wù)端返回的與所述暫停時(shí)間點(diǎn)對應(yīng)的靜態(tài)圖像。
[0048]可選的，所述裝置還包括:
[0049]圖像數(shù)目判斷單元，用于判斷所述靜態(tài)圖像獲取單元獲取的靜態(tài)圖像的幀數(shù)是否大于1 ;
[0050]清晰度計(jì)算單元，用于當(dāng)所述圖像數(shù)目判斷單元的判斷結(jié)果為“是”時(shí)，針對每一幀靜態(tài)圖像，通過計(jì)算圖像邊緣點(diǎn)和/或計(jì)算圖像銳度的方式，獲取所述靜態(tài)圖像的清晰度；
[0051]靜態(tài)圖像選擇單元，用于根據(jù)所述清晰度計(jì)算單元的計(jì)算結(jié)果，選擇清晰度滿足設(shè)定要求的一幀靜態(tài)圖像作為后續(xù)處理所采用的靜態(tài)圖像。
[0052]可選的，所述裝置還包括:
[0053]商品圖像區(qū)域獲取單元，用于獲取所述靜態(tài)圖像中包含商品圖像的區(qū)域，作為商品圖像區(qū)域；
[0054]相應(yīng)的，所述商品識別單元具體用于在所述商品圖像區(qū)域獲取單元輸出的商品圖像區(qū)域中識別商品并獲取商品信息。
[0055]可選的，所述商品圖像區(qū)域獲取單元包括:
[0056]區(qū)域分割子單元，用于采用圖像分割技術(shù)把所述靜態(tài)圖像劃分成若干個(gè)圖像區(qū)域；
[0057]區(qū)域特征值提取子單元，用于針對每一個(gè)圖像區(qū)域，獲取描述該圖像區(qū)域性質(zhì)的特征值；
[0058]商品區(qū)域判斷子單元，用于針對每一個(gè)圖像區(qū)域，判斷該圖像區(qū)域的特征值是否符合預(yù)先設(shè)定的商品圖像區(qū)域的特征；若是，則判定該圖像區(qū)域?yàn)樯唐穲D像區(qū)域，該區(qū)域在所述靜態(tài)圖像中的位置即為其中包含的商品在所述靜態(tài)圖像中的位置。
[0059]可選的，所述區(qū)域分割子單元采用的圖像分割技術(shù)包括:基于區(qū)域的分割方法或者基于邊緣的分割方法。
[0060]可選的，所述商品識別單元包括:
[0061]特征提取子單元，用于提取所述商品圖像區(qū)域中的圖像特征，作為基準(zhǔn)特征；
[0062]特征匹配子單元，用于在預(yù)先生成的候選商品特征庫中查找與所述基準(zhǔn)特征相匹配的候選商品特征，并獲取匹配成功的候選商品特征對應(yīng)的商品索引；
[0063]商品信息獲取子單元，用于根據(jù)所述商品索引，獲取該商品的相關(guān)信息。
[0064]可選的，所述特征提取子單元具體用于，采用尺度不變特征轉(zhuǎn)換SIFT算法提取所述商品圖像區(qū)域中的圖像特征。
[0065]可選的，所述特征匹配子單元包括:
[0066]特征值差異計(jì)算子單元，用于計(jì)算所述基準(zhǔn)特征與所述候選商品特征庫中的每一個(gè)候選商品特征之間的特征值差異；
[0067]特征值差異判斷子單元，用于將所述特征值差異滿足設(shè)定要求的候選商品特征，作為與所述基準(zhǔn)特征相匹配的候選商品特征。
[0068]此外，本申請還提供一種用于在暫停視頻圖像上展示商品信息的方法，包括:
[0069]接收對在線播放視頻的暫停指令；
[0070]暫停視頻，并向服務(wù)端發(fā)送暫停視頻的相關(guān)信息；所述服務(wù)端根據(jù)該暫停視頻的相關(guān)信息，能夠獲得暫停視頻的靜態(tài)圖像；
[0071]接收所述服務(wù)端返回的商品在所述暫停視頻的靜態(tài)圖像中的位置信息和商品信息；
[0072]根據(jù)所述位置信息，在暫停視頻的所述靜態(tài)圖像的相應(yīng)位置處顯示對應(yīng)的商品信肩、Ο
[0073]可選的，所述暫停視頻的相關(guān)信息包括:所述暫停視頻對應(yīng)的靜態(tài)圖像、或者所述暫停視頻的暫停時(shí)間點(diǎn)。
[0074]可選的，所述服務(wù)端返回的商品信息中包含:商品鏈接信息，所述商品鏈接信息提供訪問商品詳情頁面或者同款商品購買頁面的地址信息；
[0075]相應(yīng)的，在所述暫停視頻圖像的相