專利名稱：圖像處理設(shè)備、圖像處理方法和程序的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種圖像處理設(shè)備、圖像處理方法以及程序，并且更具體地，涉及例如 在幀(域)基礎(chǔ)上使同時(shí)捕獲的多個(gè)視頻流彼此同步的圖像處理設(shè)備、圖像處理方法以及 程序。
背景技術(shù)：
過去，已存在例如用于記錄同時(shí)捕獲的多個(gè)視頻流并且然后對(duì)所記錄的視頻流進(jìn) 行同步和再現(xiàn)的記錄/再現(xiàn)設(shè)備。圖1示出了記錄系統(tǒng)1的結(jié)構(gòu)示例，其中，同時(shí)捕獲的多個(gè)視頻流被記錄在現(xiàn)有技 術(shù)的記錄/再現(xiàn)設(shè)備中。例如，記錄系統(tǒng)1同時(shí)開始記錄第一視頻流和第二視頻流。使用從預(yù)定方向捕獲 對(duì)象的圖像的第一攝像機(jī)(視頻攝像機(jī))來捕獲第一視頻流，并且使用從不同于預(yù)定方向 的方向捕獲同一對(duì)象的圖像的第二攝像機(jī)來捕獲第二視頻流。記錄系統(tǒng)1包括用于記錄第一視頻流的輸入部件21、編碼器22、緩沖器23以及 HDD(硬盤驅(qū)動(dòng)器)24 ；用于記錄第二視頻流的輸入部件25、編碼器26、緩沖器27以及HDD 28 ；以及用于同時(shí)記錄第一和第二視頻流的同步部件29、系統(tǒng)控制器30以及寫控制部件 31。例如，輸入部件21接收使用第一攝像機(jī)捕獲的第一視頻流的輸入。為了同步輸入 的第一視頻流，輸入部件21產(chǎn)生垂直同步信號(hào)、水平同步信號(hào)、時(shí)鐘信號(hào)等作為同步信號(hào)， 并且將它們提供到編碼器22和同步部件29。此外，輸入部件21將第一視頻流提供到編碼器22。應(yīng)注意的是，第一視頻流由表示多個(gè)幀的圖像數(shù)據(jù)項(xiàng)組成，所述圖像數(shù)據(jù)項(xiàng)通過 使用第一攝像機(jī)而被捕獲。根據(jù)同步部件29的指令，編碼器22通過在使用從輸入部件21傳送的同步信號(hào)的 同時(shí)執(zhí)行幀內(nèi)編碼來對(duì)組成從輸入部件21輸入的第一視頻流的一系列圖像數(shù)據(jù)項(xiàng)進(jìn)行編 碼(壓縮)，并且獲取由因?yàn)樗鼍幋a而獲得的多個(gè)編碼數(shù)據(jù)項(xiàng)組成的第一編碼流。此外，編碼器22檢測組成所獲取的第一編碼流的編碼數(shù)據(jù)項(xiàng)中的每個(gè)編碼數(shù)據(jù) 項(xiàng)的數(shù)據(jù)大小。編碼器22將包括通過所述檢測而獲得的編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小的報(bào)頭添加到所 獲取的第一編碼流，并且在所述添加之后將第一編碼流提供到緩沖器23，以使得緩沖器23 暫時(shí)保留它。緩沖器23暫時(shí)保留從編碼器22提供的第一編碼流。HDD 24將保留在緩沖器23中的第一編碼流記錄在內(nèi)置硬盤(未示出)中。應(yīng)注意的是，由于輸入部件25、編碼器26、緩沖器27、以及HDD 28被構(gòu)造成為與上 述的輸入部件21、編碼器22、緩沖器23、以及HDD 24相同，因此省略其描述。在輸入部件25、編碼器26、緩沖器27、以及HDD 28中，輸入到輸入部件25的第二視頻流被編碼成第二編碼流并且被記錄在HDD 28中。同步部件29基于是否從輸入部件21和輸入部件25提供了同步信號(hào)來判斷視頻流是否輸入到輸入部件21和輸入部件25兩者。然后，當(dāng)判斷視頻流輸入到輸入部件21和輸入部件25兩者時(shí)，同步部件29控制 輸入部件21、編碼器22、輸入部件25以及編碼器26，以與視頻流被輸入到輸入部件21和輸 入部件25的相同的時(shí)刻來同步被輸入到輸入部件21和輸入部件25的視頻流，以便執(zhí)行諸 如編碼的處理。系統(tǒng)控制器30控制同步部件29和寫控制部件31。根據(jù)系統(tǒng)控制器30的指令，寫控制部件31控制HDD 24來記錄保留在緩沖器23
中的第一編碼流。此外，根據(jù)系統(tǒng)控制器30的指令，寫控制部件31控制HDD 28來記錄保留在緩沖 器27中的第二編碼流。根據(jù)記錄系統(tǒng)1，有可能記錄由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻流和第二視頻流， 所述圖像數(shù)據(jù)項(xiàng)通過捕獲在分別與第一編碼流和第二編碼流相同的時(shí)刻處的圖像來獲得。接下來，圖2示出了再現(xiàn)系統(tǒng)51的結(jié)構(gòu)示例，在再現(xiàn)系統(tǒng)51中，由記錄系統(tǒng)1記錄 的第一和第二編碼流中的每一個(gè)在相關(guān)技術(shù)的記錄/再現(xiàn)設(shè)備中被解碼并且再現(xiàn)(輸出)。再現(xiàn)系統(tǒng)51對(duì)分別在HDD 24和HDD 28中的、由記錄系統(tǒng)1記錄的第一編碼流和 第二編碼流進(jìn)行同步和再現(xiàn)，并且將因而獲得的第一和第二視頻流輸出到后一級(jí)。在所輸 出的第一和第二視頻流中，圖像數(shù)據(jù)項(xiàng)被組合并且因此生成立體可視的圖像。再現(xiàn)系統(tǒng)51包括用于再現(xiàn)記錄在HDD 24中的第一編碼流的緩沖器71、解碼器72 和輸出部件73、以及用于再現(xiàn)記錄在HDD 28中的第二編碼流的緩沖器74、解碼器75和輸 出部件76、以及用于控制第一和第二視頻流的同步再現(xiàn)的讀控制部件77、系統(tǒng)控制器78和 同步部件79。緩沖器71暫時(shí)保留從HDD 24提供的第一編碼流。解碼器72對(duì)從緩沖器71提供的第一編碼流(組成第一編碼流的編碼數(shù)據(jù)項(xiàng))進(jìn) 行解碼，并且將因而獲得的第一視頻流提供到輸出部件73。輸出部件73向組成從解碼器72提供的第一視頻流的圖像數(shù)據(jù)項(xiàng)添加同步信號(hào) 等，并且輸出與已輸入到記錄系統(tǒng)1的輸入部件21的第一視頻流相同的視頻流。由于緩沖器74、解碼器75以及輸出部件76被構(gòu)造成與上述緩沖器71、解碼器72 以及輸出部件73相同，因此省略其描述。在緩沖器74、解碼器75以及輸出部件76中，記錄在HDD 28中的第二編碼流被解 碼成第二視頻流并且被輸出。根據(jù)系統(tǒng)控制器78的指令，讀控制部件77控制HDD 24來讀取第一編碼流并且將 其提供到緩沖器71。此外，根據(jù)系統(tǒng)控制器78的指令，讀控制部件77控制HDD 28來讀取第二編碼流 并且將其提供到緩沖器74。系統(tǒng)控制器78控制讀控制部件77和同步部件79。同步部件79控制解碼器72對(duì)來自組成第一編碼流的多個(gè)編碼數(shù)據(jù)項(xiàng)的第χ個(gè)編 碼數(shù)據(jù)項(xiàng)進(jìn)行解碼，并且將因而獲得的第X個(gè)圖像數(shù)據(jù)項(xiàng)提供到輸出部件73。
此外，同步部件79控制解碼器75對(duì)來自組成第二編碼流的多個(gè)編碼數(shù)據(jù)項(xiàng)的第 χ個(gè)編碼數(shù)據(jù)項(xiàng)進(jìn)行解碼，并且將因而獲得的第χ個(gè)圖像數(shù)據(jù)項(xiàng)提供到輸出部件76。此外，同步部件79控制輸出部件73和輸出部件76將從解碼器72提供到輸出部 件73的第χ項(xiàng)圖像數(shù)據(jù)項(xiàng)以及從解碼器75提供到輸出部件76的第χ項(xiàng)圖像數(shù)據(jù)項(xiàng)在同 一時(shí)刻輸出到后一級(jí)。接下來，圖3示出了在記錄系統(tǒng)1中開始對(duì)輸入到輸入部件21的第一視頻流和輸 入到輸入部件25的第二視頻流中的每一個(gè)進(jìn)行編碼和記錄的時(shí)刻，以及在再現(xiàn)系統(tǒng)51中 開始對(duì)記錄在HDD 24中的第一編碼流和記錄在HDD 28中的第二編碼流中的每一個(gè)進(jìn)行解 碼和再現(xiàn)的時(shí)刻。應(yīng)注意的是，在圖3A和3B中，水平軸表示同一時(shí)間。此外，在圖3A和3B中，矩形表示組成編碼流的編碼數(shù)據(jù)項(xiàng)。另外，矩形內(nèi)的數(shù)字 表示當(dāng)從組成編碼流的編碼數(shù)據(jù)項(xiàng)的頭開始計(jì)數(shù)時(shí)編碼數(shù)據(jù)項(xiàng)的位置編號(hào)。
對(duì)于圖3C和3D也是如此。如圖3A所示，例如，記錄系統(tǒng)1從來自組成輸入到輸入部件21的第一視頻流的多 個(gè)圖像數(shù)據(jù)項(xiàng)的、通過在to時(shí)刻捕獲圖像而獲得的圖像數(shù)據(jù)項(xiàng)開始編碼。然后，記錄系統(tǒng) 1使HDD 24記錄由通過該編碼獲得的多個(gè)編碼數(shù)據(jù)項(xiàng)組成的第一編碼流101。此外，如圖3B所示，記錄系統(tǒng)1從來自組成輸入到輸入部件25的第二視頻流的多 個(gè)圖像數(shù)據(jù)項(xiàng)的、通過在與圖3A所示的時(shí)刻t0相同的時(shí)刻t0捕獲圖像而獲得的圖像數(shù)據(jù) 項(xiàng)開始編碼。然后，記錄系統(tǒng)1使HDD28記錄由通過該編碼獲得的多個(gè)編碼數(shù)據(jù)項(xiàng)組成的 第二編碼流102。再現(xiàn)系統(tǒng)51對(duì)記錄在HDD 24中的第一編碼流101進(jìn)行解碼，并且獲取因而獲得 的第一視頻流101'。此外，再現(xiàn)系統(tǒng)51對(duì)記錄在HDD 28中的第二編碼流102進(jìn)行解碼，并且獲取因而 獲得的第二視頻流102'。然后，再現(xiàn)系統(tǒng)51在同一時(shí)刻輸出來自組成第一視頻流101'的多個(gè)圖像數(shù)據(jù)項(xiàng) 的第Χ項(xiàng)圖像數(shù)據(jù)項(xiàng)以及來自組成第二視頻流102'的多個(gè)圖像數(shù)據(jù)項(xiàng)的第χ項(xiàng)圖像數(shù)據(jù) 項(xiàng)。如上所述，在記錄系統(tǒng)1中，從通過在同一時(shí)刻t0捕獲圖像而獲得的圖像數(shù)據(jù)項(xiàng) 開始編碼，并且記錄因而獲得的第一編碼流101和第二編碼流102。此外，在再現(xiàn)系統(tǒng)51中，同時(shí)輸出(再現(xiàn))來自作為通過對(duì)第一編碼流101進(jìn)行 解碼而獲得的解碼結(jié)果的第一視頻流101 ’以及作為通過對(duì)第二編碼流102進(jìn)行解碼而獲 得的解碼結(jié)果的第二視頻流102'中的頭的第χ項(xiàng)圖像數(shù)據(jù)項(xiàng)。接下來，圖4示出了記錄系統(tǒng)121的結(jié)構(gòu)示例，其中因?yàn)闆]有提供同步部件29 (圖 1)，所以開始記錄第一視頻流的時(shí)間和開始記錄第二視頻流的時(shí)間彼此偏移。應(yīng)注意的是，在記錄系統(tǒng)121中，被構(gòu)造成與記錄系統(tǒng)1的那些部分相同的部分由 相同的附圖標(biāo)記來指示，因此省略其描述。即，除了取代同步部件29和系統(tǒng)控制器30而提供系統(tǒng)控制器141之外，記錄系統(tǒng) 121被構(gòu)造成與記錄系統(tǒng)1相同。系統(tǒng)控制器141控制輸入部件21、編碼器22、輸入部件25以及編碼器26對(duì)輸入到輸入部件21和輸入部件25的視頻流執(zhí)行諸如編碼的處理。此外，系統(tǒng)控制器141控制寫控制部件31。接下來，圖5示出了在記錄系統(tǒng)121中開始對(duì)輸入到輸入部件21的第一視頻流和輸入到輸入部件25的第二視頻流中的每一個(gè)進(jìn)行編碼和記錄的時(shí)刻，以及在再現(xiàn)系統(tǒng)51 中開始對(duì)由記錄系統(tǒng)121記錄在HDD 24中的第一編碼流和由記錄系統(tǒng)121記錄在HDD 28 中的第二編碼流中的每一個(gè)進(jìn)行解碼和輸出的時(shí)刻。應(yīng)注意的是，圖5A至5D所示的水平軸和矩形與圖3A至3D所示的相同。如圖5A所示，例如，記錄系統(tǒng)121從來自組成輸入到輸入部件21的第一視頻流的 多個(gè)圖像數(shù)據(jù)項(xiàng)的、通過在時(shí)刻t0捕獲圖像而獲得的圖像數(shù)據(jù)項(xiàng)開始編碼，然后使HDD 24 記錄因而獲得的第一編碼流171。此外，如圖5B所示，記錄系統(tǒng)121從來自組成輸入到輸入部件25的第二視頻流 的、通過在與時(shí)刻to不同的時(shí)刻tl捕獲圖像而獲得的圖像數(shù)據(jù)項(xiàng)開始編碼，然后使HDD 28 記錄因而獲得的第二編碼流172。由于記錄系統(tǒng)121沒有裝備同步部件29，因此難以使開始編碼和記錄的時(shí)刻彼此 同步。因此，在記錄系統(tǒng)121中，開始對(duì)輸入到輸入部件21的第一視頻流進(jìn)行編碼和記 錄的時(shí)刻t0以及開始對(duì)輸入到輸入部件25的第二視頻流進(jìn)行編碼和記錄的時(shí)刻tl偏移 了相當(dāng)于9個(gè)幀的時(shí)間(tl-tO)。再現(xiàn)系統(tǒng)51對(duì)記錄在HDD 24中的第一編碼流171進(jìn)行解碼，并且獲取因而獲得 的第一視頻流171'。此外，再現(xiàn)系統(tǒng)51對(duì)記錄在HDD 28中的第二編碼流172進(jìn)行解碼，并且獲取因而 獲得的第二視頻流172'。然后，再現(xiàn)系統(tǒng)51同時(shí)輸出第一視頻流171'和第二視頻流172'的第χ項(xiàng)圖像 數(shù)據(jù)項(xiàng)。如上所述，開始對(duì)輸入到輸入部件21的第一視頻流進(jìn)行編碼和記錄的時(shí)刻t0以 及開始對(duì)輸入到輸入部件25的第二視頻流進(jìn)行編碼和記錄的時(shí)刻tl偏移了相當(dāng)于9個(gè)幀 的時(shí)間(tl-tO)。因此，組成第一編碼流171的第(x+9)項(xiàng)編碼數(shù)據(jù)項(xiàng)(χ是自然數(shù))以及組成第二 編碼流172的第X項(xiàng)編碼數(shù)據(jù)項(xiàng)被假定通過在同一時(shí)刻捕獲圖像來獲得。因此，再現(xiàn)系統(tǒng)51同時(shí)輸出通過捕獲在第一視頻流171'和第二視頻流172'中 偏移了相當(dāng)于9個(gè)幀的時(shí)間(tl-tO)的不同時(shí)刻處的圖像獲得的圖像數(shù)據(jù)項(xiàng)。如上所述，當(dāng)再現(xiàn)系統(tǒng)51開始對(duì)由記錄系統(tǒng)121記錄的第一編碼流171和第二編 碼流172中的每一個(gè)進(jìn)行解碼和輸出時(shí)，通過在偏移了相當(dāng)于9個(gè)幀的時(shí)間(tl-tO)的時(shí) 刻捕獲圖像而獲得的圖像數(shù)據(jù)項(xiàng)可在相同的時(shí)刻被輸出。因此，在再現(xiàn)系統(tǒng)51中，難以對(duì)第一視頻流171'和第二視頻流172'進(jìn)行同步， 以便同時(shí)再現(xiàn)(輸出)通過在同一時(shí)刻捕獲由記錄系統(tǒng)121記錄的第一編碼流171和第二 編碼流172中的圖像而獲得的圖像數(shù)據(jù)項(xiàng)。為了處理上述情形，存在如下第一相關(guān)技術(shù)在該第一相關(guān)技術(shù)中，對(duì)與圖像數(shù)據(jù) 項(xiàng)對(duì)應(yīng)的音頻數(shù)據(jù)項(xiàng)彼此進(jìn)行比較，對(duì)通過使用所述音頻數(shù)據(jù)項(xiàng)表示時(shí)間偏移的時(shí)間差進(jìn)行檢測，并且基于所檢測到的時(shí)間差使通過在同一時(shí)刻捕獲圖像而獲得的圖像數(shù)據(jù)項(xiàng)彼此同步(例如，參見日本專利申請公開第2007-288269號(hào))。另外，存在如下第二相關(guān)技術(shù)在該第二相關(guān)技術(shù)中，同步控制信號(hào)被同步傳送到 兩個(gè)攝像機(jī)，并且這兩個(gè)攝像機(jī)根據(jù)同步控制信號(hào)同步攝像，以便輸出視頻流(例如，參見 日本專利申請公開第2003-304442號(hào))。另外，存在如下第三相關(guān)技術(shù)在該第三相關(guān)技術(shù)中，基于由遵照MPEG(運(yùn)動(dòng)圖 像專家組)方法進(jìn)行編碼的畫面組成的視頻流的系統(tǒng)時(shí)鐘基準(zhǔn)對(duì)系統(tǒng)時(shí)鐘的計(jì)數(shù)輸出 彼此進(jìn)行比較，并且根據(jù)所述比較結(jié)果控制再現(xiàn)速度(例如，參見日本專利申請公開第 11-150727 號(hào))。

發(fā)明內(nèi)容
然而，在使用音頻的以上第一相關(guān)技術(shù)中，在通過使用攝像機(jī)捕獲的圖像而獲得 的圖像數(shù)據(jù)項(xiàng)以及與其對(duì)應(yīng)的音頻數(shù)據(jù)項(xiàng)在時(shí)間上偏移的情況下，降低了在通過在同一時(shí) 刻捕獲圖像而獲得的圖像數(shù)據(jù)項(xiàng)之間的同步的精度。此外，在以上使用同步控制信號(hào)的第二相關(guān)技術(shù)中，攝像機(jī)需要對(duì)應(yīng)于同步控制 信號(hào)，并且因此難以使得使用任意攝像機(jī)捕獲的視頻流彼此同步。另外，使用相關(guān)技術(shù)中的系統(tǒng)時(shí)鐘基準(zhǔn)的第三相關(guān)技術(shù)難以應(yīng)用于除由遵照MPEG 方法進(jìn)行編碼的畫面組成的視頻流之外的視頻流。考慮到上述環(huán)境，例如，期望基于通過捕獲單個(gè)對(duì)象的圖像獲得的多個(gè)視頻流的 數(shù)據(jù)大小使多個(gè)視頻流彼此精確同步。根據(jù)本發(fā)明的實(shí)施例，提供了一種對(duì)由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻流以及不 同于第一視頻流的第二視頻流進(jìn)行同步的圖像處理設(shè)備，該圖像處理設(shè)備包括計(jì)算裝置， 用于基于組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù)大小以及組成第二視頻流 的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小計(jì)算相關(guān)值，所述相關(guān)值表示在組成第一視頻流的多個(gè)圖像 數(shù)據(jù)項(xiàng)和組成第二視頻流的圖像數(shù)據(jù)項(xiàng)之間的相似度；以及檢測裝置，用于基于所述相關(guān) 值對(duì)組成第二視頻流并且對(duì)應(yīng)于組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢 測。有可能還包括編碼裝置，用于通過可變比特率控制對(duì)第一視頻流和第二視頻流進(jìn) 行幀內(nèi)編碼，在可變比特率控制中，根據(jù)圖像數(shù)據(jù)項(xiàng)的圖像內(nèi)容改變編碼后的數(shù)據(jù)大小，并 且在計(jì)算裝置中，基于組成編碼的第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù)大小以 及組成編碼的第二視頻流的圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù)大小計(jì)算相關(guān)值。有可能還包括解碼裝置，用于對(duì)通過不同于幀內(nèi)編碼的編碼進(jìn)行編碼的第一視頻 流和第二視頻流進(jìn)行解碼，所述幀內(nèi)編碼通過可變比特率控制來進(jìn)行，并且在編碼裝置中， 通過可變比特率控制對(duì)解碼的第一視頻流和解碼的第二視頻流進(jìn)行幀內(nèi)編碼。在計(jì)算裝置中，可以基于具有組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的GOP(畫面組) 的數(shù)據(jù)大小以及具有組成第二視頻流的圖像數(shù)據(jù)項(xiàng)的GOP的數(shù)據(jù)大小來計(jì)算相關(guān)值，所述 相關(guān)值表示在組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)和組成第二視頻流的圖像數(shù)據(jù)項(xiàng)之間的 GOP的相似度。在檢測裝置中，可以基于所述相關(guān)值對(duì)在GOP中組成第二視頻流并且對(duì)應(yīng)于 組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測。
在計(jì)算裝置中，可以計(jì)算在組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù) 大小和組成第二視頻流的圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù)大小之間的差值的平方和作為相 關(guān)值。在檢測裝置中，可以在組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)和組成第二視頻流的圖像 數(shù)據(jù)項(xiàng)之間的相關(guān)值等于或者小于預(yù)定閾值時(shí)檢測組成第二視頻流的圖像數(shù)據(jù)項(xiàng)。組成第一視頻流和第二視頻流中的每一個(gè)的圖像數(shù)據(jù)項(xiàng)可以根據(jù)所述圖像數(shù)據(jù) 項(xiàng)的圖像內(nèi)容而在數(shù)據(jù)大小方面彼此不同。根據(jù)本發(fā)明的另一實(shí)施例，提供了一種用于對(duì)由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻 流以及不同于第一視頻流的第二視頻流進(jìn)行同步的圖像處理設(shè)備的圖像處理方法，該圖像 處理設(shè)備包括計(jì)算裝置和檢測裝置，該圖像處理方法包括由計(jì)算裝置基于組成第一視頻 流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小以及組成第二視頻流的每個(gè)圖像數(shù) 據(jù)項(xiàng)的數(shù)據(jù)大小計(jì)算相關(guān)值，該相關(guān)值表 示在組成第一視頻流的預(yù)定圖像數(shù)據(jù)項(xiàng)和組成第 二視頻流的圖像數(shù)據(jù)項(xiàng)之間的相似度；以及由檢測裝置基于所述相關(guān)值對(duì)組成第二視頻流 并且對(duì)應(yīng)于組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測。根據(jù)本發(fā)明的另一實(shí)施例，提供了一種記錄使圖像處理設(shè)備的計(jì)算機(jī)用作如下裝 置的程序的記錄介質(zhì)，該圖像處理設(shè)備對(duì)由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻流以及不同于 第一視頻流的第二視頻流進(jìn)行同步計(jì)算裝置，用于基于組成第一視頻流的多個(gè)圖像數(shù)據(jù) 項(xiàng)中的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小以及組成第二視頻流的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小計(jì) 算相關(guān)值，該相關(guān)值表示在組成第一視頻流的預(yù)定圖像數(shù)據(jù)項(xiàng)和組成第二視頻流的圖像數(shù) 據(jù)項(xiàng)之間的相似度；以及檢測裝置，用于基于所述相關(guān)值對(duì)組成第二視頻流并且對(duì)應(yīng)于組 成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測。根據(jù)本發(fā)明的另一實(shí)施例，提供了一種對(duì)由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻流以 及不同于第一視頻流的第二視頻流進(jìn)行同步的圖像處理設(shè)備，該圖像處理設(shè)備包括計(jì)算 部件，用于基于組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小以及組 成第二視頻流的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小計(jì)算相關(guān)值，該相關(guān)值表示在組成第一視頻流 的多個(gè)圖像數(shù)據(jù)項(xiàng)和組成第二視頻流的圖像數(shù)據(jù)項(xiàng)之間的相似度；以及檢測部件，用于基 于所述相關(guān)值對(duì)組成第二視頻流并且對(duì)應(yīng)于組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù) 據(jù)項(xiàng)進(jìn)行檢測。根據(jù)本發(fā)明的實(shí)施例，基于組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每個(gè)圖像數(shù)據(jù) 項(xiàng)的數(shù)據(jù)大小以及組成第二視頻流的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小，計(jì)算表示在組成第一視 頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)和組成第二視頻流的圖像數(shù)據(jù)項(xiàng)之間的相似度的相關(guān)值，并且基于 所述相關(guān)值對(duì)組成第二視頻流的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測，該圖像數(shù)據(jù)項(xiàng)對(duì)應(yīng)于組成第一視頻 流的多個(gè)圖像數(shù)據(jù)項(xiàng)。根據(jù)本發(fā)明的實(shí)施例，例如，有可能對(duì)通過捕獲單個(gè)對(duì)象的圖像而獲得的多個(gè)視 頻流進(jìn)行精確同步。如在附圖中示出的那樣，根據(jù)本發(fā)明最佳實(shí)施例的以下詳細(xì)描述，本發(fā)明的這些 和其它目標(biāo)、特征和優(yōu)點(diǎn)將變得更加明顯。


圖1是示出相關(guān)技術(shù)的記錄/再現(xiàn)設(shè)備中的記錄系統(tǒng)的示例的框圖2是示出相關(guān)技術(shù)的記錄/再現(xiàn)設(shè)備中的再現(xiàn)系統(tǒng)的示例的框圖；圖3是示出記錄定時(shí)和再現(xiàn)定時(shí)的圖；圖4是示出相關(guān)技術(shù)的記錄/再現(xiàn)設(shè)備中的另一記錄系統(tǒng)的示例的框圖；圖5是示出記錄定時(shí)和再現(xiàn)定時(shí)的圖；圖6是示出向其應(yīng)用本發(fā)明實(shí)施例的再現(xiàn)設(shè)備的結(jié)構(gòu)示例的框圖；圖7是示出在本發(fā)明的實(shí)施例中的再現(xiàn)定時(shí)的圖；圖8是示出幀控制器的結(jié)構(gòu)示例的框圖；圖9是用于說明相關(guān)位置檢測處理的流程圖；圖10是用于說明以GOP (畫面組)作為目標(biāo)來執(zhí)行本發(fā)明實(shí)施例的情況的圖；圖11是示出重構(gòu)被分割的視頻流的狀態(tài)的圖；圖12是示出向其應(yīng)用本發(fā)明的實(shí)施例的記錄/再現(xiàn)設(shè)備的結(jié)構(gòu)示例的框圖；以及圖13是示出個(gè)人計(jì)算機(jī)的結(jié)構(gòu)示例的框圖。
具體實(shí)施例方式在下文中，將描述用于實(shí)現(xiàn)本發(fā)明的模式(在下文中，被稱作本發(fā)明的實(shí)施例或 者該實(shí)施例)。應(yīng)注意的是，將按以下順序進(jìn)行說明。1.本發(fā)明的實(shí)施例(其中對(duì)編碼的數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小進(jìn)行相互進(jìn)行比較的示例)2.經(jīng)修改的示例(1.本發(fā)明的實(shí)施例)(再現(xiàn)設(shè)備191的結(jié)構(gòu)示例)圖6示出了該實(shí)施例的再現(xiàn)設(shè)備191的結(jié)構(gòu)示例。應(yīng)注意的是，由于再現(xiàn)設(shè)備191和再現(xiàn)系統(tǒng)51中對(duì)應(yīng)的部分由相同的附圖標(biāo)記來 指示，因此在下文中省略其描述。具體地，除了系統(tǒng)控制器78包括幀控制器78a之外，再現(xiàn)設(shè)備191被構(gòu)造成與再 現(xiàn)系統(tǒng)51相同。此外，在再現(xiàn)設(shè)備191中，第一編碼流171被預(yù)先記錄在HDD 24中，而第二編碼流 172被預(yù)先記錄在HDD 28中。應(yīng)注意的是，第一編碼流171和第二編碼流172在開始對(duì)第一視頻流和第二視頻 流中的每個(gè)進(jìn)行編碼和記錄的不同定時(shí)被分別記錄在HDD 24和HDD 28中。經(jīng)由緩沖器71向幀控制器78a提供來自HDD 24的第一編碼流171，并且經(jīng)由緩沖 器74向幀控制器78a提供來自HDD 28的第二編碼流172。基于組成從緩沖器71提供的第一編碼流171的編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小以及組成 從緩沖器74提供的第二編碼流172的編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小，幀控制器78a計(jì)算表示相應(yīng) 的編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小之間的相關(guān)性的相關(guān)值。然后，基于所計(jì)算的相關(guān)值，幀控制器78a控制同步部件79，以使得第一視頻流 171'和第二視頻流172'彼此同步。
應(yīng)注意的是，參照稍后描述的圖8描述關(guān)于幀控制器78a的細(xì)節(jié)。(關(guān)于記錄和再現(xiàn)的定時(shí)的描述)圖7示出了在再現(xiàn)設(shè)備191中開始對(duì)預(yù)先記錄在HDD 24中的第一編碼流171和預(yù)先記錄在HDD 28中的第二編碼流172中的每個(gè)進(jìn)行解碼和輸出的定時(shí)。應(yīng)注意的是，圖7A至7D所示的水平軸和矩形與圖5A至5D中的相同?；诮M成記錄在HDD 24中的第一編碼數(shù)據(jù)流171的編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小以及組成記錄在HDD 28中的第二編碼數(shù)據(jù)流172的編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小，再現(xiàn)設(shè)備191對(duì)第 一視頻流171'和第二視頻流172'彼此同步的圖像數(shù)據(jù)項(xiàng)的位置進(jìn)行檢測。換言之，例如，基于第一編碼流171和第二編碼流172的數(shù)據(jù)大小，再現(xiàn)設(shè)備191 對(duì)來自組成第一編碼流171的編碼數(shù)據(jù)項(xiàng)的第10個(gè)編碼數(shù)據(jù)項(xiàng)的位置以及來自組成第二 編碼流172的編碼數(shù)據(jù)項(xiàng)的第一編碼數(shù)據(jù)項(xiàng)的位置進(jìn)行檢測，作為存在通過在同一時(shí)刻捕 獲圖像而獲得的圖像數(shù)據(jù)項(xiàng)的位置。此外，再現(xiàn)設(shè)備191對(duì)記錄在HDD 24中的第一編碼流171進(jìn)行解碼并且獲取因而 獲得的第一視頻流171'。此外，再現(xiàn)設(shè)備191對(duì)記錄在HDD 28中的第二編碼流172進(jìn)行解碼并且獲取因而 獲得的第二視頻流172'。然后，再現(xiàn)設(shè)備191在第一視頻流171'的對(duì)應(yīng)于第一編碼流171中的第10個(gè)編 碼數(shù)據(jù)項(xiàng)的位置的位置處以及在第二視頻流172'的對(duì)應(yīng)于第二編碼流172中的第一編碼 數(shù)據(jù)項(xiàng)的位置的位置處對(duì)第一視頻流171'和第二視頻流172'進(jìn)行同步，并且輸出第一 視頻流171'和第二視頻流172'。換言之，例如，再現(xiàn)設(shè)備191對(duì)來自組成第一視頻流171'的圖像數(shù)據(jù)項(xiàng)的、位于 跳過(跳越)第一至第9圖像數(shù)據(jù)項(xiàng)之后的第10圖像數(shù)據(jù)項(xiàng)、以及來自組成第二視頻流 172'的圖像數(shù)據(jù)項(xiàng)的第一圖像數(shù)據(jù)項(xiàng)進(jìn)行同步，以便同時(shí)輸出那些圖像數(shù)據(jù)項(xiàng)。另外，再現(xiàn)設(shè)備191類似地使來自組成第一視頻流171'的多個(gè)圖像數(shù)據(jù)項(xiàng)的第 11個(gè)和隨后的圖像數(shù)據(jù)項(xiàng)以及來自組成第二視頻流172'的多個(gè)圖像數(shù)據(jù)項(xiàng)的第二和隨 后的圖像數(shù)據(jù)項(xiàng)彼此同步。(幀控制器78a的結(jié)構(gòu)示例)圖8示出了幀控制器78a的詳細(xì)結(jié)構(gòu)示例。幀控制器78a包括獲取部件251、獲取部件252、相關(guān)值計(jì)算部件253、相關(guān)位置檢 測部件254以及同步控制部件255。獲取部件251讀取添加到保留在緩沖器71中的第一編碼流171的報(bào)頭。然后，獲取部件252從所讀取的報(bào)頭獲取組成第一編碼流171的第χ項(xiàng)編碼數(shù)據(jù) 項(xiàng)的數(shù)據(jù)大小f(X) (X = 1,2,...)，并且將該數(shù)據(jù)大小提供到相關(guān)值計(jì)算部件253。獲取部件252讀取添加到保留在緩沖器74中的第二編碼流172的報(bào)頭。然后，獲取部件252從所讀取的報(bào)頭獲取組成第二編碼流172的第y項(xiàng)編碼數(shù)據(jù) 項(xiàng)的數(shù)據(jù)大小g(y) (y = 1，2，...)，并且將該數(shù)據(jù)大小提供到相關(guān)值計(jì)算部件253。相關(guān)值計(jì)算部件253將從獲取部件251提供的數(shù)據(jù)大小f(x)和從獲取部件252 提供的數(shù)據(jù)大小g(y)應(yīng)用于以下方程(1)，并且計(jì)算差值的平方和作為f(x)和g(y)的相 關(guān)值。(方程1)<formula>formula see original document page 11</formula>
應(yīng)注意的是，在方程(1)中，數(shù)字下標(biāo)i是從0到N的值(N是0或者大于0的整 數(shù))。另外，數(shù)字下標(biāo)j表示從第一編碼流171中的頭開始的第j個(gè)位置，數(shù)字下標(biāo)k表 示從第二編碼流172中的頭開始的第k個(gè)位置。數(shù)字下標(biāo)j和k是自然數(shù)。相關(guān)值z(j，k)由第一編碼流171中的第(i+j)項(xiàng)編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小f(i+j) 和第二編碼流172中第(i+k)項(xiàng)編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小g(i+k)之間的差{f(i+j)_g(i+k)} 的平方{f (i+j)_g(i+k)}2的和來表示。順便地，通過捕獲作為目標(biāo)的單個(gè)對(duì)象的圖像獲得第一視頻流171'和第二視頻 流172'，并且組成第一和第二視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)通過恒定比特率控制而具有相同 的數(shù)據(jù)大小，通過所述恒定比特率控制使得圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小恒定。此外，通過對(duì)圖像數(shù)據(jù)項(xiàng)進(jìn)行幀內(nèi)編碼獲得第一編碼流171和第二編碼流172。應(yīng)注意的是，在幀內(nèi)編碼中，執(zhí)行通過其使得圖像數(shù)據(jù)的數(shù)據(jù)大小可變的可變比 特率控制，以便根據(jù)內(nèi)容(諸如顯示在對(duì)應(yīng)于圖像數(shù)據(jù)的圖像中的對(duì)象)使得圖像數(shù)據(jù)的 數(shù)據(jù)大小適當(dāng)。具體地，例如，在圖像數(shù)據(jù)表示存在較少改變的單調(diào)圖像(如藍(lán)天)的情況下，圖 像數(shù)據(jù)以較大壓縮率被壓縮并且通過幀內(nèi)編碼變成較小數(shù)據(jù)大小的編碼數(shù)據(jù)。此外，例如，在圖像數(shù)據(jù)表示復(fù)雜圖像(如多個(gè)人和建筑)的情況下，圖像數(shù)據(jù)以 較低壓縮率進(jìn)行壓縮并且通過幀內(nèi)編碼變成大數(shù)據(jù)大小的編碼數(shù)據(jù)。另外，如上所述，通過捕獲具有作為目標(biāo)的單一對(duì)象的圖像獲得第一視頻流171' 和第二視頻流172'。因此，隨著編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小之間的差的平方{f(x)_g(y)}2變小，很有可能 在相應(yīng)的圖像數(shù)據(jù)項(xiàng)之間，由圖像數(shù)據(jù)項(xiàng)顯示的內(nèi)容(表示的圖像)彼此相似。因此，圖像 數(shù)據(jù)項(xiàng)很有可能通過捕獲同一時(shí)刻的圖像來獲得。因此，隨著相關(guān)值ζ (j，k)變小，表示對(duì)應(yīng)于組成第一編碼流171的第j項(xiàng)到第 (N+j)項(xiàng)編碼數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)和對(duì)應(yīng)于組成第二編碼流172的第k項(xiàng)到第(N+k)項(xiàng)編 碼數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)之間的相似度的相關(guān)性變高。應(yīng)注意的是，不將在執(zhí)行編碼之前的圖像數(shù)據(jù)項(xiàng)之間的數(shù)據(jù)大小直接相互比較的 原因是每個(gè)圖像數(shù)據(jù)項(xiàng)通過恒定比特率控制而具有相同的數(shù)據(jù)大小，通過所述恒定比特率 控制使得圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小恒定。因此，在圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小根據(jù)圖像內(nèi)容(諸如使用圖像數(shù)據(jù)項(xiàng)顯示的對(duì) 象)而彼此不同的情況下，有可能通過幀內(nèi)編碼計(jì)算相關(guān)值z(j，k)而無需改變數(shù)據(jù)大小。相關(guān)值計(jì)算部件253將根據(jù)方程(1)計(jì)算的相關(guān)值ζ (j，k)連同數(shù)字下標(biāo)j和 k(表示數(shù)字下標(biāo)j和k的數(shù)據(jù))一起提供到相關(guān)位置檢測部件254。相關(guān)位置檢測部件254判斷從相關(guān)值計(jì)算部件253提供的相關(guān)值ζ (j, k)是否等 于或者小于預(yù)定閾值，即，組成第一編碼流171的第j項(xiàng)編碼數(shù)據(jù)項(xiàng)和組成第二編碼流172 的第k項(xiàng)編碼數(shù)據(jù)項(xiàng)是否很有可能對(duì)應(yīng)于通過捕獲同一時(shí)刻的圖像而獲得的圖像數(shù)據(jù)項(xiàng)。然后，當(dāng)判斷從相關(guān)值計(jì)算部件253提供的相關(guān)值ζ (j,k)等于或者小于預(yù)定閾值 時(shí)，相關(guān)位置檢測部件254將相應(yīng)的數(shù)字下標(biāo)j和k提供到同步控制部件255。響應(yīng)于從相關(guān)位置檢測部件254提供數(shù)字下標(biāo)j和k，同步控制部件255使對(duì)應(yīng)于組成第一編碼流171的第j項(xiàng)編碼數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)以及對(duì)應(yīng)于組成第二編碼流172的 第k項(xiàng)編碼數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)彼此同步。換言之，例如，同步控制部件255控制同步部件79從第j項(xiàng)編碼數(shù)據(jù)項(xiàng)開始對(duì)第 一編碼流171進(jìn)行解碼，并且從第k項(xiàng)編碼數(shù)據(jù)項(xiàng)開始對(duì)第二編碼流172進(jìn)行解碼。然后， 同步控制部件255控制同步部件79同時(shí)輸出通過解碼而獲得的圖像數(shù)據(jù)項(xiàng)。(關(guān)于幀控制器78a的操作的描述)接下來，參照圖9的流程圖，將給出關(guān)于相關(guān)位置檢測處理的細(xì)節(jié)的描述，在相關(guān) 位置檢測處理中，從第一編碼流171中的位置j和第二編碼流172中的位置k的組合(j， k)中檢測相關(guān)值z(j，k)等于或者小于預(yù)定閾值時(shí)獲得的組合(j，k)。在步驟S21中，獲取部件251讀取添加到記錄在HDD 24中的第一編碼流171的報(bào) 頭。然后，獲取部件251從所讀取的報(bào)頭獲取組成第一編碼流171的編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大 小f(x) (χ = 1,2,...)，并且將該數(shù)據(jù)大小f(x)提供到相關(guān)值計(jì)算部件253。此外，獲取部件252讀取添加到記錄在HDD 28中的第二編碼流172的報(bào)頭。然 后，獲取部件252從所讀取的報(bào)頭獲取組成第二編碼流172的編碼數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小g(y) (y = 1，2，...)，并且將該數(shù)據(jù)大小g(y)提供到相關(guān)值計(jì)算部件253。在步驟S22中，相關(guān)值計(jì)算部件253對(duì)數(shù)字下標(biāo)j和k中的每個(gè)進(jìn)行初始化(設(shè) 置為0)。在步驟S23中，相關(guān)值計(jì)算部件253將從獲取部件251提供的數(shù)據(jù)大小f (χ)和從 獲取部件252提供的數(shù)據(jù)大小g(y)應(yīng)用于方程(1)，并且計(jì)算相關(guān)值2(」，10。然后，相關(guān)值計(jì)算部件253將根據(jù)方程(1)計(jì)算的相關(guān)值z(j，k)連同數(shù)字下標(biāo)j 和k 一起提供到相關(guān)位置檢測部件254。在步驟S24中，相關(guān)位置檢測部件254判斷從相關(guān)值計(jì)算部件253提供的相關(guān)值 z(j, k)是否等于或者小于預(yù)定閾值，即，組成第一編碼流171的第j項(xiàng)編碼數(shù)據(jù)項(xiàng)和組成 第二編碼流172的第k項(xiàng)編碼數(shù)據(jù)項(xiàng)是否很有可能對(duì)應(yīng)于通過捕獲同一時(shí)刻的圖像獲得的 圖像數(shù)據(jù)項(xiàng)。然后，當(dāng)判斷從相關(guān)值計(jì)算部件253提供的相關(guān)值ζ (j，k)等于或者小于預(yù)定閾值 時(shí)，相關(guān)位置檢測部件254將數(shù)字下標(biāo)j和k提供到同步控制部件255，并且處理繼續(xù)到步 馬聚S25 ο在步驟S25中，響應(yīng)于從相關(guān)位置檢測部件254提供數(shù)字下標(biāo)j和k，同步控制部 件255使組成第一視頻流171'的第j項(xiàng)圖像數(shù)據(jù)項(xiàng)和組成第二視頻流172'的第k項(xiàng)圖 像數(shù)據(jù)項(xiàng)彼此同步。此外，同步控制部件255類似地使來自組成第一視頻流171'的圖像數(shù)據(jù)項(xiàng)的第 (j+Ι)項(xiàng)和隨后的圖像數(shù)據(jù)項(xiàng)以及來自組成第二視頻流172'的圖像數(shù)據(jù)項(xiàng)的第(k+Ι)項(xiàng) 和隨后的圖像數(shù)據(jù)項(xiàng)彼此同步，以便同時(shí)輸出，所述處理結(jié)束。此外，當(dāng)相關(guān)位置檢測部件254判斷從相關(guān)值計(jì)算部件253提供的相關(guān)值ζ (j，k) 不等于或者小于預(yù)定閾值時(shí)，處理繼續(xù)到步驟S26。在步驟S26中，相關(guān)值計(jì)算部件253將數(shù)字下標(biāo)j加1，并且將增加之后的數(shù)字下 標(biāo)j設(shè)置為新的數(shù)字下標(biāo)j。在步驟S27中，相關(guān)值計(jì)算部件253判斷數(shù)字下標(biāo)j是否大于組成第一編碼流171的編碼數(shù)據(jù)項(xiàng)的數(shù)量，該數(shù)量由j_max表示。當(dāng)相關(guān)值計(jì)算部件253判斷數(shù)字下標(biāo)j不大 于數(shù)字j_max時(shí)，處理返回到步驟S23，并且隨后重復(fù)同一處理。此外，在步驟S27中，當(dāng)相關(guān)值計(jì)算部件253判斷數(shù)字下標(biāo)j大于數(shù)字j_max時(shí)，處理繼續(xù)到步驟S28。在步驟S28中，相關(guān)值計(jì)算部件253對(duì)數(shù)字下標(biāo)j進(jìn)行初始化(設(shè)置為0)。在步驟S29中，相關(guān)值計(jì)算部件253將數(shù)字下標(biāo)k加1，并且將增加后的數(shù)字下標(biāo) k設(shè)置為新的數(shù)字下標(biāo)k。在步驟S30中，相關(guān)值計(jì)算部件253判斷數(shù)字下標(biāo)k是否大于組成第二編碼流172 的編碼數(shù)據(jù)項(xiàng)的數(shù)量，該數(shù)量由k_maX來表示。當(dāng)相關(guān)值計(jì)算部件253判斷數(shù)字下標(biāo)k不 大于數(shù)字k_max時(shí)，處理返回到步驟S23，并且隨后重復(fù)同一處理。另一方面，當(dāng)相關(guān)值計(jì)算部件253在步驟S30中判斷數(shù)字下標(biāo)k大于數(shù)字k_max 時(shí)，處理結(jié)束。使用該處理，相關(guān)位置檢測處理結(jié)束。如上所述，在相關(guān)位置檢測處理中，基于第一編碼流171和第二編碼流172的數(shù)據(jù) 大小計(jì)算相關(guān)值ζ (j，k)，并且當(dāng)所計(jì)算的相關(guān)值ζ (j，k)等于或者小于預(yù)定閾值時(shí)，第一視 頻流171'中的第j項(xiàng)圖像數(shù)據(jù)項(xiàng)和第二視頻流172'中的第k項(xiàng)圖像數(shù)據(jù)項(xiàng)彼此同步。因此，在相關(guān)位置檢測處理中，即使如在第一相關(guān)技術(shù)中一樣在圖像數(shù)據(jù)項(xiàng)及其 相應(yīng)的音頻數(shù)據(jù)項(xiàng)之間引起了時(shí)間偏移時(shí)，也可能基于根據(jù)數(shù)據(jù)大小計(jì)算的相關(guān)值ζ (j，k) 來精確地同步第一視頻流171'和第二視頻流172'。另外，在相關(guān)位置檢測處理中，使用根據(jù)數(shù)據(jù)大小計(jì)算的相關(guān)值z(j，k)使第一視 頻流171'和第二視頻流172'彼此同步。因此，兩個(gè)流可以彼此同步而無需執(zhí)行特殊處理 (諸如記錄表示獲取圖像數(shù)據(jù)的時(shí)間的時(shí)間印記)，以便使視頻流彼此同步。換言之，例如，甚至對(duì)于使用不記錄時(shí)間印記的攝像機(jī)捕獲的視頻流或者由其中 開始記錄視頻流的時(shí)刻偏移的記錄系統(tǒng)121等記錄的視頻流，也有可能通過比較視頻流的 數(shù)據(jù)大小來使視頻流彼此同步。應(yīng)注意的是，在相關(guān)位置檢測處理中，在步驟S25中使組成第一視頻流171'的第 j項(xiàng)圖像數(shù)據(jù)項(xiàng)和組成第二視頻流172'的第k項(xiàng)圖像數(shù)據(jù)項(xiàng)彼此同步。然而，在步驟S25的處理之后的情況下，用戶通過查看在顯示器等上的同步圖像 數(shù)據(jù)項(xiàng)判斷組成第一視頻流171'的第j項(xiàng)圖像數(shù)據(jù)項(xiàng)和組成第二視頻流172'的第k項(xiàng) 圖像數(shù)據(jù)項(xiàng)不是通過捕獲同一時(shí)刻的圖像獲得的圖像數(shù)據(jù)項(xiàng)，處理可根據(jù)用戶操作從步驟 S26開始。此外，在難以通過相關(guān)位置檢測處理使通過捕獲同一時(shí)刻的圖像獲得的圖像數(shù)據(jù) 項(xiàng)彼此同步的情況下，用戶可參照通過相關(guān)位置檢測處理的處理結(jié)果，對(duì)第一視頻流171 ‘ 和第二視頻流172'進(jìn)行同步，同時(shí)檢查對(duì)應(yīng)于圖像數(shù)據(jù)項(xiàng)的圖像，該圖像顯示在顯示器等 上。在該情況下，通過用戶僅檢查對(duì)應(yīng)于所述圖像數(shù)據(jù)項(xiàng)的圖像，所述圖像顯示在顯 示器等上，與通過用戶手動(dòng)操作來使第一視頻流171'和第二視頻流172'彼此同步的情 況相比，有可能更迅速地同步第一視頻流171'和第二視頻流172'。(2.經(jīng)修改的示例)
在該實(shí)施例中，使用通過對(duì)圖像數(shù)據(jù)項(xiàng)執(zhí)行可變比特率控制而獲得的編碼數(shù)據(jù)項(xiàng) 的數(shù)據(jù)大小f(x)和g(y)來計(jì)算相關(guān)值z(j，k)，并且在所計(jì)算的相關(guān)值z(j，k)等于或者小 于預(yù)定閾值的情況下，組成第一視頻流171'的第j項(xiàng)圖像數(shù)據(jù)項(xiàng)和組成第二視頻流172' 的第k項(xiàng)圖像數(shù)據(jù)項(xiàng)彼此同步。然而，在該實(shí)施例中，在通過使用通過恒定比特率控制執(zhí)行的幀內(nèi)編碼以同一壓 縮率對(duì)圖像數(shù)據(jù)項(xiàng)進(jìn)行編碼(壓縮)獲得、或者通過諸如MPEG編碼方法(其中圖像數(shù)據(jù)項(xiàng) 之間的相關(guān)性用于編碼)的編碼方法對(duì)圖像數(shù)據(jù)項(xiàng)進(jìn)行壓縮獲得編碼流的情況下，難以利 用編碼的數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小之間的差別來計(jì)算所述編碼數(shù)據(jù)項(xiàng)之間的相關(guān)值ζ (j，k)。
在該情況下，在再現(xiàn)設(shè)備191中，有可能提供用于對(duì)通過與通過恒定比特率控制 執(zhí)行的幀內(nèi)編碼或者M(jìn)PEG編碼方法對(duì)應(yīng)的編碼等獲得的編碼流進(jìn)行解碼的新解碼器，以 及用于通過可變比特率控制對(duì)通過由前一個(gè)前述新解碼器執(zhí)行的解碼獲得的視頻流進(jìn)行 幀內(nèi)編碼的新解碼器。S卩，再現(xiàn)設(shè)備191使用所述前一個(gè)新解碼器對(duì)編碼流進(jìn)行解碼并且使用后一個(gè)解 碼器對(duì)由通過可變比特率控制的以上獲得的視頻流進(jìn)行幀內(nèi)編碼，并且獲取作為以上結(jié)果 而獲得的新編碼流。然后，再現(xiàn)設(shè)備191可以實(shí)現(xiàn)本發(fā)明的實(shí)施例，其中所獲取的新編碼流 作為目標(biāo)。此外，在該實(shí)施例中，對(duì)在相關(guān)值z(j，k)等于或者小于預(yù)定閾值時(shí)獲得的圖像 數(shù)據(jù)項(xiàng)進(jìn)行檢測。然而，在編碼流由每個(gè)包括多個(gè)通過MPEG編碼方法進(jìn)行編碼的畫面的 GOP(畫面組)組成的情況下，有可能檢測在相關(guān)值z(j，k)等于或者小于預(yù)定閾值時(shí)獲得 的 G0P。圖10示出了檢測在相關(guān)值ζ (j，k)等于或者小于預(yù)定閾值時(shí)獲得的GOP的方法。應(yīng)注意的是，在圖IOA和圖IOB中水平軸表示同一時(shí)間。例如，如圖IOA所示，由每個(gè)包括多個(gè)畫面(例如，15個(gè)畫面)的GOP組成的第一 編碼流281被記錄在再現(xiàn)設(shè)備191的HDD 24中。此外，例如，如圖IOB所示，由GOP組成的第二編碼流282被記錄在再現(xiàn)設(shè)備191 的HDD 28中，其中所述GOP每個(gè)包括的畫面數(shù)量與組成第一編碼流281的GOP的相同。再現(xiàn)設(shè)備191基于組成記錄在HDD 24中的第一編碼流281的每個(gè)GOP的數(shù)據(jù)大 小以及組成記錄在HDD 28中的第二編碼流282的每個(gè)GOP的數(shù)據(jù)大小計(jì)算相關(guān)值ζ (j，k)。當(dāng)所計(jì)算的相關(guān)值ζ (j，k)等于或者小于預(yù)定閾值時(shí)，再現(xiàn)設(shè)備191對(duì)組成第一編 碼流281的第j項(xiàng)GOP和組成第二編碼流282的第k項(xiàng)GOP進(jìn)行檢測。然后，再現(xiàn)設(shè)備191通過MPEG解碼方法對(duì)所檢測的GOP進(jìn)行解碼，并且獲取包括 通過所述解碼而獲得的多個(gè)圖像數(shù)據(jù)項(xiàng)的視頻流。再現(xiàn)設(shè)備191通過可變比特率控制對(duì)所 獲取的兩個(gè)視頻流進(jìn)行幀內(nèi)編碼，并且對(duì)因而獲得的兩個(gè)編碼流執(zhí)行上述相關(guān)位置檢測處 理。這樣，與對(duì)組成第一編碼流281和第二編碼流282中的每個(gè)的所有GOP進(jìn)行解碼 并且對(duì)通過可變比特率控制執(zhí)行幀內(nèi)編碼而獲得的結(jié)果執(zhí)行相關(guān)位置檢測處理的情況相 比，有可能更迅速地檢測兩個(gè)視頻流彼此同步的位置。在再現(xiàn)設(shè)備191中，可對(duì)所檢測的兩個(gè)GOP進(jìn)行解碼，并且然后作為解碼結(jié)果的視 頻流可順次顯示在顯示器等上并且通過用戶手動(dòng)操作而彼此同步。
應(yīng)注意的是，在該實(shí)施例中，基于根據(jù)數(shù)據(jù)大小計(jì)算的相關(guān)值z(j，k)使第一視頻流171'和第二視頻流172'彼此同步。例如，有可能對(duì)彼此同步的第一視頻流171'和第 二視頻流172'的圖像數(shù)據(jù)項(xiàng)進(jìn)行組合，并且生成立體可視的圖像，或者在兩個(gè)不同的顯示 器上顯示同一時(shí)刻的圖像數(shù)據(jù)項(xiàng)。此外，如圖11所示，有可能將輸出視頻流的幀速率設(shè)置為較高的幀速率，以使得 第一視頻流171'和第二視頻流172'彼此同步。圖11示出了將輸出視頻流的幀速率設(shè)置為較高幀速率的方法。應(yīng)注意的是，在圖IlA中，第三視頻流311表示高幀速率的視頻流，該視頻流從第 一視頻流171'和第二視頻流172'生成并且被輸出。此外，在圖IlB中，第一視頻流171'由被采用作為在輸出的第三視頻流311中的 奇數(shù)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)組成。在圖IlC中，第二視頻流172'由被采用作為在輸出的第三視頻流311中的偶數(shù)圖 像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)組成。應(yīng)注意的是，在圖11中，通過在(基本上)同一方向上捕獲同一對(duì)象的圖像來獲 得第一視頻流171'和第二視頻流172'。再現(xiàn)設(shè)備191使第一視頻流171'和第二視頻流172'彼此同步，并且將組成第一 視頻流171'的圖像數(shù)據(jù)項(xiàng)和組成第二視頻流172'的圖像數(shù)據(jù)項(xiàng)分別設(shè)置為奇數(shù)圖像數(shù) 據(jù)項(xiàng)和偶數(shù)圖像數(shù)據(jù)項(xiàng)，從而輸出通過交替排列那些圖像數(shù)據(jù)項(xiàng)而獲得的第三視頻流311。因此，例如，與第一視頻流171'和第二視頻流172'中的任何一個(gè)被輸出的情況 相比，再現(xiàn)設(shè)備191可以將所輸出的第三視頻流311的幀速率設(shè)置為雙倍。此外，如圖12所示，本發(fā)明的實(shí)施例可以應(yīng)用于例如除具有再現(xiàn)設(shè)備191的功能 之外還具有記錄系統(tǒng)121的功能的記錄/再現(xiàn)設(shè)備341。圖12示出了具有向其應(yīng)用本發(fā)明的實(shí)施例的再現(xiàn)設(shè)備191的功能以及相關(guān)技術(shù) 中的記錄系統(tǒng)121的功能兩者的記錄/再現(xiàn)設(shè)備341。記錄/再現(xiàn)設(shè)備341包括與圖4的從輸入部件21到HDD 24相同構(gòu)造的從輸入 部件371到HDD 374 ；與圖6的從緩沖器71到輸出部件73相同構(gòu)造的從緩沖器375到輸出 部件377 ；與同步部件79相同構(gòu)造的同步部件378 ；與系統(tǒng)控制器78和系統(tǒng)控制器141相 同構(gòu)造的系統(tǒng)控制器379 ；與幀控制器78a相同構(gòu)造的幀控制器379a ；與寫控制部件31和 讀控制部件77相同構(gòu)造的讀/寫控制部件380 ；與從輸入部件25到HDD 28相同構(gòu)造的從 輸入部件381到HDD 384 ；以及與從緩沖器74到輸出部件76相同構(gòu)造的從緩沖器385到 輸出部件387。應(yīng)注意的是，在該實(shí)施例中，方程(1)被用作用于計(jì)算相關(guān)值z(j，k)的方程，但是 本發(fā)明不限于此。只要計(jì)算表示與組成第一編碼流171的編碼數(shù)據(jù)對(duì)應(yīng)的圖像數(shù)據(jù)和與組 成第二編碼流172的編碼數(shù)據(jù)對(duì)應(yīng)的圖像數(shù)據(jù)之間的相似度的值，可使用任何方程。因此，例如，有可能采用Σ {f(j-i)_g(k-l)}2、Σ {f(2i+j)_g(2i+k)}2、 Σ {f (2i+l+j)-g(2i+l+k)}2、數(shù)據(jù)大小f (i+j)和數(shù)據(jù)大小g(i+k)之間的絕對(duì)差
f(i+j)-g(i+k)的和Σ |f(i+j)-g(i+k) I等作為用于計(jì)算相關(guān)值ζ (j，k)的方程。順便地，在硬盤視頻記錄器中，如要記錄的圖像數(shù)據(jù)的圖像質(zhì)量從正常圖像質(zhì)量 轉(zhuǎn)換為高圖像質(zhì)量或者屏幕分辨率從SD (標(biāo)準(zhǔn)清晰度)轉(zhuǎn)換為HD (高清晰度)的情況一樣，近來已經(jīng)對(duì)幀速率執(zhí)行了從正常幀速率到高幀速率的轉(zhuǎn)換。因此，在硬盤視頻記錄器中，在某些情況下，每單位時(shí)間記錄在內(nèi)置硬盤中的編碼 數(shù)據(jù)的數(shù)據(jù)大小變大并且需要花費(fèi)大量時(shí)間來執(zhí)行對(duì)圖像數(shù)據(jù)進(jìn)行編碼的編碼處理。在該情況下，設(shè)想硬盤視頻解碼器裝備有多個(gè)用于執(zhí)行編碼處理的處理部件，并 且由要被記錄的圖像數(shù)據(jù)組成的記錄視頻流被分成多個(gè)視頻流(例如，由來自記錄視頻流 的圖像數(shù)據(jù)項(xiàng)的偶數(shù)圖像數(shù)據(jù)項(xiàng)組成的視頻流、以及由來自記錄視頻流的圖像數(shù)據(jù)項(xiàng)的奇 數(shù)圖像數(shù)據(jù)項(xiàng)組成的視頻流)，并且由多個(gè)處理部件對(duì)多個(gè)視頻流執(zhí)行編碼處理，從而縮短 編碼處理所需的時(shí)間。當(dāng)如上所述地構(gòu)造硬盤視頻解碼器時(shí)，有必要對(duì)通過分割記錄視頻流獲得的多個(gè) 視頻流進(jìn)行同步并且將它們恢復(fù)為原始記錄視頻流。還是在該情況下，可以應(yīng)用本發(fā)明的 實(shí)施例以便同步多個(gè)視頻流。順便地，上述系列處理可以由專用硬件或者軟件來執(zhí)行。在所述系列處理由軟件 來執(zhí)行的情況下，組成該軟件的程序被從記錄介質(zhì)安裝在所謂的內(nèi)置計(jì)算機(jī)中，所述內(nèi)置 計(jì)算機(jī)為能夠通過安裝各種類型的程序來執(zhí)行各種類型的功能的通用計(jì)算機(jī)等。圖13示出了通過程序執(zhí)行上述系列處理的個(gè)人計(jì)算機(jī)的結(jié)構(gòu)示例。CPU(中央處理單元)411根據(jù)存儲(chǔ)在R0M(只讀存儲(chǔ)器)412或者存儲(chǔ)部件418中 的程序執(zhí)行各種類型的處理。RAM(隨機(jī)存取存儲(chǔ)器)413適當(dāng)?shù)卮鎯?chǔ)由CPU 411執(zhí)行的程 序、數(shù)據(jù)等。那些CPU 411、ROM 412以及RAM 413經(jīng)由總線414彼此連接。輸入/輸出接口 415也經(jīng)由總線414連接到CPU 411。由鍵盤、鼠標(biāo)、麥克風(fēng)等組成 的輸入部件416以及由顯示器、揚(yáng)聲器等組成的輸出部件417連接到輸入/輸出接口 415。 CPU 411根據(jù)從輸入部件416輸入的指令執(zhí)行各種類型的處理。然后，CPU 411將所述處理 的結(jié)果輸出到輸出部件417。連接到輸入/輸出接口 415的存儲(chǔ)部件418由例如硬盤組成，并且存儲(chǔ)由CPU 411 執(zhí)行的程序以及各種類型的數(shù)據(jù)。通信部件419經(jīng)由網(wǎng)絡(luò)(諸如互聯(lián)網(wǎng)和局域網(wǎng))與外部 設(shè)備進(jìn)行通信。此外，程序可經(jīng)由通信部件419來獲取并且可被存儲(chǔ)在存儲(chǔ)部件418中。連接到輸入/輸出接口 415的驅(qū)動(dòng)器420驅(qū)動(dòng)可拆卸介質(zhì)421 (諸如磁盤、光盤、 磁光盤以及它們被安裝到的半導(dǎo)體存儲(chǔ)器)，并且獲取記錄在其上的程序、數(shù)據(jù)等。所獲取 的程序或者數(shù)據(jù)被適當(dāng)?shù)貍魉偷酱鎯?chǔ)部件418并且被存儲(chǔ)在其中。如圖13所示，安裝在計(jì)算機(jī)中并且記錄(存儲(chǔ))可由計(jì)算機(jī)執(zhí)行的程序的記錄 介質(zhì)的示例包括作為由磁盤(包括軟盤)、光盤(包括CD-ROM(致密盤一只讀存儲(chǔ)器)和 DVD(數(shù)字多功能盤))、磁光盤(包括MD(迷你盤))以及半導(dǎo)體存儲(chǔ)器組成的封裝介質(zhì)的 可拆卸介質(zhì)421、程序暫時(shí)或者永久地被存儲(chǔ)在其中的ROM 412、以及組成存儲(chǔ)部件418的 硬盤。程序適當(dāng)?shù)亟?jīng)由用作接口(諸如路由器和調(diào)制解調(diào)器)的通信部件419通過無線或 者有線傳送介質(zhì)(諸如局域網(wǎng)、互聯(lián)網(wǎng)以及數(shù)字廣播)而被記錄在記錄介質(zhì)上。應(yīng)注意的是，在這里，描述相關(guān)位置檢測處理的步驟包括沿著這里所描述的順序 以時(shí)間順序執(zhí)行的過程處理以及盡管不以時(shí)間順序執(zhí)行處理但是并行地或者單獨(dú)地執(zhí)行 的處理。本申請包含與在2009年3月4日向日本專利局提交的日本優(yōu)先權(quán)專利申請JP2009-050452中公開的主題內(nèi)容相關(guān)的主題內(nèi)容，在此通過引用將其全文合并于此。
本領(lǐng)域的技術(shù)人員應(yīng)該理解，可以取決于設(shè)計(jì)要求和其它因素進(jìn)行各種修改、組 合、子組合和變更，只要它們在所附權(quán)利要求或者其等同內(nèi)容的范圍內(nèi)。
權(quán)利要求
一種對(duì)由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻流和不同于所述第一視頻流的第二視頻流進(jìn)行同步的圖像處理設(shè)備，所述圖像處理設(shè)備包括計(jì)算裝置，用于基于組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù)大小以及組成所述第二視頻流的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小計(jì)算相關(guān)值，所述相關(guān)值表示組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)和組成所述第二視頻流的圖像數(shù)據(jù)項(xiàng)之間的相似度；以及檢測裝置，用于基于所述相關(guān)值對(duì)組成所述第二視頻流且對(duì)應(yīng)于組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測。
2.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備，還包括編碼裝置，用于通過可變比特率控制對(duì)所述第一視頻流和所述第二視頻流進(jìn)行幀內(nèi)編 碼，在所述可變比特率控制中，根據(jù)圖像數(shù)據(jù)項(xiàng)的圖像內(nèi)容而改變經(jīng)所述編碼后的數(shù)據(jù)大 小，其中所述計(jì)算裝置基于組成編碼的第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù) 大小以及組成編碼的第二視頻流的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小計(jì)算所述相關(guān)值。
3.根據(jù)權(quán)利要求2所述的圖像處理設(shè)備，還包括解碼裝置，用于對(duì)已被編碼的第一視頻流和第二視頻流進(jìn)行解碼，其中對(duì)所述第一視 頻流和所述第二視頻流所進(jìn)行的編碼不同于通過所述可變比特率控制而進(jìn)行的幀內(nèi)編碼，其中所述編碼裝置通過所述可變比特率控制對(duì)解碼的第一視頻流和解碼的第二視頻 流進(jìn)行幀內(nèi)編碼。
4.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備，其中所述計(jì)算裝置基于具有組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的GOP(畫面組) 的數(shù)據(jù)大小以及具有組成所述第二視頻流的圖像數(shù)據(jù)項(xiàng)的GOP的數(shù)據(jù)大小計(jì)算所述相關(guān) 值，所述相關(guān)值表示組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)和組成所述第二視頻流的圖像 數(shù)據(jù)項(xiàng)之間的GOP的相似度，并且其中所述檢測裝置基于所述相關(guān)值對(duì)GOP中組成所述第二視頻流且對(duì)應(yīng)于組成所述 第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測。
5.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備，其中所述計(jì)算裝置計(jì)算組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù)大 小和組成所述第二視頻流的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小之間的差值的平方和作為所述相 關(guān)值，并且其中，所述檢測裝置檢測在組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)和組成所述第二視 頻流的圖像數(shù)據(jù)項(xiàng)之間的所述相關(guān)值等于或者小于預(yù)定閾值時(shí)組成所述第二視頻流的圖 像數(shù)據(jù)項(xiàng)。
6.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備，其中組成所述第一視頻流和所述第二視頻流中的每一個(gè)的圖像數(shù)據(jù)項(xiàng)基于所述圖像 數(shù)據(jù)項(xiàng)的圖像內(nèi)容而在數(shù)據(jù)大小方面彼此不同。
7.一種用于對(duì)由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻流和不同于所述第一視頻流的第二 視頻流進(jìn)行同步的圖像處理設(shè)備的圖像處理方法，所述圖像處理設(shè)備包括計(jì)算裝置和檢測 裝置，所述圖像處理方法包括由所述計(jì)算裝置基于組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù)大小 以及組成所述第二視頻流的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小計(jì)算相關(guān)值，所述相關(guān)值表示組成 所述第一視頻流的預(yù)定圖像數(shù)據(jù)項(xiàng)和組成所述第二視頻流的圖像數(shù)據(jù)項(xiàng)之間的相似度；以 及由所述檢測裝置基于所述相關(guān)值對(duì)組成所述第二視頻流且對(duì)應(yīng)于組成所述第一視頻 流的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測。
8.—種記錄使圖像處理設(shè)備的計(jì)算機(jī)用作以下裝置的程序的記錄介質(zhì)，所述圖像處理 設(shè)備對(duì)由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻流和不同于所述第一視頻流的第二視頻流進(jìn)行 同步計(jì)算裝置，用于基于組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù)大小以 及組成所述第二視頻流的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小計(jì)算相關(guān)值，所述相關(guān)值表示組成所 述第一視頻流的預(yù)定圖像數(shù)據(jù)項(xiàng)和組成所述第二視頻流的圖像數(shù)據(jù)項(xiàng)之間的相似度；以及檢測裝置，用于基于所述相關(guān)值對(duì)組成所述第二視頻流且對(duì)應(yīng)于組成所述第一視頻流 的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測。
9.一種對(duì)由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻流和不同于所述第一視頻流的第二視頻 流進(jìn)行同步的圖像處理設(shè)備，所述圖像處理設(shè)備包括計(jì)算部件，用于基于組成所述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中的每一個(gè)的數(shù)據(jù)大小以 及組成所述第二視頻流的每個(gè)圖像數(shù)據(jù)項(xiàng)的數(shù)據(jù)大小計(jì)算相關(guān)值，所述相關(guān)值表示組成所 述第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)和組成所述第二視頻流的圖像數(shù)據(jù)項(xiàng)之間的相似度；以及檢測部件，用于基于所述相關(guān)值對(duì)組成所述第二視頻流且對(duì)應(yīng)于組成所述第一視頻流 的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測。
全文摘要
本發(fā)明公開了一種對(duì)由多個(gè)圖像數(shù)據(jù)項(xiàng)組成的第一視頻流和不同于第一視頻流的第二視頻流進(jìn)行同步的圖像處理設(shè)備，所述圖像處理設(shè)備包括計(jì)算部件和檢測部件。所述計(jì)算部件基于組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)中每個(gè)的數(shù)據(jù)大小以及組成第二視頻流的圖像數(shù)據(jù)項(xiàng)中每個(gè)的數(shù)據(jù)大小計(jì)算相關(guān)值，所述相關(guān)值表示組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)和組成第二視頻流的圖像數(shù)據(jù)項(xiàng)之間的相似度。所述檢測部件基于相關(guān)值對(duì)組成第二視頻流并且對(duì)應(yīng)于組成第一視頻流的多個(gè)圖像數(shù)據(jù)項(xiàng)的圖像數(shù)據(jù)項(xiàng)進(jìn)行檢測。
文檔編號(hào)H04N5/04GK101827202SQ20101012521
公開日2010年9月8日 申請日期2010年2月25日 優(yōu)先權(quán)日2009年3月4日
發(fā)明者松永正廣 申請人:索尼公司