專利名稱：用于執(zhí)行能夠以可變速度重放的測試聲音信號與參考聲音信號之間的相關(guān)的設(shè)備及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種用于執(zhí)行能夠以可變速度重放的測試聲音信號 與參考聲音信號之間的相關(guān)的設(shè)備及方法，以便例如將膠片事件與圖 像再現(xiàn)同步。
背景技術(shù)：
將音頻視頻數(shù)據(jù)以固定格式存儲在數(shù)據(jù)載體(即膠片或磁帶)上、 或傳輸通路(即無線電或電話機)上，該固定格式不允許分別通過新 穎的音頻格式或其它同步或者諸如字幕之類的圖像同步的輔助服務(wù)而 進行擴展。因此，例如隨著新音頻格式的引入，必須制造具有新音頻 格式的新的數(shù)據(jù)載體或膠片拷貝。
圖8示出了示例性膠片110。在重放期間，分別按照空間順序或 者時間順序來施加諸如分別被稱為"幀"或"視頻幀"的視頻信息或 圖像112以及在數(shù)字情況下具有"音頻幀"的音頻信息或多個模擬或 數(shù)據(jù)音軌114之類的膠片信息。此外，膠片110具有例如預(yù)先片孔 (advance perforation) 116，利用預(yù)先片孔來播放膠片。 基本上，己知兩種方法用于同步補充。
第一方法包括利用針對電影院音響的DTS (數(shù)字影院系統(tǒng))或以 連接到音頻信號的附加通道，將時間碼存儲在數(shù)據(jù)載體上。這里的示 例是DAB和mp3的輔助數(shù)據(jù)。將該時間碼用于分別與外部數(shù)據(jù)載體 (例如使用DTS的CD)同步地重放聲音或附加信息。然而，該方法 的缺點是每種附加格式都分別需要數(shù)據(jù)載體或傳輸通路上的另外空 間，而這也許是不可用的。關(guān)于膠片，例如存在針對模擬聲音、Dolby 數(shù)字、DTS、 SDDS (索尼動態(tài)數(shù)字音響)的音軌。然而，專有格式避
免了由其它擴展來使用一個擴展的時間碼。并不總是能夠避免擴展間 的相互干擾，一個示例是將MP3中的輔助數(shù)據(jù)用于來自不同制造商的
附加信息和帶寬擴展。
第二方法基于對用于存儲時間碼的模擬音軌的不當使用，例如將
其用于具有IOSONO系統(tǒng)的原型電影院。然而，本方法的缺點在于模
擬音軌存在于所有系統(tǒng)中，并且通常在其它系統(tǒng)的干擾期間將其用作 代用解決方案，這意味著模擬音軌的誤用妨礙了代用可能性。自動切
換到在大多數(shù)電影院中所安裝的模擬音軌導(dǎo)致以下事實當在針對
Dolby數(shù)字或DTS的"現(xiàn)代"音軌上不存在信號時，時間碼被作為模 擬信號來重放。因此，在原型電影院中，在下面將討論的純波場合成 再現(xiàn)期間，必須手動地斷開多余的模擬再現(xiàn)，因為否則可以通過多余 的其它揚聲器而聽到該時間碼。
聲學(xué)波場合成的短WFS超過了格式Dolby、SDDS或DTS的環(huán)繞 方法。利用WFS，嘗試在整個房間內(nèi)再現(xiàn)真實情況下的空氣振動，該 空氣振動構(gòu)成了聲音。與通過兩個或多個揚聲器的傳統(tǒng)再現(xiàn)(在其中， 原始聲源的位置的映射局限于揚聲器之間的線)相反，波場合成是將 對于原始聲源為真實的整個聲場傳送到空間中。這表示可以在空間上 準確地定位虛擬聲源，并且該虛擬聲源甚至像是存在于空間內(nèi)，并因 此可以環(huán)繞該虛擬聲源。已經(jīng)實現(xiàn)了在影院系統(tǒng)中具有多達200個揚 聲器以及在劇場聲音系統(tǒng)中具有多達900個揚聲器的系統(tǒng)。
波場合成是基于Huygens原理，該原理認為可以將波前上的每個 點看作元球面波的開始點。通過所有元波之間的干涉，產(chǎn)生與原始波 相同的新的波前。
這種聲音系統(tǒng)已經(jīng)由數(shù)字媒體技術(shù)Fraunhofer協(xié)會以IOSONO命 名開發(fā)，并用于Ilmenau電影院。
因此，將Ilmenau電影院作為實踐示例提及，在該示例中波場合 成操作于兩種模式。
在第一模式中，電影院操作為"真實的"波場合成系統(tǒng)，其中將 時間碼存儲在35mm膠片的模擬音軌上，諸如上述關(guān)于第二 "不當" 方法所討論的，其中從諸如硬盤或DVD之類的外部介質(zhì)來播放WFS聲音。
在第二模式("兼容再現(xiàn)")中，通過Dolby處理器將存儲于每個 35mm膠片中的聲音讀出，并進行解碼，備選地可以分別使用DTS或 SDDS，其中如果必要的話，Dolby處理器自動切換到模擬音軌，并通 過WFS將所產(chǎn)生的多通路信號映射到虛擬揚聲器上。
由于這兩種模式需要不同的信號路徑，因此需要對來自針對模擬 信號的讀頭的信號進行劃分，而這導(dǎo)致附加技術(shù)努力。
因此，總之，可以認為在當前的電影院膠片巻軸上沒有空間用以 附著另外的同步音軌，例如針對外部聲音系統(tǒng)或字幕系統(tǒng)的同步音軌。 直到現(xiàn)在仍然可用的所有電影院聲音系統(tǒng)(模擬及數(shù)字的)直接通過 膠片巻軸上的一個或多個音軌或通過膠片巻軸上的特定制造商的時間 碼信號來獲得其音軌。針對如上所述的兩個已知方法，這表示必須制 造膠片的新的拷貝，而這通常需要顯著的成本。然而，例如Dolby數(shù) 字和SDDS的音頻格式允許現(xiàn)代音頻體驗，但是仍然沒有用于例如字 幕或膠片聲音記錄的外語版本的同步的時間碼。
因此，F(xiàn)rank Jordan禾U Jesper Dannow在他們的出版物"Generating Timecode Information from Analog Sources", ll她Convention, Audio Engineering Society, 2005年5月28至31日，in Barcelona, Spain, Convention Paper 6473中提出了基于模擬音軌來產(chǎn)生時間碼。該出版 物描述了一種被附著在放映機的模擬音軌上的名稱為"soimdtitles"的 系統(tǒng)?；谝糗壍木庉嫷臄?shù)字拷貝以及膠片放映機的模擬信號，通過 互相關(guān)來確定時間信息或時間碼。系統(tǒng)"soimdtitles"由三個分量組成。 核心模塊"Sync Tracker"產(chǎn)生時間碼信號。第二模塊"Sync Player" 產(chǎn)生例如利用分束器來放映的字幕，第三模塊"Clip Player"播放通 過無線耳機傳送至電影院觀眾的同步音頻片段。
然而，不利地，在"soimdtitles"系統(tǒng)中，由于仍然殘留大約100ms 的時間偏移，所以無法產(chǎn)生語言同步。然而，觀眾將圖像與聲音之間 大約100ms的時間偏移理解為干擾。

發(fā)明內(nèi)容
本發(fā)明的目的是提供一種用于執(zhí)行相關(guān)的改進概念，以便減小膠 片中的視頻信號與未存儲在膠片上的聲音信號或一個或多個其它膠片 事件之間的時間延遲，例如具體為實現(xiàn)針對聲音信號的語言同步。這 個目的由根據(jù)權(quán)利要求l所述的用于執(zhí)行測試聲音信號與參考聲音信 號之間的相關(guān)的設(shè)備、根據(jù)權(quán)利要求20所述的用于產(chǎn)生控制信號的設(shè) 備、根據(jù)權(quán)利要求21所述的用于執(zhí)行測試聲音信號與參考聲音信號之間的相關(guān)的方法、以及根據(jù)權(quán)利要求22所述的計算機程序來實現(xiàn)。
本發(fā)明基于以下發(fā)現(xiàn)例如如果兩個信號通過相同采樣表示相同 膠片部分，則通過相關(guān)來確定產(chǎn)生最佳相關(guān)結(jié)果的兩個信號之間的時 間偏移。其先決條件是兩個信號以相同的采樣率或采樣率與數(shù)字圖像 的重放速度之比來對這個部分進行采樣，以及所重放的膠片匹配。
因此，根據(jù)本發(fā)明，提供了一種用于執(zhí)行能夠以可變速度重放的 測試聲音信號與作為測試聲音信號的數(shù)字存儲版本的參考聲音信號之 間的相關(guān)的設(shè)備，該設(shè)備包括用于確定對測試聲音信號的測試重放 速度的測量的裝置；改變裝置，用于依靠針對重放速度的測量，改變對測試聲音信號進行采樣的測試采樣率，以產(chǎn)生修改的測試聲音信號， 或者用于依靠針對重放速度的測量，改變數(shù)字存儲的參考聲音信號的 參考采樣率，以產(chǎn)生修改的參考聲音信號，該改變裝置形成用于改變
測試采樣率或參考采樣率，使得與測試聲音信號相關(guān)聯(lián)的測試重放速 度或與修改后的參考聲音信號相關(guān)聯(lián)的參考重放速度之間的偏差減 小，或者與修改后的測試聲音信號相關(guān)聯(lián)的測試重放速度和與參考聲 音信號相關(guān)聯(lián)的參考重放速度之間的偏差減小，或者與修改后的測試 聲音信號相關(guān)聯(lián)的測試重放速度和與修改后的參考聲音信號相關(guān)聯(lián)的參考重放速度之間的偏差減??；以及比較裝置，用于將修改后的聲音 信號與參考聲音信號、或測試聲音信號與修改后的參考聲音信號、或修改后的測試聲音信號與修改后的參考聲音信號進行比較，以獲得相 關(guān)結(jié)果。
為此，優(yōu)選實施例形成用于將測試聲音信號與具有不同參考采樣 率和/或不同采樣率轉(zhuǎn)換的三個參考聲音信號進行相關(guān)，以確定針對測 試聲音信號的重放速度的測量和/或減小重放速度的偏差。
用于執(zhí)行測試聲音信號與參考聲音信號之間的相關(guān)的設(shè)備及方法 可以用于產(chǎn)生針對膠片事件系統(tǒng)的控制信號的設(shè)備中，例如作為比較 裝置，該控制信號將膠片事件與圖像再現(xiàn)同步。針對膠片事件的示例 是聲音、字幕和特殊效果，其中，特殊效果包括例如氣流、振動電影 院的椅子、氣味、或邊墻及背墻上的燈光效果。因此，關(guān)于音頻效果， 不同語言(例如同時播放原始版本并翻譯成其它語言的版本)以及不 同音頻技術(shù)都是可能的，例如象波場合成一樣的數(shù)字環(huán)繞聲系統(tǒng)的同 步。這里，執(zhí)行相關(guān)的設(shè)備或方法具體地用于附加膠片事件的"重放 速度"與膠片的重放速度的同步和/或匹配。
盡管上述和以下示例談及電影愛好者或電影，本發(fā)明不局限于針 對電影愛好者的電影膠片，而是在總體上分別涉及電影或視聽信號， 而與這些信號是否是存儲于膠片或其它數(shù)據(jù)載體和存儲介質(zhì)(例如磁 帶或硬盤驅(qū)動機)上的膠片信息無關(guān)。此外，本發(fā)明還可用于不具有
視頻的單純的音響系統(tǒng)，或者例如本發(fā)明可用于通過視頻-ID將單純的
視頻材料(即，沒有聲音的材料)與任意事件進行同步。


下列將參考附圖，討論本發(fā)明的優(yōu)選實施例。附圖示出了
圖1是用于產(chǎn)生針對膠片事件系統(tǒng)的控制信號的設(shè)備的優(yōu)選實 施例的基本方框圖2a是用于執(zhí)行相關(guān)的設(shè)備的實施例的基本方框圖2b是用于執(zhí)行相關(guān)的設(shè)備的優(yōu)選實施例的基本方框圖2c.1是膠片的示例性片段；
圖2c.2是圖2c.1中所示的膠片的片段中的聲音信號的示例性曲 線圖，其具有可變第一重放速度和固定的測試采樣率；
圖2c.3是圖2c.l中所示的膠片的片段中的聲音信號的示例性曲線 圖，其具有可變第二重放速度和固定的測試采樣率；
圖2c.4是圖2c.l中所示的膠片的片段中的聲音信號的示例性曲線 圖，其具有可變第三重放速度和固定的測試采樣率；
圖2d.1是膠片的兩個示例性片段；
圖2d.2是膠片的參考聲音信號的示例性曲線圖2d.3是針對膠片的片段的基于第一重放速度和固定測試采樣 率的測試聲音信號的示例性曲線圖2d.4是由根據(jù)圖2d.2的參考聲音信號與根據(jù)圖2d.3的測試聲音信號的相關(guān)所產(chǎn)生的示例性第一相關(guān)結(jié)果；
圖2d.5是根據(jù)圖2d.l的膠片的兩個示例性片段；
圖2d.6是根據(jù)圖2d.2的膠片的參考聲音信號的示例性曲線圖2d.7是針對膠片的片段的基于第二重放速度和固定測試采樣率的測試聲音信號的示例性曲線圖;
圖2d.8是由根據(jù)圖2d.6的參考聲音信號與根據(jù)圖2d.7的測試聲音信號的相關(guān)所產(chǎn)生的示例性第二相關(guān)結(jié)果；
圖3a是用于基于指紋表示來確定膠片中的一部分的設(shè)備的優(yōu)選實施例的基本方框圖3b.1是膠片的兩個片段；
圖3b.2是針對根據(jù)圖3b.l的兩個片段的參考聲音信號的示例性 曲線圖4是用于基于對位置的粗略以及隨后精細的確定來確定膠片中 的位置的設(shè)備的優(yōu)選實施例的基本方框圖5a是用于產(chǎn)生針對膠片事件系統(tǒng)的控制信號的設(shè)備的優(yōu)選實 施例的基本方框圖5b.1是膠片的兩個片段；
圖5b.2是針對膠片的第一片段的參考聲音信號的示例性曲線圖； 圖5b.3是針對膠片的第二片段的測試聲音信號的示例性曲線圖； 圖5b.4是由根據(jù)圖5b.2的參考聲音信號與根據(jù)圖5b.3的測試聲音信號的相關(guān)所產(chǎn)生的示例性相關(guān)結(jié)果；
圖6a是具有用于產(chǎn)生針對膠片事件系統(tǒng)的控制信號的設(shè)備以及膠片事件系統(tǒng)的示例性電影放映系統(tǒng)的基本方框圖6b是具有用于產(chǎn)生控制信號的設(shè)備以及示例性音頻膠片事件系統(tǒng)的示例性電影放映系統(tǒng)的基本方框圖7是時標與膠片信息的示例性聯(lián)系的示意性表示；
圖8是具有所施加的膠片信息的示例性膠片的示意性表示。
具體實施例方式
在本發(fā)明或優(yōu)選實施例的以下描述中，分別將相同的附圖標記用 于相似或相同的元件。
在下文中，將關(guān)于使用施加到膠片上的聲音信號作為膠片信息的 實施例對本發(fā)明進行更加詳細的描述。然而，這并非限制本發(fā)明，而 是用作例證目的。
圖1示出了用于產(chǎn)生針對膠片事件系統(tǒng)的控制信號的設(shè)備的基本
方框圖以及上述關(guān)于圖8己說明的示例性膠片110，其中用于產(chǎn)生控
制信號的設(shè)備包括用于存儲膠片信息的裝置120;用于接收讀取自 膠片的片段的裝置140;用于將所讀取的片段與所存儲的膠片信息 112、 114進行比較的裝置160;以及用于基于上述比較和時標來確定
控制信號的裝置180。
例如，所存儲的視頻信息112、 114分別包括聲音或音頻信號、 或者分別包括圖像或視頻信號，或者還包括當前可以在膠片上找到的 標簽，并且例如該標簽分別確定在哪兒打開光圈或者何時開始播放膠 片或者何時停止該膠片。例如，所存儲的音頻和/或視頻信號是數(shù)字化 的形式，優(yōu)選為壓縮形式以減小存儲器需求。
數(shù)字化存儲的優(yōu)點是膠片信息的存儲圖像的簡單且特別是無誤 差的再現(xiàn)性。
與傳統(tǒng)系統(tǒng)相反，如上所述，膠片保持不變，例如僅在制造膠片 時，產(chǎn)生一次膠片信息的存儲圖像。
在通過膠片重放設(shè)備(例如膠片放映機)來重放該膠片時，包含 在音軌114上的聲音信號由接收裝置140所接收并針對比較裝置160 來編輯該聲音信號，例如使用給定采樣率來對該聲音信號進行采樣， 并分別將其作為給定長度的片段或給定數(shù)目的采樣率來傳遞。
裝置160形成用于將讀取自膠片的所述片段與所存儲的膠片信息 進行比較，其中，該比較裝置160可以形成用于將該讀取片段與全部 存儲信息進行比較，然而優(yōu)選地，該比較設(shè)備160形成用于將該讀取片段與存儲膠片信息的片段進行比較，以最小化計算努力。例如，可 以通過互相關(guān)來進行上述比較，也可以通過計算差值來進行上述比較， 例如通過計算壓縮的散列和并在數(shù)據(jù)庫中搜索相同的值來進行。上述 比較可以只基于聲音信號、只基于視頻信號、聲音信號和視頻信號的 比較、以及對上述特征的評價的組合。確定裝置180基于比較裝置160
的比較結(jié)果和時標來確定控制信號190。通過控制信號190來控制膠 片事件系統(tǒng)，例如，這基于控制信號190在時間上與重放膠片110同 步地產(chǎn)生了 WFS聲音信號或字幕。因此，可以形成用于產(chǎn)生控制信 號的設(shè)備或者具體地用于確定控制信號的裝置180，使得該控制信號 是任意專有或標準的時間碼格式，例如根據(jù)SMPTE(電影與電視工程 師學(xué)會)進行標準化的LTC時間碼格式(LTC-縱向時間碼)
時間同步表示膠片事件系統(tǒng)基于控制信號190產(chǎn)生與剛剛重放的 膠片的位置的時標上的時間相對應(yīng)的同步事件，在所存儲的膠片信息 中，時標上的時間與該同步事件相關(guān)聯(lián)。
因此，不同于所說明的實施例，可以使用任意膠片重放設(shè)備來代 替膠片放映機，可以使用任意膠片格式，例如無聲電影(例如，基于 視頻信息而同步)、具有模擬或數(shù)字音軌的膠片、具有一個音軌或多個 并行音軌的膠片，或者作為膠片的備選，可以使用其它任何存儲介質(zhì)， 例如磁帶或硬盤驅(qū)動器，為了與未來的膠片重放設(shè)備兼容，膠片的格 式不能或者必須不改變，然而為此同時要將其它膠片事件同步。
在優(yōu)選實施例中，使用聲音信號作為用于同步的膠片信息。因此， 使用給定采樣率(這將在下文中稱為測試釆樣率)來對讀取自膠片的 片段進行采樣，以產(chǎn)生測試聲音信號，并以數(shù)字形式來存儲所存儲的 膠片信息，其中下文中將所存儲的膠片信息稱為參考信號，并通過互 相關(guān)在比較裝置160中將測試聲音信號與參考聲音信號進行比較。
在一個實施例中，測試信號采樣率和參考信號采樣率是不可變 的，即固定的。例如，比較裝置160可形成用于基于第一測試聲音信 號和第一參考聲音信號在第一時間上產(chǎn)生第一相關(guān)結(jié)果，以確定時標 的第一時間，以及用于基于第二測試聲音信號和第二參考聲音信號在 第二時間上產(chǎn)生第二相關(guān)結(jié)果，以確定時標的第二時間，從而例如分
別確定時間差或重放速度，或確定與目標或參考重放速度相比的速度 差?；诖?，確定裝置180確定用于同步例如膠片事件系統(tǒng)的控制信號。
然而，固定釆樣率的缺點在于相關(guān)結(jié)果隨著測試重放速度的改 變而減小，并且膠片中的時間或位置的確定精度由此變得不準確，并 且由此同步下降。這個缺點可以通過改變采樣率來補償，采樣率表示 測試采樣率和/或參考采樣率。
圖2示出了用于執(zhí)行能夠以可變重放速度來播放的測試聲音信號與作為測試聲音信號的數(shù)字存儲版本的參考聲音信號之間的相關(guān)的設(shè) 備的基本方框圖，其中用于執(zhí)行相關(guān)的設(shè)備包括用于確定測試重放 速度的測量的裝置210;用于改變測試采樣率或參考采樣率的裝置230;以及比較裝置250。裝置230形成用于改變對測試聲音信號270 進行采樣的測試釆樣率，以產(chǎn)生修改的測試信號272，或用于改變參 考采樣率，以基于參考聲音信號274來產(chǎn)生修改的參考聲音信號。此 外，改變裝置230形成用于改變測試采樣率或參考采樣率，使得與測 試聲音信號相關(guān)聯(lián)的測試重放速度或與修改后的參考聲音信號276相 關(guān)聯(lián)的參考重放速度之間的偏差減小，或者與修改后的測試聲音信號 272相關(guān)聯(lián)的測試重放速度和與參考聲音信號274相關(guān)聯(lián)的參考重放 速度之間的偏差減小，或者與修改后的測試聲音信號272相關(guān)聯(lián)的測 試重放速度和與修改后的參考聲音信號276相關(guān)聯(lián)的參考重放速度之 間的偏差減小，其中下面將分別更詳細地討論術(shù)語重放速度或可變重 放速度的問題。
用于將修改后的聲音信號272與參考聲音信號274、或測試聲音 信號270與修改后的參考聲音信號276、或修改后的測試聲音信號272 與修改后的參考聲音信號276進行比較的裝置250形成用于確定相關(guān) 的結(jié)果278。
例如，可以將如圖2a所示的用于執(zhí)行相關(guān)的設(shè)備的實施例用作 用于產(chǎn)生膠片事件系統(tǒng)的控制信號的設(shè)備(例如如圖l所示)中的比 較裝置160。
圖2b示出了用于執(zhí)行測試聲音信號與參考聲音信號之間的相關(guān)的設(shè)備的優(yōu)選實施例的基本方框圖。
圖2b示出了用于存儲參考聲音信號274的裝置280，該參考聲音 信號274是測試聲音信號270的數(shù)字版本，其中參考聲音信號274是 之前基于給定存儲參考重放速度和存儲參考采樣率產(chǎn)生的。
以可變測試重放速度重放該測試聲音信號，并以測試采樣率對其 進行采樣，從而產(chǎn)生測試聲音信號270。
用于確定對測試聲音信號270的測試重放速度的測量的裝置210 基于針對測試重放速度的測量來控制改變裝置230。改變裝置230控 制釆樣率轉(zhuǎn)換器232以及可變采樣器234的參考或采樣率，其中該采 樣率轉(zhuǎn)換器232形成用于基于不同的存儲參考采樣速度和/或存儲參 考采樣率，將基于存儲參考重放速度和存儲參考采樣率的參考聲音信 號轉(zhuǎn)換成對應(yīng)于參考聲音信號的修改的參考聲音信號276，以及其中 該可變采樣器234形成用于以不同于標準或基本采樣率的可變采樣率 來對測試聲音信號進行采樣，以產(chǎn)生修改的測試聲音信號272。
不同于圖2b，還可以形成用于執(zhí)行相關(guān)的設(shè)備，使得總是通過可 變采樣器234將測試聲音信號270提供給比較裝置250，其中分別在 改變裝置230的控制下，形成可變采樣器234，使得可變測試采樣率 之一與標準或基本采樣率相對應(yīng)，并且使得總是通過參考采樣率轉(zhuǎn)換 器232將參考聲音信號274提供給比較裝置250，并形成參考采樣率 轉(zhuǎn)換器232，使得參考采樣率轉(zhuǎn)換器232以未修改的形式將參考聲音 信號274傳遞到比較設(shè)備250。
將與修改后的測試聲音信號272進行比較的測試聲音信號270以 及與修改后的聲音信號276進行比較的參考聲音信號獨立提供給圖2b 中所選的比較裝置250的表示用來例證備選實施例或?qū)崿F(xiàn)的可能性。
因此，例如在比較裝置250形成用來將修改后的測試聲音信號272 與未修改的參考聲音信號274進行比較的一個實施例中，不需要參考 采樣率轉(zhuǎn)換器234，或者根據(jù)圖2b的用于執(zhí)行相關(guān)的設(shè)備沒有參考采 樣率轉(zhuǎn)換器232。按照同樣的方式，形成用于將未修改的測試聲音信 號270與修改后的參考聲音信號246進行比較的比較設(shè)備250不具有 可變采樣器234。
在另一實施例中，存儲裝置280是用于存儲膠片信息的裝置，其中時標與所存儲的膠片信息相關(guān)聯(lián)，并且例如該測試聲音信號270是 電影聲音信號。然后，例如可以將根據(jù)圖2b的用于執(zhí)行相關(guān)的設(shè)備用 作根據(jù)圖1的比較裝置160。
圖2c.1示出了如圖1所示的具有音軌114的示例性膠片110的片 段。在圖2c.l中，指示了膠片IIO中的兩個位置第一位置(又稱為 位置Lj)，以及第二位置(又稱為位置L2)。兩個位置L,和L2定義了 膠片110上長度為AL-L!-L2的片段。
圖2c.2示出了與圖2c.1中所描述的位置L,和L2之間的片段相關(guān) 聯(lián)的測試聲音信號的示例性曲線圖，其中將播放膠片的位置L,的時間 表示為時間Tp以及將播放膠片的位置L2的時間表示為時間T2。時 間段AT-T,-T2取決于各個片段的長度以及膠片的重放速度v。以下公式分別適用
△T = △L/v或 T2-T1＝(L2-L1)/v。
當以采樣率f= 1 /△t對測試聲音信號進行采樣時(其中△t是采樣 周期，并且△T=n.△T)，可以將該測試聲音信號示出為n+l個采樣的 序列，如圖2c.2中以n二10示例性指示的。
當以重放速度v和采樣率f =1/△t來重放膠片時，分別將L,與 L2之間或T,與T2之間的膠片中的片段分為例如n個周期，或者分別 由n+l個采樣來表示。以下公式分別適用 n = △L/(△t.v)，或 n = △L f/v。
這分別表示針對給定膠片片段AL的采樣周期或釆樣的數(shù)量與采 樣率f成正比，或者與采樣周期△t成反比。換言之，在n或采樣數(shù)量 n+l要固定時，在具有固定長度AL的片段中，商"f/v"或乘積"△t.v" 分別必須固定。
在這種情況下，如果第一采樣相等，則在上述條件下，各個采樣 也相等。
因此，在分別以存儲采樣率fmemory和存儲重放速度Vmemory產(chǎn)生存
儲的膠片信息或參考聲音信號時，例如，分別由nm^。7w個參考采樣 來表示并存儲膠片信息的存儲片段或測試聲音信號。
為了例證事實，圖2c.2至2c.4示出了針對固定采樣率f或固定采 樣周期At以及可變釆樣速度的位置Li和L2之間的膠片片段的示例性 采樣或存儲，其中圖2x2示出了第一重放速度v,的示例性采樣或存儲， 圖2c.3示出了以第二重放速度V2對膠片中的相同片段的采樣或存儲， 以及圖2c.4示出了針對第三采樣速度v3的膠片中的相同片段的采樣。 因此，在這個示例中，V,是V2的一半，并且是V3的兩倍Vl = v2 /2 以及V1＝2,V3。
圖2c.2至圖2c.4中所示的所有這三個聲音信號在位置L,或相應(yīng) 的時間T,處具有相同的采樣。因此，對應(yīng)地，如圖2c.2至2c.4中示 例性例證的，由ni+l=ll個采樣來表示圖2c.2中的存儲圖像信息或參 考聲音信號，在圖2c.3中由ri2+l=6個采樣表示膠片中的相同片段， 以及在圖2c.4中，由n3+l=21個采樣表示膠片中的相同片段。
如在圖2c.2至圖2c.4中可見的，由于采樣率固定，重放速度v 的增加對應(yīng)于聲音信號的時間壓縮，即如圖2c.3中所指示的，圖2c.2 中的重放速度Vl的加倍導(dǎo)致TVT,和n的減半，以及重放速度v減少 對應(yīng)于聲音信號的時間擴展，即如圖2c.4中所指示的，圖2c.2中的重 放速度v,的減半導(dǎo)致T2-T,和n的加倍。
圖2d. 1和2d.2僅與圖2c. 1和2c.2相對應(yīng)。與圖2c. 1相比，圖2d. 1 示出了定義了關(guān)于膠片以及施加至其上的膠片信息的搜索片段或搜索 窗的兩個附加位置，其中，由Lo指示搜索窗的第一位置，以及由L3 指示搜索窗的第二位置，其中位置U和L3之間的片段大于由位置b
和 L2所定義的片段，或者△Uindow >(其中△Uindow = H0以及△L
=L2-L》適用。對應(yīng)地，在圖2d.2中，在圖2c.2之外添加了表示基 于給定重放速度的與位置U相關(guān)聯(lián)的時間的時間T。以及表示基于給 定采樣重放速度的與位置L3相關(guān)聯(lián)的時間的時間t3 。
關(guān)于存儲膠片信息或參考聲音信號以及附加存儲的時標的產(chǎn)生， 這分別表示例如，T0定義了與位置L。相關(guān)聯(lián)的時標上的時間，時間 T,定義了與位置L,相關(guān)聯(lián)的時標上的時間，時間丁2定義了與位置L2相關(guān)聯(lián)的時標上的時間，以及時間t3定義了與膠片上的位置L3相關(guān)聯(lián)的時標上的時間。
圖2d.3與圖2c.2相對應(yīng)。
在下文中，關(guān)于圖2d.2至2d.4，將分別對通過相關(guān)的兩個信號的 比較的基本曲線圖或比較兩個信號時的可變重放速度的問題進行示例 性表示和討論。
因此，圖2d.3示出了施加至膠片上的當前讀取的膠片信息或測試 聲音信號270，圖2d.2示出了在由圖2d.2和圖2d.3所表示的最優(yōu)情 況下的存儲膠片信息或參考聲音信息，產(chǎn)生參考聲音信號的存儲重放 速度和存儲采樣率分別與測試聲音信號的重放速度和測試聲音信號或 如上述所提到的釆樣率相對應(yīng)，存儲釆樣率fmemory和存儲重放速度Vmemory的商與測試聲音信號f的采樣率和測試聲音信號V的重放速度的商相對應(yīng)。在這種情況下，由T1和丁2定義的參考聲音信號或者參 考聲音信號的片段可以準確地與表示T1和T2之間的片段的測試聲音 信號相對應(yīng)，更精確地，如圖2d.4中示例性例證的，可以通過相關(guān)來 獲得確定的局部最大值或相關(guān)峰值。
峰值的位置指示測試聲音信號相對于參考聲音信號或搜索窗的 時間偏移。基于此，可以確定關(guān)于所存儲的時標的當前時間。
與圖2d.1至2d.4相反地，圖2d.5至2d.8示出了示例，在其中， 與圖2d.2中所指示的測試聲音信號的重放速度相比，在圖2d.7中所 指示的測試聲音信號的重放速度減小。
圖2d.5與圖2d.l相對應(yīng)。圖2d.6與圖2d.2相對應(yīng)，這意味著圖2d.6表示基于存儲采樣率fmemory和存儲采樣速度Vmemory的參考聲音信號的示例性曲線圖。圖2d.7示出了基于相對于2d.3或圖2d.6為不變的測試采樣率f (但是測試聲音信號的重放速度v'減小地改變)的測試 聲音信號的示例性曲線圖或示例性采樣。
關(guān)于考慮中的時間段ΔT，這意味著在具有減小的速度v'的相同時 間段ΔT中，僅重放膠片中的較小片段或根據(jù)ΔL'=v'.ΔT的較小長度ΔL' 的片段，因此關(guān)于剛好在時間段Δ'之后播放的膠片，如圖2d.5所示， 在位置L2之前僅達到一個位置L2'。關(guān)于參考聲音信號以及與其相關(guān)聯(lián)的時標，如圖2d.7中所示，時標的時間T;與位置L;相關(guān)聯(lián)。
關(guān)于測試聲音信號中的各個采樣，這表示由膠片中的音軌所預(yù)定 的測試聲音信號的"空間"曲線圖是不變的，因此以較低的重放速度，
v'與采樣周期At或相應(yīng)的空間采樣片段Al'(小于A1)相對應(yīng)，因此 如圖2d.7所示，與圖2d.6相比，測試聲音信號的采樣關(guān)于"空間" 信號曲線圖"遷移"到左邊。
在相反的情況下，其中改變的重放速度v'大于存儲重放速度 vmenwy，則發(fā)生相反的情況，其中在相同周期At中，重放較長的空間 片段A1，因此測試聲音信號的采樣在測試聲音信號的"空間"曲線圖 中"遷移"到信號曲線的"右邊"。
因此，利用改變的重放速度，無論該重放速度是高于或低于存儲
重放速度Vmer^y，比較的結(jié)果都減小，因為即使利用別的最優(yōu)條件， 測試聲音信號和參考聲音信號也再現(xiàn)膠片中的兩個不同的空間片段。 存儲重放速度越偏離測試重放速度，比較的結(jié)果變得越差。在通過相 關(guān)進行比較時，局部最大值或峰值的量減小，并且最大值本身變得更 寬且更平坦，所以關(guān)于時標的時間確定變得越來越不準確，直到不再 可能出現(xiàn)最大值。
在實際條件下，例如測試聲音信號的重放速度不僅在不同的膠片 放映機之間變化，而且還可以在電影期間變化。因此，精確的重調(diào)對 于保證整個電影期間的同步是至關(guān)重要的。
因此，為了表示具有相同采樣的膠片中的相同片段，根據(jù)測試聲 音信號和參考聲音信號的采樣率和重放速度的商必須相等的上述條 件，用于執(zhí)行相關(guān)的設(shè)備改變測試聲音信號的采樣率或參考聲音信號 的參考率，以便如上所述最小化測試聲音信號的可變重放速度的不利 作用。
在之前以存儲采樣率所產(chǎn)生的數(shù)字參考聲音信號中，重放速度的
改變受采樣率轉(zhuǎn)換的影響，其中，例如對所存儲的參考聲音信號274
進行相應(yīng)的內(nèi)插，以產(chǎn)生具有與改變的重放速度相對應(yīng)的采樣率的參 考聲音信號。
圖2d.l-2d.8表示簡化示例，其中，為了簡單起見，假設(shè)存儲重放速度Vmem。ry對應(yīng)于用于產(chǎn)生測試聲音信號的播放器的正?；蚱胀ㄖ胤潘俣?。然而，如上所述，采樣率f和重放速度v的商是對于參考聲音信號和測試聲音信號必須相等的量，以便如上所述能夠表示具有相同 采樣的膠片的相同片段。例如，當產(chǎn)生參考聲音信號時，可以在使采 樣率加倍的同時使用兩倍的重放速度。
在根據(jù)圖2b的實施例中，確定裝置210可以基于相關(guān)的結(jié)果278來確定針對測試重放速度的測量。
一種方法是使用單一相關(guān)結(jié)果來確定重放速度的測量，通過對例 如峰值的幅度與給定閾值進行比較，以便確定測試聲音信號和參考聲 音信號的重放速度之間的偏差是否位于給定范圍內(nèi)。
在優(yōu)選實施例中，將基于不同參考采樣率或?qū)?yīng)于不同參考重放 速度的至少兩個不同的參考聲音信號與測試聲音信號進行比較，以便例如通過質(zhì)量評價來比較相關(guān)的結(jié)果，將參考圖5對此進行更詳細的討論，以便基于已知采樣率和己知存儲重放速度，從比較結(jié)果中確定 最相似的參考聲音信號，并因此確定針對測試聲音信號的重放速度的 測量。因此，可以相繼形成不同的參考聲音信號，并將其與測試聲音 信號進行比較，或者可以同時形成并進行比較。
用于執(zhí)行相關(guān)的設(shè)備的特別優(yōu)選實施例在先前比較中分別基于 不同的參考采樣率而產(chǎn)生三個參考聲音信號，其中三個采樣率中的中 間采樣率的參考聲音信號是基于具有最佳質(zhì)量或與測試聲音信號的最 大匹配的參考聲音信號的參考采樣率的，兩個其它參考聲音信號中的 每個分別具有高于或低于中間參考聲音信號的參考采樣率的參考采樣率。這是由改變裝置230基于確定測試重放速度的測量的確定裝置210 的輸出信號所控制的。因此，保證了參考聲音信號的參考采樣率或參 考重放速度分別適配于測試聲音信號的重放速度或參考采樣率。
圖3a示出了如圖8所示的示例性膠片以及用于確定膠片中的位 置的設(shè)備的基本方框圖。
例如，可以將如圖3a所示的用于確定膠片中的位置的設(shè)備的實 施例用于在用于產(chǎn)生針對膠片事件系統(tǒng)的控制信號的設(shè)備(如圖1所 示)中，作為用于確定控制信號的裝置180。
用于確定膠片中的位置的設(shè)備包括用于存儲膠片信息的參考指 紋表示的存儲器320，其中形成指紋表示，使得該指紋表示的時間曲 線取決于膠片信息的時間曲線，以及其中，時標與所存儲的參考指紋 表示相關(guān)聯(lián)；用于接收從膠片讀取的片段的裝置340;用于從讀入片 段中提取出測試指紋表示的裝置350;以及用于將測試指紋表示與參
考指紋表示進行比較，以便基于比較和時標來確定膠片中的位置的裝
置360。
在優(yōu)選實施例中，指紋表示包括具有頻譜平坦度形式的表示，其 中指紋表示的時間曲線包括頻譜平坦度的時間曲線。
例如，圖3b.l分別示出了如圖8所示的示例性膠片110。因此，
在以給定重放速度播放膠片時，例如，時標的時間TuK)與膠片的位置
L,oo相對應(yīng)，時標的時間T,。3與位置Li。3相對應(yīng)，時標的時間1113與 位置Ln3相對應(yīng)，并且時標的時間Tn6與位置Ln6相對應(yīng)。
在產(chǎn)生膠片信息的參考指紋標識的步驟中，在一個實施例中，針 對膠片的特定空間或時間片段來確定指紋。
例如，圖3b.2示出了包括從位置L,。。到L^或T,。。到T^的片段的第 一片段和包括從位置I^到位置L^或從時間1^到時間T^的片段的第 二片段。基于這些片段，例如基于頻譜分析、傅立葉變換、或特征提 取的其它方法，產(chǎn)生與片段相關(guān)聯(lián)的指紋。在特別優(yōu)選的實施例中， 指紋包括根據(jù)功率密度譜所計算的頻譜平坦度^，因此針對每個片段 確定頻譜平坦度的值，并且頻譜平坦度的序列依賴于膠片信息(例如 與時標關(guān)聯(lián)存儲于存儲器320中的聲音信號)的時間曲線。
根據(jù)需求(例如，關(guān)于對膠片中的位置的確定的唯一性或精確 性)，確定片段的采樣率、長度或持續(xù)時間，或者兩個連續(xù)片段之間的 距離。片段越長，對總體特征的說明越清楚，采樣率越高和/或兩個片 段之間的距離越小，則可以越精確地確定膠片中的位置。采樣率越高， 片段越長，并且片段之間的距離越小，則針對參考信號的存儲需求或 者計算功率信號處理的需求越高。
具有頻譜平坦度形式的指紋表示的顯著優(yōu)點在于例如與相同片 段的功率密度譜的完整存儲相比，其存儲需求較低。優(yōu)選地，將頻譜平坦度的曲線或序列用作片段的指紋。
圖4a示出了如圖8所指示的示例性膠片110，以及用于確定具有 按照時間順序所施加的膠片信息的膠片中的位置的設(shè)備。
例如，可以將如圖4a所示的用于確定膠片中的位置的設(shè)備的實 施例用于如圖1所示的用于產(chǎn)生針對膠片事件系統(tǒng)的控制信號的設(shè)備 中，作為用于確定控制信號的裝置180。
用于確定位置的設(shè)備具有用于存儲按照時間順序施加至膠片的 膠片信息的存儲器420，其中時標與所存儲的膠片信息相關(guān)聯(lián)；用于 接收讀取自膠片的片段的裝置440;以及同步裝置460,形成用于將基 于第一采樣率的讀取部分的采樣序列與所存儲的膠片信息的第一搜索 窗進行比較以獲得粗略的結(jié)果，以及將基于第二釆樣率的讀取片段的 采樣序列與所存儲的膠片信息的第二搜索窗進行比較以獲得針對膠片 位置的精細結(jié)果，其中所存儲的膠片信息中的第二搜索窗的位置取決 于粗略的結(jié)果，以及其中第一搜索窗在時間上比第二搜索窗長，以及 此外第一采樣率低于第二采樣率。
圖5a示出了如圖8所指示的示例性膠片10，以及用于產(chǎn)生針對 膠片事件系統(tǒng)的控制信號的設(shè)備的優(yōu)選實施例，該設(shè)備形成用于基于 施加至從膠片中讀取的音頻信號或測試聲音信號的片段的膠片的模擬 音軌來確定控制信號，并經(jīng)由時標將測試聲音信號和參考聲音信號進 行比較，確定與時標相關(guān)聯(lián)的測試聲音信號的存儲數(shù)字版本(下文中 稱為參考聲音信號)。
圖5a示出了用于產(chǎn)生針對具有與第一 A/D轉(zhuǎn)換器544 (A/D-模 擬/數(shù)字)相連的第一膠片聲音采樣器542的膠片事件系統(tǒng)的控制信號 的設(shè)備的優(yōu)選實施例，其中，該第一A/D轉(zhuǎn)換器544與第一特征提取 器552、用于基于第一采樣率與第一參考聲音信號相關(guān)的第一裝置562 用于基于第二采樣率與第二參考聲音信號相關(guān)的第二裝置564、以及 用于基于第三采樣率與第三參考聲音信號相關(guān)的第三裝置566相連。 用于相關(guān)的第一裝置562的輸入端、用于相關(guān)的第二裝置564的輸入 端、用于相關(guān)的第三裝置566的輸入端與采樣率轉(zhuǎn)換器(SRC) 232 的輸出端相連。
用于相關(guān)的第一裝置562的輸出端、用于相關(guān)的第二裝置564的 輸出端、用于相關(guān)的第三裝置566的輸出端與用于質(zhì)量評價的第一裝 置568的輸入端相連。用于質(zhì)量評價的裝置568則與采樣率轉(zhuǎn)換器232 以及用于采樣器選擇的裝置570相連，其中用于采樣器選擇的裝置570 的輸出端與定時器582的輸入端相連。定時器582則與所存儲的音軌 或用于存儲音軌的裝置522相連，其中用于存儲音軌的裝置522的輸 出端與采樣率轉(zhuǎn)換器232的輸入端相連。
第一特征提取器552的輸入端與用于比較具有例如特征分級器和 特征數(shù)據(jù)庫的特征的裝置554的輸入端相連，其中用于比較特征的裝 置554的輸出端與定時器582的輸入端相連。
定時器582的輸出端與產(chǎn)生時間碼的裝置584的輸入端相連，裝 置584具有時間碼數(shù)據(jù)庫或與時間碼數(shù)據(jù)庫相連，其中用于產(chǎn)生時間 碼的裝置584的輸出端與用于平滑時間碼的裝置586的輸入端相連， 其中用于平滑時間碼的裝置586還形成用于輸出時間碼592，其中用 于平滑時間碼的裝置586的輸出端與字時鐘發(fā)生器588的輸入端相連， 該字時鐘發(fā)生器588形成用于輸出字時鐘信號594。
可選地，用于產(chǎn)生針對膠片事件系統(tǒng)的控制信號的設(shè)備還具有第 二膠片聲音采樣器542'，第二膠片聲音采樣器542'與第二 A/D轉(zhuǎn)換器 544'相連，第二A/D轉(zhuǎn)換器544'與第二特征提取器522'、用于基于第一 采樣率與第四參考聲音信號相關(guān)的第四裝置562'、用于基于第二采樣 率與第五參考聲音信號相關(guān)的第五裝置564'、以及用于基于第三釆樣 率與第六參考聲音信號相關(guān)的第六裝置566'相連。
用于相關(guān)的第四裝置562'的輸出端、用于相關(guān)的第五裝置564'的輸 出端、以及用于相關(guān)的第六裝置566'的輸出端與用于質(zhì)量評價的第二 裝置568'的輸入端相連，其中用于質(zhì)量評價的第二裝置568'的一個輸出 端連接到偏移量補償569，而另一個輸出端連接到采樣率轉(zhuǎn)換器232 的輸入端，以及其中用于偏移量補償?shù)难b置569還與采樣器選擇570 相連。
因此，按照使得用于產(chǎn)生控制信號的設(shè)備具有足夠的時間來進行 同步的方式來定位第一膠片聲音采樣器542(也稱為主采樣器)。因此，第一膠片聲音采樣器542提供了預(yù)延遲的信號。在同步時，增加相關(guān) 窗寬度或測試聲音信號的選擇的寬度?；谀z片巻軸上的孔眼，可以 精確地調(diào)整預(yù)延遲的時間差。首先推薦三秒。
在下文中，將更詳細地討論用于產(chǎn)生針對膠片事件系統(tǒng)的控制信 號的設(shè)備的實施例的操作模式，其中將基于由第一膠片聲音采樣器
542產(chǎn)生的測試聲音信號或其信號處理鏈來討論其原理，因為第二可 選信號處理鏈或由第二膠片聲音采樣器542'所產(chǎn)生的測試聲音信號的 信號處理對應(yīng)于第一可選信號處理鏈，并且因此將只詳細討論用于偏 移量補償?shù)难b置569。
第一膠片聲音采樣器542分別從膠片的音軌中讀取出聲音信號或 者從膠片的音頻中采樣聲音信號，并將該信號傳遞到第一 A/D轉(zhuǎn)換器 544，其中第一 A/D轉(zhuǎn)換器544形成用于基于第一膠片采樣器542的 采樣率以及讀取音軌或膠片信息的膠片的重放速度，來產(chǎn)生數(shù)據(jù)音頻 信號或測試聲音信號。
基于測試聲音信號270，提取出一個或多個特征，或形成測試指 紋表示。對于特征提取或指紋表示，例如使用頻譜平坦度作為特征或 指紋。然后，通過用于比較特征或指紋表示的裝置544，將測試指紋 表示與參考指紋表示進行比較，其中如上所述，形成指紋表示，使得 指紋表示的時間曲線取決于膠片信息的時間曲線，以及其中，時標與 存儲在用于比較特征的裝置544中的參考指紋表示相關(guān)聯(lián)，以及比較 裝置544形成用于基于測試指紋表示與參考指紋表示以及時標的比較 來確定膠片中的位置或產(chǎn)生時間碼信號544Z。
基于所存儲的參考聲音信號274，采樣率轉(zhuǎn)換器產(chǎn)生具有微小差 別的采樣率的相同信號，即，用于要并行計算的相關(guān)的修改的聲音信 號。因此，包括了修改的聲音信號具有與原始參考聲音信號相同的采 樣率的情況，因此針對下文中對圖5的討論，通常使用術(shù)語參考聲音 信號。
換言之，采樣率轉(zhuǎn)換器232分別產(chǎn)生三個參考聲音信號276或修 改的參考聲音信號276，其中第一參考聲音信號基于第一采樣率，并 被提供給第一裝置562用于相關(guān)，其中第二參考聲音信號276基于第
二采樣率，并被提供給第二裝置564用于相關(guān)，以及第三參考聲音信號276基于第三采樣率，并被提供給第三裝置566用于相關(guān)。采樣率 轉(zhuǎn)換器232分別將具有不同釆樣率的稍有分級的信號提供用于進行相 關(guān)，或者提供給裝置562、 564、 566用于相關(guān)，其中始終根據(jù)來自相 關(guān)的先前所測量的最大峰噪比的值來調(diào)整采樣率。 一個相關(guān)每次接收 到具有此采樣率的修改的聲音信號時，另一相關(guān)接收另一個稍微低的 采樣率(低一級別)，以及另一相關(guān)接收稍微高級別的采樣率。從而保 證了采樣率轉(zhuǎn)換器可以分別調(diào)諧或者同步到模擬聲音信號的速度改 變。
優(yōu)選地用于存儲音軌的裝置522以及采樣率轉(zhuǎn)換器232形成用于 使用2"的窗口寬度來以較小努力經(jīng)由快速傅立葉變換(FFT)來計算 較大的計算窗口。可以并行計算多于三個相關(guān)，以便補償聲音檢驗中 的突然跳躍。選擇較大的相關(guān)窗口，以獲得顯著的相關(guān)峰值。為了獲 得采樣或采樣周期的相關(guān)峰值的檢測精確度，可以分別使用對輸入信 號或測試聲音信號的過采樣。
用于存儲音軌的裝置522根據(jù)所提供的定時器582的時間碼信號 582z來輸出相關(guān)窗口長度的參考聲音信號，其中該相關(guān)窗口為在其中 搜索測試聲音信號的搜索窗口。
用于質(zhì)量評價的第一裝置568形成用于分別在信號的互相關(guān)結(jié)果 或信號量中執(zhí)行最大值搜索，以及依靠與其它峰值和互相關(guān)相比的相 關(guān)峰值的高度來為互相關(guān)的結(jié)果的質(zhì)量進行加權(quán)，或者關(guān)于峰值到噪 聲的距離來確定每次單獨相關(guān)的質(zhì)量。
基于質(zhì)量評價，分別確定具有最佳質(zhì)量因素或質(zhì)量的參考聲音信 號，并基于具有最佳質(zhì)量或質(zhì)量因素的參考聲音信號的峰值的位置， 確定峰值相對于搜索窗口的偏移，以及例如，將其作為測量的與實際 有效的時間碼之間的時間碼差或者相對時間碼而輸出。
根據(jù)質(zhì)量評價的結(jié)果，用于質(zhì)量評價的第一裝置568將控制信號 568A發(fā)送到采樣率轉(zhuǎn)換器232，該采樣率轉(zhuǎn)換器232僅區(qū)別三個信號 值"0"、 "+l"和"-l"，其中例如，對于"0"，保持最后一次采樣率 轉(zhuǎn)換或相關(guān)的采樣率，因為由具有中間釆樣率的修改的聲音信號所產(chǎn)生的相關(guān)被確定為具有最高質(zhì)量的一個，其中對于"+l"，關(guān)于最后 一次采樣率轉(zhuǎn)換或相關(guān)來將采樣率增加一級，因為由具有最高采樣率 的修改的聲音信號所產(chǎn)生的相關(guān)被確定為具有最高質(zhì)量的一個，以及 對于"-l"，關(guān)于前一次釆樣率轉(zhuǎn)換或相關(guān)來將采樣率增加一級，因為 由具有最低參考采樣率的測試聲音信號和修改的聲音信號所產(chǎn)生的相 關(guān)被確定為具有最佳相關(guān)結(jié)果或最佳峰值到噪聲距離。
換言之，根據(jù)獲得最佳相關(guān)峰值的采樣率(第一、第二或第三)， 將采樣率轉(zhuǎn)換器增加或減小采樣率值的變化增量，或者控制使得其不 執(zhí)行采樣率轉(zhuǎn)換。
因此，相關(guān)用于解決兩個主要方面的問題。首先，基于來自于相 關(guān)的時間碼差值，確定膠片中的位置或者確定膠片中的時間。第二， 確定重放速度的測量，以便確定最優(yōu)參考采樣率或參考采樣率的最優(yōu) 采樣率轉(zhuǎn)換。因此，對釆樣率的適配或產(chǎn)生適配的采樣重放速度分別 再次允許改進相關(guān)結(jié)果，因此分別改進了膠片中的時間確定或位置確 定，并由此改進了同步和預(yù)測。
執(zhí)行根據(jù)圖5的優(yōu)選實施例，以通過信號分析來檢測具有特定特 性的信號部分，以便在同步期間抑制這些信號部分，并由此避免了錯 誤檢測或同步，或者避免了時間軸的隨機變動。
例如，這種特性可以是信號分量的響度或信號的"問題"，并且
對有疑問的組件的信號分析或檢測可以基于SNR(信噪比)、PNR(峰
噪比)、頻譜功率或功率密度譜、頻譜平坦度或?qū)r間序列的平均。 例如，在峰值噪聲值或峰值噪聲距離的閾值以下，可以將時間碼
之差檢測為無效?；蛘呷绻_定了具有相似峰值噪聲距離的多個峰值，
則也可以將時間碼之差檢測為無效。
此外，由于數(shù)字采樣過程的較高均衡噪聲，與靜態(tài)信號分量(即
具有低幅度的信號分量)相關(guān)的質(zhì)量低于與吵鬧的信號的相關(guān)的質(zhì)量，
因此基于閾值或自適應(yīng)地抑制靜態(tài)信號分量，以避免時間軸的隨機變
動。此外，信號能量可以是另外的質(zhì)量特征。
另一示例是對問題的抑制，由于重復(fù)的信號分量，避免了含混不
清以及據(jù)此避免了例如錯誤同步。
此外，還可以將有問題的信號分量或部分作為元數(shù)據(jù)來用信號表 示，以便例如抑制這些信號分量，而與當前相關(guān)的質(zhì)量無關(guān)。
用于產(chǎn)生時間碼的裝置584形成用于基于定時器582 (例如，其 可以基于內(nèi)部或?qū)Ｓ脮r間碼)的時間碼信號582z，來將其轉(zhuǎn)換成標準 時間碼或基于標準時間碼的時間碼信號。
由內(nèi)部時鐘(相關(guān)的間隔或頻率)、粗略的音頻ID指紋或指紋表 示(例如，來自特征確定或指紋表示的時間碼信號554z)、以及所確 定的相關(guān)差(例如根據(jù)用于采樣器選擇的裝置570的相關(guān)所確定的時 間碼差信號570z)來控制定時器582。該定時器必須執(zhí)行對相關(guān)信號 (最高優(yōu)先級)、來自特征確定的時間碼以及內(nèi)部時鐘(最低優(yōu)先級) 的優(yōu)先級化。
例如，用于平滑時間碼的裝置586形成用于平滑時間碼信號584z， 以避免嚴重跳躍的時間碼或者在不存在來自相關(guān)的時間碼的情況下找 到有用中間值，以補償模擬聲音的中斷。由用于平滑時間碼的裝置586 所產(chǎn)生的時間碼信號592優(yōu)選地為標準時間碼，通過該時間碼來同步 或控制膠片事件系統(tǒng)。然而，如果所包括的聲音重放信號是數(shù)字的， 則還可以通過慢調(diào)節(jié)的鎖相環(huán)(PLL)將時間碼信號592用來產(chǎn)生相 應(yīng)的采樣時鐘。這種鎖相環(huán)可用作完整設(shè)備，因此并非本專利的主旨。
可選地，可以使用對于放映透鏡具有時間差偏移量的一個以上的 膠片采樣器，來改進膠片抵御損壞的魯棒性，或者用于不適當部分的 同步。
例如，由于第二膠片聲音采樣器542'己經(jīng)存在于傳統(tǒng)的電影院系 統(tǒng)中，所以可以使用第二膠片聲音采樣器542'。這里，可以由附在電 影院膠片上的不同位置處的膠片聲音采樣器542、 542'來橋接模擬聲音 中的中斷，由于膠片聲音中的短暫中斷，至少一個采樣器(第一膠片 聲音采樣器542或第二膠片聲音采樣器542')為相關(guān)及關(guān)聯(lián)同步提供 足夠信號的可能性增大。
此外，可選地，例如，可以使用針對模擬聲音、Dolby數(shù)字聲音 (包括解碼器)、DTS數(shù)字聲音(包括DTS解碼器)、或不同的聲音 以及上述的組合的不同采樣器，作為參考音軌和/或測試音軌。
這里，可以通過使用平均、多數(shù)判決或優(yōu)先級化，自動或通過所 產(chǎn)生的時間信息的元數(shù)據(jù)以及單聲道上的下混，將各個音軌用于比較。
通常，可以將不同的采樣器用于不同聲音格式和/或在時間上具有 不同的偏移差的不同膠片采樣器。
使用單聲道的下混具有如下優(yōu)點在使用單聲道音軌作為存儲音 軌時，與存儲相比，需要例如五個聲道。
對多個(即多于一個)音軌(即無下混)的存儲意味著將所有 聲道彼此獨立地存儲，然后例如上述所討論的，必須執(zhí)行相應(yīng)的比較 或多數(shù)判決，以便通過使用特定聲道、實際音軌以及所存儲的音軌的 相應(yīng)聲道來執(zhí)行同步。
在膠片放映或膠片事件系統(tǒng)的同步期間，初始化階段或第一同步 和聲音之后的同步分別分成兩個重要階段。
因此，由于尚未執(zhí)行同步，優(yōu)選實施例在開始處計算三個以上并 行相關(guān)，這表示分別將具有不同采樣率的三個以上參考聲音信號與測 試聲音信號進行比較或相關(guān)，以便盡快確定測試聲音信號的適當采樣 率或采樣速度。因此，在相關(guān)之一具有最佳信號噪聲距離之前，可以 相繼測試不同的采樣率。
備選地或另外地，第一特征提取器552和用于特征分級的裝置554
連同數(shù)據(jù)庫一起提供了用于定義膠片中的粗略位置的粗略的絕對時間 碼值，以便在第二步驟中，例如通過相關(guān)來執(zhí)行對膠片的位置的確定 或精細的時間碼確定。只要進行了同步，則可以使用三個相關(guān)來同步 膠片放映期間的測試聲音信號的重放速度的改變。
膠片中的位置或與該位置相關(guān)聯(lián)的時間與時標(時間碼)相關(guān)聯(lián) 的精度取決于參考聲音信號的采樣率和測試聲音信號的采樣率，采樣 率越高，則可以更加準確地確定膠片中的位置。然而，較低采樣率具
有如下優(yōu)點使用相同數(shù)量的采樣，可以表示參考聲音信號或測試聲 音信號的較長分段。因此，優(yōu)選實施例形成用于在第一步驟中通過具 有較低采樣率的參考聲音信號來表示膠片中的較長分段，以粗略確定 膠片中的位置，此外還通過以較低采樣率進行采樣而獲得測試聲音信 號。然后，在第二步驟中，基于膠片中的粗略位置，將較高采樣率的
參考聲音信號和較高采樣率的測試聲音信號用于精細確定膠片中的位 置。
換言之，在相關(guān)期間適配窗口長度。在搜索開始時，使用具有長 定時但信號的采樣率減小的窗口，但是在要近似發(fā)現(xiàn)一個時刻并且只 能從這個時刻開始時，使用短窗口，甚至對信號進行過采樣以獲得較 高時間精度。
例如，在初始化階段，可以在確定準確位置之前，執(zhí)行對"舊的" 音頻格式的"兼容重放"。
同樣地，在再次確定準確位置之前已經(jīng)明顯失步的情況下，可以 執(zhí)行"舊的"音頻格式的"兼容重放"。
在具有多于一個的膠片聲音采樣器的實施例中，僅需要用于采樣器選擇的裝置570和用于偏移量補償?shù)难b置569。因此，例如用于采 樣器選擇的裝置570判定是否將用于質(zhì)量評價的第一裝置568的結(jié)果 或時間碼差值568Z、或者用于質(zhì)量評價的第二裝置568'的結(jié)果或時 間碼差值568Z'分別傳遞到用于確定膠片中的位置或時間碼582Z的 定時器582。由于第二膠片聲音采樣器542'在膠片中的不同位置處對 測試聲音信號進行采樣，由用于偏移量補償?shù)难b置569對第一膠片聲 音采樣器542對膠片進行采樣的位置與第二膠片聲音采樣器542對膠 片中進行采樣的位置的差值(偏移量)進行補償，因此定時器582獲 得正確的定時碼差值570Z,而不管時間碼差值568Z或定時碼差值 568Z'是否是相對于存儲在定時器中的最后存儲時間或膠片的最后存 儲位置而選擇的。
不同于圖5中所示的實施例，還可以連續(xù)產(chǎn)生不同參考采樣率的 不同參考聲音信號，并分別將不同參考聲音信號與測試聲音信號進行 比較或相關(guān)，以便分別確定對測試聲音信號的重放速度或最優(yōu)參考采 樣率的測量。備選地，可以將三個以上修改的參考聲音信號與測試聲 音信號進行比較(并行或串行地)，以便不僅允許初始相位的快速同步， 而且允許在例如由膠片中的剪切或部分缺失所引起的膠片中的較大跳 躍之后，在膠片放映期間更為快速地將膠片事件與膠片中的當前位置 進行同步。
不同于圖5中所示的實施例，針對特征或指紋的評價以及針對測 試圖像信號與一個或多個參考圖像信號的相關(guān)，還可以基于施加于膠 片的畫面來執(zhí)行膠片事件系統(tǒng)的同步。
因此，如上述所示，可以將音頻和/或視頻信號的相關(guān)用于確定音 頻和/或視頻流的時間空間，并且由于該時間確定，可以控制同步重放。
備選地，可以將對來自以音頻ID/視頻ID (ID-標識符)形式的 原始材料的音頻和/或視頻簽名的確定用于粗略地確定長AV流中的時 間，以便能夠在任意位置處同步。
本發(fā)明的基本方法是以數(shù)字形式存儲早己存在的模擬聲音，以便 通過相關(guān)及其它特征確定來使得模擬聲音與電影膠片上的模擬音軌同 步。用于產(chǎn)生控制信號的設(shè)備或同步設(shè)裝置的輸出信號或控制信號可 以是任意時間碼格式。優(yōu)選地，使用SMPTE標準化的LTC時間碼格 式。對于每個電影膠片，在制作期間，必須為用于產(chǎn)生控制信號的設(shè) 備或同步裝置產(chǎn)生數(shù)據(jù)集。
在制作期間，針對用于產(chǎn)生控制信號的上述設(shè)備或同步裝置的每 個電影膠片，產(chǎn)生單獨的數(shù)據(jù)載體。該數(shù)據(jù)載體包含可以在膠片巻軸 上發(fā)現(xiàn)的數(shù)字化模擬音軌(例如具有Dolby立體聲格式)、該音軌的特征數(shù)據(jù)、以及匹配的時間碼。
在下文中，參考圖5b.l至5b.4描述對時間碼差值的示例性確定。
圖5b.l示出了如圖8中所述的具有音軌114的示例性膠片110。
基于定時器582的時間碼信號582z，從用于存儲音軌的裝置522 中讀出參考聲音信號274，并通過采樣率轉(zhuǎn)換裝置232，根據(jù)圖5b.2 產(chǎn)生修改的參考聲音信號，該信號表示從位置L。至位置L3或者與位置 L。相關(guān)聯(lián)的時間T。或相應(yīng)的時間碼與時間T3或與位置L3相關(guān)聯(lián)的時間 碼的膠片片段。
圖5b.3示出了分別由開始時間T,和結(jié)束時間T2所定義的、并基于 采樣率f=l/△t所產(chǎn)生的示例性測試聲音信號或測試聲音信號的片段。
圖5b.4示出了根據(jù)圖5b.2的修改的參考聲音信號與圖5b.3中的 測試聲音信號的片段的相關(guān)的結(jié)果。圖5b.2中的搜索窗口或修改的參 考聲音信號的開始時間T。與搜索窗口或參考聲音信號的時間T1之間的 時間差△T"=T1-T。是形成時間碼差值或相對時間碼所基于的時間偏移。因此，時間i;是測試聲音信號的時間或時間偏移，其中參考聲音信號中的n=ll個采樣長的片段最大限度匹配測試聲音信號，或者 N=ll個采樣長的參考聲音信號與測試聲音信號的相關(guān)具有相關(guān)結(jié)果 的最大值。
因此，由于定時器582知道最后絕對時間或絕對時間碼，所以質(zhì) 量評價568不需要知道絕對時間T?；驎r間T1，并且只需要時間碼差值 570z來確定所更新的絕對時間或時間碼。例如，可以根據(jù)峰值相對應(yīng) 搜索窗口的開始時間的位置來示出該差值。在圖5b.4中，例如峰值是 第一采樣，即相對應(yīng)圖5b.2中的參考聲音信號，圖5b.3中的測試聲 音信號移動"3.△t"，其中△t是對應(yīng)于修改的采樣率的采樣周期。
因此，例如時間碼差值570z可以包括值n=3。這里，適配于測試 聲音信號的可變重放速度的參考聲音信號的采樣率或重放速度是有利 的，因為△t也適配于重放速度，與參考聲音信號的固定采樣率相比， 對膠片的位置或相對于搜索窗口的偏移的準確確定是可能的，因為僅 針對膠片中的位置的確定產(chǎn)生多個這種采樣率。
因此，例如，因為膠片僅向前播放，所以搜索窗口或參考聲音信 號的時間T?？梢苑謩e等于前一次相關(guān)的T1。
圖6a示出了膠片系統(tǒng)的實施例，其中用于產(chǎn)生控制信號190的 設(shè)備100與膠片事件系統(tǒng)600相連，因此用于基于如圖8所示的膠片 110而產(chǎn)生控制信號的設(shè)備100產(chǎn)生控制信號190，例如時間碼，利用 該控制信號190來同步膠片事件系統(tǒng)600。
圖6b示出了具有用于產(chǎn)生控制信號100的設(shè)備100以及波場合 成系統(tǒng)610的膠片系統(tǒng)，作為示例性膠片事件系統(tǒng)，其中波場合成系 統(tǒng)610的實施例包括用于控制波場合成系統(tǒng)的裝置620;針對波場 合成音頻信號的數(shù)字存儲器622;以及用于該波場合成系統(tǒng)的多個揚 聲器624。分別基于膠片110或模擬膠片音軌114，用于產(chǎn)生控制信號 的設(shè)備100產(chǎn)生控制信號190，以便以與語言同步的方式使用原始模 擬音軌膠片來進行波場合成音頻體驗。
自然地，可以通過用于產(chǎn)生控制信號的設(shè)備100，以與語言同步 的方式來同步作為波場合成系統(tǒng)610的備選的其它音頻系統(tǒng)，例如數(shù) 字音頻系統(tǒng)或數(shù)字環(huán)繞音頻系統(tǒng)。
圖7示出了圖8所示的示例性膠片、示例性數(shù)字存儲的參考聲音 信號720及時標的關(guān)聯(lián)。
在產(chǎn)生存儲膠片信息或參考聲音信號時，以給定重放速度和給定 采樣率(例如44.1kHz)來對該模擬聲音信號進行采樣，將例如10ms 的聲音部分存儲為所謂的音頻幀，即數(shù)字參考聲音信號作為音頻幀序 列出現(xiàn)在存儲器上。然后，例如，時標中的關(guān)聯(lián)時間以升序方式從0 或1開始分別將音頻幀作為時間碼或時標進行編號，時間碼TC1對應(yīng) 于圖1中的音頻幀AF1，或者例如，找到音頻幀的開始時間或結(jié)束時 間作為時間碼，例如當音頻幀具有l(wèi)Oms長度時，對于第一音頻幀是 Oms或10ms。
通常，時間碼具有如小時分鐘秒幀這樣的格式，其中幀通 常與具有例如每秒24個幀(電影膠片)的視頻幀相關(guān)。
因此，時標或時間碼可以將多個音頻幀與一個視頻幀相關(guān)聯(lián)，或 者將音頻幀定義為最小時標單元。
因此，例如，時間碼或時標可以使四個音頻幀與一個時間碼相關(guān)
聯(lián)(見圖7中的TC1')，該時間碼包括四個音頻幀AF1至AF4，或者可以使單個視頻幀與時間碼相關(guān)聯(lián)(見圖7中的TC1)， TC1與一個
音頻幀AF1相關(guān)聯(lián)。因此，根據(jù)音頻格式，音頻幀還可以表示在時間
上重疊的音頻信號的一部分。
例如，可以將控制信號190形成為時間碼，但是也可以形成為脈 沖序列，其中，例如每個脈沖對應(yīng)于一個時標單元，并且膠片事件系 統(tǒng)與相對時間碼類似地累加脈沖，以便與膠片同步。
另一個實施例提供了將水印嵌入音頻和/或視頻信號的方法，以便 例如進一步以模擬聲音信號作為代用，但同時實現(xiàn)時間碼以用于同步
附加服務(wù)。本方法的優(yōu)點在于即使以"困難的"音頻信號，例如非
常安靜的序列或甚至類似的"單調(diào)的"聲音，也可以實現(xiàn)干凈的時鐘 恢復(fù)。針對這種變體，基本上整套相關(guān)水印聲明是有用的，尤其是在 尋找正確時鐘頻率或采樣率的重新調(diào)整的領(lǐng)域內(nèi)。然而，這種方法的
明顯缺點在于實際膠片改變了，或者必須制造膠片的新版本或膠片 的拷貝，以便能夠?qū)⑺∏度胍纛l和/或視頻信號中。
根據(jù)情況，本發(fā)明的方法可以以硬件或軟件來實現(xiàn)。可以在數(shù)字
存儲介質(zhì)上(具體在具有電可讀控制信號的盤或CD上)實現(xiàn)，該數(shù)
字存儲介質(zhì)可以與可編程計算機系統(tǒng)相互作用，以執(zhí)行本方法。通常， 本發(fā)明還包括具有程序代碼的存儲在機器可讀載體上的計算機程序產(chǎn) 品，當該計算機程序產(chǎn)品在計算機上運行時，該程序代碼執(zhí)行本發(fā)明 方法。因此，換言之，本發(fā)明可以實現(xiàn)為具有程序代碼的計算機程序， 當該計算機程序在計算機上運行時，該計算機代碼執(zhí)行本發(fā)明方法。
權(quán)利要求
1.一種用于執(zhí)行能夠以可變速度重放的測試聲音信號(270)與作為測試聲音信號(270)的數(shù)字存儲版本的參考聲音信號(274)之間的相關(guān)的設(shè)備，包括用于確定對測試聲音信號(270)的測試重放速度的測量的裝置(210)；裝置(230)，用于依靠針對重放速度的測量，改變對測試聲音信號(270)進行采樣的測試采樣率，以產(chǎn)生修改的測試聲音信號(272)，或者用于依靠針對重放速度的測量，改變數(shù)字存儲的參考聲音信號(274)的參考采樣率，以產(chǎn)生修改的參考聲音信號(276)，改變裝置(230)形成用于改變測試采樣率或參考采樣率，使得與測試聲音信號(270)相關(guān)聯(lián)的重放速度或與修改后的參考聲音信號(276)相關(guān)聯(lián)的參考重放速度之間的偏差減小，或者與修改后的測試聲音信號(272)相關(guān)聯(lián)的重放速度和與參考聲音信號(274)相關(guān)聯(lián)的參考重放速度之間的偏差減小，或者與修改后的測試聲音信號(274)相關(guān)聯(lián)的重放速度和與修改后的參考聲音信號(276)相關(guān)聯(lián)的參考重放速度之間的偏差減?。灰约把b置(250)，用于將修改后的測試聲音信號(272)與參考聲音信號(274)、或測試聲音信號(270)與修改后的參考聲音信號(276)、或修改后的測試聲音信號(272)與修改后的參考聲音信號(276)進行比較，以獲得相關(guān)結(jié)果。
2. 根據(jù)權(quán)利要求1所述的設(shè)備，其中，定義所述測試聲音信號的 重放速度與參考重放速度，使得所述測試聲音信號(270)由施加到膠 片(110)上的音軌(114)確定，以及如果測試聲音信號(270)或修改后的測試聲音信號(272)與參 考聲音信號(274)或修改后的參考聲音信號(276)將相同時間長度 或在時間上等距的相同數(shù)量的采樣與相等空間長度的音軌部分相關(guān) 聯(lián)，則以下偏差最小與測試聲音信號(270)相關(guān)聯(lián)的重放速度和與修改后的參考聲音信號(274)相關(guān)聯(lián)的參考重放速度之間的偏差，或者與修改后的測試聲音信號(272)相關(guān)聯(lián)的重放速度和與參考聲音信號(274)相關(guān)聯(lián)的參考重放速度之間的偏差，或者與修改后的測試聲音信號(272)相關(guān)聯(lián)的重放速度和與修改后的參考聲音信號(274)相關(guān)聯(lián)的參考重放速度之間的偏差。
3. 根據(jù)權(quán)利要求1或2所述的設(shè)備，其中，所述比較裝置(250) 形成用于通過一連串采樣表示測試聲音信號(270)，并通過一連串參 考采樣表示參考聲音信號，以便將測試采樣串與參考釆樣串進行相關(guān)， 其中，相關(guān)結(jié)果基于以下事實:將所述測試采樣串與參考采樣串相反 地移位至少一個采樣，以及針對每次移位的相應(yīng)相關(guān)值由測試采樣串 中的采樣與參考采樣串中的采樣或幅值的成對相乘的乘積之和來確 定，因此相關(guān)結(jié)果是一連串相關(guān)值，因此針對時間移位值的相關(guān)結(jié)果 包括最大值，在所述最大值處所述測試采樣串與所述參考采樣串最大 地匹配。
4. 根據(jù)權(quán)利要求1至3之一所述的設(shè)備，其中，比較裝置(250) 形成用于將多個參考聲音信號中的每個與同一測試聲音信號(270)進 行比較，以便獲得多個比較結(jié)果，其中，所述多個參考聲音信號(274， 276)是基于多個相互不同的參考采樣率的，以及其中，多個參考聲音 信號(274， 276)中的參考聲音信號(274， 276)是參考聲音信號(274) 或修改后的參考聲音信號(276)。
5. 根據(jù)權(quán)利要求4所述的設(shè)備，包括質(zhì)量評價裝置(568)，用于對所述多個比較結(jié)果進行質(zhì)量評價， 以便基于一個或多個準則從所述多個參考聲音信號(274， 276)中確 定最相似的參考聲音信號。
6. 根據(jù)權(quán)利要求5所述的設(shè)備，其中，所述質(zhì)量評價裝置(568) 形成用于確定針對每個相關(guān)結(jié)果的峰值-噪聲距離，以及如果參考聲音 信號(274， 276)包括與其它參考聲音信號(274， 276)相比的最高 峰值-噪聲距離，則將所述參考聲音信號(274， 276)定義為最相似的 參考聲音信號。
7. 根據(jù)權(quán)利要求5或6所述的設(shè)備，其中，所述比較裝置(250) 形成用于將基于第一參考采樣率的第一參考聲音信號與所述測試聲 音信號進行比較，以獲得第一相關(guān)結(jié)果；將基于第二參考采樣率的第二參考聲音信號與所述測試聲音信號進行比較，以獲得第二相關(guān)結(jié)果;以及將基于第三參考釆樣率的第三參考聲音信號與所述測試聲音信號 進行比較，以獲得第三相關(guān)結(jié)果，其中，第二參考采樣率大于第一參 考采樣率，以及第三參考采樣率大于第二參考采樣率，以及其中，所述質(zhì)量評價裝置(568)基于所述相關(guān)結(jié)果來確定最相 似的參考聲音信號，以及所述設(shè)備還包括改變裝置(230)，改變裝置 (230)形成用于如果第二參考聲音信號是最相似的參考聲音信號， 針對下一次相關(guān)不改變第一、第二和第三參考采樣率，如果第三參考 聲音信號是最相似的參考聲音信號，則增加第一、第二和第三采樣率， 如果第一參考聲音信號是最相似的參考聲音信號，則減小第一、第二 和第三采樣率。
8. 根據(jù)權(quán)利要求4至7之一所述的設(shè)備，其中，所述比較裝置(250) 形成用于并行地將多個參考聲音信號(274， 276)與所述測試聲音信 號(270)進行比較。
9. 根據(jù)權(quán)利要求1至8之一所述的設(shè)備，其中，所述比較裝置(250) 形成用于并行地將多個參考聲音信號(274， 276)與所述測試聲音信 號(270)進行比較。
10. —種用于執(zhí)行能夠以可變速度重放的測試聲音信號(270)與 作為測試聲音信號(270)的數(shù)字存儲版本的參考聲音信號(274)之 間的相關(guān)的方法，包括確定對測試聲音信號(270)的測試重放速度的測量； 依靠針對測試重放速度的測量，改變對測試聲音信號(270)進 行采樣的測試采樣率，以產(chǎn)生修改的測試聲音信號(272)，或者依靠 針對重放速度的測量，改變數(shù)字存儲的參考聲音信號(274)的參考采 樣率，以產(chǎn)生修改的參考聲音信號(276)，其中改變測試采樣率或參 考采樣率，使得與測試聲音信號(270)相關(guān)聯(lián)的測試重放速度或與修 改后的參考聲音信號(276)相關(guān)聯(lián)的參考重放速度之間的偏差減小， 或者與修改后的測試聲音信號(272)相關(guān)聯(lián)的測試重放速度和與參考 聲音信號(274)相關(guān)聯(lián)的參考重放速度之間的偏差減小，或者與修改 后的測試聲音信號(274)相關(guān)聯(lián)的測試重放速度和與修改后的參考聲 音信號(276)相關(guān)聯(lián)的參考重放速度之間的偏差減小；以及將修改后的聲音信號(272)與參考聲音信號(274)、或測試聲 音信號(270)與修改后的參考聲音信號(276)、或修改后的測試聲音 信號(272)與修改后的參考聲音信號(276)進行比較，以獲得相關(guān) 結(jié)果。
11. 一種具有程序代碼的計算機程序，當在計算機上執(zhí)行所述計 算機程序時，所述程序代碼用于執(zhí)行根據(jù)權(quán)利要求IO所述的方法。
全文摘要
本發(fā)明描述了一種用于執(zhí)行能夠以可變速度重放的測試聲音信號(270)與作為測試聲音信號(270)的數(shù)字存儲版本的參考聲音信號(274)之間的相關(guān)的設(shè)備，該設(shè)備包括用于確定對測試聲音信號(270)的測試重放速度的測量的裝置(210)；裝置(230)，用于依靠針對重放速度的測量，改變對測試聲音信號(270)進行采樣的測試采樣率，以產(chǎn)生修改的測試聲音信號(272)，或者用于依靠針對重放速度的測量，改變數(shù)字存儲的參考聲音信號(274)的參考采樣率，以產(chǎn)生修改的參考聲音信號(276)，改變裝置(230)形成用于改變測試采樣率或參考采樣率，使得與測試聲音信號(270)相關(guān)聯(lián)的測試重放速度或與修改后的參考聲音信號(276)相關(guān)聯(lián)的參考重放速度之間的偏差減小，或者與修改后的測試聲音信號(272)相關(guān)聯(lián)的測試重放速度和與參考聲音信號(274)相關(guān)聯(lián)的參考重放速度之間的偏差減小，或者與修改后的測試聲音信號(274)相關(guān)聯(lián)的測試重放速度和與修改后的參考聲音信號(276)相關(guān)聯(lián)的參考重放速度之間的偏差減??；以及裝置(250)，用于將修改后的聲音信號(272)與參考聲音信號(274)、或測試聲音信號(270)與修改后的參考聲音信號(276)、或修改后的測試聲音信號(272)與修改后的參考聲音信號(276)進行比較，以獲得相關(guān)結(jié)果。
文檔編號G11B27/10GK101203917SQ200680022392
公開日2008年6月18日 申請日期2006年6月9日 優(yōu)先權(quán)日2005年6月22日
發(fā)明者托馬斯·施波雷爾, 邁克爾·貝金格 申請人:弗勞恩霍夫應(yīng)用研究促進協(xié)會