專利名稱：產(chǎn)生多媒體電子郵件的設(shè)備和方法
技術(shù)領(lǐng)域：
本發(fā)明的總體構(gòu)思涉及電子郵件，更具體地，涉及一種從普通電子郵件合成多媒 體電子郵件的設(shè)備和方法。
背景技術(shù)：
通常，如果接收到電子郵件，則用戶(或接收者)執(zhí)行電子郵件程序，從而讀取在 屏幕上顯示的電子郵件并得知內(nèi)容。然而，這種可視化電子郵件傳輸方法受限于電子郵件僅能通過用戶的眼睛確認(rèn)。另外，傳統(tǒng)電子郵件程序提供的項(xiàng)目是有限的；也就是說，僅將電子郵件發(fā)送者或 郵件服務(wù)器提供的信息提供給接收者。最近，除了這樣的傳統(tǒng)電子郵件閱讀方法之外，通過語音提供電子郵件的方法正 在研發(fā)中。也就是說，根據(jù)該方法，通過使用文本到語音(TTS)引擎，文本形式的電子郵件 被轉(zhuǎn)換為語音，電子郵件的內(nèi)容被有聲地傳遞給用戶。然而，由于僅通過語音確認(rèn)電子郵件的方法僅依靠用戶的聽覺，因此能夠傳遞給 用戶的信息量有限。另外，用于確認(rèn)電子郵件的設(shè)備，即，個(gè)人計(jì)算機(jī)(PC)、個(gè)人數(shù)字助理 (PDA)和移動(dòng)電話通常包括顯示器和揚(yáng)聲器。當(dāng)考慮到這樣的事實(shí)時(shí)，僅依靠視覺或聽覺的 傳統(tǒng)的確認(rèn)電子郵件的方法沒有充分利用給定設(shè)備的資源。另外，由于提供語音電子郵件的傳統(tǒng)方法僅提供標(biāo)準(zhǔn)化的語音或背景聲音，因此， 不能反映用戶的喜好或每個(gè)電子郵件的內(nèi)容。

發(fā)明內(nèi)容
技術(shù)方案本發(fā)明的總體構(gòu)思提供一種合成多媒體電子郵件的設(shè)備和方法，所述多媒體郵件 組合了音頻文件和/或視頻文件，從而可提供與電子郵件相關(guān)的更多信息并能反映用戶的 喜好或電子郵件的內(nèi)容。將在以下的說明中部分地闡述本發(fā)明的總體構(gòu)思的其他方面和用途，所述其他方 面和用途部分地通過描述將是清楚的，或者可通過本發(fā)明的總體構(gòu)思的實(shí)踐而得知。有益效果本發(fā)明的總體構(gòu)思可包括在聽到轉(zhuǎn)換為語音的電子郵件的同時(shí)，如果需要附加信 息，則可通過顯示設(shè)備提供正在收聽的電子郵件的主體和關(guān)于電子郵件發(fā)送者的信息。另 外，通過對電子郵件的分析，可插入與電子郵件的內(nèi)容相關(guān)的背景圖像，從而幫助用戶理解 電子郵件的內(nèi)容并為用戶提供快樂的情緒。也就是說，與傳統(tǒng)技術(shù)相比，根據(jù)本發(fā)明的總體構(gòu)思的多媒體電子郵件可提供更 加用戶友好和更多類型的信息，并增加設(shè)備的利用。


圖1是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的多媒體電子郵件合成設(shè)備的結(jié)構(gòu) 的功能框圖；圖2A是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的圖1中示出的電子郵件處理模塊 的詳細(xì)結(jié)構(gòu)的功能框圖；圖2B是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的圖1中示出的文件合成數(shù)據(jù)DB中 存儲(chǔ)的數(shù)據(jù)的類型的示圖；圖3是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的用于再現(xiàn)合成的多媒體電子郵件 的設(shè)備的結(jié)構(gòu)的功能框圖；圖4是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的合成多媒體電子郵件的方法的操 作的流程圖；圖5是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的圖4中示出的電子郵件預(yù)處理操作 的更詳細(xì)操作的流程圖；圖6是更詳細(xì)地示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的圖4中示出的合成音頻文 件的操作的流程圖；圖7是更詳細(xì)地示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的圖4中示出的合成視頻文 件的操作的流程圖。
具體實(shí)施例方式最優(yōu)模式本發(fā)明的總體構(gòu)思的前述和/或其他方面和用途可通過提供一種用于合成多媒 體電子郵件的設(shè)備來實(shí)現(xiàn)，所述設(shè)備包括電子郵件分析單元，分析電子郵件的內(nèi)容；音頻 文件合成單元，通過使用電子郵件分析單元的分析結(jié)果來合成音頻文件；視頻文件合成單 元，通過使用電子郵件分析單元的分析結(jié)果來合成視頻文件；音頻/視頻文件組合模塊，組 合音頻文件和視頻文件。本發(fā)明的總體構(gòu)思的前述和/或其他方面和用途還可通過提供一種用于合成多 媒體電子郵件的方法來實(shí)現(xiàn)，所述方法包括分析電子郵件的內(nèi)容；通過使用至少一部分 的對電子郵件的內(nèi)容的分析結(jié)果來合成音頻文件；通過使用至少一部分的對電子郵件的內(nèi) 容的分析結(jié)果來合成視頻文件；組合所合成的音頻文件和視頻文件。本發(fā)明的總體構(gòu)思的前述和/或其他方面和用途還可通過提供一種其上實(shí)施有 用于執(zhí)行合成多媒體電子郵件的方法的計(jì)算機(jī)程序的計(jì)算機(jī)可讀記錄介質(zhì)來實(shí)現(xiàn)，所述方 法包括分析電子郵件的內(nèi)容；通過使用至少一部分的對電子郵件的內(nèi)容的分析結(jié)果合成 音頻文件；通過使用至少一部分的對電子郵件的內(nèi)容的分析結(jié)果合成視頻文件；組合所合 成的音頻文件和視頻文件。本發(fā)明的總體構(gòu)思的前述和/或其他方面和用途還可通過提供一種呈現(xiàn)多媒體 電子郵件的方法來實(shí)現(xiàn)，所述方法包括分析電子郵件的內(nèi)容；接收對電子郵件呈現(xiàn)模式 的選擇；至少部分地基于接收的選擇和對電子郵件的內(nèi)容的分析結(jié)果，使用音頻文件、視頻 文件或者音頻文件和視頻文件來合成多媒體文件。本發(fā)明的總體構(gòu)思的前述和/或其他方面和用途還可通過提供一種其上實(shí)施有用于執(zhí)行多媒體電子郵件的方法的計(jì)算機(jī)程序的計(jì)算機(jī)可讀記錄介質(zhì)來實(shí)現(xiàn)，所述方法包 括分析電子郵件的內(nèi)容；接收對電子郵件呈現(xiàn)模式的選擇；至少部分地基于接收的選擇 和對電子郵件的內(nèi)容的分析結(jié)果，使用音頻文件、視頻文件或者音頻文件和視頻文件來合 成多媒體文件。本發(fā)明的總體構(gòu)思的前述和/或其他方面和用途還可通過提供一種用于合成多 媒體電子郵件的設(shè)備來實(shí)現(xiàn)，所述設(shè)備包括電子郵件分析單元，分析電子郵件以產(chǎn)生包括 在電子郵件中的信號；合成單元，根據(jù)產(chǎn)生的信號合成音頻文件和視頻文件中的至少一個(gè)。所述設(shè)備的合成單元還可包括文本到語音轉(zhuǎn)換器，將電子郵件的文本轉(zhuǎn)換為語 音信號，所述合成單元將音頻文件和視頻文件中的至少一個(gè)與語音信號合成。用于合成多媒體電子郵件的設(shè)備還可包括存儲(chǔ)單元，用于存儲(chǔ)音頻文件和視頻文件。用于合成多媒體電子郵件的設(shè)備還可包括信號具有電子郵件的標(biāo)簽和電子郵件 的關(guān)鍵詞。除了語音數(shù)據(jù)以外，本發(fā)明的總體構(gòu)思的設(shè)備和方法還可包括能夠被插入與電子 郵件的內(nèi)容相關(guān)的各種背景聲音，從而幫助用戶收聽和理解電子郵件的內(nèi)容從而更好地享 受電子郵件。發(fā)明模式通過參照附圖詳細(xì)描述本發(fā)明的示例性實(shí)施例，本發(fā)明的總體構(gòu)思的以上和其他 特征和優(yōu)點(diǎn)將變得更明顯?，F(xiàn)在將具體參照本發(fā)明的總體構(gòu)思的實(shí)施例，其示例在附圖中示出，其中，相同的 標(biāo)號始終表示相同的元件。以下將描述實(shí)施例，以便通過參照附圖解釋本發(fā)明的總體構(gòu)思。圖1是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的多媒體電子郵件合成設(shè)備1的功能 框圖。多媒體合成設(shè)備1可以是個(gè)人計(jì)算機(jī)、服務(wù)器計(jì)算機(jī)、主機(jī)計(jì)算機(jī)、移動(dòng)電話、個(gè)人數(shù) 字助理、電子郵件接收器或具有一個(gè)或多個(gè)電子郵件功能的任意其他設(shè)備。根據(jù)當(dāng)前實(shí)施例的多媒體電子郵件合成設(shè)備1主要包括電子郵件集成管理模塊 101、電子郵件預(yù)處理模塊102、電子郵件分析塊12、音頻文件合成塊11、視頻文件合成塊 13、文件合成數(shù)據(jù)數(shù)據(jù)庫(DB) 105和音頻/視頻文件組合模塊106。電子郵件集成管理模塊101從通過網(wǎng)絡(luò)接口連接的外部web郵件服務(wù)器或從內(nèi)部 郵件服務(wù)器下載用戶(或電子郵件接收者)帳號中的一個(gè)或多個(gè)電子郵件，并收集電子郵 件。電子郵件預(yù)處理模塊102分析、提取并轉(zhuǎn)換由電子郵件集成管理模塊101收集的 電子郵件，并且包括標(biāo)簽分析器1021、令牌提取器1022和語句提取器和/或轉(zhuǎn)換器1023， 如圖2A所示。另外，電子郵件預(yù)處理模塊102可對一個(gè)或多個(gè)收集的電子郵件執(zhí)行任意其 他的適當(dāng)?shù)念A(yù)處理操作。標(biāo)簽分析器1021通過參照形成一個(gè)電子郵件的每一個(gè)項(xiàng)的標(biāo)簽將所述項(xiàng)分類。 形成電子郵件的代表性標(biāo)簽的示例包括發(fā)送者、接收者、標(biāo)題、日期、簽名、原始消息、重傳 內(nèi)容、主體等。電子郵件令牌提取器1022通過參照標(biāo)簽分析器1021的分類結(jié)果提取與每個(gè)標(biāo)簽 相應(yīng)的項(xiàng)的內(nèi)容，即，令牌。例如，電子郵件預(yù)處理模塊102可提取鏈接到“發(fā)送者”標(biāo)簽的 發(fā)送者的電子郵件地址或者鏈接到“主體”標(biāo)簽的主體數(shù)據(jù)。這里，發(fā)送者和主體對應(yīng)于標(biāo)簽，發(fā)送者的電子郵件地址和主體數(shù)據(jù)對應(yīng)于令牌。通過由電子郵件令牌提取器1022提取的令牌，語句提取器和/或轉(zhuǎn)換器1023被 配置用于提取令牌和/或?qū)⒘钆妻D(zhuǎn)換為用于產(chǎn)生音頻文件和/或視頻文件的語句。例如，為了產(chǎn)生用于顯示將被發(fā)送到視頻合成塊13的視頻文件合成模塊113的主 體的文檔，語句提取器和/或轉(zhuǎn)換器1023從令牌提取器1022提取的令牌中選擇主體令牌， 并排除其余令牌。在這種情況下，主體包含發(fā)送者期望發(fā)送到接收者的內(nèi)容，并且主體與電 子郵件地址、簽名和原始消息等相區(qū)別。另外，為了產(chǎn)生將被(音頻文件合成塊11)的文本 到語音轉(zhuǎn)換器107所使用的語音合成文檔，主體令牌被提取，包括在主體中的一個(gè)或多個(gè) 縮寫和用戶指定符號被轉(zhuǎn)換為發(fā)音符號。用于顯示主體的文檔可具有與用于語音合成的文 檔相同的內(nèi)容。另外，語句提取器和/或轉(zhuǎn)換器1023可提取對于提取發(fā)送者信息所需的發(fā) 送者ID，并將發(fā)送者ID發(fā)送到發(fā)送者信息提取單元111。圖1中示出的電子郵件分析塊12包括關(guān)鍵詞提取模塊103和電子郵件內(nèi)容分析 模塊104。關(guān)鍵詞提取模塊103從自電子郵件預(yù)處理模塊102接收的一個(gè)或多個(gè)令牌提取一 個(gè)或多個(gè)關(guān)鍵詞。關(guān)鍵詞指示當(dāng)電子郵件在電子郵件內(nèi)容分析模塊104中被分類時(shí)可作為 分類標(biāo)準(zhǔn)的詞語，關(guān)鍵詞包括的詞語在電子郵件重復(fù)出現(xiàn)并且/或通過學(xué)習(xí)處理被注冊為 有意義的詞語。例如，像“Hi”這樣通常在許多電子郵件中出現(xiàn)的詞語通常不被分類為關(guān)鍵 詞。類別可指示諸如天氣、家庭、政治、商業(yè)、購物信息、經(jīng)濟(jì)等題目。例如，如果提取的關(guān)鍵 詞是“最低價(jià)格”或“限量特賣”，則電子郵件內(nèi)容分析模塊104可將提取的關(guān)鍵詞與購物信 息類別關(guān)聯(lián)，如果關(guān)鍵詞是“股票”，則模塊104可將提取的關(guān)鍵詞與商業(yè)或經(jīng)濟(jì)類別關(guān)聯(lián)。 可基于概率和/或隨機(jī)操作將提取的關(guān)鍵詞與一個(gè)或多個(gè)類別關(guān)聯(lián)。通?？深A(yù)先(例如， 在學(xué)習(xí)過程中)確定每個(gè)關(guān)鍵詞屬于預(yù)定類別的概率。也就是說，提取關(guān)鍵詞是在學(xué)習(xí)過 程中注冊的關(guān)鍵詞被提取的過程。通過使用由關(guān)鍵詞提取模塊103從電子郵件提取的一個(gè)或多個(gè)關(guān)鍵詞，電子郵件 內(nèi)容分析模塊104分析電子郵件的內(nèi)容。例如，計(jì)算從電子郵件的主體提取的每個(gè)關(guān)鍵詞 屬于預(yù)定類別的概率，并按類別累加該概率。然后，選擇具有最高累計(jì)概率的類別。在本發(fā)明的總體構(gòu)思的另一實(shí)施例中，為了選擇類別，電子郵件內(nèi)容分析模塊104 例如可使用發(fā)送者信息和電子郵件標(biāo)題來代替電子郵件的主體的關(guān)鍵詞。圖1中示出的文件合成數(shù)據(jù)DB 105包括例如用于每一主題和/或分類的各種音 樂數(shù)據(jù)、聲音效果數(shù)據(jù)、靜止圖像數(shù)據(jù)和運(yùn)動(dòng)圖像數(shù)據(jù)，如圖2B所示。圖1中示出的音頻文件合成塊11包括文本到語音轉(zhuǎn)換器107、背景聲音選擇模塊 108和音頻文件合成模塊109。文本到語音轉(zhuǎn)換器107通過使用包括在從電子郵件預(yù)處理模塊102接收的語音合 成文檔中的其他相關(guān)數(shù)據(jù)和/或?qū)⑽谋巨D(zhuǎn)換為語音。背景聲音選擇模塊108通過參照從電子郵件內(nèi)容分析模塊104接收的分析結(jié)果 選擇存儲(chǔ)在文件合成數(shù)據(jù)DB 105中的適當(dāng)?shù)谋尘奥曇?例如，音樂數(shù)據(jù)、聲音效果數(shù)據(jù)或 者它們的任意組合)。例如，如果從家庭成員接收到電子郵件，則可選擇諸如“Home Sweet Home”的歌曲作為背景聲音，如果從家庭中的小女兒接收到電子郵件，則可記錄小孩的笑聲 或小孩唱的歌并將其存儲(chǔ)為可被插入的聲音效果數(shù)據(jù)(即，笑聲)或音樂數(shù)據(jù)(即，小孩唱
7的歌)。音頻文件合成模塊109調(diào)整由文本到語音轉(zhuǎn)換器107轉(zhuǎn)換的語音數(shù)據(jù)的音量級別 和由背景聲音選擇模塊108選擇的背景聲音，并將其組合以產(chǎn)生音頻文件。另外，音頻文件 合成模塊109根據(jù)用戶選擇的音頻格式(例如，MP3、AAC、OGG、wave等)來對音頻文件編 碼。視頻文件合成塊13包括發(fā)送者信息DB 110、發(fā)送者信息提取單元111、背景圖像 選擇模塊112和視頻文件合成模塊113。發(fā)送者信息DB 110包括與發(fā)送電子郵件的發(fā)送者相關(guān)的信息。該信息的示例包 括個(gè)人信息，例如，發(fā)送者的姓名、職業(yè)、重要性、工作地點(diǎn)、發(fā)送者的相片和用戶編寫的與 發(fā)送者相關(guān)的備忘錄。發(fā)送者信息提取單元111首先從電子郵件預(yù)處理模塊102接收發(fā)送者標(biāo)識(ID) (例如，電子郵件地址)，然后，從發(fā)送者信息DB 110提取與該ID相應(yīng)的發(fā)送者信息。背景圖像選擇模塊112通過參照從電子郵件內(nèi)容分析模塊104接收的分析結(jié)果， 從存儲(chǔ)在文件合成DB 105中的圖像(例如，靜止圖像數(shù)據(jù)、運(yùn)動(dòng)圖像數(shù)據(jù))中選擇適當(dāng)?shù)?背景圖像。例如，如果電子郵件是從顧客接收的，則可選擇回憶該顧客的照片或與該顧客合 照的照片。視頻文件合成模塊113對從電子郵件預(yù)處理模塊102接收的用于顯示主體的文 檔、由發(fā)送者信息提取單元111提取的發(fā)送者信息和由背景圖像選擇模塊112選擇的背景 圖像中的一個(gè)或多個(gè)進(jìn)行組合，從而產(chǎn)生一個(gè)視頻文件。另外，視頻文件合成模塊113根據(jù)用戶選擇的視頻格式(例如，MPEG、flash, wmv 等)對視頻文件進(jìn)行編碼。音頻/視頻文件組合模塊106將音頻文件合成塊11合成的音頻文件和視頻文件 合成塊13合成的視頻文件進(jìn)行組合，從而產(chǎn)生一個(gè)多媒體電子郵件文件。圖3示出用于再現(xiàn)由多媒體電子郵件合成設(shè)備1所合成的多媒體電子郵件的設(shè)備 3。再現(xiàn)多媒體電子郵件的設(shè)備3包括電子郵件存儲(chǔ)模塊31、輸入/輸出模塊32、音頻再現(xiàn) 模塊33、揚(yáng)聲器34、視頻再現(xiàn)模塊35和顯示器36。通過輸入/輸出模塊32從電子郵件合成設(shè)備1接收的多媒體電子郵件首先被存 儲(chǔ)在電子郵件存儲(chǔ)模塊31中。如果通過使用再現(xiàn)設(shè)備3來再現(xiàn)存儲(chǔ)的多媒體電子郵件，則電子郵件文件中的音 頻文件由音頻再現(xiàn)模塊33解碼，然后通過揚(yáng)聲器、耳塞或耳機(jī)被發(fā)送到用戶作為音頻信號 (語音和背景聲音)。另外，電子郵件文件中的視頻文件由視頻再現(xiàn)模塊35解碼并在顯示器36上顯示 為可視信號?？梢曅盘柨砂ɡ缰黧w、發(fā)送者信息或背景圖像，或者其他任意合適的信 息，或者以上的任意組合。當(dāng)視頻文件包括多個(gè)圖像時(shí)，當(dāng)顯示電子郵件時(shí)可顯示一個(gè)或多 個(gè)圖像。在本發(fā)明的總體構(gòu)思的實(shí)施例中，電子郵件合成設(shè)備1和多媒體電子郵件再現(xiàn)設(shè) 備3可以被組合并實(shí)現(xiàn)為一個(gè)設(shè)備。在本發(fā)明的總體構(gòu)思的另一實(shí)施例中，電子郵件合成 設(shè)備1和多媒體電子郵件再現(xiàn)設(shè)備3可以被實(shí)現(xiàn)為獨(dú)立和物理分離的設(shè)備。圖4是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的合成多媒體電子郵件的方法的流程圖。在操作41，用戶執(zhí)行根據(jù)本發(fā)明的總體構(gòu)思的電子郵件程序(例如，電子郵件管 理程序或其他合適的程序)或電子郵件瀏覽器，以讀取電子郵件。一旦電子郵件程序被執(zhí)行，或者在其他任意適當(dāng)?shù)臅r(shí)間段，在操作42，電子郵件集 成管理模塊從web郵件服務(wù)器或內(nèi)部郵件服務(wù)器下載用戶帳號的電子郵件，并收集電子郵 件。在操作43，電子郵件預(yù)處理模塊執(zhí)行用于分析、提取和轉(zhuǎn)換在操作42收集的電子 郵件的處理，以便合成音頻文件和/或視頻文件。將參照圖5詳細(xì)解釋在操作43中執(zhí)行的 細(xì)節(jié)。在操作44，分析電子郵件的內(nèi)容。關(guān)鍵詞提取模塊103 (在圖1中示出)從自電子郵件預(yù)處理模塊(例如，圖1中示 出的電子郵件預(yù)處理模塊102)接收的令牌中提取針對一個(gè)或多個(gè)類別確定的一個(gè)或多個(gè) 關(guān)鍵詞。電子郵件內(nèi)容分析模塊104通過使用例如由關(guān)鍵詞提取模塊103提取的關(guān)鍵詞或 者發(fā)送者信息、電子郵件標(biāo)題等來分析電子郵件的內(nèi)容，并選擇與電子郵件相應(yīng)的類別。在操作45，用戶選擇電子郵件呈現(xiàn)模式?？捎捎脩暨x擇的電子郵件呈現(xiàn)模式包括 音頻電子郵件模式、視頻電子郵件模式和音頻/視頻電子郵件模式。如果用戶在操作45選擇音頻電子郵件模式作為電子郵件呈現(xiàn)模式，則在操作46， 執(zhí)行音頻文件合成處理。音頻文件合成操作包括文本到語音轉(zhuǎn)換和/或背景聲音選擇。稍 后將參照圖6詳細(xì)解釋該操作的細(xì)節(jié)。如果用戶在操作45選擇視頻電子郵件模式作為電子郵件呈現(xiàn)模式，則在操作47 執(zhí)行視頻文件合成處理。視頻文件合成操作包括用于獲取和組合電子郵件主體、發(fā)送者信息和背景圖像的 處理。稍后將參照圖7解釋該操作的細(xì)節(jié)。如果用戶在操作45選擇音頻/視頻電子郵件模式作為電子郵件呈現(xiàn)模式，則執(zhí)行 音頻文件合成(操作46)和視頻文件合成(操作47) 二者。在操作48，組合音頻文件和視頻文件(例如，如果在操作45音頻/視頻電子郵件 模式被選擇作為電子郵件呈現(xiàn)模式)。如果選擇音頻/視頻電子郵件模式(例如，在操作 45)，則組合在操作46合成的音頻文件和在操作47合成的視頻文件，從而產(chǎn)生一個(gè)多媒體 電子郵件文件。在這種情況下，可將包括在音頻文件中的語音數(shù)據(jù)與包括在視頻數(shù)據(jù)中的 主體數(shù)據(jù)彼此同步。圖5是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的圖4中示出的電子郵件預(yù)處理操作 43的操作的流程圖。由圖1的電子郵件預(yù)處理模塊102執(zhí)行操作43。在操作51，標(biāo)簽分析器1021通過參照標(biāo)簽對形成電子郵件的項(xiàng)分類。在操作52，電子郵件令牌提取器1022通過參照標(biāo)簽分析器(例如，圖2A中示出的 標(biāo)簽分析器1021)的分類結(jié)果，提取與每個(gè)標(biāo)簽相應(yīng)的每項(xiàng)的內(nèi)容，即，令牌。在操作53，語句提取器和/或轉(zhuǎn)換器1023從操作52提取的令牌提取和/或轉(zhuǎn)換 將用于產(chǎn)生音頻文件和/或視頻文件的數(shù)據(jù)。圖6是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的圖4中示出的合成音頻文件的操作 的流程圖。
在操作60，確定用戶是否請求將語音包括在音頻文件中。如果存在對于包括語音 的請求，則在操作61將文本轉(zhuǎn)換為語音。文本到語音轉(zhuǎn)換器107 (在圖1中示出)接收用 于在操作53產(chǎn)生的語音合成的文檔的輸入以便提取和/或轉(zhuǎn)換語句，并通過使用包括在文 檔中的發(fā)音符號或其他任意適當(dāng)?shù)臄?shù)據(jù)將文本轉(zhuǎn)換為相應(yīng)的語音。在操作62，確定用戶是否請求將背景聲音插入音頻文件(或多媒體電子郵件)。如果用戶請求插入背景聲音，則在操作63選擇要插入的背景聲音。在操作63，背 景聲音選擇模塊108(在圖1中示出)至少部分地基于在用于電子郵件分析的操作44(在 圖4中示出)獲得的分析結(jié)果，選擇存儲(chǔ)在文件合成數(shù)據(jù)DB 105中的背景聲音(例如，音 樂數(shù)據(jù)、聲音效果數(shù)據(jù))。在操作64，如上所述的在操作63選擇的背景聲音與在操作61轉(zhuǎn)換的語音數(shù)據(jù)組 合，并根據(jù)用戶選擇的音頻格式(例如，MP3、AAC、0GG、wave等)編碼。然而，如果省略操作 61到63中的任意一個(gè)，則不需要執(zhí)行操作64。在本發(fā)明的總體構(gòu)思的另一實(shí)施例中，可以 以任意適當(dāng)?shù)捻樞虬才挪僮?0和61以及操作62和63的順序。圖7是示出根據(jù)本發(fā)明的總體構(gòu)思的實(shí)施例的圖4中示出的合成視頻文件的操作 的流程圖。在操作70確定用戶是否請求將電子郵件主體包括在視頻文件(或多媒體電子郵 件)中。例如，用戶習(xí)慣于僅當(dāng)聽到電子郵件的語音的同時(shí)讀取主體的內(nèi)容。如果請求包 括主體，則在操作71視頻文件合成模塊113(圖1中示出)從電子郵件預(yù)處理模塊102獲 得用于顯示主體的文檔。在操作72，確定用戶是否請求將發(fā)送者信息插入視頻文件(或多媒體電子郵件) 中。如果存在插入發(fā)送者信息的請求，則獲得發(fā)送者信息。也就是說，發(fā)送者信息提取單元 111(在圖1中示出)從電子郵件預(yù)處理模塊102接收發(fā)送者ID，并從發(fā)送者信息DB 110 提取與該作為中介的ID相應(yīng)的發(fā)送者信息。在操作74，確定用戶是否請求將背景圖像插入視頻文件(或多媒體文件)。如果用戶請求插入背景圖像，則在操作75選擇將要插入的背景圖像。在操作75， 背景圖像選擇模塊112(在圖1中示出)至少部分地基于從用于電子郵件分析的操作44(在 圖4中示出)獲得的分析結(jié)果，從存儲(chǔ)在文件合成DB 105中的一個(gè)或多個(gè)圖像(例如，靜 止圖像數(shù)據(jù)、運(yùn)動(dòng)圖像數(shù)據(jù))選擇背景圖像。在操作76，當(dāng)產(chǎn)生了電子郵件主體、發(fā)送者信息或背景圖像中的兩個(gè)或更多項(xiàng)的 組合時(shí)，所述兩個(gè)或更多項(xiàng)被組合，從而產(chǎn)生一個(gè)文件。當(dāng)產(chǎn)生了電子郵件主體、發(fā)送者信 息和背景圖像之一時(shí)，不執(zhí)行操作76。在操作77，在操作71、73、75或76產(chǎn)生的文件根據(jù)用戶選擇的視頻格式(例如， MPEG、flash)被編碼。本發(fā)明的總體構(gòu)思還可包括在收聽轉(zhuǎn)換為語音的電子郵件的同時(shí)，如果需要附 加信息，則可通過顯示設(shè)備提供正被收聽的電子郵件的主體和關(guān)于電子郵件發(fā)送者的信 息。另外，通過分析電子郵件，可插入與電子郵件的內(nèi)容相關(guān)的背景圖像，從而幫助用戶理 解電子郵件的內(nèi)容并為用戶提供快樂的情緒。本發(fā)明的總體構(gòu)思還可實(shí)施為計(jì)算機(jī)可讀記錄介質(zhì)上的計(jì)算機(jī)可讀代碼。計(jì)算機(jī) 可讀記錄介質(zhì)是能夠存儲(chǔ)其后可由計(jì)算機(jī)系統(tǒng)讀取的數(shù)據(jù)的任何數(shù)據(jù)存儲(chǔ)裝置。計(jì)算機(jī)可讀記錄介質(zhì)的示例包括只讀存儲(chǔ)器(ROM)、隨機(jī)存取存儲(chǔ)器(RAM)、CD-ROM、磁帶、軟盤、光 數(shù)據(jù)存儲(chǔ)裝置和載波或信號(例如通過互聯(lián)網(wǎng)的有線或無線數(shù)據(jù)傳輸)。計(jì)算機(jī)可讀記錄 介質(zhì)還可分布于聯(lián)網(wǎng)的計(jì)算機(jī)系統(tǒng)，從而計(jì)算機(jī)可讀代碼以分布式被存儲(chǔ)和執(zhí)行。另外，本 發(fā)明的總體構(gòu)思所屬領(lǐng)域的程序員可容易地理解實(shí)現(xiàn)本發(fā)明的總體構(gòu)思的功能程序、代碼 和代碼段。 雖然已經(jīng)參照本發(fā)明的總體構(gòu)思的示例性實(shí)施例具體示出和描述了本發(fā)明的總 體構(gòu)思，但是本領(lǐng)域的普通技術(shù)人員應(yīng)理解，在不脫離權(quán)利要求限定的本發(fā)明的總體構(gòu)思 的精神和范圍的情況下，可以在形式和細(xì)節(jié)上進(jìn)行各種改變。優(yōu)選實(shí)施例應(yīng)被認(rèn)為僅是描 述性的而不是限制性目的。因此，本發(fā)明的總體構(gòu)思的范圍不是由本發(fā)明的詳細(xì)描述而限 定，而是由權(quán)利要求及其等同物限定，范圍內(nèi)的所有差異應(yīng)被理解為包括在本發(fā)明的總體 構(gòu)思中。
權(quán)利要求
一種用于合成多媒體電子郵件的設(shè)備，所述設(shè)備包括電子郵件分析單元，分析電子郵件的內(nèi)容；音頻文件合成單元，通過使用至少一部分電子郵件分析單元的分析結(jié)果來合成音頻文件；視頻文件合成單元，通過使用至少一部分電子郵件分析單元的分析結(jié)果來合成視頻文件；音頻/視頻文件組合模塊，組合音頻文件和視頻文件。
2.如權(quán)利要求1所述的設(shè)備，其中，電子郵件分析單元包括 關(guān)鍵詞提取模塊，提取包括在電子郵件中的一個(gè)或多個(gè)關(guān)鍵詞；電子郵件分析模塊，通過使用所述一個(gè)或多個(gè)關(guān)鍵詞來分析電子郵件的內(nèi)容。
3.如權(quán)利要求1所述的設(shè)備，還包括文件合成數(shù)據(jù)庫(DB)，存儲(chǔ)將要插入音頻文件的音頻數(shù)據(jù)和將要插入視頻文件的視頻 數(shù)據(jù)。
4.如權(quán)利要求1所述的設(shè)備，還包括 電子郵件預(yù)處理模塊，包括標(biāo)簽分析器，分析電子郵件的一個(gè)或多個(gè)標(biāo)簽； 令牌提取器，提取與標(biāo)簽相應(yīng)的一個(gè)或多個(gè)令牌；語句提取器和/或轉(zhuǎn)換器，從所述一個(gè)或多個(gè)令牌提取或轉(zhuǎn)換，或者提取并轉(zhuǎn)換用于 產(chǎn)生音頻文件或視頻文件的數(shù)據(jù)。
5.如權(quán)利要求1所述的設(shè)備，其中，音頻文件包括音頻數(shù)據(jù)、音樂數(shù)據(jù)、聲音效果數(shù)據(jù) 或背景聲音數(shù)據(jù)，或者所述音頻數(shù)據(jù)、音樂數(shù)據(jù)、聲音效果數(shù)據(jù)和背景聲音數(shù)據(jù)的任意組合 O
6.如權(quán)利要求1所述的設(shè)備，其中，視頻文件包括發(fā)送者信息、電子郵件主體信息或背 景圖像，或者所述發(fā)送者信息、電子郵件主體信息和背景圖像的任意組合。
7.如權(quán)利要求6所述的設(shè)備，其中，背景圖像是靜止圖像或運(yùn)動(dòng)圖像。
8.如權(quán)利要求1所述的設(shè)備，其中，音頻文件合成單元包括文本到語音轉(zhuǎn)換器或者背 景聲音選擇模塊，或者所述文本到語音轉(zhuǎn)換器和背景聲音選擇模塊的任意組合。
9.如權(quán)利要求8所述的設(shè)備，其中，背景聲音選擇模塊被配置用于至少部分地基于電 子郵件分析單元產(chǎn)生的分析結(jié)果來選擇背景聲音。
10.如權(quán)利要求1所述的設(shè)備，其中，視頻文件合成單元包括發(fā)送者信息提取單元，用 于獲取關(guān)于發(fā)送者的附加信息。
11.如權(quán)利要求1所述的設(shè)備，其中，視頻合成單元包括背景圖像選擇模塊，用于選擇 將要插入視頻文件的背景圖像。
12.如權(quán)利要求11所述的設(shè)備，其中，背景圖像選擇模塊通過使用電子郵件分析單元 的分析結(jié)果來選擇背景圖像。
13.一種合成多媒體電子郵件的方法，所述方法包括 分析電子郵件的內(nèi)容；通過使用至少一部分對電子郵件的內(nèi)容的分析結(jié)果來合成音頻文件； 通過使用至少一部分對電子郵件的內(nèi)容的分析結(jié)果來合成視頻文件；組合所合成的音頻文件和視頻文件。
14.如權(quán)利要求13所述的方法，還包括電子郵件預(yù)處理步驟，其包括通過使用標(biāo)簽將電子郵件的一個(gè)或多個(gè)項(xiàng)分類；提取與分類的項(xiàng)相應(yīng)的一個(gè)或多個(gè)令牌；至少從所述一個(gè)或多個(gè)令牌提取或轉(zhuǎn)換，或者提取并轉(zhuǎn)換用于合成文件的數(shù)據(jù)。
15.如權(quán)利要求13所述的方法，其中，合成音頻文件的步驟包括將電子郵件文本轉(zhuǎn)換 為語音數(shù)據(jù)。
16.如權(quán)利要求13所述的方法，其中，合成音頻文件的步驟包括至少部分地基于對電 子郵件的內(nèi)容的分析結(jié)果來選擇背景聲音。
17.如權(quán)利要求13所述的方法，其中，合成視頻文件的步驟包括以下步驟中的一個(gè)或 多個(gè)獲得電子郵件的主體數(shù)據(jù)；提取關(guān)于電子郵件的發(fā)送者的信息；至少部分地基于對電子郵件的內(nèi)容的分析結(jié)果選擇背景圖像。
18.如權(quán)利要求17所述的方法，其中，合成視頻文件的步驟還包括組合電子郵件主 體、發(fā)送者信息和背景圖像中的兩個(gè)或更多個(gè)。
19.如權(quán)利要求17所述的方法，其中，發(fā)送者信息包括發(fā)送者姓名、職業(yè)、重要性、工作 地點(diǎn)信息、發(fā)送者相片和用戶編寫的關(guān)于發(fā)送者的備忘錄中的一個(gè)或多個(gè)。
20.如權(quán)利要求13所述的方法，其中，合成多媒體電子郵件的步驟還包括至少部分地 基于接收的對音頻格式的選擇對音頻文件編碼。
21.如權(quán)利要求13所述的方法，其中，合成視頻文件的步驟還包括至少部分地基于接 收的對視頻格式的選擇對視頻文件編碼。
22.如權(quán)利要求13所述的方法，其中，組合合成的音頻和視頻文件的步驟包括將包括 在音頻文件中的語音數(shù)據(jù)和包括在視頻文件中的主體數(shù)據(jù)同步。
23.一種其上實(shí)施有用于執(zhí)行合成多媒體電子郵件的方法的計(jì)算機(jī)可讀記錄介質(zhì)，其 中，所述方法包括分析電子郵件的內(nèi)容；通過使用至少一部分對電子郵件的內(nèi)容的分析結(jié)果來合成音頻文件；通過使用至少一部分對電子郵件的內(nèi)容的分析結(jié)果來合成視頻文件；組合所合成的音頻文件和視頻文件。
全文摘要
一種用于合成包括音頻文件和視頻文件的多媒體電子郵件的設(shè)備和方法，以及其上實(shí)施有用于執(zhí)行該方法的計(jì)算機(jī)程序的計(jì)算機(jī)可讀記錄介質(zhì)。用于合成多媒體電子郵件的設(shè)備包括電子郵件分析單元，分析電子郵件的內(nèi)容；音頻文件合成單元，通過使用電子郵件分析單元的分析結(jié)果來合成音頻文件；視頻文件合成單元，通過使用電子郵件分析單元的分析結(jié)果來合成視頻文件；音頻/視頻文件組合模塊，組合音頻文件和視頻文件。與傳統(tǒng)技術(shù)相比，所述方法和設(shè)備合成的多媒體電子郵件可提供更加用戶友好和更多類型的信息，并提高設(shè)備的利用。
文檔編號G06Q10/00GK101896923SQ200880120493
公開日2010年11月24日 申請日期2008年6月3日 優(yōu)先權(quán)日2007年12月13日
發(fā)明者金世現(xiàn) 申請人:三星電子株式會(huì)社