專利名稱:信息處理裝置、運動畫面摘要方法以及計算機可讀介質(zhì)的制作方法
技術領域:
本公開內(nèi)容涉及信息處理裝置、運動畫面摘要方法以及計算機可讀介質(zhì)。
背景技術:
有許多機會來享受各種運動畫面如電視電影和視頻電影。此外,廣域通信網(wǎng)絡不斷向前發(fā)展,在許多家庭中,還可以欣賞通過經(jīng)由因特網(wǎng)的流來分配的運動畫面(在下文中,將其稱為流電影)。當用戶觀看上述的運動畫面時,用戶操作遙控器來選擇廣播站或開始視頻電影的播放。在待觀看的運動畫面是記錄的電影、DVD視頻電影、藍光視頻電影、流電影等的情況下,用戶可以指定播放的開始點并且可以跳過一部分電影場景。例如,日本未審查的專利申請公告No. 2010-277661公開了一種用于在通過簡單的操作跳過商業(yè)消息的同時執(zhí)行播放的技術。
發(fā)明內(nèi)容
但是,沒有提出用于以下的技術能夠自動地播放通過收集出現(xiàn)與在運動畫面中出現(xiàn)的人物中的指定人物相關的人物的場景來獲得的文摘電影,或者執(zhí)行使得觀看者能夠以概述的方式掌握這些電影場景的概要的顯示。本技術是根據(jù)上面提到的環(huán)境來發(fā)明的并且意在提供全新的改進的信息處理裝置、運動畫面摘要方法以及程序,使用上述信息處理裝置、運動畫面摘要方法以及程序可以通過考慮出現(xiàn)人物之間的關系同時將所選的出現(xiàn)人物設置為參照物來實現(xiàn)場景組的選擇方法以及選擇性地播放該場景組的機制。此外,本技術還意在通過進一步考慮在運動畫面中出現(xiàn)的物品之間或物品與人物之間的關系,來實現(xiàn)場景組的選擇方法。根據(jù)上述教示,根據(jù)本公開內(nèi)容的圖像處理設備的產(chǎn)品實施方式包括用戶界面顯示控制單元,用戶界面顯示控制單元使得能夠?qū)D像庫(imageportfolio)中的各個出現(xiàn)的素材顯示在顯示器上,各個出現(xiàn)的素材是以空間關系來顯示的,用戶界面顯示控制單元被配置成響應于作為到用戶界面顯示控制單元的輸入而接收的空間關系的變化來改變各個出現(xiàn)的素材之間的各個關系值。根據(jù)本實施方式的一個方面,該設備還包括顯示器。根據(jù)本實施方式的另一個方面,該顯示器是作為觸摸屏顯示器和接近式顯示器中的至少一種的交互式顯示器。根據(jù)本實施方式的另一個方面,該顯示器顯示來自圖像庫的場景;以及響應于作為輸入而接收的空間關系的變化,該用戶界面顯示控制單元將場景改變到其他場景。根據(jù)本實施方式的另一個方面,該圖像庫包括照片。
根據(jù)本實施方式的另一個方面,該圖像庫包括視頻幀。根據(jù)本實施方式的另一個方面,該設備還包括輸入設備;以及通信單元,其中顯示器位于圖像處理設備的遠處,并且該通信單元生成控制信號,所述控制信號通過通信單元被無線地發(fā)送到對顯示在顯示器上的內(nèi)容進行控制的遠程設備。根據(jù)本實施方式的另一個方面,該設備還包括容納用戶界面顯示控制單元、輸入設備和通信單元,其中該殼是用于平板計算機和遙控器中的一種的殼。根據(jù)本實施方式的另一個方面,空間關系數(shù)據(jù)和出現(xiàn)的素材被同時顯示在顯示器上。根據(jù)本實施方式的另一個方面,該設備還包括關系信息生成單元,該關系信息生成單元計算各個出現(xiàn)的素材與特定的出現(xiàn)的素材之間的關系值,并且按照關系值的降序選擇預定數(shù)量的出現(xiàn)的素材。根據(jù)本實施方式的另一個方面,該設備還包括關系信息生成單元,該關系信息生成單元計算成對的出現(xiàn)的素材之間的關系值并且按照關系值的降序?qū)Τ龀蓪Φ某霈F(xiàn)的素材進行排序。根據(jù)本實施方式的另一個方面,該設備還包括關系信息生成單元,關系信息生成單元計算出現(xiàn)在各個視頻場景中的所有出現(xiàn)的素材之間的關系值,并且按照關系值的降序?qū)Τ霈F(xiàn)的素材進行排序。根據(jù)本實施方式的另一個方面,該設備還包括關系信息生成單元,關系信息生成單元計算預定的出現(xiàn)的素材與在各個視頻場景中檢測到的所有出現(xiàn)的素材之間的關系值,并且按照關系值的降序?qū)Τ霈F(xiàn)的素材進行排序。根據(jù)圖像處理方法實施方式,該方法包括利用用戶界面顯示控制單元來顯示圖像庫中的各個出現(xiàn)的素材,該顯示包括按照空間關系將各個出現(xiàn)的素材顯示在顯示器上,接收輸入到用戶界面顯示控制單元的空間關系的變化;以及響應于該接收,改變各個出現(xiàn)的素材之間的各個關系值。根據(jù)本實施方式的一個方面,該顯示包括顯示來自圖像庫的場景;以及響應于作為輸入而接收的空間關系的變化來改變到其他顯示場景。根據(jù)本實施方式的另一個方面,該方法還包括利用關系信息生成單元計算各個出現(xiàn)的素材與特定的出現(xiàn)的素材之間的關系值;以及按照關系值的降序來選擇預定數(shù)量的出現(xiàn)的素材。根據(jù)本實施方式的另一個方面,該方法還包括計算成對的出現(xiàn)的素材之間的關系值,并且按照關系值的降序?qū)︻A定的成對的出現(xiàn)的素材進行排序。根據(jù)本實施方式的另一個方面,該方法還包括計算出現(xiàn)在各個場景中的所有出現(xiàn)的素材之間的關系值;以及按照關系值的降序?qū)Τ霈F(xiàn)的素材進行排序。根據(jù)本實施方式的另一個方面,該方法還包括計算預定的出現(xiàn)的素材與在場景中檢測到的所有出現(xiàn)的素材之間的關系值;以及按照關系值的降序?qū)Τ霈F(xiàn)的素材進行排序。根據(jù)非瞬時計算機存儲介質(zhì)實施方式,該存儲介質(zhì)包括計算機可讀指令,該計算機可讀指令在由處理電路執(zhí)行時執(zhí)行圖像處理方法,該圖像處理方法包括利用用戶界面顯示控制單元來顯示圖像庫中的各個出現(xiàn)的素材,該顯示包括按照空間關系將各個出現(xiàn)的素材顯示在顯示器上,接收輸入到用戶界面顯示控制單元的空間關系的變化;以及響應于該接收,改變各個出現(xiàn)的素材之間的各個關系值。
圖1是用于描述運動畫面摘要技術的概要的說明圖;圖2是用于描述該運動畫面摘要技術的概要的說明圖;圖3是用于描述該運動畫面摘要技術的概要的說明圖;圖4是用于描述該運動畫面摘要技術的概要的說明圖;圖5是用于描述針對關系值的計算方法的說明圖;圖6是用于描述針對該關系值的計算方法的說明圖;圖7是用于描述針對該關系值的計算方法的說明圖;圖8是用于描述針對該關系值的計算方法的說明圖;圖9是用于描述針對該關系值的計算方法的說明圖;圖10是用于描述針對該關系值的計算方法的說明圖;圖11是用于描述針對該關系值的計算方法的說明圖;圖12是用于描述針對該關系值的計算方法的說明圖;圖13是用于描述關系信息的說明圖;圖14是用于描述根據(jù)本實施方式的信息處理裝置的配置示例的說明圖;圖15是用于描述根據(jù)本實施方式的該信息處理裝置的配置示例(修改示例#1)的說明圖;圖16是用于描述根據(jù)本實施方式的該信息處理裝置的配置示例(修改示例#2)的說明圖;圖17是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖18是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖19是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖20是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖21是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖22是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖23是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖24是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖25是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖26是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖27是用于描述根據(jù)本實施方式的該信息處理裝置的操作示例的說明圖;圖28是用于描述根據(jù)本實施方式的針對該關系值的編輯方法的說明圖;圖29是用于描述根據(jù)本實施方式的針對該關系值的編輯方法的說明圖;圖30是用于描述根據(jù)本實施方式的針對該關系值的編輯方法的說明圖;圖31是用于描述根據(jù)本實施方式的修改示例的運動畫面摘要方法的說明圖;圖32是用于描述根據(jù)本實施方式的修改示例的運動畫面摘要方法的說明圖;圖33是用于描述根據(jù)本實施方式的修改示例的運動畫面摘要方法的說明圖;圖34是用于描述硬件配置示例的說明圖,利用該硬件配置可以實現(xiàn)根據(jù)本實施方式的信息處理裝置的功能;以及圖35是示出了人臉跟蹤、人臉聚類和人臉識別的內(nèi)容的參考圖。
具體實施例方式在下文中,將要參考附圖來詳細描述與本技術有關的實施方式。應當注意,在本說明書和附圖中,使用相同的附圖標記來指代具有基本上相同的功能配置的部件,并且省略多余的描述。[相關的描述流程]在此,將簡單說明下述描述的順序。首先,參考圖1到圖4,將要描述根據(jù)本實施方式的運動畫面摘要技術的概要。接著,參考圖5到圖13,將要描述針對關系值的計算方法。接著,參考圖14到圖16,將要描述根據(jù)本實施方式的信息處理裝置100的配置示例。接著,參考圖17到圖27,將描述根據(jù)本實施的信息處理裝置100的操作示例。接著,參考圖28到圖30,將描述根據(jù)本實施方式的針對關系值的編輯方法。接著,參考圖31到圖33,將描述根據(jù)本實施方式的修改示例的運動畫面摘要技術。接著,參考圖34,將要描述以下硬件配置,利用該硬件配置可以實現(xiàn)根據(jù)本實施方式的信息處理裝置100的功能的。應當注意,在說明期間,將要適當?shù)貐⒖紙D35。最后,將要總結(jié)相同實施方式的技術思想,并且將要簡單地描述從相關的技術思想所獲得的作用和效果。(描述段落)1:介紹1-1 :基于出現(xiàn)人物之間的關系的運動畫面摘要技術的概要1-1-1 :關于文摘播放1-1-2 :關于連環(huán)趣顯不1-2 :針對關系值的計算方法1-2-1 :關于運動畫面時間線元數(shù)據(jù)1-2-2 :基于區(qū)間元數(shù)據(jù)的針對共現(xiàn)關系的評估方法
1-2-3 :基于共現(xiàn)作品的數(shù)量的針對關系值的計算方法1-2-4 :基于共現(xiàn)作品的數(shù)量的針對關系值的計算方法(加權)1-2-5 :基于出現(xiàn)時間的針對關系值的計算方法1-2-6 :基于出現(xiàn)場景時間的針對關系值的計算方法1-3:關系信息的擴展2:實施方式2-1 :信息處理裝置100的配置2-1-1:標準配置2-1-2:修改示例#1 (根據(jù)運動畫面自動地生成元數(shù)據(jù)的配置)2-1-3:修改示例#2 (利用預定關系信息的配置)2-2 :信息處理裝置100的操作2-2-1 :基本操作2-2-2:摘要處理#1 (將關系值的總和最大化的方法)2-2-3:摘要處理#2 (場景切換時的關系值和的最大化(I))2-2-4:摘要處理#3 (場景切換時的關系值和的最大化(2))2-2-5:摘要處理#4 (場景切換時的關系值和的最小化)2-2-6 :摘要處理#5 (其他配置)2-3 :針對關系值的編輯方法2-3-1 :操作UI (用戶界面)的配置2-3-2 :伴隨有針對關系值的編輯處理的信息處理裝置100的操作2-4 :修改示例(利用模板的運動畫面摘要技術)2-4-1 :模板的配置2-4-2 :摘要處理的流程2-4-3 :模板自動生成方法3:硬件配置示例4:結(jié)束語〈1:介紹〉首先,在將要詳細描述根據(jù)本實施方式的運動畫面摘要技術前,將要描述運動畫面摘要技術的概要和用于運動畫面摘要技術的針對關系值的計算方法。[1-1 :基于出現(xiàn)人物之間的關系的運動畫面摘要技術的概要]首先,將參考圖1到圖4來描述基于出現(xiàn)人物之間的關系的運動畫面摘要技術的概要。圖1和圖2是用于描述利用出現(xiàn)的素材之間的關系的文摘播放機制的說明圖。此外,圖3和圖4是用于描述利用出現(xiàn)的素材之間的關系的針對代表性場景圖像的連環(huán)畫顯示方法的說明圖。更一般地,場景圖像可以是圖像庫(image portfolio)的一部分,圖像庫可以包括作為視頻的一部分的多個視頻幀、或作為一組系列照片的一部分的多個照片。(1-1-1 :關于文摘播放)近年來,編輯運動畫面的機會的數(shù)量一直在增加,即使是在一般的家庭中。例如,在許多情況下,用于從記錄孩子的運動會的電影中剪切包含有自己孩子的電影場景以及與自己的孩子相關的人物和物品(下文中,其將被稱為物)并接合相關場景的操作是由攝像機操作者自己進行的。但是,上述編輯操作對于攝像機操作者是高負載操作。此外,在某些情況下,攝像機操作者有時沒有充分地理解與孩子相關的出現(xiàn)的素材,并且很難獲得真正恰當?shù)木庉嫿Y(jié)果。出于該理由,需要以下技術通過考慮出現(xiàn)的素材之間的關系來自動提取恰當?shù)碾娪皥鼍暗募夹g。在實際上沒有編輯運動畫面的情況下,如果通過考慮出現(xiàn)的素材之間的關系來自動提取恰當?shù)碾娪皥鼍?,按照時間順序僅播放自動提取的電影場景,則可以實現(xiàn)與觀看者的意圖一致的運動畫面的觀看模式。例如,如果其自己的孩子被指定并且僅自動提取和播放其自己的孩子的出現(xiàn)場景以及相關的出現(xiàn)的素材,則獲得的結(jié)果與播放經(jīng)編輯的運動畫面的結(jié)果相同。此外,以下還變得可能選擇性地播放與用戶所指定的出現(xiàn)的素材相關的出現(xiàn)的素材的出現(xiàn)場景,而不僅針對由用戶拍攝的運動畫面,還有針對如在市場中分發(fā)的電影的運動畫面。下文中,選擇性地播放來自運動畫面的特定電影場景的播放方法將被稱為文摘播放。運動畫面的文摘播放當然是運動畫面的摘要。順便地,根據(jù)本實施方式,運動畫面的文摘播放是通過使用在圖1和圖2中示出的機制來實現(xiàn)的。例如,人物A、人物B和人物C被設置成出現(xiàn)在特定的運動畫面中。換言之,人物A、人物B和人物C是該運動畫面中的出現(xiàn)的素材。人物A與人物B具有良好關系。另一方面,人物A和人物C具有敵對關系。應當注意,在后續(xù)階段將要描述對出現(xiàn)的素材之間的關系進行量化的方法。首先,提取人物A、人物B和人物C在運動畫面中的出現(xiàn)場景。此外,用戶選擇人物A并且期望基于良好關系的文摘播放,選擇與人物A有良好關系的人物B。接著,按照時間順序來布置人物A的出現(xiàn)場景和人物B的出現(xiàn)場景來生成文摘運動畫面。但是,應當注意,文摘運動畫面可以是通過實際地編輯運動畫面獲得的運動畫面數(shù)據(jù)或表示播放區(qū)間的信息。在圖1的示例中,獲得了以下文摘運動畫面,在該文摘運動畫面中,人物A出現(xiàn)的區(qū)間S11到S14以及人物B出現(xiàn)的區(qū)間S21和S22是按照時間順序來布置的。與此同時,如圖2所示,如果用戶選擇不同的出現(xiàn)的素材,則還可以改變文摘運動畫面的內(nèi)容。在圖2的示例中,假設人物A、人物B、人物C和人物D出現(xiàn)在運動畫面中。此夕卜,人物A和人物B具有良好關系,人物A和人物C具有敵對關系。然后,人物A與人物D具有敵對關系,人物B與人物D具有良好關系。此外,人物C與人物D具良好關系。在存在上述關系的情況下,如果用戶選擇人物A并且期望基于良好關系的文摘播放,則文摘運動畫面具有在(I)中示出的配置。與此同時,如果用戶選擇人物D,則文摘運動畫面具有在(2)中所示的配置。如上所述,如果使用根據(jù)本實施方式的運動畫面摘要技術,甚至是在運動畫面的情況下,通過改變待選擇的出現(xiàn)的素材,則還改變了經(jīng)歷文摘播放的運動畫面的內(nèi)容。此夕卜,在上面提到的示例中,考慮了基于良好關系的文摘播放,但是可以采取中途切換關系類型的設置。例如,在提供有設置“友好關系一敵對關系一沒有關系一敵對關系一友好關系”的情況下,可以將特定故事線提供給文摘運動畫面。但是,應當注意,甚至在采用與上述關系相關的設置的情況下,文摘運動畫面的內(nèi)容依然隨著用戶所選擇的出現(xiàn)的素材的改變而改變。( 1-1-2 :關于連環(huán)畫顯示)在圖1和圖2中示出的文摘播放與用于按照時間順序觀看經(jīng)提煉的運動畫面的方法有關。另一方面,本文所描述的連環(huán)畫顯示與用于以概觀的方式觀看運動畫面的摘要結(jié)果的方法相關。但是,應當注意,用于電影場景的提取方法與用于在上述文摘播放中的電影場景的提取方法是相同的。例如,在圖2的示例中選擇人物A的情況下,提取了人物A出現(xiàn)的區(qū)間S11到區(qū)間S14和人物B出現(xiàn)的區(qū)間S21和S22。但是,在連環(huán)畫顯示的情況下,區(qū)間Sn到區(qū)間S14、區(qū)間S21和區(qū)間S22不是按照時間順序來播放的,并且如圖3所示,布置并播放了代表各個區(qū)間的圖像。應當注意到,可以配置成播放各個區(qū)間的運動畫面而不是代表性圖像。與此同時,在圖2的示例中選擇人物D的情況下,提取了出現(xiàn)人物D的區(qū)間S41到S43、在人物D的出現(xiàn)場景后的人物B出現(xiàn)的區(qū)間S22、和在人物D的出現(xiàn)場景后的人物C出現(xiàn)的區(qū)間S32到區(qū)間S34。在這種情況下,如圖4所示出的,布置并顯示了代表各個區(qū)間的圖
像。應當注意,一個幀和一個區(qū)間可能不是--對應。例如,針對預定的時間,各個幀中顯
示的圖像可以切換到與其他區(qū)間對應的圖像。此外,在用戶從各個幀的圖像中作出選擇的情況下,可以播放與所選的圖像對應的區(qū)間的運動畫面。此外,對應于與用戶所選擇的出現(xiàn) 的素材有很強關系的出現(xiàn)的素材的出現(xiàn)場景的幀可以配置成被高亮。如上所述,如果使用根據(jù)本實施方式的運動畫面摘要技術,則可以執(zhí)行如上所述的文摘播放和連環(huán)畫顯示。應當注意,用于摘要結(jié)果的表達方法不限于這些方法。[1-2 :針對關系值的計算方法]接下來,參考圖5到圖12,將描述針對關系值的計算方法。關系值定量地表示了出現(xiàn)的素材之間的關系。例如,通過使用如下所述的運動畫面時間線元數(shù)據(jù)來計算關系值。(1-2-1 :關于運動畫面時間線元數(shù)據(jù))首先,將要描述運動畫面時間線元數(shù)據(jù)。如圖5所示,運動畫面時間線元數(shù)據(jù)由區(qū)域元數(shù)據(jù)、區(qū)間元數(shù)據(jù)和對象元數(shù)據(jù)組成。區(qū)域元數(shù)據(jù)是表示在運動畫面幀中出現(xiàn)的人物、物品等(出現(xiàn)的素材)的位置和范圍的元數(shù)據(jù)。在圖5的示例中,舉例說明了表示在運動畫面幀中出現(xiàn)的人物的面部區(qū)域的區(qū)域元數(shù)據(jù)。此外,區(qū)間元數(shù)據(jù)是表示出現(xiàn)的素材在運動畫面中出現(xiàn)的區(qū)間的元數(shù)據(jù)。然后,對象元數(shù)據(jù)是表示與在運動畫面中出現(xiàn)的出現(xiàn)的素材有關的相關信息的元數(shù)據(jù)。應當理解,運動畫面時間線元數(shù)據(jù)是針對在運動畫面中出現(xiàn)的每一個出現(xiàn)的素材來設置的。此外,運動畫面時間線元數(shù)據(jù)是針對每一個運動畫面來設置的。出于該理由,在多條運動畫面時間線元數(shù)據(jù)中,通過使用區(qū)間元數(shù)據(jù),可以發(fā)現(xiàn)哪個出現(xiàn)的素材在哪個運動畫面中的哪個區(qū)間出現(xiàn)。此外,通過使用區(qū)域元數(shù)據(jù),可以找出用戶指定的屏幕上的區(qū)域與顯示在屏幕上的出現(xiàn)的素材之間的對應關系。例如,如果使用區(qū)域元數(shù)據(jù)和對象元數(shù)據(jù),在用戶指定了出現(xiàn)人物的面部區(qū)域的情況下,可以實現(xiàn)顯示與出現(xiàn)人物有關的相關信息的用戶界面。還應當注意,運動畫面時間線元數(shù)據(jù)可以通過手動輸入來生成,也可以通過使用如在圖35中示出的人臉檢測、人臉跟蹤、人臉聚類、人臉識別的方法來自動地生成。此外,通過將基于手動輸入的生成方法和自動生成方法相互組合,可以生成高精確度的運動畫面時間線元數(shù)據(jù)。例如,可以利用在日本未審查的專利申請公告No. 2005-44330 (物質(zhì)檢測跟蹤)、日本未審查的專利申請公告No. 2010-3021 (聚類)、日本未審查的專利申請公告No. 2007-65766 (識別)等中描述的技術。
(1-2-2 :基于共現(xiàn)關系的針對區(qū)間元數(shù)據(jù)的評估方法)接下來,參考圖6至圖8,將要描述基于共現(xiàn)關系的針對區(qū)間元數(shù)據(jù)的評估方法。應當注意,本文所述的共現(xiàn)表示多個出現(xiàn)的素材在同一運動畫面或同一運動畫面幀中出現(xiàn)的情況。此外,在下文中,為了方便描述,仍然在作為出現(xiàn)的素材是人物的示例的情況下進行描述。首先,將要描述從區(qū)間元數(shù)據(jù)獲得的信息的主要類型、和用于評估人物之間關系的評估參考。圖6至圖8是用于描述基于區(qū)間元數(shù)據(jù)的針對共現(xiàn)關系的評估方法的說明圖。首先,參考圖6。如上所述,區(qū)間元數(shù)據(jù)是針對每一個運動畫面和針對每一個人物來準備的。此外,各條區(qū)間元數(shù)據(jù)表示人物在運動畫面中出現(xiàn)的區(qū)間。在圖6中,關于運動畫面M1,舉例說明了表示人物A的出現(xiàn)區(qū)間的區(qū)間元數(shù)據(jù)、表示人物B的出現(xiàn)區(qū)間的區(qū)間元數(shù)據(jù)和表示人物C的出現(xiàn)區(qū)間的區(qū)間元數(shù)據(jù)。在圖6的示例中,從t2到t4的區(qū)間、從t9到tn的區(qū)間和從t13到t16的區(qū)間對應于人物A的出現(xiàn)區(qū)間。此外,從&到t3的區(qū)間、從t5到t7的區(qū)間和從t1(l到t12的區(qū)間對應于人物B的出現(xiàn)區(qū)間。此外,從t6到t8的區(qū)間和從t14到t15的區(qū)間對應于人物C的出現(xiàn)區(qū)間。
從圖6中舉例說明的三條區(qū)間元數(shù)據(jù)中,找出各個出現(xiàn)人物在運動畫面M1的出現(xiàn)時間(由每個運動畫面安排的出現(xiàn)時間)、運動畫面M1中的共現(xiàn)人物、和運動畫面M1中的共現(xiàn)場景的長度(在下文中,其將要被稱為共現(xiàn)場景時間)。例如,由運動畫面M1中的人物A的每一個運動畫面△ tA安排的出現(xiàn)時間計算如下A tA= I t4-t21 +1 tn-t91 +1 t16-t13。其同樣適用于由人物B的每一個運動畫面A七⑶安排的出現(xiàn)時間,和由人物C的每一個運動畫面Atic安排的出現(xiàn)時間。此外,由于人物A、人物B和人物C的出現(xiàn)區(qū)間存在于運動畫面M1中,所以發(fā)現(xiàn)人物A與人物B是共現(xiàn)人物,人物B與人物C是共現(xiàn)人物,以及人物C與人物A是共現(xiàn)人物。此夕卜,由于人物A和人物B在從t2到t3的區(qū)間以及從t1(l到tn的區(qū)間中共同出現(xiàn),所以運動畫面M1中的人物A和人物B的共現(xiàn)場景時間At1AB計算如下A t1AB= I t3_t21 +1 tn-t1Q I。類似地,由于人物B和人物C在從、到t7的區(qū)間中共同出現(xiàn),所以人物B和人物C在運動畫面M1中的共現(xiàn)場景時間A t1BC計算如下A t1BC= I t7-t61。此外,由于人物A和人物C共同出現(xiàn)在從t14到t15的區(qū)間中,所以人物A和人物C在運動畫面M1中的共現(xiàn)場景時間算如下A tlcA= I t15_t141。以此方式,通過分析各個運動畫面的區(qū)間元數(shù)據(jù)來獲得由各個運動畫面中的各個出現(xiàn)人物的每個運動畫面所安排的出現(xiàn)時間、各個運動畫面中的共現(xiàn)人物、和各個運動畫面中的共現(xiàn)場景時間。此外,如圖7所示,通過組合與針對多個運動畫面而獲得的每個運動圖像、共現(xiàn)人物、共現(xiàn)場景時間等安排的出現(xiàn)時間有關的多條信息,來獲得與各個人物的總的出現(xiàn)時間有關的多條信息、與成對的各個人物相關的總的共現(xiàn)作品、與針對目標運動圖像組(在圖7的示例中,M1到Mn的運動畫面)的成對的各個人物有關的總的共現(xiàn)場景時間。例如,如果關于目標運動畫面組總結(jié)由每一個運動畫面安排的出現(xiàn)時間,則獲得相關人物的總的出現(xiàn)時間。此外,由于找出了各個運動畫面中的共現(xiàn)人物,如果計算其中某一組人物是共現(xiàn)人物的運動畫面的數(shù)量,則獲得與相關組人物有關的共現(xiàn)作品的數(shù)量。此夕卜,通過關注某組人物以及針對該組人物共同出現(xiàn)的運動畫面組總結(jié)由的各個人物的每個運動畫面組織的出現(xiàn)時間,來獲得與相關組人物有關的共現(xiàn)時間。此外,通過關注某組人物以及針對該組人物共同出現(xiàn)的運動畫面組總結(jié)共現(xiàn)場景時間,來獲得與相關組人物相關的共現(xiàn)場景時間。例如,設置如下人物D和人物E在運動畫面M2和M5中共同出現(xiàn)。在這種情況下,與人物D和人物E的組有關的共現(xiàn)時間對應于由在運動畫面M2和M5中的人物D的每一個運動畫面安排的出現(xiàn)時間的總值(A t2D和A t5D)與在運動畫面M2和M5中的人物E的每一個運動畫面安排的出現(xiàn)時間的總值(A ^和At5E)之和(At2D+At5D+At2E+At5E)。此外,與人物D和人物E的組有關的共現(xiàn)場景時間對應于運動畫面M2中的共現(xiàn)場景時間(A t2DE)和運動畫面M5中的共現(xiàn)場景時間(A t5DE)之和(A t2DE+A t5DE)??梢韵胂缶哂写罅抗铂F(xiàn)作品的一組人物、具有很長共現(xiàn)時間的一組人物、和具有很長的共現(xiàn)場景時間的一組人物在人物之間具有很強的關系。還可以想象隨著每個人物作為主要人物共同出現(xiàn)的作品數(shù)量的增加,人物之間的關系也在增強。此外,認為以下是合適的通過考慮顯示區(qū)域的尺寸等來對人物之間的關系進行評估。如果沒有考慮顯示區(qū)域,例如,在某些情況下,作為臨時演員出現(xiàn)的人物和作為主要人物的男演員可能具有很強的關系,并且作為主要人物的演員和作為主要人物的女演員可能具有很弱的關系。關于人 物是否為主要人物、次要人物等的信息可以從對象元數(shù)據(jù)中獲得。此外,在對象元數(shù)據(jù)包括關于孩子、大人、男性人物、女性人物、老年人等的信息的情況下,可以利用這些條信息。此夕卜,顯示區(qū)域等可以從區(qū)域元數(shù)據(jù)中獲得。如上所述,通過利用區(qū)間元數(shù)據(jù)可以獲得用于評估人物之間的關系的各條信息。此外,可以通過利用該信息來評估人物之間的關系。此外,可以通過組合利用對象元數(shù)據(jù)與區(qū)域元數(shù)據(jù)來更恰當?shù)卦u估人物之間的關系。例如,人物之間的關系可以用如圖8中所示出的矩陣格式來表示。應當注意,與相關要素對應的、表示成對人物的之間的關系的強度的關系值被輸入到矩陣的單個方框中。該矩陣被稱為關系矩陣。此外,針對除了人物以外的出現(xiàn)的素材,可以類似地獲得關系矩陣。下文中,將要給出針對關系值的具體計算方法。(1-2-3 :基于共現(xiàn)作品數(shù)量的針對關系值的計算方法)首先,將要參考圖9描述基于共現(xiàn)作品數(shù)量的針對關系值的計算方法。圖9是用于描述基于共現(xiàn)作品數(shù)量的針對關系值的計算方法的說明圖。應當注意,目標運動畫面組被設置成運動畫面M1到M6。此外,出現(xiàn)在運動畫面M1到M6中的人物被設置成人物A、人物B和人物C。如上所述,如果使用區(qū)間元數(shù)據(jù),如圖6中所示,則獲得人物A、人物B和人物C之間的共現(xiàn)關系。在圖9的示例中,運動畫面M1中的出現(xiàn)人物是人物A、人物B和人物C。此夕卜,運動畫面M2中的出現(xiàn)人物是人物A和人物C。此外,運動畫面M3中的出現(xiàn)人物僅是人物B。然后,運動畫面M4中的出現(xiàn)人物是僅是人物A。此外,運動畫面M5中的出現(xiàn)人物是人物A和人物B。此外,運動畫面M6中的出現(xiàn)人物是人物A和人物B。換言之,人物A與人物B共同出現(xiàn)的作品是運動畫面M1、運動畫面M5和運動畫面M6。此外,人物A與人物C共同出現(xiàn)的作品是運動畫面M1和運動畫面M2。此外,人物B和人物C共同出現(xiàn)的作品僅是運動畫面M1O人物A與人物B共同出現(xiàn)的作品的數(shù)量是3,人物A與人物C共同出現(xiàn)的作品的數(shù)量是2以及人物B與人物C共同出現(xiàn)的作品的數(shù)量是I。因此,表示人物A與人物B的關系的關系值是3,表示人物A與人物C的關系的關系值時2以及表示人物B與人物C的關系的關系值是I。應當注意,在形式上可以計算相同人物之間的關系值。例如,人物A與人物A共同出現(xiàn)的作品與人物A出現(xiàn)的作品是同義的,并且對應于運動畫面Mp M2和M4至M6。換言之,人物A與人物A之間的共現(xiàn)作品的數(shù)量是5,并且表示人物A與人物A之間的關系的關系值是5。相同的計算適用于到人物B和人物C。如果總結(jié)上述方法中計算出的的關系值(還包括有與相同人物相關的關系值),則獲得圖9中示出的關系矩陣。但是應當注意,該關系矩陣的對角線分量表示與單個方框?qū)娜宋锏某霈F(xiàn)作品的數(shù)量。應當注意,在本文中,出現(xiàn)作品的數(shù)量按照原樣被描述成關系值,但是可以適當?shù)乩媒?jīng)過與預定系數(shù)的乘積、歸一化等處理過的數(shù)值來作為關系值。例如,可以適當?shù)貓?zhí)行歸一化使得所有的對角線分量與I對應。在上面,描述了基于共現(xiàn)作品的數(shù)量的針對關系值的計算方法。(1-2-4 :基于共現(xiàn)作品的針對關系值的計算方法(加權))接下來,參考圖10,將描述基于共現(xiàn)作品數(shù)量的針對關系值的計算方法(加權)。圖 10是用于描述基于共現(xiàn)作品數(shù)量的針對關系值的計算方法(加權)的說明圖。在此,主要人物/次要人物之間的區(qū)別通過權重來表示,并且將要描述基于權重值和共現(xiàn)作品數(shù)量計算關系值的方法。還應當注意,由權重、關系矩陣來表示的孩子、大人、男性人物、女性人物、老年人等之間的區(qū)別可以通過類似的方法來獲得。在該情況下,目標運動畫面組被設置成運動畫面M1到M6。此外,出現(xiàn)在運動畫面M1到M6中的人物被設置為人物A、人物B和人物C。如圖10所示,如果利用區(qū)間元數(shù)據(jù),則獲得人物A、人物B和人物C之間的共現(xiàn)關系。在圖10的示例中,運動畫面M1中的出現(xiàn)人物是人物A、人物B和人物C。此外,運動畫面M2中的出現(xiàn)的人物是人物A和人物C。此外,運動畫面M3中的出現(xiàn)人物僅是人物B。然后,運動畫面M4中的出現(xiàn)人物僅是人物A。此外,運動畫面M5中的出現(xiàn)人物是人物A和人物B。此外,運動畫面M6中的出現(xiàn)人物是人物A和人物B。換言之,人物A和人物B共同出現(xiàn)的作品是運動畫面M1、運動畫面M5和運動畫面M6。此外,人物A和人物C共同出現(xiàn)的作品是運動畫面M1和運動畫面M2。此外,人物B和人物C共同出現(xiàn)的作品僅是運動畫面Mp此外,如果使用對象元數(shù)據(jù),則發(fā)現(xiàn)在運動畫面M1中,人物A與人物B是主要人物,人物C是次要人物。類似地,發(fā)現(xiàn)在運動畫面M2中,人物A是主要人物,人物是C是次要人物。此外,發(fā)現(xiàn)在運動畫面M3中,人物B是主要人物。此外,發(fā)現(xiàn)在運動畫面M4中,人物A是次要人物。然后,發(fā)現(xiàn)在運動畫面仏中,人物A和人物B是次要人物。此外,發(fā)現(xiàn)在運動畫面M6中,人物A是主要人物,人物B是次要人物。本文中,給出了權重的考慮。在共現(xiàn)人物都是主要人物的情況下,對于每一個共現(xiàn)作品,給出等于4的得分。在其中一個共現(xiàn)人物是主要人物而另一個共現(xiàn)人物是次要人物的情況下,對于每一個共現(xiàn)作品,給出等于2的得分。此外,在共現(xiàn)人物都是次要人物的情況下,對于每一個共現(xiàn)作品,給出等于I的得分。在圖10的示例中,人物A和人物B都扮演主要人物的作品是運動畫面札。此外,人物A扮演主要人物以及人物B扮演次要人物的作品或者人物A扮演次要人物以及人物B扮演主要人物的作品是運動畫面M6。然后,人物A和人物B都扮演次要人物的作品是運動畫面M5。從這些結(jié)果中,關于成對的人物A與人物B,人物A和人物B都扮演主要人物的作品的數(shù)量是I。此外,人物A扮演主要人物以及人物B扮演次要人物的作品或人物A扮演次要人物以及人物B扮演主要人物的作品的數(shù)量是I。然后,人物A和人物B都扮演次要人物的作品的數(shù)量是I。從而,總的得分是4X1+2X1+1X1=7。換言之,表示人物A與人物B之間的關系的關系值是7。類似地,人物A和人物C都扮演主要人物的作品是運動畫面M2。此外,人物A扮演主要人物以及人物C扮演次要人物的作品或人物A扮演次要人物以及人物C扮演主要人物的作品是運動畫面W。然后,人物A和人物C都扮演次要人物的作品是不存在的。從這些結(jié)果中,關于成對的人物A和人物C,人物A和人物C扮演主要人物的作品的數(shù)量是I。此外,人物A扮演主要人物以及人物C扮演次要人物的作品或人物A扮演次要人物以及人物C扮演主要人物的作品的數(shù)量是I。然后,人物A和人物C扮演次要人物的作品的數(shù)量是O。從而,總的得分是4X1+2X1+1X0=6。換言之,表示人物A與人物C之間的關系的關系值是6。類似地,人物B和人物C都扮演主要人物的作品不存在。此外,人物B扮演主要人物以及人物C扮演次要人物的作品或人物B扮演次要人物以及人物C扮演主要人物的作品是運動畫面W。然后,人物B和人物C都扮演次要人物的作品不存在。從這些結(jié)果中,關于 人物B和人物C,人物B和人物C都扮演主要人物的作品的數(shù)量是O。此外,人物B扮演主要人物以及人物C扮演次要人物的作品或人物B扮演次要人物以及人物C扮演主要人物的作品的數(shù)量是I。然后,人物B和人物C都扮演次要人物的作品的數(shù)量是O。因此,總的得分是4 X 0+2 X 1+1 X 0=2。換言之,表示人物B與人物C之間的關系的關系值是2。如果類似地計算與相同人物有關的關系值并且總結(jié)這些關系值,則獲得圖10中示出的關系矩陣。應當注意,在本文中,總的得分按照原樣設置成關系值,但是可以將總值的平方根設置成關系值。此外,可以適當利用經(jīng)與預定系數(shù)的乘積、歸一化等處理過的數(shù)值作為關系值。例如,可以適當執(zhí)行歸一化使得所有的對角線分量對應于I。此外,在上述說明中,舉例說明了執(zhí)行根據(jù)角色組合的評分,但是例如,角色權重RW可以以下方式定義,并且關系值Rel可以基于以下公式(I)來計算。在人物A是運動畫面Mk中的主要人物的情況下,角色權重RW (Mk, A)取2,其在任務A的角色是次要人物的情況下取1,以及在人物A沒有出現(xiàn)的情況下取O。此外,Rel (A,B)代表表示人物A與人物B之間的關系的關系值。嫌(Mt,5)}
V k在上文中,描述了基于共現(xiàn)作品數(shù)量的針對關系值的計算方法(加權)。(1-2-5 :基于共現(xiàn)時間的針對關系值的計算方法)接下來,參考圖11,將要描述基于共現(xiàn)時間的針對關系值的計算方法。圖11是用于描述基于共現(xiàn)時間的針對關系值的計算方法的說明圖。這里,將要描述通過利用各個運動畫面中的各個人物的出現(xiàn)時間來計算關系值的方法。應當注意,目標運動畫面組被設置為運動畫面M1到M6。此外,運動畫面M1到M6中出現(xiàn)的人物被設置為人物A、人物B和人物C0如圖11所示,如果利用區(qū)間元數(shù)據(jù),則獲得人物A、人物B和人物C之間的共現(xiàn)關系。在圖11的示例中,運動畫面M1中的出現(xiàn)人物是人物A、人物B和人物C。此外,運動畫面M2中的出現(xiàn)人物是人物A和人物C。此外,運動畫面M3中的出現(xiàn)人物僅是人物B。然后,運動畫面M4中的出現(xiàn)人物僅是人物A。此外,運動畫面M5中的出現(xiàn)人物是人物A和人物B。此外,運動畫面M6中的出現(xiàn)人物是人物A和人物B。換言之,人物A和人物B共同出現(xiàn)的作品是運動畫面M1、運動畫面M5和運動畫面M6。此外,人物A和人物C共同出現(xiàn)的作品是運動畫面M1和運動畫面M2。此外,人物B和人物C共同出現(xiàn)的作品僅是運動畫面Mp此外,如圖11所示,如果利用區(qū)間元數(shù)據(jù),則發(fā)現(xiàn)在運動畫面M1中,人物A的出現(xiàn)時間是40,人物B的出現(xiàn)時間是30,以及人物C的出現(xiàn)時間是10。類似地,發(fā)現(xiàn)在運動畫面M2中,人物A的出現(xiàn)時間是30以及人物C的出現(xiàn)時間是40。此外,發(fā)現(xiàn)在運動畫面M3中,人物B的出現(xiàn)時間是20。此外,發(fā)現(xiàn)在運動畫面M4中,人物A的出現(xiàn)時間是10。然后,發(fā)現(xiàn)在運動畫面M5中,人物A的出現(xiàn)時間是5,人物B的出現(xiàn)時間是10。此外,發(fā)現(xiàn)在運動畫面M6中,人物A的出現(xiàn)時間是40以及人物B的出現(xiàn)時間是5。可以提及具有很長出現(xiàn)時間的人物在運動畫面中扮演重要的角色。此外,作為重要角色共同出現(xiàn)的人物之間的關系被認為是很強的。相反地,相互具有很短出現(xiàn)時間的人物之間的關系被認為是很弱的。例如,作為很小角色的人物之間的關系被評估為不重要。根據(jù)上述思想,定義了出現(xiàn)時間PSL,并且提出了基于以下公式(2)來計算關系值Rel的方法。但是應當注意,出現(xiàn)時間PSL (Mk,A)表示人物A在運動畫面Mk中的出現(xiàn)時間。在人物A不出現(xiàn)的情況下,出現(xiàn)時間PSL (Mk,A)取O。此外,Rel (A, B)代表表示人物A與人物B 之間的關系的關系值。應當注意,可以將右邊的平方根可以設置為關系值。Re /(為 B) = Z {PSL(Mk, A). PSL(Mk, B)}
k在圖11的示例中,表示人物A與人物B之間的關系的關系值是40X30 (運動畫面M1)+30 XO (運動畫面M2)+0X20 (運動畫面M3)+10 X 0 (運動畫面M4)+5 X 10 (運動畫面M5)+40X5 (運動畫面M6) =1450。如果類似地執(zhí)行計算,則表示人物A與人物C之間的關系的關系值是1600以及表示人物B與人物C之間的關系的關系值是300。如果總結(jié)這些數(shù)值,則獲得在圖11示出的關系矩陣。應當注意,將得分按照原樣描述為上述的關系值,但是,可以適當?shù)貙⒔?jīng)與預定系數(shù)的乘積、歸一化等處理過的數(shù)值用作關系值。例如,適合執(zhí)行歸一化使得所有的對角線分量對應于I。在上文中,基于針對關系的計算方法描述了針對關系矩陣的計算方法。(1-2-6 :基于出現(xiàn)場景時間的針對關系值的計算方法)接下來,參考圖12,將要描述基于出現(xiàn)場景時間的針對關系值的計算方法。圖12是用于描述基于出現(xiàn)場景時間的針對關系值的計算方法的說明圖。在此,將要描述通過利用各個運動畫面中的共現(xiàn)場景時間來計算關系值的方法。應當注意,目標圖像組被設置為運動畫面M1到運動畫面M6。此外,出現(xiàn)在運動畫面M1到M6中的人物被設置為人物A、人物B和人物C。如圖12所示,如果利用區(qū)間元數(shù)據(jù),則獲得與關于各個運動畫面的成對的各個人物相關的共現(xiàn)場景時間。應當注意,在圖12中,關于人物X和人物Y的共現(xiàn)場景時間可以表示為[X,Y]。例如,關于運動畫面M1中的成對的人物A與人物B的共現(xiàn)場景時間是[A,B]=20。類似地,關于運動畫面 M1,獲得[A,A]=40、[B,B]=30、[C,C]=10、[A,C]=5 和[B, C]=5的結(jié)果。應當注意,[A,A]表示人物A與人物B共現(xiàn)的區(qū)間的長度,但是由于相同的人物是目標,則[A,A]與人物A的出現(xiàn)時間匹配。相同的計算方法適用于[B,B]和[C,C]。同一電影場景中出現(xiàn)的人物之間的關系被認為很強。例如,具有交談過程的關系中的人物出現(xiàn)在同一電影場景中。此外,具有敵對關系或友好關系的人物出現(xiàn)在運動畫面中的同一電影場景中的頻率是很高的。扮演男英雄角色的人物與扮演女英雄角色的人物出現(xiàn)在同一電影場景中的頻率也是很高的。根據(jù)上述思想,定義共現(xiàn)場景時間CSL,并且提出了基于以下公式(3)來計算關系值Rel的方法。但是應當注意,共現(xiàn)場景時間CSL(Mk,A,B)表示人物A和人物B在運動畫面Mk中共同出現(xiàn)的區(qū)間的長度。在這些人物不出現(xiàn)的情況下,共現(xiàn)場景時間CSL (Mk,A,B)取O。此外,Rel (A, B)代表表示人物A與人物B之間的關系的關系值。應當注意,可以將右邊部分的平方根設置為關系值。
權利要求
1.ー種圖像處理設備,包括 用戶界面顯示控制単元,所述用戶界面顯示控制単元使得圖像庫中的各個出現(xiàn)的素材顯示在顯示器上,所述各個出現(xiàn)的素材是按照空間關系來顯示的,所述用戶界面顯示控制単元被配置成響應于作為對所述用戶界面顯示控制単元的輸入而接收到的所述空間關系的變化來改變所述各個出現(xiàn)的素材之間的相應關系值。
2.根據(jù)權利要求I所述的圖像處理設備,還包括 所述顯示器。
3.根據(jù)權利要求2所述的圖像處理設備,其中, 所述顯示器是交互式顯示器,是觸摸屏顯示器和接近式顯示器中的至少ー種。
4.根據(jù)權利要求2所述的圖像處理設備,其中, 所述顯示器顯示來自所述圖像庫的場景;以及 響應于作為輸入而接收到的所述空間關系的變化,所述用戶界面顯示控制単元將所述場景改變到其他場景。
5.根據(jù)權利要求I所述的圖像處理設備,其中, 所述圖像庫包括照片。
6.根據(jù)權利要求I所述的圖像處理設備,其中, 所述圖像庫包括視頻幀。
7.根據(jù)權利要求I所述的圖像處理設備,還包括 輸入設備;以及 通信単元,其中, 所述顯示器遠離所述圖像處理設備,并且所述通信単元生成控制信號,所述控制信號通過所述通信単元被無線地發(fā)送到對顯示在所述顯示器上的內(nèi)容進行控制的遠程設備。
8.根據(jù)權利要求7所述的圖像處理設備,還包括 容納所述用戶界面顯示控制単元、所述輸入設備和所述通信単元的外殼,其中 所述外殼是用于平板計算機和遙控器中的一種的外売。
9.根據(jù)權利要求2所述的圖像處理設備,其中 所述空間關系數(shù)據(jù)和所述出現(xiàn)的素材被同時顯示在所述顯示器上。
10.根據(jù)權利要求I所述的圖像處理設備,還包括 關系信息生成単元,所述關系信息生成單元計算所述各個出現(xiàn)的素材與特定的出現(xiàn)的素材之間的關系值,并且按照關系值的降序選擇預定數(shù)量的出現(xiàn)的素材。
11.根據(jù)權利要求I所述的圖像處理設備,還包括 關系信息生成単元,所述關系信息生成單元計算成對的出現(xiàn)的素材之間的關系值并且按照關系值的降序?qū)λ龀蓪Φ某霈F(xiàn)的素材進行排序。
12.根據(jù)權利要求I所述的圖像處理設備,還包括 關系信息生成単元,所述關系信息生成單元計算出現(xiàn)在各個視頻場景中的所有出現(xiàn)的素材之間的關系值,并且按照關系值的降序?qū)Τ霈F(xiàn)的素材進行排序。
13.根據(jù)權利要求I所述的圖像處理設備,還包括 關系信息生成単元,所述關系信息生成單元計算預定的出現(xiàn)的素材與在各個視頻場景中檢測到的所有出現(xiàn)的素材之間的關系值,并且按照關系值的降序?qū)Τ霈F(xiàn)的素材進行排序。
14.ー種圖像處理方法,包括 利用用戶界面顯示控制單元來顯示圖像庫中的各個出現(xiàn)的素材,所述顯示包括 按照空間關系將各個出現(xiàn)的素材顯示在顯示器上, 接收輸入到所述用戶界面顯示控制単元的所述空間關系的變化;以及 響應于所述接收,改變所述各個出現(xiàn)的素材之間的相應關系值。
15.根據(jù)權利要求14所述的方法,其中 所述顯示包括顯示來自所述圖像庫的場景;以及 響應于作為輸入而接收到的所述空間關系的變化來改變到其他顯示場景。
16.根據(jù)權利要求14所述的方法,還包括 利用關系信息生成單元來計算所述各個出現(xiàn)的素材與特定的出現(xiàn)的素材之間的關系值;以及 按照關系值的降序選擇預定數(shù)量的出現(xiàn)的素材。
17.根據(jù)權利要求14所述的方法,還包括 計算成對的出現(xiàn)的素材之間的關系值,并且按照關系值的降序?qū)︻A定的成對的出現(xiàn)的素材進行排序。
18.根據(jù)權利要求14所述的方法,還包括 計算出現(xiàn)在各個場景中的所有出現(xiàn)的素材之間的關系值;以及 按照關系值的降序?qū)Τ霈F(xiàn)的素材進行排序。
19.根據(jù)權利要求14所述的方法,還包括 計算預定的出現(xiàn)的素材與在場景中檢測到的所有出現(xiàn)的素材之間的關系值;以及 按關系值的降序?qū)Τ霈F(xiàn)的素材進行排序。
20.ー種非瞬時計算機存儲介質(zhì),所述非瞬時計算機存儲介質(zhì)包含計算機可讀指令,所述計算機可讀指令在由處理電路執(zhí)行時執(zhí)行圖像處理方法,所述圖像處理方法包括 利用用戶界面顯示控制單元來顯示圖像庫中的各個出現(xiàn)的素材,所述顯示包括 按照空間關系將各個出現(xiàn)的素材顯示在顯示器上, 接收輸入到所述用戶界面顯示控制単元的所述空間關系的變化;以及 響應于所述接收,改變所述各個出現(xiàn)的素材之間的各個關系值。
全文摘要
一種圖像處理設備以及相關聯(lián)的方法和計算機程序產(chǎn)品,包括使得能夠?qū)D像庫中的各個出現(xiàn)的素材顯示在顯示器上的用戶界面顯示控制單元。各個出現(xiàn)的素材是以空間關系來顯示的。該用戶界面顯示控制單元響應于接收的作為到用戶界面顯示控制單元的輸入的空間關系的變化來改變各個出現(xiàn)的素材之間的各個關系值。
文檔編號G06F3/0487GK102981733SQ201210250810
公開日2013年3月20日 申請日期2012年7月19日 優(yōu)先權日2011年7月26日
發(fā)明者佐藤浩司, 倉田雅友, 村田誠, 澀谷直樹 申請人:索尼公司