本發(fā)明涉及終端技術(shù)領(lǐng)域,尤其涉及一種照片處理方法、裝置及終端。
背景技術(shù):
隨著移動(dòng)互聯(lián)網(wǎng)的發(fā)展和智能移動(dòng)終端的普及,智能移動(dòng)終端的用戶群越來越大,同時(shí)也對(duì)軟件提出了更多智能,人性化的需求。
在現(xiàn)有的技術(shù)中,其實(shí)智能移動(dòng)終端,雖然被用戶作為一個(gè)游戲機(jī)或電視機(jī),還可能是一個(gè)學(xué)習(xí)機(jī),還可能成為小寶寶的樂園等等,給我們的生活帶來更多的樂趣。
隨著用戶對(duì)對(duì)移動(dòng)終端依賴性的逐漸增加,用戶在移動(dòng)終端中的應(yīng)用也日益增多,當(dāng)前移動(dòng)終端的拍照可以利用雙鏡頭進(jìn)行拍照,一個(gè)攝像頭用于測(cè)量拍攝物體的景深、另外一個(gè)攝像頭用于拍攝物體,然后對(duì)兩個(gè)攝像頭所拍攝的信息合成一張照片。
照片拍攝后,如果要把拍攝物體移動(dòng)到其他位置時(shí),由于不知道該位置的景深信息,導(dǎo)致移動(dòng)后,可能導(dǎo)致該移動(dòng)物體和周圍的景物大小比例不協(xié)調(diào)。
針對(duì)相關(guān)技術(shù)中照片中的人物被移動(dòng)后大小與背景不適應(yīng)的問題,目前尚未提出解決方案。
技術(shù)實(shí)現(xiàn)要素:
本發(fā)明的主要目的在于提出一種照片處理方法、裝置及終端,旨在解決相關(guān)技術(shù)中照片中的人物被移動(dòng)后大小與背景不適應(yīng)的問題。
為實(shí)現(xiàn)上述目的,本發(fā)明提供了一種照片處理方法,包括:
對(duì)通過第一攝像頭和第二攝像頭拍攝的照片中的目標(biāo)人物進(jìn)行識(shí)別,其中,所述第一攝像頭用于測(cè)量拍攝物體的景深,所述第二攝像頭用于拍攝物體,所述照片是由所述第一攝像頭和所述第二攝像頭拍攝的信息合成的;
通過所述第一攝像頭和所述第二攝像頭獲取所述照片中的目標(biāo)人物的景深信息;
在將識(shí)別出的所述目標(biāo)人物從第一位置移動(dòng)到第二位置后,根據(jù)所述景深的變化調(diào)整所述目標(biāo)人物的大小。
進(jìn)一步地,對(duì)通過第一攝像頭和所述第二攝像頭拍攝的照片中的目標(biāo)人物進(jìn)行識(shí)別包括:
結(jié)合深度圖像和原始圖像進(jìn)行圖像分割,分離出所述目標(biāo)人物和背景目標(biāo)。
進(jìn)一步地,通過所述第一攝像頭和所述第二攝像頭獲取所述集體照片中所有目標(biāo)人物的景深信息包括:通過雙目測(cè)距平臺(tái)或深度傳感器獲取場(chǎng)景的深度信息。
進(jìn)一步地,根據(jù)所述景深的變化調(diào)整所述目標(biāo)人物的大小包括:根據(jù)所述景深信息確定將所述目標(biāo)人物移動(dòng)的距離;根據(jù)確定的將所述目標(biāo)人物移動(dòng)的距離調(diào)整所述目標(biāo)人物的大小。
進(jìn)一步地,根據(jù)確定的將所述目標(biāo)人物移動(dòng)的距離調(diào)整所述目標(biāo)人物的大小包括:
在將識(shí)別出的所述目標(biāo)人物從所述第一位置移動(dòng)到所述第二位置后,所述目標(biāo)人的景深變大的情況下,按照預(yù)先設(shè)置的比例縮小所述目標(biāo)人物;
在將識(shí)別出的所述目標(biāo)人物從所述第一位置移動(dòng)到所述第二位置后,所述目標(biāo)人的景深變小的情況下,按照預(yù)先設(shè)置的比例放大所述目標(biāo)人物。
進(jìn)一步地,在根據(jù)所述景深的變化調(diào)整所述目標(biāo)人物的大小之后,所述方法還包括:根據(jù)所述景深信息對(duì)所述目標(biāo)人物被移除后的第一位置進(jìn)行背景填充。
根據(jù)本發(fā)明的另一方面,提供了一種照片處理裝置,包括:
識(shí)別模塊,用于對(duì)通過第一攝像頭和第二攝像頭拍攝的照片中的目標(biāo)人物進(jìn)行識(shí)別,其中,所述第一攝像頭用于測(cè)量拍攝物體的景深,所述第二攝像頭用于拍攝物體,所述照片是由所述第一攝像頭和所述第二攝像頭拍攝的信息合成的;
獲取模塊,用于通過所述第一攝像頭和所述第二攝像頭獲取所述照片中的目標(biāo)人物的景深信息;
調(diào)整模塊,用于在將識(shí)別出的所述目標(biāo)人物從第一位置移動(dòng)到第二位置后,根據(jù)所述景深的變化調(diào)整所述目標(biāo)人物的大小。
進(jìn)一步地,所述識(shí)別模塊,還用于結(jié)合深度圖像和原始圖像進(jìn)行圖像分割,分離出所述目標(biāo)人物和背景目標(biāo)。
進(jìn)一步地,所述獲取模塊,還用于通過雙目測(cè)距平臺(tái)或深度傳感器獲取場(chǎng)景的深度信息。
進(jìn)一步地,所述調(diào)整模塊包括:
確定單元,用于根據(jù)所述景深信息確定將所述目標(biāo)人物移動(dòng)的距離;
調(diào)整單元,用于根據(jù)確定的將所述目標(biāo)人物移動(dòng)的距離調(diào)整所述目標(biāo)人物的大小。
進(jìn)一步地,所述調(diào)整模塊包括:
縮小單元,用于在將識(shí)別出的所述目標(biāo)人物從所述第一位置移動(dòng)到所述第二位置后,所述目標(biāo)人的景深變大的情況下,按照預(yù)先設(shè)置的比例縮小所述目標(biāo)人物;
放大單元,用于在將識(shí)別出的所述目標(biāo)人物從所述第一位置移動(dòng)到所述第二位置后,所述目標(biāo)人的景深變小的情況下,按照預(yù)先設(shè)置的比例放大所述目標(biāo)人物。
進(jìn)一步地,所述裝置還包括:背景填充模塊,用于根據(jù)所述景深信息對(duì)所述目標(biāo)人物被移除后的第一位置進(jìn)行背景填充。
根據(jù)本發(fā)明的另一方面,還提供了一種終端,包括上述裝置之一。
通過本發(fā)明,對(duì)通過第一攝像頭和所述第二攝像頭拍攝的照片中的目標(biāo)人物進(jìn)行識(shí)別,通過所述第一攝像頭和所述第二攝像頭獲取所述照片中的目標(biāo)人物的景深信息,在將識(shí)別出的所述目標(biāo)人物從第一位置移動(dòng)到第二位置后,根據(jù)所述景深的變化調(diào)整所述目標(biāo)人物的大小,解決了相關(guān)技術(shù)中照片中的人物被移動(dòng)后大小與背景不適應(yīng)的問題,根據(jù)景深的改變自動(dòng)調(diào)整目標(biāo)人物的大小,使得照片整體效果更協(xié)調(diào),提高了用戶體驗(yàn)。
附圖說明
圖1為實(shí)現(xiàn)本發(fā)明各個(gè)實(shí)施例的移動(dòng)終端的硬件結(jié)構(gòu)示意圖;
圖2為如圖1所示的移動(dòng)終端的無線通信系統(tǒng)示意圖;
圖3是根據(jù)本發(fā)明實(shí)施例的照片處理方法的流程圖;
圖4是根據(jù)本發(fā)明實(shí)施例的調(diào)整被移動(dòng)后人物的示意圖;
圖5是根據(jù)本發(fā)明實(shí)施例的立體成像裝置的示意圖;
圖6是根據(jù)本發(fā)明實(shí)施例的雙目測(cè)距基本原理的示意圖一;
圖7是根據(jù)本發(fā)明實(shí)施例的雙目測(cè)距基本原理的示意圖二;
圖8是根據(jù)本發(fā)明實(shí)施例的雙目測(cè)距基本原理的示意圖三;
圖9是根據(jù)本發(fā)明實(shí)施例的照片處理裝置的框圖;
圖10是根據(jù)本發(fā)明優(yōu)選實(shí)施例的照片處理裝置的框圖一;
圖11是根據(jù)本發(fā)明優(yōu)選實(shí)施例的照片處理裝置的框圖二;
圖12是根據(jù)本發(fā)明優(yōu)選實(shí)施例的照片處理裝置的框圖三。
本發(fā)明目的的實(shí)現(xiàn)、功能特點(diǎn)及優(yōu)點(diǎn)將結(jié)合實(shí)施例,參照附圖做進(jìn)一步說明。
具體實(shí)施方式
應(yīng)當(dāng)理解,此處所描述的具體實(shí)施例僅僅用以解釋本發(fā)明,并不用于限定本發(fā)明。
現(xiàn)在將參考附圖描述實(shí)現(xiàn)本發(fā)明各個(gè)實(shí)施例的移動(dòng)終端。在后續(xù)的描述中,使用用于表示元件的諸如“模塊”、“部件”或“單元”的后綴僅為了有利于本發(fā)明的說明,其本身并沒有特定的意義。因此,"模塊"與"部件"可以混合地使用。
移動(dòng)終端可以以各種形式來實(shí)施。例如,本發(fā)明中描述的終端可以包括諸如移動(dòng)電話、智能電話、筆記本電腦、數(shù)字廣播接收器、PDA(個(gè)人數(shù)字助理)、PAD(平板電腦)、PMP(便攜式多媒體播放器)、導(dǎo)航裝置等等的移動(dòng)終端以及諸如數(shù)字TV、臺(tái)式計(jì)算機(jī)等等的固定終端。下面,假設(shè)終端是移動(dòng)終端。然而,本領(lǐng)域技術(shù)人員將理解的是,除了特別用于移動(dòng)目的的元件之外,根據(jù)本發(fā)明的實(shí)施方式的構(gòu)造也能夠應(yīng)用于固定類型的終端。
圖1為實(shí)現(xiàn)本發(fā)明各個(gè)實(shí)施例的移動(dòng)終端的硬件結(jié)構(gòu)示意圖。
移動(dòng)終端100可以包括無線通信單元110、A/V(音頻/視頻)輸入單元120、用戶輸入單元130、感測(cè)單元140、輸出單元150、存儲(chǔ)器160、接口單元170、控制器180和電源單元190等等。
圖1示出了具有各種組件的移動(dòng)終端100,但是應(yīng)理解的是,并不要求實(shí)施所有示出的組件??梢蕴娲貙?shí)施更多或更少的組件。將在下面詳細(xì)描述移動(dòng)終端100的元件。
無線通信單元110通常可以包括一個(gè)或多個(gè)組件,其允許移動(dòng)終端100與無線通信系統(tǒng)或網(wǎng)絡(luò)之間的無線電通信。例如,無線通信單元110可以包括廣播接收模塊111、移動(dòng)通信模塊112、無線互聯(lián)網(wǎng)模塊113、短程通信模塊114和位置信息模塊115中的至少一個(gè)。
廣播接收模塊111經(jīng)由廣播信道從外部廣播管理服務(wù)器接收廣播信號(hào)和/或廣播相關(guān)信息。廣播信道可以包括衛(wèi)星信道和/或地面信道。廣播管理服務(wù)器可以是生成并發(fā)送廣播信號(hào)和/或廣播相關(guān)信息的服務(wù)器或者接收之前生成的廣播信號(hào)和/或廣播相關(guān)信息并且將其發(fā)送給終端的服務(wù)器。廣播信號(hào)可以包括TV廣播信號(hào)、無線電廣播信號(hào)、數(shù)據(jù)廣播信號(hào)等等。而且,廣播信號(hào)可以進(jìn)一步包括與TV或無線電廣播信號(hào)組合的廣播信號(hào)。廣播相關(guān)信息也可以經(jīng)由移動(dòng)通信網(wǎng)絡(luò)提供,并且在該情況下,廣播相關(guān)信息可以由移動(dòng)通信模塊112來接收。廣播信號(hào)可以以各種形式存在,例如,其可以以數(shù)字多媒體廣播(DMB)的電子節(jié)目指南(EPG)、數(shù)字視頻廣播手持(DVB-H)的電子服務(wù)指南(ESG)等等的形式而存在。廣播接收模塊111可以通過使用各種類型的廣播系統(tǒng)接收信號(hào)廣播。特別地,廣播接收模塊111可以通過使用諸如多媒體廣播-地面(DMB-T)、數(shù)字多媒體廣播-衛(wèi)星(DMB-S)、數(shù)字視頻廣播-手持(DVB-H),前向鏈路媒體(MediaFLO@)的數(shù)據(jù)廣播系統(tǒng)、地面數(shù)字廣播綜合服務(wù)(ISDB-T)等等的數(shù)字廣播系統(tǒng)接收數(shù)字廣播。廣播接收模塊111可以被構(gòu)造為適合提供廣播信號(hào)的各種廣播系統(tǒng)以及上述數(shù)字廣播系統(tǒng)。經(jīng)由廣播接收模塊111接收的廣播信號(hào)和/或廣播相關(guān)信息可以存儲(chǔ)在存儲(chǔ)器160(或者其它類型的存儲(chǔ)介質(zhì))中。
移動(dòng)通信模塊112將無線電信號(hào)發(fā)送到基站(例如,接入點(diǎn)、節(jié)點(diǎn)B等等)、外部終端以及服務(wù)器中的至少一個(gè)和/或從其接收無線電信號(hào)。這樣的無線電信號(hào)可以包括語音通話信號(hào)、視頻通話信號(hào)、或者根據(jù)文本和/或多媒體消息發(fā)送和/或接收的各種類型的數(shù)據(jù)。
無線互聯(lián)網(wǎng)模塊113支持移動(dòng)終端的無線互聯(lián)網(wǎng)接入。該模塊可以內(nèi)部或外部地耦接到終端。該模塊所涉及的無線互聯(lián)網(wǎng)接入技術(shù)可以包括WLAN(無線LAN)(Wi-Fi)、Wibro(無線寬帶)、Wimax(全球微波互聯(lián)接入)、HSDPA(高速下行鏈路分組接入)等等。
短程通信模塊114是用于支持短程通信的模塊。短程通信技術(shù)的一些示例包括藍(lán)牙TM、射頻識(shí)別(RFID)、紅外數(shù)據(jù)協(xié)會(huì)(IrDA)、超寬帶(UWB)、紫蜂TM等等。
位置信息模塊115是用于檢查或獲取移動(dòng)終端的位置信息的模塊。位置信息模塊115的典型示例是GPS(全球定位系統(tǒng))。根據(jù)當(dāng)前的技術(shù),GPS計(jì)算來自三個(gè)或更多衛(wèi)星的距離信息和準(zhǔn)確的時(shí)間信息并且對(duì)于計(jì)算的信息應(yīng)用三角測(cè)量法,從而根據(jù)經(jīng)度、緯度和高度準(zhǔn)確地計(jì)算三維當(dāng)前位置信息。當(dāng)前,用于計(jì)算位置和時(shí)間信息的方法使用三顆衛(wèi)星并且通過使用另外的一顆衛(wèi)星校正計(jì)算出的位置和時(shí)間信息的誤差。此外,GPS能夠通過實(shí)時(shí)地連續(xù)計(jì)算當(dāng)前位置信息來計(jì)算速度信息。
A/V輸入單元120用于接收音頻或視頻信號(hào)。A/V輸入單元120可以包括相機(jī)121和麥克風(fēng)122,相機(jī)121對(duì)在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置獲得的靜態(tài)圖片或視頻的圖像數(shù)據(jù)進(jìn)行處理。處理后的圖像幀可以顯示在顯示單元151上。經(jīng)相機(jī)121處理后的圖像幀可以存儲(chǔ)在存儲(chǔ)器160(或其它存儲(chǔ)介質(zhì))中或者經(jīng)由無線通信單元110進(jìn)行發(fā)送,可以根據(jù)移動(dòng)終端100的構(gòu)造提供兩個(gè)或更多相機(jī)121。麥克風(fēng)122可以在電話通話模式、記錄模式、語音識(shí)別模式等等運(yùn)行模式中經(jīng)由麥克風(fēng)122接收聲音(音頻數(shù)據(jù)),并且能夠?qū)⑦@樣的聲音處理為音頻數(shù)據(jù)。處理后的音頻(語音)數(shù)據(jù)可以在電話通話模式的情況下轉(zhuǎn)換為可經(jīng)由移動(dòng)通信模塊112發(fā)送到移動(dòng)通信基站的格式輸出。麥克風(fēng)122可以實(shí)施各種類型的噪聲消除(或抑制)算法以消除(或抑制)在接收和發(fā)送音頻信號(hào)的過程中產(chǎn)生的噪聲或者干擾。
用戶輸入單元130可以根據(jù)用戶輸入的命令生成鍵輸入數(shù)據(jù)以控制移動(dòng)終端100的各種操作。用戶輸入單元130允許用戶輸入各種類型的信息,并且可以包括鍵盤、鍋?zhàn)衅⒂|摸板(例如,檢測(cè)由于被接觸而導(dǎo)致的電阻、壓力、電容等等的變化的觸敏組件)、滾輪、搖桿等等。特別地,當(dāng)觸摸板以層的形式疊加在顯示單元151上時(shí),可以形成觸摸屏。
感測(cè)單元140檢測(cè)移動(dòng)終端100的當(dāng)前狀態(tài),(例如,移動(dòng)終端100的打開或關(guān)閉狀態(tài))、移動(dòng)終端100的位置、用戶對(duì)于移動(dòng)終端100的接觸(即,觸摸輸入)的有無、移動(dòng)終端100的取向、移動(dòng)終端100的加速或減速移動(dòng)和方向等等,并且生成用于控制移動(dòng)終端100的操作的命令或信號(hào)。例如,當(dāng)移動(dòng)終端100實(shí)施為滑動(dòng)型移動(dòng)電話時(shí),感測(cè)單元140可以感測(cè)該滑動(dòng)型電話是打開還是關(guān)閉。另外,感測(cè)單元140能夠檢測(cè)電源單元190是否提供電力或者接口單元170是否與外部裝置耦接。感測(cè)單元140可以包括接近傳感器141。
接口單元170用作至少一個(gè)外部裝置與移動(dòng)終端100連接可以通過的接口。例如,外部裝置可以包括有線或無線頭戴式耳機(jī)端口、外部電源(或電池充電器)端口、有線或無線數(shù)據(jù)端口、存儲(chǔ)卡端口、用于連接具有識(shí)別模塊的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機(jī)端口等等。識(shí)別模塊可以是存儲(chǔ)用于驗(yàn)證用戶使用移動(dòng)終端100的各種信息并且可以包括用戶識(shí)別模塊(UIM)、客戶識(shí)別模塊(SIM)、通用客戶識(shí)別模塊(USIM)等等。另外,具有識(shí)別模塊的裝置(下面稱為"識(shí)別裝置")可以采取智能卡的形式,因此,識(shí)別裝置可以經(jīng)由端口或其它連接裝置與移動(dòng)終端100連接。接口單元170可以用于接收來自外部裝置的輸入(例如,數(shù)據(jù)信息、電力等等)并且將接收到的輸入傳輸?shù)揭苿?dòng)終端100內(nèi)的一個(gè)或多個(gè)元件或者可以用于在移動(dòng)終端100和外部裝置之間傳輸數(shù)據(jù)。
另外,當(dāng)移動(dòng)終端100與外部底座連接時(shí),接口單元170可以用作允許通過其將電力從底座提供到移動(dòng)終端100的路徑或者可以用作允許從底座輸入的各種命令信號(hào)通過其傳輸?shù)揭苿?dòng)終端100的路徑。從底座輸入的各種命令信號(hào)或電力可以用作識(shí)別移動(dòng)終端100是否準(zhǔn)確地安裝在底座上的信號(hào)。輸出單元150被構(gòu)造為以視覺、音頻和/或觸覺方式提供輸出信號(hào)(例如,音頻信號(hào)、視頻信號(hào)、警報(bào)信號(hào)、振動(dòng)信號(hào)等等)。輸出單元150可以包括顯示單元151、音頻輸出模塊152、警報(bào)單元153等等。
顯示單元151可以顯示在移動(dòng)終端100中處理的信息。例如,當(dāng)移動(dòng)終端100處于電話通話模式時(shí),顯示單元151可以顯示與通話或其它通信(例如,文本消息收發(fā)、多媒體文件下載等等)相關(guān)的用戶界面(UI)或圖形用戶界面(GUI)。當(dāng)移動(dòng)終端100處于視頻通話模式或者圖像捕獲模式時(shí),顯示單元151可以顯示捕獲的圖像和/或接收的圖像、示出視頻或圖像以及相關(guān)功能的UI或GUI等等。
同時(shí),當(dāng)顯示單元151和觸摸板以層的形式彼此疊加以形成觸摸屏?xí)r,顯示單元151可以用作輸入裝置和輸出裝置。顯示單元151可以包括液晶顯示器(LCD)、薄膜晶體管LCD(TFT-LCD)、有機(jī)發(fā)光二極管(OLED)顯示器、柔性顯示器、三維(3D)顯示器等等中的至少一種。這些顯示器中的一些可以被構(gòu)造為透明狀以允許用戶從外部觀看,這可以稱為透明顯示器,典型的透明顯示器可以例如為TOLED(透明有機(jī)發(fā)光二極管)顯示器等等。根據(jù)特定想要的實(shí)施方式,移動(dòng)終端100可以包括兩個(gè)或更多顯示單元(或其它顯示裝置),例如,移動(dòng)終端100可以包括外部顯示單元(未示出)和內(nèi)部顯示單元(未示出)。觸摸屏可用于檢測(cè)觸摸輸入壓力以及觸摸輸入位置和觸摸輸入面積。
音頻輸出模塊152可以在移動(dòng)終端100處于呼叫信號(hào)接收模式、通話模式、記錄模式、語音識(shí)別模式、廣播接收模式等等模式下時(shí),將無線通信單元110接收的或者在存儲(chǔ)器160中存儲(chǔ)的音頻數(shù)據(jù)轉(zhuǎn)換音頻信號(hào)并且輸出為聲音。而且,音頻輸出模塊152可以提供與移動(dòng)終端100執(zhí)行的特定功能相關(guān)的音頻輸出(例如,呼叫信號(hào)接收聲音、消息接收聲音等等)。音頻輸出模塊152可以包括揚(yáng)聲器、蜂鳴器等等。
警報(bào)單元153可以提供輸出以將事件的發(fā)生通知給移動(dòng)終端100。典型的事件可以包括呼叫接收、消息接收、鍵信號(hào)輸入、觸摸輸入等等。除了音頻或視頻輸出之外,警報(bào)單元153可以以不同的方式提供輸出以通知事件的發(fā)生。例如,警報(bào)單元153可以以振動(dòng)的形式提供輸出,當(dāng)接收到呼叫、消息或一些其它進(jìn)入通信(incoming communication)時(shí),警報(bào)單元153可以提供觸覺輸出(即,振動(dòng))以將其通知給用戶。通過提供這樣的觸覺輸出,即使在用戶的移動(dòng)電話處于用戶的口袋中時(shí),用戶也能夠識(shí)別出各種事件的發(fā)生。警報(bào)單元153也可以經(jīng)由顯示單元151或音頻輸出模塊152提供通知事件的發(fā)生的輸出。
存儲(chǔ)器160可以存儲(chǔ)由控制器180執(zhí)行的處理和控制操作的軟件程序等等,或者可以暫時(shí)地存儲(chǔ)己經(jīng)輸出或?qū)⒁敵龅臄?shù)據(jù)(例如,電話簿、消息、靜態(tài)圖像、視頻等等)。而且,存儲(chǔ)器160可以存儲(chǔ)關(guān)于當(dāng)觸摸施加到觸摸屏?xí)r輸出的各種方式的振動(dòng)和音頻信號(hào)的數(shù)據(jù)。
存儲(chǔ)器160可以包括至少一種類型的存儲(chǔ)介質(zhì),所述存儲(chǔ)介質(zhì)包括閃存、硬盤、多媒體卡、卡型存儲(chǔ)器(例如,SD或DX存儲(chǔ)器等等)、隨機(jī)訪問存儲(chǔ)器(RAM)、靜態(tài)隨機(jī)訪問存儲(chǔ)器(SRAM)、只讀存儲(chǔ)器(ROM)、電可擦除可編程只讀存儲(chǔ)器(EEPROM)、可編程只讀存儲(chǔ)器(PROM)、磁性存儲(chǔ)器、磁盤、光盤等等。而且,移動(dòng)終端100可以與通過網(wǎng)絡(luò)連接執(zhí)行存儲(chǔ)器160的存儲(chǔ)功能的網(wǎng)絡(luò)存儲(chǔ)裝置協(xié)作。
控制器180通常控制移動(dòng)終端的總體操作。例如,控制器180執(zhí)行與語音通話、數(shù)據(jù)通信、視頻通話等等相關(guān)的控制和處理。另外,控制器180可以包括用于再現(xiàn)(或回放)多媒體數(shù)據(jù)的多媒體模塊181,多媒體模塊181可以構(gòu)造在控制器180內(nèi),或者可以構(gòu)造為與控制器180分離??刂破?80可以執(zhí)行模式識(shí)別處理,以將在觸摸屏上執(zhí)行的手寫輸入或者圖片繪制輸入識(shí)別為字符或圖像。
電源單元190在控制器180的控制下接收外部電力或內(nèi)部電力并且提供操作各元件和組件所需的適當(dāng)?shù)碾娏Α?/p>
這里描述的各種實(shí)施方式可以以使用例如計(jì)算機(jī)軟件、硬件或其任何組合的計(jì)算機(jī)可讀介質(zhì)來實(shí)施。對(duì)于硬件實(shí)施,這里描述的實(shí)施方式可以通過使用特定用途集成電路(ASIC)、數(shù)字信號(hào)處理器(DSP)、數(shù)字信號(hào)處理裝置(DSPD)、可編程邏輯裝置(PLD)、現(xiàn)場(chǎng)可編程門陣列(FPGA)、處理器、控制器、微控制器、微處理器、被設(shè)計(jì)為執(zhí)行這里描述的功能的電子單元中的至少一種來實(shí)施,在一些情況下,這樣的實(shí)施方式可以在控制器180中實(shí)施。對(duì)于軟件實(shí)施,諸如過程或功能的實(shí)施方式可以與允許執(zhí)行至少一種功能或操作的單獨(dú)的軟件模塊來實(shí)施。軟件代碼可以由以任何適當(dāng)?shù)木幊陶Z言編寫的軟件應(yīng)用程序(或程序)來實(shí)施,軟件代碼可以存儲(chǔ)在存儲(chǔ)器160中并且由控制器180執(zhí)行。
至此,己經(jīng)按照其功能描述了移動(dòng)終端100。另外,本發(fā)明實(shí)施例中的移動(dòng)終端100可以是諸如折疊型、直板型、擺動(dòng)型、滑動(dòng)型以及其他各種類型的移動(dòng)終端,具體此處不做限定。
如圖1中所示的移動(dòng)終端100可以被構(gòu)造為利用經(jīng)由幀或分組發(fā)送數(shù)據(jù)的諸如有線和無線通信系統(tǒng)以及基于衛(wèi)星的通信系統(tǒng)來操作。
現(xiàn)在將參考圖2描述其中根據(jù)本發(fā)明的移動(dòng)終端能夠操作的通信系統(tǒng)。
這樣的通信系統(tǒng)可以使用不同的空中接口和/或物理層。例如,由通信系統(tǒng)使用的空中接口包括例如頻分多址(FDMA)、時(shí)分多址(TDMA)、碼分多址(CDMA)和通用移動(dòng)通信系統(tǒng)(UMTS)(特別地,長(zhǎng)期演進(jìn)(LTE))、全球移動(dòng)通信系統(tǒng)(GSM)等等。作為非限制性示例,下面的描述涉及CDMA通信系統(tǒng),但是這樣的教導(dǎo)同樣適用于其它類型的系統(tǒng)。
參考圖2,CDMA無線通信系統(tǒng)可以包括多個(gè)智能終端100、多個(gè)基站(BS)270、基站控制器(BSC)275和移動(dòng)交換中心(MSC)280。MSC 280被構(gòu)造為與公共電話交換網(wǎng)絡(luò)(PSTN)290形成接口。MSC 280還被構(gòu)造為與可以經(jīng)由回程線路耦接到基站270的BSC 275形成接口?;爻叹€路可以根據(jù)若干己知的接口中的任一種來構(gòu)造,所述接口可以包括例如歐洲標(biāo)準(zhǔn)高容量數(shù)字線路/美國(guó)標(biāo)準(zhǔn)高容量數(shù)字線路(E1/T1)、異步傳輸模式(ATM),網(wǎng)絡(luò)協(xié)議(IP)、點(diǎn)對(duì)點(diǎn)協(xié)議(PPP)、幀中繼、高速率數(shù)字用戶線路(HDSL)、非對(duì)稱數(shù)字用戶線路(ADSL)或各種類型數(shù)字用戶線路(xDSL)。將理解的是,如圖2中所示的系統(tǒng)可以包括多個(gè)BSC 275。
每個(gè)BS 270可以服務(wù)一個(gè)或多個(gè)分區(qū)(或區(qū)域),由多向天線或指向特定方向的天線覆蓋的每個(gè)分區(qū)放射狀地遠(yuǎn)離BS 270?;蛘?,每個(gè)分區(qū)可以由用于分集接收的兩個(gè)或更多天線覆蓋。每個(gè)BS 270可以被構(gòu)造為支持多個(gè)頻率分配,并且每個(gè)頻率分配具有特定頻譜(例如,1.25MHz,5MHz等等)。
分區(qū)與頻率分配的交叉可以被稱為CDMA信道。BS 270也可以被稱為基站收發(fā)器子系統(tǒng)(BTS)或者其它等效術(shù)語。在這樣的情況下,術(shù)語"基站"可以用于籠統(tǒng)地表示單個(gè)BSC 275和至少一個(gè)BS 270?;疽部梢员环Q為"蜂窩站"。或者,特定BS 270的各分區(qū)可以被稱為多個(gè)蜂窩站。
如圖2中所示,廣播發(fā)射器(BT)295將廣播信號(hào)發(fā)送給在系統(tǒng)內(nèi)操作的移動(dòng)終端100。如圖1中所示的廣播接收模塊111被設(shè)置在移動(dòng)終端100處以接收由BT 295發(fā)送的廣播信號(hào)。在圖2中,示出了幾個(gè)全球定位系統(tǒng)(GPS)衛(wèi)星300。衛(wèi)星300幫助定位多個(gè)移動(dòng)終端100中的至少一個(gè)。
在圖2中,描繪了多個(gè)衛(wèi)星300,但是理解的是,可以利用任何數(shù)目的衛(wèi)星獲得有用的定位信息。如圖1中所示的位置信息模塊115(如:GPS)通常被構(gòu)造為與衛(wèi)星300配合以獲得想要的定位信息。替代GPS跟蹤技術(shù)或者在GPS跟蹤技術(shù)之外,可以使用可以跟蹤移動(dòng)終端的位置的其它技術(shù)。另外,至少一個(gè)GPS衛(wèi)星300可以選擇性地或者額外地處理衛(wèi)星DMB傳輸。
作為無線通信系統(tǒng)的一個(gè)典型操作,BS 270接收來自各種移動(dòng)終端100的反向鏈路信號(hào)。移動(dòng)終端100通常參與通話、消息收發(fā)和其它類型的通信。特定基站接收的每個(gè)反向鏈路信號(hào)被在特定BS 270內(nèi)進(jìn)行處理。獲得的數(shù)據(jù)被轉(zhuǎn)發(fā)給相關(guān)的BSC 275。BSC提供通話資源分配和包括BS 270之間的軟切換過程的協(xié)調(diào)的移動(dòng)管理功能。BSC 275還將接收到的數(shù)據(jù)路由到MSC 280,其提供用于與PSTN 290形成接口的額外的路由服務(wù)。類似地,PSTN 290與MSC 280形成接口,MSC與BSC 275形成接口,并且BSC 275相應(yīng)地控制BS 270以將正向鏈路信號(hào)發(fā)送到移動(dòng)終端100。
基于上述的移動(dòng)終端,本發(fā)明實(shí)施例提供了一種照片處理方法,圖3是根據(jù)本發(fā)明實(shí)施例的照片處理方法的流程圖,如圖3所示,該方法包括以下步驟:
步驟S302,對(duì)通過第一攝像頭和第二攝像頭拍攝的照片中的目標(biāo)人物進(jìn)行識(shí)別,其中,所述第一攝像頭用于測(cè)量拍攝物體的景深,所述第二攝像頭用于拍攝物體,所述照片是由所述第一攝像頭和所述第二攝像頭拍攝的信息合成的;
步驟S304,通過該第一攝像頭和所述第二攝像頭獲取該照片中的目標(biāo)人物的景深信息;
步驟S306,在將識(shí)別出的該目標(biāo)人物從第一位置移動(dòng)到第二位置后,根據(jù)該景深的變化調(diào)整該目標(biāo)人物的大小。
通過上述步驟,對(duì)通過雙攝像頭拍攝的照片中的目標(biāo)人物進(jìn)行識(shí)別,通過該雙攝像頭獲取該照片中的目標(biāo)人物的景深信息,在將識(shí)別出的該目標(biāo)人物從第一位置移動(dòng)到第二位置后,根據(jù)該景深的變化調(diào)整該目標(biāo)人物的大小,解決了相關(guān)技術(shù)中照片中的人物被移動(dòng)后大小與背景不適應(yīng)的問題,根據(jù)景深的改變自動(dòng)調(diào)整目標(biāo)人物的大小,使得照片整體效果更協(xié)調(diào),提高了用戶體驗(yàn)。
圖4是根據(jù)本發(fā)明實(shí)施例的調(diào)整被移動(dòng)后人物的示意圖,如圖4所示,照片拍攝后,把拍攝的人物到其他位置,移動(dòng)后,被移動(dòng)的人物和周圍的景物大小比例不協(xié)調(diào),故需要將被移動(dòng)的人物的大小進(jìn)行調(diào)整,通過景深信息,然后判斷移動(dòng)物體移動(dòng)的位置相對(duì)之前位置移動(dòng)了多少距離,然后根據(jù)移動(dòng)距離進(jìn)行移動(dòng)物體的縮小或放大,向前移動(dòng)則放大,向后移動(dòng)則縮小,及景深增大,縮小被移動(dòng)的物體,景深變小,放大被移動(dòng)的物體。根據(jù)該景深的變化調(diào)整該目標(biāo)人物的大小包括:根據(jù)該景深信息確定將該目標(biāo)人物移動(dòng)的距離;根據(jù)確定的將該目標(biāo)人物移動(dòng)的距離調(diào)整該目標(biāo)人物的大小。在另一個(gè)可選的實(shí)施例中,在將識(shí)別出的該目標(biāo)人物從該第一位置移動(dòng)到該第二位置后,該目標(biāo)人的景深變大的情況下,按照預(yù)先設(shè)置的比例縮小該目標(biāo)人物;在將識(shí)別出的該目標(biāo)人物從該第一位置移動(dòng)到該第二位置后,該目標(biāo)人的景深變小的情況下,按照預(yù)先設(shè)置的比例放大該目標(biāo)人物。
從圖4中可以看出是將被移動(dòng)的人物放大后與背景更加協(xié)調(diào)。
圖5是根據(jù)本發(fā)明實(shí)施例的立體成像裝置的示意圖,如圖5所示,立體成像裝置由兩個(gè)或多個(gè)數(shù)碼攝像頭組成,這些攝像頭相對(duì)位置固定,能夠在同一時(shí)刻從不同視角采集圖像。11和12是兩個(gè)數(shù)碼攝像頭,13是兩個(gè)攝像頭的連接部件。11和12固定在連接部件13上。此成像系統(tǒng)可以在同一時(shí)刻得到兩幅照片,這兩幅照片交由后續(xù)模塊處理,可用于后續(xù)立體校正、立體匹配、景深測(cè)量。在根據(jù)該景深的變化調(diào)整該目標(biāo)人物的大小之后,根據(jù)該景深信息對(duì)該目標(biāo)人物被移除后的第一位置進(jìn)行背景填充。
通過該第一攝像頭和所述第二攝像頭獲取該集體照片中所有目標(biāo)人物的景深信息包括:通過雙目測(cè)距平臺(tái)或深度傳感器獲取場(chǎng)景的深度信息。深度測(cè)量模塊獲取立體成像裝置拍攝的不同視角的照片,對(duì)兩幅照片中前景部分區(qū)域利用立體測(cè)量方法生成深度圖。下面給出一種具體實(shí)施方式。
圖6是根據(jù)本發(fā)明實(shí)施例的雙目測(cè)距基本原理的示意圖一,如圖6所示,雙目視覺是模擬人類視覺原理,使用計(jì)算機(jī)被動(dòng)感知距離的方法。從兩個(gè)或者多個(gè)點(diǎn)觀察一個(gè)物體,獲取在不同視角下的圖像。
圖7是根據(jù)本發(fā)明實(shí)施例的雙目測(cè)距基本原理的示意圖二,如圖7所示,P為物理空間中某一點(diǎn),c1和c2為兩個(gè)攝像機(jī)從不同位置觀看,m和m‘為p在不同相機(jī)中成像位置。
根據(jù)圖像之間像素的匹配關(guān)系,通過三角測(cè)量原理計(jì)算出像素之間的偏移來獲取物體的三維信息。P為空間中某一點(diǎn),Ol和Or分別為左右兩個(gè)攝像機(jī)中心,xl和xr為左右兩邊的成像點(diǎn)。
點(diǎn)P在左右圖像中的成像點(diǎn)的視差d=xl-xr,使用以下公式計(jì)算出P點(diǎn)的距離Z。
其中f是立體成像裝置中兩個(gè)數(shù)碼攝像頭的焦距(這里假設(shè)兩個(gè)攝像頭焦距一樣),T是兩個(gè)數(shù)碼攝像頭之間的間距。
立體匹配算法主要是將xl與xr對(duì)應(yīng)匹配起來。圖8是根據(jù)本發(fā)明實(shí)施例的雙目測(cè)距基本原理的示意圖三,如圖8所示,參考圖像中一點(diǎn)p,在另外一副圖像中進(jìn)行搜索,找出與p最為相似的一個(gè)像素點(diǎn)q,達(dá)到匹配相似性的定義為:兩個(gè)像素點(diǎn)的局部灰度窗口差異值最小。
得到了物體的景深信息,就可以計(jì)算出物體與相機(jī)之間的實(shí)際距離,物體三維大小,兩點(diǎn)之間實(shí)際距離;深度傳感器則是利用主動(dòng)發(fā)射紅外光在場(chǎng)景中反射來獲取場(chǎng)景的距離信息。對(duì)通過第一攝像頭和所述第二攝像頭拍攝的照片中的目標(biāo)人物進(jìn)行識(shí)別包括:結(jié)合深度圖像和原始圖像進(jìn)行圖像分割,分離出該目標(biāo)人物和背景目標(biāo)。
由于場(chǎng)景的主體目標(biāo)和背景區(qū)域距離攝像機(jī)的距離不同,主體目標(biāo)和背景區(qū)域的深度值也會(huì)不同,這為后面的主體和背景圖像的分離提供了一個(gè)空間參考特征,有利于圖像分割算法的準(zhǔn)確性。
傳統(tǒng)的圖像分割算法在2D平面進(jìn)行,缺少了場(chǎng)景的空間距離特征這一重要信息,圖像分割算法一般很難準(zhǔn)確分離出場(chǎng)景中的背景和主體目標(biāo),利用場(chǎng)景深度信息,結(jié)合傳統(tǒng)的流行算法如圖割算法或者meanshift算法進(jìn)行主體和背景圖像分割。
圖像分割算法獲取了不同的圖像區(qū)域后,還需要經(jīng)過形態(tài)學(xué)操作將圖像的輪廓進(jìn)行提取、區(qū)域內(nèi)部空洞填充,保證圖像分割區(qū)域的完整性。
本發(fā)明實(shí)施例提供了一種照片處理裝置,圖9是根據(jù)本發(fā)明實(shí)施例的照片處理裝置的框圖,如圖9所示,包括:
識(shí)別模塊92,用于對(duì)通過第一攝像頭和第二攝像頭拍攝的照片中的目標(biāo)人物進(jìn)行識(shí)別,其中,所述第一攝像頭用于測(cè)量拍攝物體的景深,所述第二攝像頭用于拍攝物體,所述照片是由所述第一攝像頭和所述第二攝像頭拍攝的信息合成的;
獲取模塊94,用于通過該第一攝像頭和所述第二攝像頭獲取該照片中的目標(biāo)人物的景深信息;
調(diào)整模塊96,用于在將識(shí)別出的該目標(biāo)人物從第一位置移動(dòng)到第二位置后,根據(jù)該景深的變化調(diào)整該目標(biāo)人物的大小。
進(jìn)一步地,該識(shí)別模塊92,還用于結(jié)合深度圖像和原始圖像進(jìn)行圖像分割,分離出該目標(biāo)人物和背景目標(biāo)。
進(jìn)一步地,該獲取模塊94,還用于通過雙目測(cè)距平臺(tái)或深度傳感器獲取場(chǎng)景的深度信息。
圖10是根據(jù)本發(fā)明優(yōu)選實(shí)施例的照片處理裝置的框圖一,如圖10所示,該調(diào)整模塊96包括:
確定單元102,用于根據(jù)該景深信息確定將該目標(biāo)人物移動(dòng)的距離;
調(diào)整單元104,用于根據(jù)確定的將該目標(biāo)人物移動(dòng)的距離調(diào)整該目標(biāo)人物的大小。
圖11是根據(jù)本發(fā)明優(yōu)選實(shí)施例的照片處理裝置的框圖二,如圖11所示,該調(diào)整模塊包括:
縮小單元112,用于在將識(shí)別出的該目標(biāo)人物從該第一位置移動(dòng)到該第二位置后,該目標(biāo)人的景深變大的情況下,按照預(yù)先設(shè)置的比例縮小該目標(biāo)人物;
放大單元114,用于在將識(shí)別出的該目標(biāo)人物從該第一位置移動(dòng)到該第二位置后,該目標(biāo)人的景深變小的情況下,按照預(yù)先設(shè)置的比例放大該目標(biāo)人物。
圖12是根據(jù)本發(fā)明優(yōu)選實(shí)施例的照片處理裝置的框圖三,如圖12所示,該裝置還包括:背景填充模塊122,用于根據(jù)該景深信息對(duì)該目標(biāo)人物被移除后的第一位置進(jìn)行背景填充。
本發(fā)明實(shí)施例還提供了一種終端,包括上述裝置之一。
通過本發(fā)明,對(duì)通過雙攝像頭拍攝的照片中的目標(biāo)人物進(jìn)行識(shí)別,通過該雙攝像頭獲取該照片中的目標(biāo)人物的景深信息,在將識(shí)別出的該目標(biāo)人物從第一位置移動(dòng)到第二位置后,根據(jù)該景深的變化調(diào)整該目標(biāo)人物的大小,解決了相關(guān)技術(shù)中照片中的人物被移動(dòng)后大小與背景不適應(yīng)的問題,根據(jù)景深的改變自動(dòng)調(diào)整目標(biāo)人物的大小,使得照片整體效果更協(xié)調(diào),提高了用戶體驗(yàn)。
需要說明的是,在本文中,術(shù)語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素,而且還包括沒有明確列出的其他要素,或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下,由語句“包括一個(gè)……”限定的要素,并不排除在包括該要素的過程、方法、物品或者裝置中還存在另外的相同要素。
上述本發(fā)明實(shí)施例序號(hào)僅僅為了描述,不代表實(shí)施例的優(yōu)劣。
通過以上的實(shí)施方式的描述,本領(lǐng)域的技術(shù)人員可以清楚地了解到上述實(shí)施例方法可借助軟件加必需的通用硬件平臺(tái)的方式來實(shí)現(xiàn),當(dāng)然也可以通過硬件,但很多情況下前者是更佳的實(shí)施方式?;谶@樣的理解,本發(fā)明的技術(shù)方案本質(zhì)上或者說對(duì)現(xiàn)有技術(shù)做出貢獻(xiàn)的部分可以以軟件產(chǎn)品的形式體現(xiàn)出來,該計(jì)算機(jī)軟件產(chǎn)品存儲(chǔ)在一個(gè)存儲(chǔ)介質(zhì)(如ROM/RAM、磁碟、光盤)中,包括若干指令用以使得一臺(tái)終端設(shè)備(可以是手機(jī),計(jì)算機(jī),服務(wù)器,空調(diào)器,或者網(wǎng)絡(luò)設(shè)備等)執(zhí)行本發(fā)明各個(gè)實(shí)施例該的方法。
顯然,本領(lǐng)域的技術(shù)人員應(yīng)該明白,上述的本發(fā)明的各模塊或各步驟可以用通用的計(jì)算裝置來實(shí)現(xiàn),它們可以集中在單個(gè)的計(jì)算裝置上,或者分布在多個(gè)計(jì)算裝置所組成的網(wǎng)絡(luò)上,可選地,它們可以用計(jì)算裝置可執(zhí)行的程序代碼來實(shí)現(xiàn),從而,可以將它們存儲(chǔ)在存儲(chǔ)裝置中由計(jì)算裝置來執(zhí)行,并且在某些情況下,可以以不同于此處的順序執(zhí)行所示出或描述的步驟,或者將它們分別制作成各個(gè)集成電路模塊,或者將它們中的多個(gè)模塊或步驟制作成單個(gè)集成電路模塊來實(shí)現(xiàn)。這樣,本發(fā)明不限制于任何特定的硬件和軟件結(jié)合。
以上僅為本發(fā)明的優(yōu)選實(shí)施例,并非因此限制本發(fā)明的專利范圍,凡是利用本發(fā)明說明書及附圖內(nèi)容所作的等效結(jié)構(gòu)或等效流程變換,或直接或間接運(yùn)用在其他相關(guān)的技術(shù)領(lǐng)域,均同理包括在本發(fā)明的專利保護(hù)范圍內(nèi)。