国产精品1024永久观看,大尺度欧美暖暖视频在线观看,亚洲宅男精品一区在线观看,欧美日韩一区二区三区视频,2021中文字幕在线观看

  • <option id="fbvk0"></option>
    1. <rt id="fbvk0"><tr id="fbvk0"></tr></rt>
      <center id="fbvk0"><optgroup id="fbvk0"></optgroup></center>
      <center id="fbvk0"></center>

      <li id="fbvk0"><abbr id="fbvk0"><dl id="fbvk0"></dl></abbr></li>

      圖像生成裝置以及圖像生成方法與流程

      文檔序號(hào):11868139閱讀:214來(lái)源:國(guó)知局
      圖像生成裝置以及圖像生成方法與流程
      本發(fā)明涉及圖像生成裝置以及圖像生成方法。

      背景技術(shù):
      現(xiàn)有技術(shù)中,已知使用眼、鼻、嘴、耳、臉的輪廓等的臉部件的特征點(diǎn)來(lái)作成肖像畫的肖像畫作成裝置(日本特開2004-145625號(hào)公報(bào))。另外,已知組合按每個(gè)部位而預(yù)先準(zhǔn)備的局部組件(partobject)來(lái)作成角色的游戲裝置(日本特許第4986279號(hào))。但是,在作成肖像畫時(shí),若僅用線來(lái)表征臉的特征性的構(gòu)成的輪廓形狀,則會(huì)成為缺乏現(xiàn)實(shí)感的肖像畫,與此相對(duì),若連臉的細(xì)微的構(gòu)造都用線來(lái)表征,則存在筆觸和紋理變得過(guò)細(xì)而導(dǎo)致與肖像畫的相似度降低的問(wèn)題。另外,在組合局部組件來(lái)作成肖像畫的情況下,有時(shí)未準(zhǔn)備接近真實(shí)的局部組件,不能作成接近真實(shí)的肖像畫圖像。

      技術(shù)實(shí)現(xiàn)要素:
      本發(fā)明的課題在于提供能簡(jiǎn)便地生成更豐富表現(xiàn)的肖像畫的圖像生成裝置以及圖像生成方法。本發(fā)明的圖像生成裝置的特征在于,具備:取得單元(6a),其取得圖像;構(gòu)成部生成單元(6c),其生成與由所述取得單元取得的圖像中所包括的臉的主要的構(gòu)成部相關(guān)的臉構(gòu)成部圖像;提取單元(6d),其從由所述取得單元取得的圖像中所包括的臉中提取特征信息;確定單元(6e),其從與記錄于記錄單元(5)中的臉的特征信息建立對(duì)應(yīng)并表征頭發(fā)的輪廓的發(fā)型圖像中,確定與由所述提取單元提取出的特征信息對(duì)應(yīng)的發(fā)型圖像;和圖像生成單元(6f),其使用由所述確定單元確定的發(fā)型圖像和由所述構(gòu)成部生成單元生成的臉構(gòu)成部圖像來(lái)生成肖像畫圖像。本發(fā)明的圖像生成方法是使用了圖像生成裝置(100)的圖像生成方法,其特征在于,包括:取得步驟(6a),取得圖像;構(gòu)成部生成步驟(6c),生成包括在所取得的圖像中的臉的主要的構(gòu)成部所涉及的臉構(gòu)成部圖像;提取步驟(6d),從包括在所取得的圖像中的臉提取特征信息;確定步驟(6e),從與記錄于記錄單元的臉的特征信息建立對(duì)應(yīng)并表征頭發(fā)的輪廓的發(fā)型圖像中,確定與提取出的特征信息對(duì)應(yīng)的發(fā)型圖像;和圖像生成步驟(6f),使用確定的發(fā)型圖像和生成的臉構(gòu)成部圖像來(lái)生成肖像畫圖像。附圖說(shuō)明圖1是表示應(yīng)用本發(fā)明的一個(gè)實(shí)施方式的攝像裝置的概略構(gòu)成的框圖。圖2是表示圖1的攝像裝置進(jìn)行的發(fā)型圖像生成處理所涉及的動(dòng)作的一例的流程圖。圖3是示意性地表示圖2的發(fā)型圖像生成處理所涉及的圖像的一例的圖。圖4是表示圖1的攝像裝置進(jìn)行的肖像畫圖像生成處理所涉及的動(dòng)作的一例的流程圖。圖5是示意性地表示圖4的肖像畫圖像生成處理所涉及的圖像的一例的圖。圖6是示意性地表示圖4的肖像畫圖像生成處理所涉及的圖像的一例的圖。圖7是示意性地表示肖像畫圖像生成處理的變形例所涉及的圖像的一例的圖。具體實(shí)施方式下面,對(duì)于本發(fā)明,使用附圖來(lái)說(shuō)明具體的形態(tài)。但是,發(fā)明的范圍并不限定于圖示例。圖1是表示應(yīng)用本發(fā)明的一個(gè)實(shí)施方式的攝像裝置100的概略構(gòu)成的框圖。如圖1所示,本實(shí)施方式的攝像裝置100具體地具備:攝像部1、攝像控制部2、圖像數(shù)據(jù)生成部3、存儲(chǔ)器4、圖像記錄部5、圖像處理部6、顯示控制部7、顯示部8、操作輸入部9、和中央控制部10。另外,攝像部1、攝像控制部2、圖像數(shù)據(jù)生成部3、存儲(chǔ)器4、圖像記錄部5、圖像處理部6、顯示控制部7以及中央控制部10介由總線11而連接。攝像部1作為攝像單元來(lái)對(duì)規(guī)定的被攝體進(jìn)行拍攝,并生成幀圖像。具體地,攝像部1具備透鏡部1a、電子攝像部1b、透鏡驅(qū)動(dòng)部1c。透鏡部1a由例如變焦透鏡、聚焦透鏡等的多個(gè)透鏡構(gòu)成。電子攝像部1b例如由CCD(ChargeCoupledDevice,電荷耦合元件)、CMOS(ComplementaryMetal-oxideSemiconductor,互補(bǔ)金屬氧化物半導(dǎo)體)等圖像傳感器(攝像元件)構(gòu)成。并且,電子攝像部1b將通過(guò)了透鏡部1a的各種透鏡的光學(xué)像變換為二維的圖像信號(hào)。雖然省略圖示,但透鏡驅(qū)動(dòng)部1例如具備使變焦透鏡在光軸方向上移動(dòng)的變焦驅(qū)動(dòng)部、和使聚焦透鏡在光軸方向上移動(dòng)的合焦驅(qū)動(dòng)部等。另外,攝像部1除了透鏡部1a、電子攝像部1b以及透鏡部1c以外,也可以還具備調(diào)整通過(guò)透鏡部1a的光的量的光圈(圖示略)。攝像控制部2控制攝像部1進(jìn)行的被攝體的攝像。即,雖然省略圖示,但攝像控制部2具備定時(shí)發(fā)生器、驅(qū)動(dòng)器等。并且,攝像控制部2通過(guò)定時(shí)發(fā)生器、驅(qū)動(dòng)器來(lái)對(duì)電子攝像部1b進(jìn)行掃描驅(qū)動(dòng),并通過(guò)電子攝像部1b每隔規(guī)定周期將通過(guò)透鏡的光學(xué)像變換為二維的圖像信號(hào),從該電子攝像部1b的攝像區(qū)域一個(gè)畫面一個(gè)畫面地讀取幀圖像,將其輸出到圖像數(shù)據(jù)生成部3。另外,攝像控制部2也可以使電子攝像部1b在光軸方向上移動(dòng)來(lái)調(diào)整透鏡部1a的合焦位置,以取代透鏡部1a的聚焦透鏡。另外,攝像控制部2也可以進(jìn)行AF(自動(dòng)合焦處理)、AE(自動(dòng)曝光處理)、AWB(自動(dòng)白平衡)等的拍攝被攝體時(shí)的條件的調(diào)整控制。圖像數(shù)據(jù)生成部3在對(duì)從電子攝像部1b傳輸來(lái)的幀圖像的模擬值的信號(hào)按RGB的各顏色分量進(jìn)行了適當(dāng)?shù)脑鲆嬲{(diào)整后,用采樣保持電路(圖示略)進(jìn)行采樣保持,用A/D變換器(圖示略)將該信號(hào)變換為數(shù)字?jǐn)?shù)據(jù),然后,在用彩色加工電路(圖示略)進(jìn)行了包括像素內(nèi)插處理以及伽瑪補(bǔ)正處理在內(nèi)的彩色加工處理后,生成數(shù)字值的亮度信號(hào)Y以及色差信號(hào)Cb、Cr(YUV數(shù)據(jù))。從彩色加工電路輸出的亮度信號(hào)Y以及色差信號(hào)Cb、Cr介由未圖示的DMA控制器而被DMA傳輸?shù)阶鳛榫彌_存儲(chǔ)器使用的存儲(chǔ)器4。存儲(chǔ)器4例如由DRAM(DynamicRandomAccessMemory,動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器)等構(gòu)成,暫時(shí)保存由圖像處理部6、中央控制部10等進(jìn)行處理的數(shù)據(jù)等。圖像記錄部5由例如非易失性存儲(chǔ)器(閃速存儲(chǔ)器)等構(gòu)成,記錄由圖像處理部6的編碼部(圖示略)以規(guī)定的壓縮格式(例如JPEG格式等)編碼后的記錄用的圖像數(shù)據(jù)。另外,圖像記錄部(記錄單元)5記錄規(guī)定數(shù)的發(fā)型圖像P1(參照?qǐng)D3B)的圖像數(shù)據(jù)。發(fā)型圖像P1的圖像數(shù)據(jù)的每一個(gè)例如是示意性地表征人的頭發(fā)的輪廓的圖像,與作為臉的特征信息的輪廓W1(參照?qǐng)D3A)的形狀建立對(duì)應(yīng)。即,各發(fā)型圖像P1的圖像數(shù)據(jù)通過(guò)從由臉檢測(cè)處理(后述)檢測(cè)出的臉區(qū)域F1(參照?qǐng)D3A)內(nèi)刪除比臉的下巴的輪廓W1更內(nèi)側(cè)的部分而形成。另外,發(fā)型圖像P1的圖像數(shù)據(jù)的形成例如能舉出如下方法:在對(duì)臉區(qū)域F1進(jìn)行使用了AAM(ActiveAppearanceModel,主動(dòng)表觀模型)的處理(詳細(xì)后述)從而刪除掉存在于臉的輪廓W1的內(nèi)側(cè)的臉構(gòu)成部(例如眼、鼻、嘴、眉毛等)后,沿著臉的輪廓W1和頭發(fā)的前端部來(lái)描繪線,用規(guī)定的顏色涂滿臉的輪廓W1的內(nèi)側(cè)的肌膚部分和頭發(fā),由此形成發(fā)型圖像P1的圖像數(shù)據(jù)。另外,沿著臉的輪廓W1和頭發(fā)的前端部的線的描繪既可以基于用戶對(duì)操作輸入部9的規(guī)定操作來(lái)手動(dòng)進(jìn)行,也可以在中央控制部10的CPU的控制下自動(dòng)進(jìn)行。另外,作為臉的輪廓W1的形狀,例如能舉出確定了長(zhǎng)軸以及短軸的長(zhǎng)度的橢圓形,例如通過(guò)使用了AAM的處理來(lái)確定與各臉的下巴的輪廓W1相符的橢圓形。另外,作為臉的特征信息,例示了臉的下巴的輪廓W1的形狀,但這是一例,并不限定于此,能適當(dāng)?shù)剡M(jìn)行任意的變更。另外,圖像記錄部5也可以例如能自由拆裝記錄介質(zhì)(圖示略)地構(gòu)成,是控制從安裝的記錄介質(zhì)讀取數(shù)據(jù)、和對(duì)記錄介質(zhì)寫入數(shù)據(jù)的構(gòu)成。圖像處理部6具備:圖像取得部6a、臉檢測(cè)部6b、構(gòu)成部圖像生成部6c、特征信息提取部6d、發(fā)型圖像確定部6e、肖像畫圖像生成部6f。另外,圖像處理部6的各部分例如由規(guī)定的邏輯電路構(gòu)成,但該構(gòu)成為一例,并不限定于此。圖像取得部6a取得成為肖像畫圖像生成處理的處理對(duì)象的圖像。即,圖像取得部6a作為取得單元取得原始圖像(例如照片圖像等)P2的圖像數(shù)據(jù)。具體地,圖像取得部6a從存儲(chǔ)器4取得通過(guò)攝像部1以及攝像控制部2進(jìn)行的被攝體的攝像而由圖像數(shù)據(jù)生成部3生成的原始圖像P2的圖像數(shù)據(jù)(YUV數(shù)據(jù))的復(fù)制,或者取得記錄于圖像記錄部5的原始圖像P2的圖像數(shù)據(jù)(YUV數(shù)據(jù))的復(fù)制(參照?qǐng)D5A)。臉檢測(cè)部6b從成為處理對(duì)象的原始圖像P2檢測(cè)臉區(qū)域F2(參照?qǐng)D5A)。即,臉檢測(cè)部6b作為臉檢測(cè)單元而從由圖像取得部6a取得的原始圖像P2中檢測(cè)包括臉的臉區(qū)域F2。具體地,臉檢測(cè)部6b取得由圖像取得部6a作為肖像畫圖像生成處理的處理對(duì)象的圖像而取得的原始圖像P2的圖像數(shù)據(jù),并對(duì)該圖像數(shù)據(jù)進(jìn)行規(guī)定的臉檢測(cè)處理來(lái)檢測(cè)臉區(qū)域F2。另外,臉檢測(cè)處理由于是公知的技術(shù),因此在此省略詳細(xì)的說(shuō)明。構(gòu)成部圖像生成部6c生成表征臉的主要的臉構(gòu)成部的臉構(gòu)成部圖像P4(參照?qǐng)D6B)。即構(gòu)成部圖像生成部6c作為構(gòu)成部生成單元來(lái)生成由圖像取得部6a取得的原始圖像P2(參照?qǐng)D5A)內(nèi)的臉的主要的臉構(gòu)成部所涉及的臉構(gòu)成部圖像P4。具體地,構(gòu)成部圖像生成部6c對(duì)包括原始圖像P2的臉的臉區(qū)域F2實(shí)施細(xì)微部提取處理,生成例如用線來(lái)表征眼、鼻、嘴、眉毛、頭發(fā)的發(fā)絲、臉的輪廓等的臉構(gòu)成部的臉細(xì)微部圖像P3(參照?qǐng)D5B)。例如,構(gòu)成部圖像生成部6c作為細(xì)微部提取處理,通過(guò)使用了AAM的處理來(lái)生成臉細(xì)微部圖像P3。另外,構(gòu)成部圖像生成部6c對(duì)由臉檢測(cè)部6b從原始圖像P2的圖像數(shù)據(jù)中檢測(cè)出的臉區(qū)域F2實(shí)施細(xì)微部提取處理。在此,AAM是視覺性事實(shí)和現(xiàn)象的模型化的一種手法,進(jìn)行任意的臉區(qū)域F2的圖像的模型化。例如,構(gòu)成部圖像生成部6c將多個(gè)采樣臉圖像中的規(guī)定的特征部位(例如外眼角、鼻頭、臉線等)的位置、和像素值(例如亮度值)的統(tǒng)計(jì)性分析結(jié)果預(yù)先登錄在規(guī)定的登錄單元。然后,構(gòu)成部圖像生成部6c以上述的特征部位的位置為基準(zhǔn),設(shè)定表征臉的形狀的形狀模型、和表征平均的形狀中的“Appearance(表觀)”的紋理模型,使用這些模型來(lái)對(duì)臉區(qū)域F2的圖像模型化。由此,構(gòu)成部圖像生成部6c生成提取并用線來(lái)表征原始圖像P2內(nèi)的主要的構(gòu)成的臉細(xì)微部圖像P3。另外,構(gòu)成部圖像生成部6c通過(guò)細(xì)微部提取處理來(lái)確定臉區(qū)域F2內(nèi)的臉的輪廓W2(參照?qǐng)D6A),生成用線來(lái)表征存在于臉的輪廓W2內(nèi)的臉構(gòu)成部以及與該輪廓W2相接的臉構(gòu)成部的臉構(gòu)成部圖像P4。具體地,構(gòu)成部圖像生成部6c在臉細(xì)微部圖像P3內(nèi)確定與臉的輪廓W2相接的像素,刪除與該像素連續(xù)的像素中的存在于臉的輪廓W2的外側(cè)的像素集合G、…(參照?qǐng)D6A)。即,構(gòu)成部圖像生成部6c刪除臉細(xì)微部圖像P3中的存在于臉的輪廓W2的外側(cè)的部分,并留下存在于臉的輪廓W2的內(nèi)側(cè)且與該輪廓W2相接的部分(例如面向圖6A時(shí)左側(cè)的眉毛等),生成例如包括眼、耳、嘴、眉毛等的主要的臉構(gòu)成部的局部圖像M的臉構(gòu)成部圖像P4(參照?qǐng)D6B)。另外,在圖6A中,示意性地用虛線表示臉的輪廓W2。在此,構(gòu)成部圖像生成部6c提取并取得各臉構(gòu)成部的局部圖像M在XY平面空間的相對(duì)的位置關(guān)系所涉及的信息、和坐標(biāo)位置所涉及的信息。另外,作為細(xì)微部提取處理,例示了使用了AAM的處理,但這是一例,并不限于此,能適當(dāng)?shù)厝我庾兏?。例如,作為?xì)微部提取處理,也可以進(jìn)行邊緣提取處理或各向異性擴(kuò)散處理來(lái)生成包括臉構(gòu)成部的局部圖像M的臉構(gòu)成部圖像P4。具體地,構(gòu)成部圖像生成部6c例如可以對(duì)原始圖像P2的圖像數(shù)據(jù)(YUV數(shù)據(jù))使用規(guī)定的微分濾波器(例如高通濾波器等)來(lái)進(jìn)行微分運(yùn)算,并進(jìn)行邊緣檢測(cè)處理,將在亮度值、顏色、濃度中有急劇變化的地方檢測(cè)為邊緣。另外,構(gòu)成部圖像生成部6c例如也可以進(jìn)行各向異性擴(kuò)散處理,對(duì)原始圖像P2的圖像數(shù)據(jù)使用規(guī)定的各向異性擴(kuò)散濾波器,使在線狀的邊緣的切線方向和邊緣的垂直方向上權(quán)重不同來(lái)進(jìn)行平滑化。特征信息提取部6d從原始圖像P2的臉區(qū)域F2提取特征信息。即,特征信息提取部6d作為提取單元,從由圖像取得部6a取得的原始圖像P2內(nèi)的臉例如提取臉的輪廓W2的形狀等的特征信息。具體地,特征信息提取部6d基于原始圖像P2的圖像數(shù)據(jù)(YUV數(shù)據(jù))來(lái)進(jìn)行在臉區(qū)域F2內(nèi)選擇特征高的塊區(qū)域(特征點(diǎn))并提取的特征提取處理。例如,特征信息提取部6d作為細(xì)微部提取處理,例如通過(guò)使用了AAM的處理來(lái)對(duì)構(gòu)成在臉區(qū)域F2內(nèi)確定的臉的輪廓W2的像素進(jìn)行特征提取處理,將該臉的輪廓W2的形狀作為特征信息來(lái)提取。在此,作為臉的輪廓W2的形狀,例如能舉出確定了長(zhǎng)軸以及短軸的長(zhǎng)度的橢圓形,特別是與各臉的下巴的輪廓W2相符的橢圓形。另外,作為在特征提取處理中提取出的特征信息,例示了臉的輪廓的形狀,但這是一例,并不限定于此,只要是能以原始圖像P2和發(fā)型圖像P1進(jìn)行對(duì)比的信息,就能適當(dāng)進(jìn)行任意變更。例如,在原始圖像P2和發(fā)型圖像P1中,既可以提取臉的輪廓的特征矢量來(lái)使用,也可以使用發(fā)型的形狀。另外,特征提取處理由于是公知的技術(shù),因此在此省略詳細(xì)的說(shuō)明。發(fā)型圖像確定部6e確定與由特征信息提取部6d提取的特征信息對(duì)應(yīng)的發(fā)型圖像P1。即,發(fā)型圖像確定部6e作為確定單元,基于記錄在圖像記錄部5中的臉的特征信息來(lái)確定與由特征信息提取部6d提取的特征信息對(duì)應(yīng)的發(fā)型圖像P1。具體地,發(fā)型圖像確定部6e比較對(duì)記錄在圖像記錄部5中的規(guī)定數(shù)的臉的輪廓W1的形狀進(jìn)行規(guī)定的橢圓形、和對(duì)由特征信息提取部6d提取出的臉的輪廓W2的形狀進(jìn)行規(guī)定的橢圓形,并將一致度高于規(guī)定值的橢圓形予以確定。然后,發(fā)型圖像確定部6e對(duì)與所確定的橢圓形建立對(duì)應(yīng)的發(fā)型圖像P1的圖像數(shù)據(jù)予以確定。另外,發(fā)型圖像確定部6e也可以確定多個(gè)一致度高于規(guī)定值的橢圓形,確定在該多個(gè)橢圓形中基于用戶進(jìn)行的操作輸入部9的規(guī)定操作而選擇的用戶期望的橢圓形。肖像畫圖像生成部6f使用發(fā)型圖像P1和臉構(gòu)成部圖像P4來(lái)生成肖像畫圖像P5。即,肖像畫圖像生成部6f作為圖像生成單元,使用由發(fā)型圖像確定部6e確定的發(fā)型圖像P1的圖像數(shù)據(jù)、和由構(gòu)成部圖像生成部6c生成的臉構(gòu)成部圖像P4的局部圖像M來(lái)生成肖像畫圖像P5。具體地,肖像畫圖像生成部6f在發(fā)型圖像P1的臉的輪廓W1的內(nèi)側(cè)確定使例如眼、鼻、嘴、眉毛等各臉構(gòu)成部的局部圖像M重疊的位置,將各臉構(gòu)成部的局部圖像M重疊于該位置,從而生成以肖像畫來(lái)表征原始圖像P2的肖像畫圖像P5的圖像數(shù)據(jù)(參照?qǐng)D6C)。此時(shí),肖像畫圖像生成部6f也可以按照規(guī)定該臉的輪廓W1的橢圓形與規(guī)定原始圖像P2的臉的輪廓W2的橢圓形相符的方式來(lái)使發(fā)型圖像P1變形。另外,肖像畫圖像生成部6f也可以生成在肖像畫圖像P5的規(guī)定的部分(例如眼、嘴、眉毛等臉構(gòu)成部等)加上規(guī)定的顏色來(lái)進(jìn)行表征的圖像。顯示控制部7讀取暫時(shí)保存在存儲(chǔ)器4中的顯示用的圖像數(shù)據(jù),并進(jìn)行使其顯示于顯示部8的控制。具體地,顯示控制部7具備:VRAM(VideoRandomAccessMemory,視頻隨機(jī)存取存儲(chǔ)器)、VRAM控制器、數(shù)字視頻編碼器等。并且,數(shù)字視頻編碼器介由VRAM控制器從VRAM定期地讀取在中央控制部10的控制下從存儲(chǔ)器4讀取并容納在VRAM(圖示略)中的亮度信號(hào)Y以及色差信號(hào)Cb、Cr,并以這些數(shù)據(jù)為基礎(chǔ)來(lái)產(chǎn)生視頻信號(hào),并將視頻信號(hào)輸出給顯示部8。顯示部8例如是液晶顯示面板,基于來(lái)自顯示控制部7的視頻信號(hào)在顯示畫面上顯示由攝像部1拍攝的圖像等。具體地,顯示部8在靜止圖像攝像模式或動(dòng)態(tài)圖像攝像模式下,一邊以規(guī)定的幀速率逐次更新通過(guò)攝像部1以及攝像控制部2拍攝被攝體而生成的多個(gè)幀圖像,一邊顯示實(shí)時(shí)取景圖像。另外,顯示部8顯示作為靜止圖像而記錄的圖像(錄制瀏覽(RECview)圖像),或者顯示作為動(dòng)態(tài)圖像而記錄中的圖像。操作輸入部9用于進(jìn)行該攝像裝置100的規(guī)定操作。具體地,操作輸入部9具備被攝體的攝像指示所涉及的快門按鈕、攝像模式和功能等的選擇指示所涉及的選擇決定按鈕、變焦量的調(diào)整指示所涉及的變焦按鈕等(均未圖示)的操作部,按照該操作部的各按鈕的操作將規(guī)定的操作信號(hào)輸出到中央控制部10。中央控制部10控制攝像裝置100的各部。具體地,雖未圖示,但中央控制部10具備CPU(CentralProcessingUnit,中央處理單元)等,按照攝像裝置100用的各種處理程序(圖示略)來(lái)進(jìn)行各種控制動(dòng)作。接下來(lái),關(guān)于攝像裝置100進(jìn)行的發(fā)型圖像生成處理,參照?qǐng)D2以及圖3來(lái)進(jìn)行說(shuō)明。圖2是表示發(fā)型圖像生成處理所涉及的動(dòng)作的一例的流程圖。發(fā)型圖像生成處理是如下的處理:在基于用戶進(jìn)行的操作輸入部9的選擇決定按鈕的規(guī)定操作而從顯示于菜單畫面的多個(gè)動(dòng)作模式中選擇指示了發(fā)型圖像生成模式的情況下,在中央控制部10的控制下,通過(guò)該攝像裝置100的各部、特別是圖像處理部6來(lái)執(zhí)行的處理。另外,成為發(fā)型圖像生成處理的處理對(duì)象的圖像P0的圖像數(shù)據(jù)被記錄在圖像記錄部5。如圖2所示,首先,圖像記錄部5讀取在記錄于圖像記錄部5的圖像數(shù)據(jù)中基于用戶進(jìn)行的操作輸入部9的規(guī)定操作而指定的一個(gè)圖像P0(參照?qǐng)D3A)的圖像數(shù)據(jù)(YUV數(shù)據(jù)),圖像處理部6的圖像取得部6a取得該讀取的圖像數(shù)據(jù)作為該發(fā)型圖像生成處理的處理對(duì)象(步驟S1)。接下來(lái),臉檢測(cè)部6b對(duì)由圖像取得部6a作為處理對(duì)象而取得的一個(gè)圖像P0的圖像數(shù)據(jù)進(jìn)行規(guī)定的臉檢測(cè)處理,來(lái)檢測(cè)臉區(qū)域F1(步驟S2)。接下來(lái),圖像處理部6對(duì)檢測(cè)出的臉區(qū)域F1進(jìn)行使用了AAM的處理,來(lái)生成發(fā)型圖像P1(參照?qǐng)D3B)的圖像數(shù)據(jù)(步驟S3)。具體地,圖像處理部6在切取圍繞臉區(qū)域F1的規(guī)定大小的區(qū)域A(參照?qǐng)D3A)后,在刪除存在于臉區(qū)域F1的臉的輪廓W1的內(nèi)側(cè)的眼、鼻、嘴、眉毛等后,沿著臉的輪廓W1來(lái)描繪線,并用規(guī)定的顏色(例如膚色等)涂滿臉的輪廓W1的內(nèi)側(cè)的肌膚部分,并且沿著頭發(fā)的前端部描繪線,并用規(guī)定的顏色涂滿頭發(fā)。由此,圖像處理部6生成發(fā)型圖像P1(參照?qǐng)D3B)的圖像數(shù)據(jù)。接下來(lái),圖像處理部6對(duì)規(guī)定通過(guò)使用了AAM的處理而確定的臉的輪廓W1的形狀的橢圓形予以確定,并將其作為特征信息提取(步驟S4)。之后,圖像記錄部5將生成的發(fā)型圖像P1的圖像數(shù)據(jù)和輪廓W1的形狀(特征信息)建立對(duì)應(yīng)來(lái)記錄(步驟S5),結(jié)束發(fā)型圖像生成處理。上述的發(fā)型圖像生成處理對(duì)成為處理對(duì)象的圖像的圖像數(shù)據(jù)的每一個(gè)執(zhí)行,成為規(guī)定數(shù)的發(fā)型圖像P1的圖像數(shù)據(jù)記錄在圖像記錄部5中的狀態(tài)。接下來(lái),關(guān)于攝像裝置100進(jìn)行的肖像畫圖像生成處理,參照?qǐng)D4~圖6來(lái)進(jìn)行說(shuō)明。圖4是表示肖像畫圖像生成處理所涉及的動(dòng)作的一例的流程圖。肖像畫圖像生成處理是如下處理:在基于用戶進(jìn)行的操作輸入部9的選擇決定按鈕的規(guī)定操作而從顯示于菜單畫面的多個(gè)動(dòng)作模式中選擇指示了肖像畫圖像生成模式的情況下,在中央控制部10的控制下,由該攝像裝置100的各部分、特別是圖像處理部6執(zhí)行的處理。另外,成為肖像畫圖像生成處理的處理對(duì)象的原始圖像P2的圖像數(shù)據(jù)設(shè)為記錄在圖像記錄部5中的圖像數(shù)據(jù)。如圖4所示,首先,圖像記錄部5讀取在記錄于圖像記錄部5的圖像數(shù)據(jù)中基于用戶進(jìn)行的操作輸入部9的規(guī)定操作而指定的原始圖像P2(參照?qǐng)D5A)的圖像數(shù)據(jù),圖像處理部6的圖像取得部6a取得讀取的圖像數(shù)據(jù)作為該肖像畫圖像生成處理的處理對(duì)象(步驟S11)。接下來(lái),臉檢測(cè)部6b對(duì)由圖像取得部6a作為處理對(duì)象而取得的原始圖像P2的圖像數(shù)據(jù)進(jìn)行規(guī)定的臉檢測(cè)處理,來(lái)檢測(cè)臉區(qū)域F2(步驟S12)。接著,構(gòu)成部圖像生成部6c對(duì)檢測(cè)出的臉區(qū)域F2進(jìn)行細(xì)微部提取處理(例如使用了AAM的處理等),來(lái)生成用線表征原始圖像P2的臉區(qū)域F2內(nèi)的眼、鼻、嘴、眉毛、頭發(fā)的發(fā)絲、臉的輪廓等的臉構(gòu)成部的臉細(xì)微部圖像P3(參照?qǐng)D5B)(步驟S13)。然后,構(gòu)成部圖像生成部6c通過(guò)細(xì)微部提取處理來(lái)確定臉區(qū)域F2內(nèi)的臉的輪廓W2,從而生成包括存在于臉的輪廓W2內(nèi)的臉構(gòu)成部以及與該輪廓W2相接的臉構(gòu)成部、即例如眼、鼻、嘴、眉毛等的主要的臉構(gòu)成部的局部圖像M的臉構(gòu)成部圖像P4(步驟S14,參照?qǐng)D6B)。接著,特征信息提取部6d對(duì)構(gòu)成通過(guò)細(xì)微部提取處理而在臉區(qū)域F2內(nèi)確定的臉的輪廓W2的像素進(jìn)行特征提取處理,對(duì)規(guī)定該臉的輪廓W2的形狀的橢圓形予以確定,并將其作為特征信息來(lái)提取(步驟S15)。接下來(lái),發(fā)型圖像確定部6e比較記錄在圖像記錄部5的規(guī)定數(shù)的對(duì)臉的輪廓W1的形狀進(jìn)行規(guī)定的橢圓形、和由特征信息提取部6d提取出的對(duì)臉的輪廓W2的形狀進(jìn)行規(guī)定的橢圓形。然后,發(fā)型圖像確定部6e確定一致度高于規(guī)定值的橢圓形,對(duì)與所確定的橢圓形建立對(duì)應(yīng)的發(fā)型圖像P1的圖像數(shù)據(jù)進(jìn)行確定,并從圖像記錄部5中讀取并取得該發(fā)型圖像P1的圖像數(shù)據(jù)(步驟S16)。之后,肖像畫圖像生成部6f在由發(fā)型圖像確定部6e確定的發(fā)型圖像P1的臉的輪廓W1的內(nèi)側(cè)確定使由構(gòu)成部圖像生成部6c生成的臉構(gòu)成部圖像P4的例如眼、鼻、嘴、眉毛等的各臉構(gòu)成部的局部圖像M重疊的位置,在該位置重疊各臉構(gòu)成部的局部圖像M,生成以肖像畫表征原始圖像P2的肖像畫圖像P5的圖像數(shù)據(jù)(步驟S17,參照?qǐng)D6C)。然后,圖像記錄部5取得由肖像畫圖像生成部6f生成的肖像畫圖像P5的圖像數(shù)據(jù)(YUV數(shù)據(jù)),并將其記錄(步驟S18)。由此,結(jié)束肖像畫圖像生成處理。如以上那樣,根據(jù)本實(shí)施方式的攝像裝置100,生成原始圖像P2內(nèi)的臉的主要的臉構(gòu)成部所涉及的臉構(gòu)成部圖像P4,基于記錄于圖像記錄部5中的臉的特征信息(例如臉的輪廓W1的形狀等)來(lái)確定與從原始圖像P2內(nèi)的臉提取出的特征信息對(duì)應(yīng)的發(fā)型圖像P1,使用確定的發(fā)型圖像P1和臉構(gòu)成部圖像P4來(lái)生成肖像畫圖像P5,因此,通過(guò)與發(fā)型圖像P1分開生成臉的主要的臉構(gòu)成部所涉及的發(fā)型圖像P4,使用與該臉構(gòu)成部圖像P4所涉及的臉的特征信息對(duì)應(yīng)的發(fā)型圖像P1,能簡(jiǎn)便地生成特征性地表征臉構(gòu)成部的更豐富的表現(xiàn)的肖像畫圖像P5。即,若用線僅表示臉的特征性構(gòu)成的輪廓形狀,則會(huì)成為缺乏現(xiàn)實(shí)感的肖像畫,另一方面,若臉的細(xì)微的構(gòu)造都用線來(lái)表征,則存在筆觸和紋理變得過(guò)細(xì)而導(dǎo)致與肖像畫的相似度降低的問(wèn)題。因此,通過(guò)生成臉的主要的臉構(gòu)成部所涉及的臉構(gòu)成部圖像P4,使用在圖像記錄部5內(nèi)確定的發(fā)型圖像P1來(lái)生成肖像畫圖像P5,能簡(jiǎn)便地生成至少特征性地表征例如眼、鼻、嘴、眉毛等的特征性的臉構(gòu)成部的更豐富表現(xiàn)的圖像。另外,由于對(duì)包括圖像的臉的臉區(qū)域F2實(shí)施細(xì)微部提取處理來(lái)生成用線表征臉構(gòu)成部的臉構(gòu)成部圖像P4,因此,能生成特征性地表征臉構(gòu)成部的細(xì)微的構(gòu)造的臉構(gòu)成部圖像P4。特別是,由于通過(guò)細(xì)微部提取處理確定臉區(qū)域F2內(nèi)的臉的輪廓W2,生成用線表征存在于臉的輪廓W2內(nèi)的臉構(gòu)成部以及與該輪廓W2相接的臉構(gòu)成部的臉構(gòu)成部圖像P4,因此,能適當(dāng)?shù)剡M(jìn)行該臉構(gòu)成部圖像P4的生成。具體地,通過(guò)細(xì)微部提取處理來(lái)生成用線表征臉構(gòu)成部的臉細(xì)微部圖像P3,刪除臉細(xì)微部圖像P3中的存在于臉的輪廓W2的外側(cè)的部分,并留下存在于臉的輪廓W2的內(nèi)側(cè)且與該輪廓W2相接的部分,由此,能適當(dāng)?shù)剡M(jìn)行:生成用線表征存在于臉的輪廓W2內(nèi)的臉構(gòu)成部以及與該輪廓W2相接的臉構(gòu)成部的臉構(gòu)成部圖像P4、即特征性地表征臉構(gòu)成部的細(xì)微的構(gòu)造的臉構(gòu)成部圖像P4。另外,通過(guò)由臉檢測(cè)部6b檢測(cè)臉區(qū)域F2,能簡(jiǎn)便地確定存在于該臉區(qū)域F2內(nèi)的臉構(gòu)成部,能更簡(jiǎn)便地生成用線表征該臉構(gòu)成部的臉構(gòu)成部圖像P4。進(jìn)而,通過(guò)由臉檢測(cè)部6b檢測(cè)臉區(qū)域F2,能簡(jiǎn)便地提取來(lái)自該臉區(qū)域F2的特征信息。另外,本發(fā)明并不限定于上述實(shí)施方式,可以在不脫離本發(fā)明的主旨的范圍內(nèi)進(jìn)行各種改良和設(shè)計(jì)的變更。例如,在上述實(shí)施方式中,在臉構(gòu)成部圖像P4的生成后進(jìn)行特征信息(臉的輪廓W2的形狀等)的提取,但這些處理順序是一例,并不限于此,也可以使順序相反,即,在特征信息的提取處理后進(jìn)行臉構(gòu)成部圖像P4的生成處理。另外,從由臉檢測(cè)部6b檢測(cè)出的臉區(qū)域F1、F2來(lái)生成發(fā)型圖像P1、臉構(gòu)成部圖像P4,但關(guān)于是否具備實(shí)施臉檢測(cè)處理的臉檢測(cè)部6b,能適當(dāng)?shù)厝我庾兏?。進(jìn)而,成為發(fā)型圖像P1和臉構(gòu)成部圖像P4的生成源的圖像并不需要是表征正面臉的圖像P0、P2,例如,在面向傾斜方向地使臉傾斜的圖像的情況下,也可以生成使該臉朝向正面地變形的圖像,由此來(lái)作為生成源使用。另外,發(fā)型圖像P1構(gòu)成為記錄于圖像記錄部5中,但并不限于此,也可以構(gòu)成為記錄在介由網(wǎng)絡(luò)而連接的規(guī)定的服務(wù)器中,圖像取得部6a介由網(wǎng)絡(luò)從規(guī)定的服務(wù)器取得發(fā)型圖像P1。另外,在上述實(shí)施方式中,在發(fā)型圖像P1上重疊眼、鼻、嘴、眉毛等各臉構(gòu)成部的局部圖像M來(lái)生成肖像畫圖像P5,但這是一例,并不限于此。例如,也可以將人以外的動(dòng)物(例如貓等)或食物(例如番茄等)作為肖像畫圖像P5的基礎(chǔ)圖像,生成使各臉構(gòu)成部的局部圖像M重疊的肖像畫圖像P5a、P5b(參照?qǐng)D7A、圖7B)。另外,作為特征信息,例如,在以貓為基礎(chǔ)圖像的情況下,也可以使用貓的臉部分的輪廓的形狀,另外,在以番茄為基礎(chǔ)圖像的情況下,也可以使用番茄的外形。進(jìn)而,在上述實(shí)施方式中例示的攝像裝置100的構(gòu)成是一例,并不限于此。另外,作為圖像生成裝置例示了攝像裝置100,但并不限于此,只要是能執(zhí)行本發(fā)明所涉及的圖像處理的構(gòu)成,則能是任何構(gòu)成。此外,在上述實(shí)施方式中,構(gòu)成為通過(guò)在中央控制部10的控制下,圖像取得部6a、構(gòu)成部圖像生成部6c、特征信息提取部6d、發(fā)型圖像確定部6e、肖像畫圖像生成部6f進(jìn)行驅(qū)動(dòng)來(lái)實(shí)現(xiàn)作為取得單元、構(gòu)成部生成單元、提取單元、確定單元、圖像生產(chǎn)單元的功能,但并不限于此,也可以構(gòu)成為通過(guò)由中央控制部10執(zhí)行規(guī)定的程序來(lái)實(shí)現(xiàn)。即,在存儲(chǔ)程序的程序存儲(chǔ)器(圖示略)中預(yù)先存儲(chǔ)包括取得處理例程、構(gòu)成部生成處理例程、提取處理例程、確定處理例程、圖像生成處理例程的程序。然后,也可以通過(guò)取得處理例程使中央控制部10的CPU作為取得圖像的單元發(fā)揮功能。另外,也可以通過(guò)構(gòu)成部生成處理例程使中央控制部10的CPU作為生成所取得的圖像內(nèi)的臉的主要的構(gòu)成部所涉及的臉構(gòu)成部圖像P4的單元發(fā)揮功能。另外,也可以通過(guò)提取處理例程使中央控制部10的CPU作為從所取得的圖像內(nèi)的臉提取特征信息的單元發(fā)揮功能。另外,也可以通過(guò)確定處理例程使中央控制部10的CPU作為基于記錄于圖像記錄部5的臉的特征信息來(lái)確定與提取出的特征信息對(duì)應(yīng)的發(fā)型圖像P1的單元發(fā)揮功能。另外,也可以通過(guò)圖像生成處理例程使中央控制部10的CPU作為使用確定的發(fā)型圖像P1和生成的臉構(gòu)成部圖像P4來(lái)生成肖像畫圖像P5的單元發(fā)揮功能。同樣地,關(guān)于臉檢測(cè)單元,也可以構(gòu)成為通過(guò)中央控制部10的CPU執(zhí)行規(guī)定的程序等來(lái)實(shí)現(xiàn)。進(jìn)而,作為容納用于執(zhí)行上述各處理的程序的計(jì)算機(jī)可讀取的介質(zhì),除了能應(yīng)用ROM、硬盤以外,還能應(yīng)用閃速存儲(chǔ)器等的非易失性存儲(chǔ)器、CD-ROM等的可移動(dòng)型記錄介質(zhì)。另外,作為介由規(guī)定的通信線路來(lái)提供程序的數(shù)據(jù)的介質(zhì),還能應(yīng)用載波(carrierwave)。對(duì)本發(fā)明的幾個(gè)實(shí)施方式進(jìn)行了說(shuō)明,但本發(fā)明的范圍并不限定于上述的實(shí)施方式,還包括權(quán)利要求的范圍中記載的范圍和與其等同的范圍。下面,附記有在本申請(qǐng)的申請(qǐng)書的最初所添附的特許請(qǐng)求的范圍中所記載的發(fā)明。附記中所記載的權(quán)利要求的編號(hào)如該申請(qǐng)的申請(qǐng)書最初所添附的特許請(qǐng)求的范圍那樣。1、一種圖像生成裝置,其特征在于,具備:取得單元(6a),其取得圖像;構(gòu)成部生成單元(6c),其生成與由所述取得單元取得的圖像中所包括的臉的主要的構(gòu)成部相關(guān)的臉構(gòu)成部圖像;提取單元(6d),其從由所述取得單元取得的圖像中所包括的臉中提取特征信息;確定單元(6e),其從與記錄于記錄單元(5)中的臉的特征信息建立對(duì)應(yīng)并表示頭發(fā)的輪廓的發(fā)型圖像中,確定與由所述提取單元提取出的特征信息對(duì)應(yīng)的發(fā)型圖像;和圖像生成單元(6f),其使用由所述確定單元確定的發(fā)型圖像和由所述構(gòu)成部生成單元生成的臉構(gòu)成部圖像來(lái)生成肖像畫圖像。2、根據(jù)技術(shù)方案1所述的圖像生成裝置,其特征在于,所述構(gòu)成部生成單元還對(duì)所述圖像的臉區(qū)域?qū)嵤┘?xì)微部提取處理,來(lái)生成用線表征所述構(gòu)成部的臉構(gòu)成部圖像。3、根據(jù)技術(shù)方案2所述的圖像生成裝置,其特征在于,所述構(gòu)成部生成單元還通過(guò)所述細(xì)微部提取處理來(lái)確定所述臉區(qū)域內(nèi)的臉的輪廓,生成用線表征存在于所述臉的輪廓內(nèi)的所述構(gòu)成部以及與該輪廓相接的所述構(gòu)成部的臉構(gòu)成部圖像。4、根據(jù)技術(shù)方案3所述的圖像生成裝置,其特征在于,所述構(gòu)成部生成單元還通過(guò)所述細(xì)微部提取處理來(lái)生成用線表征臉的構(gòu)成部的臉細(xì)微部圖像,刪除所述臉細(xì)微部圖像中的存在于所述臉的輪廓的外側(cè)的部分,并留下存在于所述臉的輪廓的內(nèi)側(cè)且與該輪廓相接的部分,由此來(lái)生成所述臉構(gòu)成部圖像。5、根據(jù)技術(shù)方案1所述的圖像生成裝置,其特征在于,所述特征信息包括臉的輪廓的形狀。6、根據(jù)技術(shù)方案1所述的圖像生成裝置,其特征在于,所述圖像生成裝置還具備:臉檢測(cè)單元(6b),其從所述圖像中檢測(cè)臉區(qū)域,所述構(gòu)成部生成單元生成用線表征在由所述臉檢測(cè)單元檢測(cè)出的臉區(qū)域內(nèi)存在的所述構(gòu)成部的臉構(gòu)成部圖像,所述提取單元從由所述臉檢測(cè)單元檢測(cè)出的臉區(qū)域提取特征信息。7、一種圖像生成方法,是使用了圖像生成裝置(100)的圖像生成方法,其特征在于,包括:取得步驟(6a),取得圖像;構(gòu)成部生成步驟(6c),生成包括在所取得的圖像中的臉的主要的構(gòu)成部所涉及的臉構(gòu)成部圖像;提取步驟(6d),從包括在所取得的圖像中的臉提取特征信息;確定步驟(6e),從與記錄于記錄單元的臉的特征信息建立對(duì)應(yīng)并表征頭發(fā)的輪廓的發(fā)型圖像中,確定與提取出的特征信息對(duì)應(yīng)的發(fā)型圖像;和圖像生成步驟(6f),使用確定的發(fā)型圖像和生成的臉構(gòu)成部圖像來(lái)生成肖像畫圖像。8、根據(jù)技術(shù)方案7所述的圖像生成方法,其特征在于,所述構(gòu)成部生成步驟還包括:細(xì)微部提取步驟,對(duì)所述圖像的臉區(qū)域?qū)嵤┘?xì)微部提取處理,生成用線表征所述構(gòu)成部的臉構(gòu)成部圖像。9、根據(jù)技術(shù)方案8所述的圖像生成方法,其特征在于,所述構(gòu)成部生成步驟還包括:輪廓確定步驟,通過(guò)所述細(xì)微部提取步驟來(lái)確定所述區(qū)域內(nèi)的臉的輪廓,生成用線表征存在于所述臉的輪廓內(nèi)的所述構(gòu)成部以及與該輪廓相接的所述構(gòu)成部的臉構(gòu)成部圖像。10、根據(jù)技術(shù)方案9所述的圖像生成方法,其特征在于,所述構(gòu)成部生成步驟還通過(guò)所述細(xì)微部提取步驟生成用線表征臉的構(gòu)成部的臉細(xì)微部圖像,刪除所述臉細(xì)微部圖像中的存在于所述臉的輪廓的外側(cè)的部分,并留下存在于所述臉的輪廓的內(nèi)側(cè)且與該輪廓相接的部分,由此來(lái)生成所述臉構(gòu)成部圖像。11、根據(jù)技術(shù)方案7所述的圖像生成方法,其特征在于,所述特征信息包括臉的輪廓的形狀。12、根據(jù)技術(shù)方案7所述的圖像生成方法,其特征在于,所述圖像生成方法還包括:臉檢測(cè)步驟(6b),從所述圖像檢測(cè)臉區(qū)域,所述構(gòu)成部生成步驟生成用線表征通過(guò)所述臉檢測(cè)步驟檢測(cè)出的臉區(qū)域內(nèi)存在的所述構(gòu)成部的臉構(gòu)成部圖像,所述提取步驟從通過(guò)所述臉檢測(cè)步驟檢測(cè)出的臉區(qū)域提取特征信息。
      當(dāng)前第1頁(yè)1 2 3 
      網(wǎng)友詢問(wèn)留言 已有0條留言
      • 還沒(méi)有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
      1