專利名稱:圖像處理裝置、電子設(shè)備、內(nèi)窺鏡系統(tǒng)和程序的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及圖像處理裝置、電子設(shè)備、內(nèi)窺鏡系統(tǒng)和程序等。
背景技術(shù):
以往,廣泛使用如下的面次序式的內(nèi)窺鏡系統(tǒng)針對(duì)體腔內(nèi)的組織,使用旋轉(zhuǎn)濾鏡依次照射Rl、G1、B1的3種顏色的光,使用根據(jù)它們的反射光圖像而生成的圖像(通常光圖像)進(jìn)行診斷。進(jìn)而,提出了如下的內(nèi)窺鏡系統(tǒng)針對(duì)體腔內(nèi)的組織,依次照射特性與所述3種顏色的光不同的2種窄帶光G2和B2,使用根據(jù)它們的反射光圖像而生成的窄帶圖像進(jìn)行診斷(例如專利文獻(xiàn)I)。并且,提出了如下的內(nèi)窺鏡系統(tǒng)針對(duì)體腔內(nèi)的組織照射窄帶的激勵(lì)光,取得通過激勵(lì)光而從組織產(chǎn)生的自體熒光或藥劑熒光,使用所生成的熒光圖像進(jìn)行診斷(例如專利文獻(xiàn)2)。
現(xiàn)有技術(shù)文獻(xiàn)專利文獻(xiàn)專利文獻(xiàn)I :日本特開2006-68113號(hào)公報(bào)專利文獻(xiàn)2 日本特開2007-229053號(hào)公報(bào)專利文獻(xiàn)3 :日本特開2000-115553號(hào)公報(bào)
發(fā)明內(nèi)容
發(fā)明要解決的課題通過使用上述專利文獻(xiàn)I的取得窄帶圖像的內(nèi)窺鏡系統(tǒng)進(jìn)行診斷,例如,很難通過通常光觀察來視覺辨認(rèn)的扁平上皮癌等病變部被描繪成與正常部不同的褐色區(qū)域,所以可知其發(fā)現(xiàn)變得容易。并且,在使用上述專利文獻(xiàn)2的取得熒光圖像的內(nèi)窺鏡系統(tǒng)進(jìn)行診斷的情況下, 對(duì)腫瘤等病變部使用具有特殊積累的性質(zhì)的熒光藥劑,僅腫瘤等病變部產(chǎn)生熒光,由此,其發(fā)現(xiàn)變得容易。但是,這些窄帶圖像或熒光圖像(將它們統(tǒng)稱為特殊光圖像)一般具有與通常光圖像大大不同的色調(diào),進(jìn)而,由于照明光不足而成為非常暗的圖像,所以很難僅使用特殊光圖像進(jìn)行診斷。根據(jù)這種理由,為了提高醫(yī)生的診斷精度,例如考慮同時(shí)取得通常光圖像和特殊光圖像并進(jìn)行顯示。但是,并列地同時(shí)顯示這些圖像時(shí),醫(yī)生始終一邊關(guān)注于多個(gè)圖像一邊進(jìn)行診斷,醫(yī)生的負(fù)擔(dān)增大。并且,認(rèn)為臨時(shí)僅關(guān)注于I個(gè)圖像會(huì)遺漏病變部。根據(jù)本發(fā)明的幾個(gè)方式,能夠提供如下的圖像處理裝置、內(nèi)窺鏡系統(tǒng)和程序等能夠取得與白色光的波長區(qū)域?qū)?yīng)的第I圖像和與特定波長區(qū)域?qū)?yīng)的第2圖像,設(shè)定輸出圖像的適當(dāng)?shù)娘@示方式。并且,根據(jù)本發(fā)明的幾個(gè)方式,能夠提供如下的圖像處理裝置、內(nèi)窺鏡系統(tǒng)和程序等能夠降低使用第I圖像和第2圖像進(jìn)行診斷時(shí)的醫(yī)生的負(fù)擔(dān)等,并且抑制病變部的遺漏等。
用于解決課題的手段本發(fā)明的一個(gè)方式涉及一種圖像處理裝置,該圖像處理裝置包括第I圖像取得部,其取得包含具有白色光波段中的信息的被攝體像的圖像,作為第I圖像;第2圖像取得部,其取得包含具有特定波段中的信息的被攝體像的圖像,作為第2圖像;關(guān)注候選區(qū)域檢測(cè)部,其根據(jù)所述第2圖像內(nèi)的像素的特征量,檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域;可靠度計(jì)算部,其計(jì)算表示所檢測(cè)到的所述關(guān)注候選區(qū)域是關(guān)注區(qū)域的確定程度的可靠度;以及顯示方式設(shè)定部,其進(jìn)行根據(jù)計(jì)算出的所述可靠度設(shè)定輸出圖像的顯示方式的處理。在本發(fā)明的一個(gè)方式中,取得與白色光波段對(duì)應(yīng)的第I圖像和與特定波段對(duì)應(yīng)的第2圖像,根據(jù)第2圖像的特征量檢測(cè)關(guān)注候選區(qū)域。而且,由于利用可靠度計(jì)算部加上了可靠度之后設(shè)定顯示方式,所以與沒有可靠度的情況相比,能夠設(shè)定更加適當(dāng)?shù)娘@示方式。
本發(fā)明的另一個(gè)方式涉及一種內(nèi)窺鏡系統(tǒng),該內(nèi)窺鏡系統(tǒng)包括第I光源,其對(duì)活體內(nèi)的被攝體照射白色光;第2光源,其對(duì)活體內(nèi)的被攝體照射特定波段的光;第I圖像取得部,其通過所述第I光源的照射,取得包含具有白色光波段中的信息的被攝體像的圖像,作為第I活體內(nèi)圖像;第2圖像取得部,其通過所述第2光源的照射,取得包含具有特定波段中的信息的被攝體像的圖像,作為第2活體內(nèi)圖像;關(guān)注候選區(qū)域檢測(cè)部,其根據(jù)所述第2活體內(nèi)圖像內(nèi)的像素的特征量,檢測(cè)關(guān)注區(qū)域的候選即關(guān)注候選區(qū)域;可靠度計(jì)算部,其計(jì)算表示所檢測(cè)到的所述關(guān)注候選區(qū)域是所述關(guān)注區(qū)域的確定程度的可靠度;顯示方式設(shè)定部,其進(jìn)行根據(jù)計(jì)算出的所述可靠度設(shè)定輸出圖像的顯示方式的處理;以及顯示部,其按照所設(shè)定的所述顯示方式顯示所述輸出圖像。根據(jù)本發(fā)明的另一個(gè)方式,取得第I活體內(nèi)圖像和第2活體內(nèi)圖像,根據(jù)第2圖像的特征量檢測(cè)關(guān)注候選區(qū)域。而且,能夠?qū)崿F(xiàn)如下的內(nèi)窺鏡系統(tǒng)由于利用可靠度計(jì)算部加上了可靠度之后設(shè)定顯示方式,所以與沒有可靠度的情況相比,能夠設(shè)定更加適當(dāng)?shù)娘@示方式,按照所設(shè)定的顯示方式在顯示部中進(jìn)行顯示。本發(fā)明的另一個(gè)方式涉及一種圖像處理裝置,該圖像處理裝置包括第I圖像取得部,其取得包含具有白色光波段中的信息的被攝體像的圖像,作為第I圖像;第2圖像取得部,其取得包含具有特定波段中的信息的被攝體像的圖像,作為第2圖像;關(guān)注區(qū)域檢測(cè)部,其根據(jù)所述第2圖像內(nèi)的像素的特征量,檢測(cè)應(yīng)該關(guān)注的區(qū)域即關(guān)注區(qū)域;以及顯示方式設(shè)定部,其進(jìn)行在與所述關(guān)注區(qū)域?qū)?yīng)的輸出圖像的對(duì)應(yīng)關(guān)注區(qū)域中顯示警告區(qū)域的處理,該警告區(qū)域發(fā)出與所述關(guān)注區(qū)域的檢測(cè)結(jié)果有關(guān)的信息。根據(jù)本發(fā)明的另一個(gè)方式,取得第I圖像和第2圖像,根據(jù)第2圖像的特征量檢測(cè)關(guān)注區(qū)域。而且,通過在對(duì)應(yīng)關(guān)注區(qū)域中顯示警告區(qū)域,能夠設(shè)定對(duì)應(yīng)關(guān)注區(qū)域明顯的輸出圖像,作為顯示方式。
圖I (A)、圖I (B)是現(xiàn)有方法的說明圖。圖2是本實(shí)施方式的方法的說明圖。圖3是本實(shí)施方式的系統(tǒng)結(jié)構(gòu)例。圖4是濾色鏡R、G、B的分光特性。
圖5是濾色鏡g2、b2的分光特性。圖6是濾色鏡g2、b2的說明圖。圖7是通常光圖像取得部的結(jié)構(gòu)例。圖8是特殊光圖像取得部的結(jié)構(gòu)例。圖9是輸出圖像生成部的結(jié)構(gòu)例。圖10是關(guān)注候選區(qū)域檢測(cè)部的結(jié)構(gòu)例。圖11是顯示方式設(shè)定部的結(jié)構(gòu)例。
圖12是加工部的結(jié)構(gòu)例。圖13是加工部的另一個(gè)結(jié)構(gòu)例。圖14是局部區(qū)域的分割方法的說明圖。圖15 (A)、圖15 (B)是關(guān)注候選區(qū)域的設(shè)定方法的說明圖。圖16 (A)是通常光圖像的例子,圖16 (B)是特殊光圖像的例子,圖16 (C)、圖16(D)、圖16 (E)、圖16 (F)是輸出圖像的例子。圖17是在軟件處理中使用的計(jì)算機(jī)的結(jié)構(gòu)例。圖18是在軟件處理中使用的計(jì)算機(jī)的結(jié)構(gòu)例。圖19是用于說明本實(shí)施方式的處理的流程圖。圖20是用于說明關(guān)注候選區(qū)域檢測(cè)處理的流程圖。圖21是用于說明顯示方式設(shè)定處理的流程圖。圖22是用于說明加工處理的流程圖。圖23是用于說明加工處理的另一個(gè)流程圖。圖24是關(guān)注候選區(qū)域檢測(cè)部的另一個(gè)結(jié)構(gòu)例。圖25是加工部的另一個(gè)結(jié)構(gòu)例。圖26 (A)是通常光圖像和關(guān)注候選區(qū)域信息的例子,圖26 (B)是利用不同的目標(biāo)顏色對(duì)2個(gè)對(duì)應(yīng)關(guān)注區(qū)域?qū)嵤┝祟伾D(zhuǎn)換加工的例子。圖27是用于說明關(guān)注候選區(qū)域檢測(cè)處理的另一個(gè)流程圖。圖28是加工部的另一個(gè)結(jié)構(gòu)例。圖29 (A)、圖29 (B)、圖29 (C)、圖29 (D)是對(duì)相鄰的關(guān)注候選區(qū)域進(jìn)行合并的方法的說明圖。圖30 (A)、圖30 (B)是示出應(yīng)該關(guān)注的程度(At)與合成比(alpha)的關(guān)系的例子的圖。圖31是用于說明加工處理的另一個(gè)流程圖。圖32是本實(shí)施方式的另一個(gè)系統(tǒng)結(jié)構(gòu)例。圖33是特殊光圖像取得部的另一個(gè)結(jié)構(gòu)例。圖34是本實(shí)施方式的另一個(gè)系統(tǒng)結(jié)構(gòu)例。圖35是旋轉(zhuǎn)濾鏡的例子。圖36是濾鏡Fl、F2和熒光的特性例。圖37是阻擋濾鏡的特性例。圖38是輸出圖像生成部的另一個(gè)系統(tǒng)結(jié)構(gòu)例。圖39是通常光圖像和特殊光圖像的取得定時(shí)的例子。
圖40是各定時(shí)的濾鏡和所得到的圖像的組合的例子。圖41是使用了運(yùn)動(dòng)矢量的通常光圖像和特殊光圖像的對(duì)應(yīng)方法的說明圖。圖42是使用了運(yùn)動(dòng)矢量的通常光圖像和特殊光圖像的對(duì)應(yīng)方法的說明圖。圖43是旋轉(zhuǎn)濾鏡的例子。圖44是用于說明本實(shí)施方式的處理的另一個(gè)流程圖。
具體實(shí)施例方式下面,對(duì)本實(shí)施方式進(jìn)行說明。另外,以下說明的本實(shí)施方式并不是不當(dāng)?shù)叵薅?quán)利要求范圍所記載的本發(fā)明的內(nèi)容。并且,本實(shí)施方式中說明的全部結(jié)構(gòu)不一定是本發(fā)明的必須結(jié)構(gòu)要件。、I.本實(shí)施方式的方法參照?qǐng)DI (A)、圖I (B)和圖2對(duì)本實(shí)施方式的方法進(jìn)行說明。圖I (A)和圖I (B)示出現(xiàn)有方法。圖I (A)示出基于通常光的觀察的狀況。得到全體明亮且容易觀看的圖像,但是,針對(duì)扁平上皮癌等一部分病變的視覺辨認(rèn)性差。并且,圖I (B)示出基于特殊光(例如窄帶光或熒光)的觀察的狀況。例如扁平上皮癌等病變利用褐色顯示等,與通常光觀察相比,能夠提高一部分病變的視覺辨認(rèn)性,但是,成為全體較暗而不易觀看的圖像。為了解決這種問題,還考慮了如下的方法一邊通過操作設(shè)備的開關(guān)等切換通常光圖像和特殊光圖像一邊進(jìn)行顯示,從而進(jìn)行診斷和治療。但是,在該方法中,在移動(dòng)內(nèi)窺鏡的插入部的同時(shí)進(jìn)行設(shè)備的操作,還需要參照畫面,對(duì)醫(yī)生造成負(fù)擔(dān)。另外,所顯示的通常光圖像和特殊光圖像均具有缺點(diǎn),所以需要根據(jù)狀況而適當(dāng)選擇顯示圖像,因此,要求熟練的可能性很高。并且,還考慮了并列顯示通常光圖像和特殊光圖像的方法,但是,該情況下,必須同時(shí)參照2個(gè)畫面,可能遺漏病變部等,醫(yī)生的負(fù)擔(dān)還是很大。因此,本申請(qǐng)人提出了圖2的系統(tǒng)。在本實(shí)施方式中,根據(jù)特殊光圖像確定例如扁平上皮癌等病變部的位置,根據(jù)所確定的位置信息對(duì)通常光圖像進(jìn)行加工,提高病變部的視覺辨認(rèn)性。具體而言,如圖2所示,考慮進(jìn)行與目標(biāo)顏色之間的重疊處理的方法、利用目標(biāo)顏色包圍周緣部的方法、對(duì)病變部的通常光圖像和特殊光圖像進(jìn)行合成的方法等。由此,在通常光圖像的優(yōu)點(diǎn)即明亮且容易觀看的圖像的基礎(chǔ)上,加上特殊光圖像的優(yōu)點(diǎn)即病變部的視覺辨認(rèn)性高,所以抑制了病變部的遺漏,減輕了醫(yī)生的負(fù)擔(dān),由此,能夠進(jìn)行順暢的診斷/治療。另外,在本實(shí)施方式中,當(dāng)然也可以通過操作設(shè)備的開關(guān)等而顯示特殊光圖像。由此,能夠適當(dāng)區(qū)分使用圖像,例如,在病變部的檢查時(shí)使用加工后的通常光圖像,在病變部的詳細(xì)確認(rèn)時(shí)使用特殊光圖像。2.第I實(shí)施方式參照?qǐng)D3對(duì)本發(fā)明的第I實(shí)施方式的內(nèi)窺鏡系統(tǒng)進(jìn)行說明。本實(shí)施方式的內(nèi)窺鏡系統(tǒng)具有光源部100、插入部200、圖像處理部300、顯示部400、外部I/F部500。光源部100具有產(chǎn)生白色光的白色光源110以及用于將白色光會(huì)聚在光導(dǎo)纖維210中的會(huì)聚透鏡120。
插入部200例如形成為細(xì)長且能夠彎曲,以使得能夠插入體腔內(nèi)。插入部200具有用于引導(dǎo)由光源部100會(huì)聚后的光的光導(dǎo)纖維210、使通過光導(dǎo)纖維210引導(dǎo)到前端的光擴(kuò)散并照射到觀察對(duì)象的照明透鏡220、使從觀察對(duì)象返回的反射光會(huì)聚的物鏡230、將會(huì)聚后的反射光分離成2個(gè)部分的半透半反鏡240、以及用于檢測(cè)分離后的反射光的第I攝像元件250和第2攝像元件260。第I攝像元件250是用于拍攝通常光圖像的具有拜耳排列的濾色鏡的攝像元件。第I攝像元件250的濾色鏡R、G、B例如具有圖4所示的分光特性。第2攝像元件260是用于拍攝窄帶圖像的攝像元件,例如如圖6所示,是具有以方格狀排列分別透射2種窄帶光G2和B2的2種濾色鏡g2和b2而構(gòu)成的濾色鏡的攝像元件。第2攝像元件260的濾色鏡g2、b2例如如圖5所示,b2具有透射390 445nm的波段的光的透射率特性,g2具有透射530 550nm的波段的光的透射率特性。圖像處理部300 (圖像處理裝置)具有AD轉(zhuǎn)換部310a、310b、通常光圖像取得部320、特殊光圖像取得部330、輸出圖像生成部340、控制部350??刂撇?50與通常光圖像取得部320、特殊光圖像取得部330、輸出圖像生成部340雙向連接,并對(duì)它們進(jìn)行控制。外部I/F部500是用于供用戶對(duì)該內(nèi)窺鏡系統(tǒng)(攝像裝置)進(jìn)行輸入等的接口,構(gòu)成為包括用于進(jìn)行電源的接通/斷開的電源開關(guān)、用于開始攝影操作的快門按鈕、用于切換攝影模式和其他各種模式的模式切換按鈕等。而且,該外部I/F部500向控制部350輸出所輸入的信息。AD轉(zhuǎn)換部310a將從第I攝像元件250輸出的模擬信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)并輸出。AD轉(zhuǎn)換部310b將從第2攝像元件260輸出的模擬信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)并輸出。通常光圖像取得部320 (廣義上為第I圖像取得部)例如從由AD轉(zhuǎn)換部310a輸出的數(shù)字信號(hào)中取得通常光圖像(廣義上為第I圖像)。特殊光圖像取得部330 (廣義上為第2圖像取得部)例如從由AD轉(zhuǎn)換部310b輸出的數(shù)字信號(hào)中取得特殊光圖像(廣義上為第2圖像)。通常光圖像取得部320和特殊光圖像取得部330的詳細(xì)情況在后面敘述。由通常光圖像取得部320取得的通常光圖像和由特殊光圖像取得部330取得的特殊光圖像被輸出到輸出圖像生成部340。輸出圖像生成部340根據(jù)這2張圖像生成I張輸出圖像并輸出到圖像顯示部400。輸出圖像生成部340的詳細(xì)情況在后面敘述。接著,使用圖7對(duì)通常光圖像取得部320進(jìn)行說明。通常光圖像取得部320具有通常光圖像生成部321和通常光圖像存儲(chǔ)部322。通常光圖像生成部321對(duì)由AD轉(zhuǎn)換部310a轉(zhuǎn)換并輸入的數(shù)字信號(hào)進(jìn)行圖像處理,生成通常光圖像。具體而言,進(jìn)行現(xiàn)有的插值處理、白平衡、顏色轉(zhuǎn)換、灰度轉(zhuǎn)換等處理,生成通常光圖像并輸出。通常光圖像存儲(chǔ)部322存儲(chǔ)從通常光圖像生成部321輸出的通常光圖像。 接著,使用圖8對(duì)特殊光圖像取得部330進(jìn)行說明。特殊光圖像取得部330具有特殊光圖像生成部331和特殊光圖像存儲(chǔ)部332。特殊光圖像生成部331對(duì)由AD轉(zhuǎn)換部310b轉(zhuǎn)換并輸入的數(shù)字圖像信號(hào)進(jìn)行圖像處理,生成特殊光圖像。在本實(shí)施例中,特殊光圖像為窄帶光圖像。這里,對(duì)利用特殊光圖像生成部331生成窄帶光圖像的方法進(jìn)行說明。被輸入到特殊光圖像生成部的數(shù)字圖像信號(hào)是如上所述以方格狀排列圖6所示的2種濾色鏡g2和b2的圖像信號(hào)。首先對(duì)這種圖像信號(hào)進(jìn)行插值處理,生成在全部像素中具有g(shù)2濾鏡的信號(hào)值的G2圖像和在全部像素中具有b2濾鏡的信號(hào)值的B2圖像。在插值處理中計(jì)算的像素值例如是周邊4個(gè)像素的平均值即可,例如,圖6的g2 (1,1)位置的匕2的像素值匕2 (1,1)和b2 (1,2)位置的g2的像素值g2 (1,2)如下式(I)、(2)那樣計(jì)算。b2 (I, I) =[b2 (0,l)+b2 (l,0)+b2 (l,2)+b2 (2,1) ]/4...... (I)g2 (l,2)=[g2 (0,2)+g2 (l,l)+g2 (l,3)+g2 (2,2) ]/4……(2)接著,根據(jù)對(duì)全部像素進(jìn)行插值后的G2圖像和B2圖像,生成具有R、G、B的3個(gè)通道的彩色圖像。這里,例如通過對(duì)彩色圖像的R通道輸入G2圖像、對(duì)G通道和B通道輸入B2圖像,生成彩色圖像。特殊光圖像生成部331進(jìn)一步對(duì)所生成的彩色圖像進(jìn)行白平衡、灰度轉(zhuǎn)換等處理,作為窄帶光圖像輸出。特殊光圖像存儲(chǔ)部332存儲(chǔ)從特殊光圖像生成部331輸出的特殊光圖像。接著,對(duì)輸出圖像生成部340的具體結(jié)構(gòu)進(jìn)行說明。圖9是說明第I實(shí)施方式中的輸出圖像生成部340的結(jié)構(gòu)的一例的框圖。輸出圖像生成部340具有關(guān)注候選區(qū)域檢測(cè) 部341、可靠度計(jì)算部342、顯示方式設(shè)定部343。這里,來自通常光圖像取得部320的圖像信號(hào)被輸出到顯示方式設(shè)定部343。并且,來自特殊光圖像取得部330的圖像信號(hào)被輸出到關(guān)注候選區(qū)域檢測(cè)部341和顯示方式設(shè)定部343。關(guān)注候選區(qū)域檢測(cè)部341與可靠度計(jì)算部342和顯示方式設(shè)定部343連接。關(guān)注候選區(qū)域檢測(cè)部341的詳細(xì)情況在后面敘述??煽慷扔?jì)算部342與顯示方式設(shè)定部343連接。顯示方式設(shè)定部343與顯示部400連接。并且,控制部350與關(guān)注候選區(qū)域檢測(cè)部341、可靠度計(jì)算部342、顯示方式設(shè)定部343雙向連接,并對(duì)它們進(jìn)行控制。關(guān)注候選區(qū)域檢測(cè)部341根據(jù)控制部350的控制,從特殊光圖像中檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域。對(duì)關(guān)注候選區(qū)域檢測(cè)部341的具體結(jié)構(gòu)進(jìn)行說明。圖10是說明第I實(shí)施方式中的關(guān)注候選區(qū)域檢測(cè)部341的結(jié)構(gòu)的一例的框圖。如圖10所示,關(guān)注候選區(qū)域檢測(cè)部341具有局部區(qū)域設(shè)定部3411、特征量計(jì)算部3412、區(qū)域設(shè)定部3414。這里,特殊光圖像取得部330與局部區(qū)域設(shè)定部3411連接。局部區(qū)域設(shè)定部3411與特征量計(jì)算部3412連接。特征量計(jì)算部3412與區(qū)域設(shè)定部3414連接。區(qū)域設(shè)定部3414與可靠度計(jì)算部342和顯示方式設(shè)定部343連接。并且,控制部350與局部區(qū)域設(shè)定部3411、特征量計(jì)算部3412、區(qū)域設(shè)定部3414雙向連接,并對(duì)它們進(jìn)行控制。局部區(qū)域設(shè)定部3411針對(duì)從特殊光圖像取得部330輸出的特殊光圖像設(shè)定多個(gè)局部區(qū)域(狹義上為塊)。這里,例如將特殊光圖像分割成矩形區(qū)域,將分割后的各區(qū)域設(shè)定為局部區(qū)域。該矩形區(qū)域的尺寸可以適當(dāng)設(shè)定,但是,這里,例如如圖14所示,設(shè)16X16像素為I個(gè)局部區(qū)域。這里,設(shè)特殊光圖像由MXN個(gè)局部區(qū)域構(gòu)成,利用(m,n)表示各局部區(qū)域的坐標(biāo)。并且,坐標(biāo)(m,n)的局部區(qū)域表示為a (m,n)。這里,將位于圖像左上方的局部區(qū)域的坐標(biāo)表不為(0,0),將右方向表不為m的正方向,將下方向表不為n的正方向。局部區(qū)域不一定必須是矩形,當(dāng)然可以將特殊光圖像分割成任意多邊形,將分割后的各個(gè)區(qū)域設(shè)定為局部區(qū)域。并且,可以根據(jù)用戶的指示,任意設(shè)定局部區(qū)域。并且,這里,為了削減此后的計(jì)算量并去除噪聲,將由多個(gè)相鄰的像素群構(gòu)成的區(qū)域作為I個(gè)局部區(qū)域,但是,也可以將I個(gè)像素作為I個(gè)局部區(qū)域。該情況下,以后的處理也完全相同。特征量計(jì)算部3412針對(duì)所有的局部區(qū)域計(jì)算特征量。這里,作為特征量的一例,對(duì)利用顏色信息的情況進(jìn)行說明。在本實(shí)施方式中,在用作特殊光圖像的窄帶光圖像中,由于扁平上皮癌等病變部描繪成褐色的區(qū)域,所以通過使用色相H作為特征量,能夠檢測(cè)病變部。設(shè)局部區(qū)域a (m, n)的色相為H (m, n)0為了計(jì)算H (m, n),首先,使用各個(gè)局部區(qū)域中包含的所有像素,分別針對(duì)R、G、B通道計(jì)算平均信號(hào)值。這里,將局部區(qū)域a (m,n)中的R、G、B通道的平均信號(hào)值表記為R、G、B,各信號(hào)值為8比特(0 255)。接著,根據(jù)該平均信號(hào)值R、G、B,例如使用下式(3) (8)計(jì)算各局部區(qū)域的色相H (m,n)。max=MAX (r, g, b) ...... (3)這里,設(shè)MAX函數(shù)是輸出多個(gè)變量中的最大變量的函數(shù)。在MAX為0的情況下,
H=O...... (4)在MAX為0以外的情況下,d=MAX (r, g, b) -MIN (r, g, b) ...... (5)這里,設(shè)MIN函數(shù)是輸出多個(gè)變量中的最小變量的函數(shù)。進(jìn)而,在r、g、b中的r為最大的情況下,H=60* (g-b) /d...... (6)在r、g、b中的g為最大的情況下,H=60*{2+ (b-r) }/d...... (7)在r、g、b中的b為最大的情況下,H=60*{4+ (r-g) }/d...... (8)另外,在H〈0的情況下,在H中加上360。并且,在H=360的情況下,設(shè)H=0。接著,區(qū)域設(shè)定部3414使用針對(duì)所有局部區(qū)域計(jì)算出的色相H進(jìn)行閾值處理,設(shè)定關(guān)注候選區(qū)域。這里,由于將褐色的區(qū)域設(shè)定為關(guān)注區(qū)域,所以例如只要提取色相H為5 35的范圍內(nèi)的局部區(qū)域即可。進(jìn)而,區(qū)域設(shè)定部3414在提取出的局部區(qū)域彼此之間對(duì)相鄰的局部區(qū)域進(jìn)行合并處理,設(shè)處理結(jié)果所得到的各區(qū)域?yàn)殛P(guān)注候選區(qū)域(在一個(gè)局部區(qū)域的情況下也設(shè)為關(guān)注候選區(qū)域)。根據(jù)關(guān)注候選區(qū)域中包含的局部區(qū)域a (m,n)的坐標(biāo)和各局部區(qū)域包含的像素的信息,計(jì)算關(guān)注候選區(qū)域中包含的所有像素的位置,將其作為關(guān)注候選區(qū)域信息,輸出到可靠度計(jì)算部342和顯示方式設(shè)定部343。并且,區(qū)域設(shè)定部3414還可以重新設(shè)定關(guān)注候選區(qū)域信息,以使得所輸出的關(guān)注區(qū)域信息示出多邊形或圓形等任意形狀。作為例子,示出圖15 (A)、圖15 (B)。圖15 (A)、圖15 (B)示出特殊光圖像,虛線所包圍的一個(gè)一個(gè)的區(qū)域表示局部區(qū)域。在圖15 (A)中,在希望使與關(guān)注候選區(qū)域I對(duì)應(yīng)的關(guān)注候選區(qū)域的形狀為四邊形的情況下,首先,根據(jù)屬于關(guān)注候選區(qū)域I的局部區(qū)域a (m, n)的坐標(biāo)和各局部區(qū)域包含的像素的信息,計(jì)算關(guān)注候選區(qū)域I中包含的所有像素的位置。進(jìn)而,再次設(shè)定與這些像素的集合外接的四邊形作為關(guān)注候選區(qū)域,計(jì)算所設(shè)定的關(guān)注候選區(qū)域中包含的所有像素的位置,作為與關(guān)注候選區(qū)域I對(duì)應(yīng)的關(guān)注候選區(qū)域信息進(jìn)行輸出即可。通過進(jìn)行這種處理,能夠?qū)㈥P(guān)注候選區(qū)域重新設(shè)定成圖15 (B)所示的易于視覺辨認(rèn)的形狀。由此,能夠防止關(guān)注候選區(qū)域成為復(fù)雜的形狀,能夠提高視覺辨認(rèn)性。
上述實(shí)施方式的關(guān)注候選區(qū)域檢測(cè)部使用第2圖像內(nèi)的像素的特征量,從第2圖像中檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域,但是,作為變形例,也可以使用第2圖像內(nèi)的像素的特征量,從第I圖像中檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域。具體而言,局部區(qū)域設(shè)定部3411在第2圖像上設(shè)定多個(gè)局部區(qū)域。特征量計(jì)算部3412針對(duì)該設(shè)定的各局部區(qū)域計(jì)算特征量。此時(shí),特征量計(jì)算部3412使用與各局部區(qū)域中包含的第2圖像上的像素對(duì)應(yīng)的第I圖像上的像素(例如在第I圖像和第2圖像上位于同一像素位置的像素)的特征量,進(jìn)行上述閾值處理。區(qū)域設(shè)定部3414根據(jù)通過閾值處理而提取出的第I圖像上的局部區(qū)域,在第I圖像上設(shè)定關(guān)注候選區(qū)域。另外,在關(guān)注候選區(qū)域的設(shè)定時(shí),也可以根據(jù)需要進(jìn)行上述局部區(qū)域的合并處理。并且,局部區(qū)域設(shè)定部3411將16X16像素的區(qū)域作為局部區(qū)域,但是,也可以不 設(shè)定局部區(qū)域,如上所述將I個(gè)像素作為局部區(qū)域。該情況下,特征量計(jì)算部3412計(jì)算每個(gè)像素的特征量。區(qū)域設(shè)定部3414根據(jù)特征量檢測(cè)應(yīng)該關(guān)注的像素即關(guān)注像素。然后,檢測(cè)包含關(guān)注像素的區(qū)域作為關(guān)注候選區(qū)域。這樣,在從關(guān)注像素中檢測(cè)關(guān)注候選區(qū)域的情況下,也可以重新設(shè)定關(guān)注候選區(qū)域信息,以使得所輸出的關(guān)注區(qū)域信息示出多邊形或圓形等任意形狀。具體而言,只要由關(guān)注像素和選擇非關(guān)注像素構(gòu)成關(guān)注候選區(qū)域即可。這里,非關(guān)注像素是第2圖像所包含的像素中的未檢測(cè)為關(guān)注像素的像素,選擇非關(guān)注像素是從非關(guān)注像素中選擇出的(具體而言,例如以使關(guān)注候選區(qū)域?yàn)橐?guī)定形狀的方式選擇出的)像素。并且,這里,也可以代替色相H而使用公知的方法計(jì)算局部區(qū)域的平均亮度或彩度,將這些值作為特征量來檢測(cè)關(guān)注候選區(qū)域。進(jìn)而,當(dāng)然也可以通過任意地組合這些亮度、色相、彩度的信息,計(jì)算I個(gè)特征量來檢測(cè)關(guān)注候選區(qū)域??煽慷扔?jì)算部342通過對(duì)關(guān)注候選區(qū)域附加標(biāo)簽信息,對(duì)多個(gè)不同的關(guān)注候選區(qū)域彼此之間進(jìn)行識(shí)別。例如如圖15 (A)所示,在存在2個(gè)關(guān)注候選區(qū)域的情況下,可靠度計(jì)算部342針對(duì)屬于關(guān)注候選區(qū)域I的局部區(qū)域,設(shè)標(biāo)簽的值為1,針對(duì)屬于關(guān)注候選區(qū)域2的局部區(qū)域,設(shè)標(biāo)簽的值為2。進(jìn)而,可靠度計(jì)算部342根據(jù)對(duì)各局部區(qū)域附加的標(biāo)簽的信息,計(jì)算屬于各關(guān)注候選區(qū)域的局部區(qū)域的數(shù)量,從而計(jì)算關(guān)注候選區(qū)域的面積,通過對(duì)面積進(jìn)行閾值處理來計(jì)算可靠度。例如,關(guān)于圖15 (A)的關(guān)注候選區(qū)域I和關(guān)注候選區(qū)域2的面積dl和d2,當(dāng)設(shè)I個(gè)局部區(qū)域的面積為I時(shí),dl=9, d2=2。此時(shí),例如設(shè)面積為5以上的關(guān)注候選區(qū)域的可靠度為1,設(shè)面積小于5的關(guān)注候選區(qū)域的可靠度為O。接著,可靠度計(jì)算部342向顯示方式設(shè)定部343輸出可靠度。另外,在本實(shí)施例中,根據(jù)屬于關(guān)注候選區(qū)域的局部區(qū)域的數(shù)量計(jì)算面積,從而計(jì)算可靠度,但是,也可以計(jì)算關(guān)注區(qū)域候選的平均色相、彩度、亮度,使用它們計(jì)算可靠度。進(jìn)而,當(dāng)然也可以組合關(guān)注候選區(qū)域的面積和色相、彩度、亮度來計(jì)算可靠度。顯示方式設(shè)定部343根據(jù)關(guān)注候選區(qū)域信息和可靠度設(shè)定關(guān)注區(qū)域。然后,針對(duì)通常光圖像的對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行基于顏色轉(zhuǎn)換的加工處理。然后,選擇要在顯示部400中顯示的圖像并輸出。根據(jù)情況,也可以從優(yōu)先度高的關(guān)注區(qū)域起設(shè)定警告區(qū)域。接著,對(duì)顯示方式設(shè)定部343的具體結(jié)構(gòu)進(jìn)行說明。圖11是說明本實(shí)施方式中的顯示方式設(shè)定部343的結(jié)構(gòu)的一例的框圖。顯示方式設(shè)定部343具有加工部3431和選擇部 3432。這里,關(guān)注候選區(qū)域檢測(cè)部341向加工部3431輸出關(guān)注候選區(qū)域信息。并且,關(guān)注候選區(qū)域檢測(cè)部341向選擇部3432輸出是否檢測(cè)到關(guān)注候選區(qū)域的控制信號(hào)。從通常光圖像取得部320輸出的圖像信號(hào)被輸入到加工部3431和選擇部3432。并且,從特殊光圖像取得部330輸出的圖像信號(hào)被輸入到加工部3431和選擇部3432。加工部3431根據(jù)控制部350的控制,使用從關(guān)注候選區(qū)域檢測(cè)部341輸出的關(guān)注候選區(qū)域信息和從可靠度計(jì)算部342輸入的可靠度,對(duì)通常光圖像進(jìn)行加工。進(jìn)而,加工部3431向選擇部3432輸出加工后的通常光圖像。并且,控制部350與加工部3431和選擇部3432雙向連接,并對(duì)它們進(jìn)行控制。加工部3431根據(jù)關(guān)注區(qū)域的檢測(cè)結(jié)果,對(duì)與檢測(cè)到的特殊光圖像的關(guān)注區(qū)域?qū)?yīng)的通常光圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行加工。加工部的詳細(xì)情況在后面敘述。選擇部3432使用來自關(guān)注候選區(qū)域檢測(cè)部341的控制信號(hào),選擇要輸出到顯示部 400的顯示圖像。例如,在沒有從特殊光圖像檢測(cè)到關(guān)注候選區(qū)域的情況下,選擇從通常光圖像取得部320輸出的通常光圖像作為顯示圖像,在從特殊光圖像檢測(cè)到關(guān)注候選區(qū)域的情況下,選擇從加工部3431輸出的加工后的通常光圖像作為顯示圖像。并且,例如在沒有從特殊光圖像檢測(cè)到關(guān)注候選區(qū)域的情況下,選擇從通常光圖像取得部320輸出的通常光圖像作為顯示圖像,在從特殊光圖像檢測(cè)到關(guān)注候選區(qū)域的情況下,也可以選擇從特殊光圖像取得部330輸出的特殊光圖像作為顯示圖像。關(guān)于在檢測(cè)到關(guān)注候選區(qū)域的情況下和未檢測(cè)到關(guān)注候選區(qū)域的情況下選擇什么樣的圖像,例如由用戶預(yù)先決定,根據(jù)從控制部350向選擇部3432輸入的控制信號(hào)進(jìn)行控制即可。接著,對(duì)加工部3431的具體結(jié)構(gòu)進(jìn)行說明。圖12是說明第I實(shí)施方式中的加工部3431的結(jié)構(gòu)的一例的框圖。如圖12所示,加工部3431具有區(qū)域選出部34313、區(qū)域加工部34314、亮度轉(zhuǎn)換部34315。區(qū)域選出部34313根據(jù)從關(guān)注候選區(qū)域檢測(cè)部341輸入的關(guān)注候選區(qū)域信息和從可靠度計(jì)算部342輸入的可靠度,選出關(guān)注區(qū)域。具體而言,首先,從關(guān)注候選區(qū)域中提取具有預(yù)先設(shè)定的閾值以上的可靠度的區(qū)域。例如在將可靠度為I的關(guān)注候選區(qū)域檢測(cè)為關(guān)注區(qū)域時(shí),在圖15 (A)中,僅將屬于關(guān)注候選區(qū)域I的局部區(qū)域檢測(cè)為關(guān)注區(qū)域。通過進(jìn)行這種處理,能夠?qū)⑽⑿∶娣e的關(guān)注候選區(qū)域作為噪聲而排除,能夠選出可靠度高的關(guān)注區(qū)域。并且,設(shè)定與選出的關(guān)注區(qū)域?qū)?yīng)的第I圖像內(nèi)的區(qū)域作為對(duì)應(yīng)關(guān)注區(qū)域。然后,輸出對(duì)應(yīng)關(guān)注區(qū)域的像素的信息作為對(duì)應(yīng)關(guān)注區(qū)域信息。區(qū)域加工部34314例如針對(duì)通常光圖像中的作為對(duì)應(yīng)關(guān)注區(qū)域信息而輸入的像素,使用以下的式(9) (11)進(jìn)行顏色轉(zhuǎn)換處理。這里,r (x,y)、g (x,y)、b (x, y)是顏色轉(zhuǎn)換前的通常光圖像的坐標(biāo)(x, y)中的R、G、B通道的信號(hào)值,r_out (x, y)、g_out (x,y)>b_out (x,y)是顏色轉(zhuǎn)換后的通常光圖像的R、G、B通道的信號(hào)值。并且,T_r、T_g、T_b是任意目標(biāo)顏色的R、G、B信號(hào)值,gain是0 I的任意系數(shù)。r_out (X,y) =gain*r (x, y) + (1-gain) *T_r...... (9)g_out (x, y) =gain*g (x, y) + (1-gain) *T_g...... (10)b_out (x, y) =gain*b (x, y) + (1-gain) *T_b...... (11)通過進(jìn)行這種處理,觀察圖16 (B)所示的特殊光圖像時(shí)懷疑為病變部的關(guān)注區(qū)域如圖16 (C)所示,在通常光圖像中顯示為顏色不同的區(qū)域,在使用通常光圖像和特殊光圖像進(jìn)行診斷時(shí),能夠降低醫(yī)生的負(fù)擔(dān),并且能夠抑制病變部的遺漏。并且,區(qū)域加工部34314例如針對(duì)通常光圖像中的構(gòu)成對(duì)應(yīng)關(guān)注區(qū)域的邊界的所有像素,也可以使用以下的式(12) (14)進(jìn)行顏色轉(zhuǎn)換處理。r_out (x, y) =T_r...... (12)g_out (x, y) =T_g...... (13)b_out (x, y) =T_b...... (14)通過進(jìn)行這種處理,如圖16 (D)所示,在通常光圖像中,對(duì)應(yīng)關(guān)注區(qū)域顯示為由任意目標(biāo)顏色包圍的部分。亮度轉(zhuǎn)換部34315例如針對(duì)通常光圖像中的對(duì)應(yīng)關(guān)注區(qū)域中未包含的所有像素, 也可以進(jìn)行以下的式(15) (17)的亮度轉(zhuǎn)換處理。r_out (x, y) =gain*r (x, y) ...... (15)g_out (x,y)=gain*g (x, y) ...... (16)b_out (x, y) =gain*b (x, y) ...... (17)通過進(jìn)行這種處理,如圖16 (E)所示,通過使通常光圖像中的對(duì)應(yīng)關(guān)注區(qū)域中未包含的區(qū)域變暗,能夠?qū)?duì)應(yīng)關(guān)注區(qū)域顯示為相對(duì)明亮的部分。接著,對(duì)根據(jù)優(yōu)先度設(shè)定警告區(qū)域的情況下的加工部3431的具體結(jié)構(gòu)進(jìn)行說明。圖13是說明設(shè)定警告區(qū)域的情況下的加工部3431的結(jié)構(gòu)的一例的框圖。如圖13所示,力口工部3431具有區(qū)域選出部34313、區(qū)域加工部34314、亮度轉(zhuǎn)換部34315。區(qū)域選出部34313根據(jù)從關(guān)注候選區(qū)域檢測(cè)部341輸入的關(guān)注候選區(qū)域信息和從可靠度計(jì)算部342輸入的可靠度,選出關(guān)注區(qū)域。然后,設(shè)定與選出的關(guān)注區(qū)域?qū)?yīng)的第I圖像內(nèi)的區(qū)域作為對(duì)應(yīng)關(guān)注區(qū)域。進(jìn)而,根據(jù)關(guān)注區(qū)域和從優(yōu)先度設(shè)定部345(包含在輸出圖像生成部340中。圖9中未圖示)輸入的優(yōu)先度,設(shè)定警告區(qū)域。然后,輸出警告區(qū)域的像素的信息作為警告區(qū)域信息。這里,優(yōu)先度表示應(yīng)該優(yōu)先顯示的程度,例如根據(jù)可靠度、像素的特征量、應(yīng)該關(guān)注的程度等進(jìn)行設(shè)定。另外,應(yīng)該關(guān)注的程度在后面的第2實(shí)施例中進(jìn)行敘述。區(qū)域選出部34313保持與警告區(qū)域的上限數(shù)有關(guān)的信息。在預(yù)測(cè)為警告區(qū)域的數(shù)量超過上限數(shù)的情況下,不將超過上限數(shù)的關(guān)注區(qū)域設(shè)定為警告區(qū)域。由此,能夠抑制醫(yī)生在一次識(shí)別時(shí)顯示數(shù)量過多的區(qū)域的情況。區(qū)域加工部34314進(jìn)行上述式(9) (14)的顏色轉(zhuǎn)換處理。并且,保持與警告區(qū)域的加工處理的優(yōu)先度有關(guān)的信息。而且,在存在多個(gè)警告區(qū)域的情況下,從優(yōu)先度高的警告區(qū)域起依次進(jìn)行加工處理。并且,加工部3431不限于所述處理,當(dāng)然可以使用任意的亮度轉(zhuǎn)換或顏色轉(zhuǎn)換處理,對(duì)通常光圖像的對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行加工。進(jìn)而,加工部3431不僅對(duì)通常光圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域?qū)嵤╊伾D(zhuǎn)換或亮度轉(zhuǎn)換,還可以如圖16 (F)所示,在通常光圖像附近顯示關(guān)注區(qū)域的部分的特殊光圖像。并且,也可以將關(guān)注區(qū)域的部分的特殊光圖像置換為對(duì)應(yīng)關(guān)注區(qū)域的部分的通常光圖像來進(jìn)行顯不。并且,在本實(shí)施方式中,構(gòu)成圖像處理部300的各部由硬件構(gòu)成,但是不限于此。例如構(gòu)成為,針對(duì)使用膠囊內(nèi)窺鏡等攝像裝置預(yù)先取得的圖像,CPU進(jìn)行各部的處理,通過(PU執(zhí)行程序,也可以作為軟件來實(shí)現(xiàn)?;蛘?,也可以利用軟件構(gòu)成各部進(jìn)行的處理的一部分。在獨(dú)立于攝像部而作為軟件來實(shí)現(xiàn)圖像處理部300的各部進(jìn)行的處理的情況下,能夠?qū)⒐ぷ髡净騻€(gè)人計(jì)算機(jī)等公知的計(jì)算機(jī)系統(tǒng)用作圖像處理裝置。而且,也可以預(yù)先準(zhǔn)備用于實(shí)現(xiàn)圖像處理部300的各部進(jìn)行的處理的程序(圖像處理程序),通過計(jì)算機(jī)系統(tǒng)的CPU執(zhí)行該圖像處理程序來實(shí)現(xiàn)。圖17是示出本變形例中的計(jì)算機(jī)系統(tǒng)600的結(jié)構(gòu)的系統(tǒng)結(jié)構(gòu)圖,圖18是示出該計(jì)算機(jī)系統(tǒng)600中的主體部610的結(jié)構(gòu)的框圖。如圖17所示,計(jì)算機(jī)系統(tǒng)600具有主體部610、用于根據(jù)來自主體部610的指示而在顯示畫面621中顯示圖像等信息的顯示器620、用于對(duì)該計(jì)算機(jī)系統(tǒng)600輸入各種信息的鍵盤630、用于指定顯示器620的顯示畫面621上的任意位置的鼠標(biāo)640。并且,如圖18所示,該計(jì)算機(jī)系統(tǒng)600中的主體部610具有CPU 611、RAM 612、ROM 613、硬盤驅(qū)動(dòng)器(HDD)614、收納⑶-ROM 660的⑶-ROM驅(qū)動(dòng)器615、以能夠裝卸的方式與USB存儲(chǔ)器670連接的USB端口 616、連接顯示器620、鍵盤630和鼠標(biāo)640的I/O接口617、以及用于與局域網(wǎng)或廣域網(wǎng)(LAN/WAN)N1連接的LAN接口 618。進(jìn)而,在該計(jì)算機(jī)系統(tǒng)600中連接有用于與因特網(wǎng)等公共線路N3連接的調(diào)制解調(diào)器650,并且,經(jīng)由LAN接口 618和局域網(wǎng)或廣域網(wǎng)NI連接有作為其他計(jì)算機(jī)系統(tǒng)的個(gè)人計(jì)算機(jī)(PC) 681、服務(wù)器682、打印機(jī)683等。而且,該計(jì)算機(jī)系統(tǒng)600通過讀出在規(guī)定記錄介質(zhì)中記錄的圖像處理程序(例如用于參照?qǐng)D19 圖23實(shí)現(xiàn)后述處理順序的圖像處理程序)并執(zhí)行,實(shí)現(xiàn)圖像處理裝置。這里,關(guān)于規(guī)定記錄介質(zhì),除了⑶-ROM 660和USB存儲(chǔ)器670以外,還包括如下的記錄可通過計(jì)算機(jī)系統(tǒng)600讀取的圖像處理程序的所有記錄介質(zhì)包含MO盤、DVD盤、軟盤(FD)、光磁盤、IC卡等的“可移動(dòng)用的物理介質(zhì)”;計(jì)算機(jī)系統(tǒng)600內(nèi)外具有的HDD 614、RAM 612、R0M613等的“固定用的物理介質(zhì)”;如經(jīng)由調(diào)制解調(diào)器650連接的公共線路N3、連接有其他計(jì)算機(jī)系統(tǒng)(PC)681或服務(wù)器682的局域網(wǎng)或廣域網(wǎng)NI等那樣,在發(fā)送程序時(shí)在短期內(nèi)存儲(chǔ)程序的“通信介質(zhì)”等。S卩,圖像處理程序以計(jì)算機(jī)可讀取的方式記錄在“可移動(dòng)用的物理介質(zhì)”、“固定用的物理介質(zhì)”、“通信介質(zhì)”等記錄介質(zhì)中,計(jì)算機(jī)系統(tǒng)600通過從這種記錄介質(zhì)讀出圖像處理程序并執(zhí)行,實(shí)現(xiàn)圖像處理裝置。另外,圖像處理程序不限于由計(jì)算機(jī)系統(tǒng)600執(zhí)行,在其他計(jì)算機(jī)系統(tǒng)(PC) 681或服務(wù)器682執(zhí)行圖像處理程序的情況下、或者在它們協(xié)作執(zhí)行圖像處理程序的情況下,也能夠同樣應(yīng)用本發(fā)明。作為利用軟件構(gòu)成各部進(jìn)行的處理的一部分的情況的一例,使用圖19的流程圖說明針對(duì)預(yù)先取得的通常光圖像和特殊光圖像、利用軟件實(shí)現(xiàn)圖9的輸出圖像生成部340的處理的情況下的處理順序。開始進(jìn)行該處理后,首先,針對(duì)時(shí)序的通常光圖像和特殊光圖像,輸入攝影模式或照明光的同步信號(hào)等標(biāo)題(Header)信息(S11)。接著,將特殊光圖像和通常光圖像輸入到預(yù)先確保的圖像緩存中(S12)。然后,如后面參照?qǐng)D20詳細(xì)說明的那樣,從特殊光圖像中檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域(S13)。
接著,作為各關(guān)注候選區(qū)域的可靠度,計(jì)算各關(guān)注區(qū)域候選的面積(S14)。然后,如后面參照?qǐng)D21詳細(xì)說明的那樣,根據(jù)關(guān)注候選區(qū)域的檢測(cè)結(jié)果,在特殊光圖像(第2圖像)內(nèi)選出關(guān)注區(qū)域,進(jìn)行提高與關(guān)注區(qū)域?qū)?yīng)的通常光圖像(第I圖像)內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的顯示方式設(shè)定處理(S15)。接著,輸出決定了顯示方式的圖像信號(hào)(S16)。然后,以時(shí)序判定最終圖像的處理是否結(jié)束(S17),在判定為沒有結(jié)束的情況下,返回S12,針對(duì)下一個(gè)圖像信號(hào)反復(fù)進(jìn)行上述處理。另一方面,在判定為全部圖像信號(hào)的處理結(jié)束的情況下,結(jié)束該處理。接著,參照?qǐng)D20對(duì)圖19的S13中的關(guān)注候選區(qū)域檢測(cè)處理的詳細(xì)情況進(jìn)行說明。開始進(jìn)行該處理后,首先,將特殊光圖像(第2圖像)分割成局部區(qū)域(S21)。該情況下,將特殊光圖像分割成矩形區(qū)域。該矩形區(qū)域的尺寸可以適當(dāng)設(shè)定,但是,這里,例如設(shè)為16X16
像素單位。接著,依次提取分割后的局部區(qū)域,如前面式(3) (8)所述的那樣,計(jì)算表示疑似病變程度的特征量(S22 )。接著,按照每個(gè)局部區(qū)域?qū)τ?jì)算出的局部區(qū)域的特征量和給定閾值進(jìn)行比較,提取滿足閾值條件的各局部區(qū)域。在滿足條件的局部區(qū)域相鄰的情況下,對(duì)它們進(jìn)行合并而生成局部區(qū)域群,檢測(cè)包含該局部區(qū)域群(包括一個(gè)局部區(qū)域的情況)的區(qū)域作為關(guān)注候選區(qū)域(S23)。然后,輸出表示是否檢測(cè)到關(guān)注候選區(qū)域的標(biāo)志信息(S24)。接著,參照?qǐng)D21對(duì)圖19的S15中的顯示方式設(shè)定處理的詳細(xì)情況進(jìn)行說明。開始進(jìn)行該處理后,首先,如后面參照?qǐng)D22詳細(xì)說明的那樣,根據(jù)關(guān)注候選區(qū)域的檢測(cè)結(jié)果和可靠度,在特殊光圖像(第2圖像)內(nèi)選出關(guān)注區(qū)域,進(jìn)行提高與選出的關(guān)注區(qū)域?qū)?yīng)的通常光圖像(第I圖像)內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的加工處理(S31)。接著,選擇輸出圖像的顯示方式(S32)。具體而言,選擇從特殊光圖像中檢測(cè)到關(guān)注區(qū)域的情況下的輸出圖像。檢測(cè)到關(guān)注區(qū)域的情況下的輸出圖像是用戶從特殊光圖像或通過S31加工后的通常光圖像的某一方中預(yù)先選擇出的。接著,參照?qǐng)D22對(duì)圖21的S31中的加工處理的詳細(xì)情況進(jìn)行說明。開始進(jìn)行該處理后,首先,從檢測(cè)到的關(guān)注候選區(qū)域中選出可靠度高于給定閾值的區(qū)域作為關(guān)注區(qū)域,從通常光圖像中提取與關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域(S33)。然后,根據(jù)關(guān)注區(qū)域的檢測(cè)結(jié)果,進(jìn)行提高與檢測(cè)到的特殊光圖像內(nèi)的關(guān)注區(qū)域?qū)?yīng)的通常光圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的加工。這里,可以如前面式(9) (11)所述的那樣,進(jìn)行使對(duì)應(yīng)關(guān)注區(qū)域全體接近給定目標(biāo)顏色的處理,也可以如前面式(12)
(14)所述的那樣,進(jìn)行利用目標(biāo)顏色包圍對(duì)應(yīng)關(guān)注區(qū)域的周緣的處理(S34)。然后,如前面式(15)所述的那樣,也可以進(jìn)行降低對(duì)應(yīng)關(guān)注區(qū)域以外的區(qū)域中包含的像素的亮度的處理(S35)。通過進(jìn)行這種處理,觀察圖16 (B)所示的特殊光圖像時(shí)懷疑為病變部的關(guān)注區(qū)域如圖16 (C)所示,在通常光圖像中重疊顯示為顏色不同的區(qū)域。并且,在進(jìn)行了 S35的處理的情況下,如圖16 (E)所示,較暗地顯示警告區(qū)域以外的區(qū)域。由此,在使用通常光圖像和特殊光圖像進(jìn)行診斷時(shí),能夠降低醫(yī)生的負(fù)擔(dān),并且,能夠抑制病變部的遺漏。接著,參照?qǐng)D23對(duì)在圖21的S31的加工處理中根據(jù)優(yōu)先度設(shè)定警告區(qū)域的情況進(jìn)行說明。開始進(jìn)行該處理后,首先,從檢測(cè)到的關(guān)注候選區(qū)域中選出可靠度高于給定閾值的區(qū)域作為關(guān)注區(qū)域,從通常光圖像中提取與關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域(S36)。進(jìn)而,從提取出的關(guān)注區(qū)域中按照優(yōu)先度從高到低的順序進(jìn)行提取。要提取的關(guān)注區(qū)域的數(shù)量由用戶預(yù)先設(shè)定。設(shè)提取出的關(guān)注區(qū)域?yàn)榫鎱^(qū)域(S37)。S38的顏色轉(zhuǎn)換處理與圖22的S34相同,S39的亮度轉(zhuǎn)換處理與圖22的S35相同。在以上的本實(shí)施方式中,第I圖像取得部(狹義上為通常光圖像取得部320)取得與白色光的波段對(duì)應(yīng)的第I圖像(狹義上為白色光圖像),第2圖像取得部(狹義上為特殊光圖像取得部330)取得與特定波段(狹義上為窄帶光或熒光等的波段)對(duì)應(yīng)的第2圖像(狹義上為窄帶圖像或熒光圖像等特殊光圖像)。而且,關(guān)注候選區(qū)域檢測(cè)部341根據(jù)第2圖像的特征量設(shè)定關(guān)注候選區(qū)域??煽慷扔?jì)算部342計(jì)算可靠度,根據(jù)計(jì)算出的可靠度,顯示方式設(shè)定部343進(jìn)行設(shè)定關(guān)注區(qū)域中的輸出圖像的顯示方式的處理。
這里,關(guān)注區(qū)域是對(duì)用戶來說觀察的優(yōu)先順序與其他區(qū)域相比相對(duì)較高的區(qū)域,例如,在用戶是醫(yī)生且希望進(jìn)行治療的情況下,關(guān)注區(qū)域是指拍攝了粘膜部或病變部的區(qū)域。并且,作為其他例子,如果醫(yī)生希望觀察的對(duì)象是氣泡或糞便,則關(guān)注區(qū)域成為拍攝了該氣泡部分或糞便部分的區(qū)域。即,用戶應(yīng)該關(guān)注的對(duì)象由于其觀察目的而不同,但是,無論怎樣,在其觀察時(shí),對(duì)用戶來說觀察的優(yōu)先順序與其他區(qū)域相比相對(duì)較高的區(qū)域成為關(guān)注區(qū)域。關(guān)注候選區(qū)域是作為關(guān)注區(qū)域的候選的區(qū)域??煽慷仁潜硎娟P(guān)注候選區(qū)域是關(guān)注區(qū)域的確定程度的尺度,例如使用關(guān)注候選區(qū)域的面積等。由此,在取得通常光圖像(白色光圖像)和特殊光圖像(窄帶圖像或熒光圖像等)后,能夠在特殊光圖像中設(shè)定關(guān)注候選區(qū)域。而且,根據(jù)可靠度,從關(guān)注候選區(qū)域設(shè)定關(guān)注區(qū)域,設(shè)定關(guān)注區(qū)域中的顯示方式(例如接近目標(biāo)顏色等),由此,與沒有可靠度的情況相t匕,能夠提高關(guān)注區(qū)域的精度(例如可靠地捕捉病變部作為關(guān)注區(qū)域的精度等),而且,能夠提高關(guān)注區(qū)域的視覺辨認(rèn)性。由此,例如在內(nèi)窺鏡中使用通常光和特殊光對(duì)活體內(nèi)進(jìn)行觀察的情況下,能夠利用特殊光觀察可靠地捕捉在通常光中很難視覺辨認(rèn)的病變部,而且,與不使用本實(shí)施方式的方法的情況相比,能夠以視覺辨認(rèn)性高的方式顯示包含該病變部的區(qū)域,能夠減輕醫(yī)生的負(fù)擔(dān),抑制病變部的遺漏。并且,顯示方式設(shè)定部343設(shè)定與第2圖像的關(guān)注區(qū)域?qū)?yīng)的第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域,進(jìn)行提高所設(shè)定的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的顯示方式設(shè)定處理。這里,對(duì)應(yīng)關(guān)注區(qū)域是第I圖像內(nèi)的區(qū)域,是在位置上與第2圖像內(nèi)的關(guān)注區(qū)域?qū)?yīng)的區(qū)域。例如在由于攝像元件的差異而在第I圖像和第2圖像中使圖像位置偏移的情況下,進(jìn)行適當(dāng)?shù)男?zhǔn)處理后設(shè)定對(duì)應(yīng)關(guān)注區(qū)域。由此,能夠設(shè)定與在第2圖像中設(shè)定的關(guān)注區(qū)域?qū)?yīng)的第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域。具體而言,例如能夠適當(dāng)?shù)恼莆张c利用特殊光圖像檢測(cè)到的病變部對(duì)應(yīng)的第I圖像內(nèi)的位置。而且,與未加工的第I圖像相比,通過提高對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性,能夠抑制對(duì)應(yīng)關(guān)注區(qū)域的遺漏(具體而言為病變部的遺漏)。并且,顯示方式設(shè)定部343包括根據(jù)可靠度和從第2圖像中得到的關(guān)注候選區(qū)域信息對(duì)第I圖像進(jìn)行加工的加工部3431,設(shè)由加工部3431加工后的第I圖像為輸出圖像的方式。由此,作為輸出圖像,例如能夠選擇對(duì)通常光圖像進(jìn)行加工后的圖像。具體而言,例如考慮如下的加工如圖16 (C)所示使關(guān)注區(qū)域接近給定目標(biāo)顏色,或者如圖16 (D)所示利用目標(biāo)顏色包圍關(guān)注區(qū)域的周緣。通過這種加工,能夠提高視覺辨認(rèn)性,減輕醫(yī)生的負(fù)擔(dān),抑制病變部的遺漏。并且,在可靠度高的情況下,加工部3431進(jìn)行提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的加工處理。這里,例如考慮通過與給定閾值進(jìn)行比較等來判斷可靠度的高低。由此,在可靠度高的情況下(具體而言,例如確定關(guān)注候選區(qū)域是病變部的情況下),進(jìn)行提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的加工,能夠抑制病變部的遺漏等。并且,作為加工處理,加工部3431也可以進(jìn)行轉(zhuǎn)換處理。由此,通過轉(zhuǎn)換處理,能夠提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性。這里,轉(zhuǎn)換處理考慮顏色轉(zhuǎn)換處理和亮度轉(zhuǎn)換處理。詳細(xì)情況在后面敘述。并且,作為加工處理,加工部3431也可以進(jìn)行將關(guān)注區(qū)域的部分的圖像與第I圖像相關(guān)聯(lián)的處理。由此,通過關(guān)聯(lián),能夠提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性。這里,所謂關(guān)聯(lián),考慮如下處理等具體而言,在第I圖像的附近顯示關(guān)注區(qū)域的部分圖像,或者利用第2圖像的關(guān)注區(qū)域的部分圖像置換第I圖像的對(duì)應(yīng)關(guān)注區(qū)域的部分圖像。詳細(xì)情況在后面敘述。并且,加工部3431包括區(qū)域選出部34313。區(qū)域選出部34313根據(jù)可靠度,從關(guān)注候選區(qū)域檢測(cè)部341所檢測(cè)到的關(guān)注候選區(qū)域中選出關(guān)注區(qū)域。由此,能夠?qū)⒖煽慷茸鳛槌叨?,從關(guān)注候選區(qū)域中選出關(guān)注區(qū)域。如上所述,作為可靠度,考慮區(qū)域的面積、色相、彩度、亮度等或它們的組合。由此,具體而言,能夠根據(jù)面積的大小、色相、彩度、亮度的值等多種觀點(diǎn)選出關(guān)注區(qū)域。區(qū)域選出部34313也可以根據(jù)優(yōu)先度,從關(guān)注區(qū)域中選出警告區(qū)域。由此,能夠根據(jù)與可靠度不同的觀點(diǎn)(根據(jù)情況,根據(jù)同一觀點(diǎn)再次進(jìn)行選出處理)進(jìn)行選出處理,能夠選出更加符合目的的區(qū)域。這里,優(yōu)先度可以根據(jù)可靠度、像素的特征量和應(yīng)該關(guān)注的程度中的至少一個(gè)信息進(jìn)行設(shè)定。由此,作為區(qū)域選出的尺度,可靠度自不必說,還能夠采用像素的特征量(例如彩度/亮度)、應(yīng)該關(guān)注的程度(詳細(xì)情況與后述的關(guān)注信息設(shè)定部34311相關(guān)聯(lián)地進(jìn)行說明),能夠根據(jù)多種觀點(diǎn)選出區(qū)域。并且,區(qū)域選出部34313也可以保持與警告區(qū)域的上限數(shù)有關(guān)的信息,在預(yù)測(cè)為警告區(qū)域超過上限數(shù)的情況下,不設(shè)定上限數(shù)以上的數(shù)量的警告區(qū)域。由此,能夠抑制顯示必要以上的數(shù)量(例如醫(yī)生很難一次掌握的數(shù)量)的警告區(qū)域的情況,能夠?qū)崿F(xiàn)順暢的利用(例如診斷/治療)。并且,加工部3431包括區(qū)域加工部34314。區(qū)域加工部34314也可以保持與警告區(qū)域的加工處理的優(yōu)先度有關(guān)的信息,從優(yōu)先度高的警告區(qū)域起依次進(jìn)行加工處理。由此,從優(yōu)先度高(具體而言考慮是病變的可能性高、或者是深度病變的情況)的區(qū)域起進(jìn)行加工處理,能夠?qū)崿F(xiàn)高效的診斷/治療。并且,可靠度計(jì)算部342也可以根據(jù)關(guān)注候選區(qū)域的面積計(jì)算可靠度。
由此,檢測(cè)面積大的區(qū)域作為關(guān)注區(qū)域,由于面積小的區(qū)域不檢測(cè)為關(guān)注區(qū)域,所以能夠減輕噪聲的影響。
并且,可靠度計(jì)算部342也可以根據(jù)關(guān)注候選區(qū)域內(nèi)的像素的特征量計(jì)算可靠度。由此,除了面積以外,還能夠根據(jù)色相、亮度、彩度等各種觀點(diǎn)計(jì)算可靠度。并且,關(guān)注候選區(qū)域檢測(cè)部341包括將第2圖像分割成規(guī)定局部區(qū)域的局部區(qū)域設(shè)定部3411、以及使用局部區(qū)域內(nèi)的像素計(jì)算每個(gè)局部區(qū)域的特征量的特征量計(jì)算部3412,根據(jù)每個(gè)局部區(qū)域的特征量檢測(cè)關(guān)注候選區(qū)域。由此,按照每個(gè)局部區(qū)域計(jì)算特征量,檢測(cè)關(guān)注候選區(qū)域。作為局部區(qū)域,例如如圖14所示,如果采用16像素X 16像素的區(qū)域,則與利用I個(gè)像素單位進(jìn)行計(jì)算的情況相t匕,能夠削減計(jì)算量。并且,由于利用16X16單位設(shè)定區(qū)域,所以比局部區(qū)域小的病變不容易被檢測(cè)為關(guān)注候選區(qū)域,能夠減輕噪聲的影響。并且,關(guān)注候選區(qū)域檢測(cè)部341也可以包括將第I圖像分割成規(guī)定局部區(qū)域的局 部區(qū)域設(shè)定部3411、以及使用與局部區(qū)域內(nèi)的像素對(duì)應(yīng)的第2圖像的像素計(jì)算每個(gè)局部區(qū)域的特征量的特征量計(jì)算部3412,從第I圖像中檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域。由此,也能夠在第I圖像中設(shè)定關(guān)注候選區(qū)域,能夠提高處理的靈活性。并且,關(guān)注候選區(qū)域檢測(cè)部341也可以根據(jù)第2圖像中包含的像素的特征量,檢測(cè)關(guān)注像素,檢測(cè)包含檢測(cè)到的關(guān)注像素的區(qū)域作為關(guān)注候選區(qū)域。由此,不設(shè)定局部區(qū)域,能夠進(jìn)行像素單位的處理。也可以采用省略局部區(qū)域設(shè)定部3411的結(jié)構(gòu),在剩余部分中進(jìn)行按照每個(gè)局部區(qū)域、每個(gè)像素的某一方的處理。在按照每個(gè)像素進(jìn)行處理的情況下,可以認(rèn)為局部區(qū)域設(shè)定部3411設(shè)定IX I的局部區(qū)域。這里,關(guān)注像素是應(yīng)該關(guān)注的像素,如前面的在關(guān)注區(qū)域的定義中所述的那樣,例如是構(gòu)成病變部等的像素。并且,關(guān)注候選區(qū)域也可以是包含關(guān)注像素和選擇非關(guān)注像素的區(qū)域。具體而言,也可以以形成規(guī)定圖形(多邊形、圓形、橢圓形、弧、梯形、點(diǎn)對(duì)稱或線對(duì)稱的圖形等)的方式對(duì)選擇非關(guān)注像素進(jìn)行選擇。由此,在以像素單位進(jìn)行處理的情況下,也能夠抑制關(guān)注候選區(qū)域的形狀變得復(fù)雜,能夠提高視覺辨認(rèn)性。這里,非關(guān)注像素是第2圖像所包含的像素中的未被檢測(cè)為關(guān)注像素的像素。并且,選擇非關(guān)注像素是作為構(gòu)成關(guān)注候選區(qū)域的像素而從非關(guān)注像素中選擇出的像素。并且,在可靠度高的情況下,加工部3431進(jìn)行提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的顏色轉(zhuǎn)換處理。這里,例如考慮通過與給定閾值進(jìn)行比較等來判斷可靠度的聞低。由此,在可靠度高的情況下(具體而言,例如確定關(guān)注候選區(qū)域是病變部的情況下),進(jìn)行提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的顏色轉(zhuǎn)換處理,能夠抑制病變部的遺漏等。并且,加工部3431包括區(qū)域選出部34313,區(qū)域選出部34313根據(jù)可靠度從關(guān)注候選區(qū)域中選出關(guān)注區(qū)域。進(jìn)而,選出與關(guān)注區(qū)域?qū)?yīng)的第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域。然后,加工部3431對(duì)對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行顏色轉(zhuǎn)換處理。由此,能夠適當(dāng)?shù)剡x出與關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域。而且,通過對(duì)對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行顏色轉(zhuǎn)換處理,能夠?qū)m當(dāng)?shù)膮^(qū)域(例如檢測(cè)為病變的區(qū)域)進(jìn)行顏色轉(zhuǎn)換處理,能夠抑制病變部的遺漏等。并且,加工部3431也可以通過將對(duì)應(yīng)關(guān)注區(qū)域中包含的像素的顏色與目標(biāo)顏色進(jìn)行加權(quán)相加,進(jìn)行基于顏色轉(zhuǎn)換的加工處理。由此,如圖16(C)所示,能夠使對(duì)應(yīng)關(guān)注區(qū)域內(nèi)的像素為半透明,提高視覺辨認(rèn)性,能夠抑制病變部的遺漏等。并且,加工部3431也可以通過將位于對(duì)應(yīng)關(guān)注區(qū)域的周緣的像素的顏色轉(zhuǎn)換成目標(biāo)顏色,進(jìn)行基于顏色轉(zhuǎn)換的加工處理。由此,如圖16 (D)所示,能夠利用目標(biāo)顏色包圍對(duì)應(yīng)關(guān)注區(qū)域,提高視覺辨認(rèn)性,能夠抑制病變部的遺漏等。
并且,在可靠度高的情況下,加工部3431也可以進(jìn)行提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的亮度轉(zhuǎn)換處理。這里,例如考慮通過與給定閾值進(jìn)行比較等來判斷可靠度的高低。由此,在可靠度高的情況下(具體而言,例如確定關(guān)注候選區(qū)域是病變部的情況下),進(jìn)行提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的亮度轉(zhuǎn)換處理,能夠抑制病變部的遺漏等。并且,加工部3431包括區(qū)域選出部34313,區(qū)域選出部34313根據(jù)可靠度從關(guān)注候選區(qū)域中選出關(guān)注區(qū)域。進(jìn)而,選出與關(guān)注區(qū)域?qū)?yīng)的第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域。然后,加工部3431也可以對(duì)對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行亮度轉(zhuǎn)換處理。由此,能夠適當(dāng)?shù)剡x出與關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域。而且,通過對(duì)對(duì)應(yīng)關(guān)注區(qū)域以外的區(qū)域進(jìn)行亮度轉(zhuǎn)換處理,能夠?qū)Τ诉m當(dāng)區(qū)域(例如檢測(cè)為病變的區(qū)域)以外的區(qū)域進(jìn)行亮度轉(zhuǎn)換處理,能夠抑制病變部的遺漏等。并且,加工部3431也可以通過降低對(duì)應(yīng)關(guān)注區(qū)域以外的區(qū)域中包含的像素的亮度,進(jìn)行亮度轉(zhuǎn)換處理。由此,如圖16 (E)所示,對(duì)應(yīng)關(guān)注區(qū)域以外的區(qū)域的亮度降低,較暗地進(jìn)行顯示。因此,對(duì)應(yīng)關(guān)注區(qū)域看起來相對(duì)明亮,所以能夠使對(duì)應(yīng)關(guān)注區(qū)域明顯,能夠抑制病變部的遺漏。并且,在可靠度高的情況下,加工部3431進(jìn)行提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的處理。作為提高視覺辨認(rèn)性的處理,也可以進(jìn)行將第2圖像的關(guān)注候選區(qū)域的部分圖像與第I圖像相關(guān)聯(lián)的處理。這里,例如考慮通過與給定閾值進(jìn)行比較等來判斷可靠度的高低。由此,在可靠度高的情況下(具體而言,例如確定關(guān)注候選區(qū)域是病變部的情況下),作為提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的處理,能夠進(jìn)行將關(guān)注候選區(qū)域的部分圖像與第I圖像相關(guān)聯(lián)的處理,能夠抑制病變部的遺漏等。關(guān)聯(lián)的詳細(xì)情況在后面敘述。并且,加工部3431包括區(qū)域選出部34313,區(qū)域選出部34313根據(jù)可靠度從關(guān)注候選區(qū)域中選出關(guān)注區(qū)域。進(jìn)而,選出與關(guān)注區(qū)域?qū)?yīng)的第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域。而且,作為關(guān)注區(qū)域的部分圖像與第I圖像的對(duì)應(yīng),加工部3431也可以在第I圖像的附近顯示關(guān)注區(qū)域的部分圖像。
由此,能夠以圖16 (F)所示的方式顯示輸出圖像,例如與直接并列第I圖像和第2圖像的情況相比,能夠期待減輕醫(yī)生觀看輸出圖像時(shí)的負(fù)擔(dān)的效果等。并且,由于在附近顯示病變部的部分圖像,所以也能夠抑制病變部的遺漏。并且,加工部3431包括區(qū)域選出部34313,區(qū)域選出部34313根據(jù)可靠度從關(guān)注候選區(qū)域中選出關(guān)注區(qū)域。進(jìn)而,選出與關(guān)注區(qū)域?qū)?yīng)的第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域。而且,作為關(guān)注區(qū)域的部分圖像與第I圖像的對(duì)應(yīng),加工部3431也可以將關(guān)注區(qū)域的部分圖像置換為對(duì)應(yīng)關(guān)注區(qū)域的部分圖像進(jìn)行顯示。由此,能夠以在第I圖像內(nèi)嵌入第2圖像的關(guān)注區(qū)域的部分圖像的方式顯示輸出圖像。因此,關(guān)注區(qū)域(具體而言為病變部等)的部分能夠利用第2圖像(具體而言為易于視覺辨認(rèn)病變部的特殊光圖像)進(jìn)行觀察,并且,除此之外的部分能夠利用第I圖像(具體而言為全體明亮且易于觀看的通常光圖像)進(jìn)行觀察 ,例如能夠抑制病變部的遺漏等。并且,特定波段是比白色光的波段窄的波段。具體而言,第I圖像和第2圖像是活體內(nèi)圖像,特定波段是被血液中的血紅蛋白吸收的波長的波段。更具體而言為390nm 445nm 或 530nm 550nm 的波段。由此,能夠觀察活體的表層部和位于深部的血管的構(gòu)造。并且,通過將所得到的信號(hào)輸入特定通道(R、G、B),能夠利用褐色等顯示扁平上皮癌等的在通常光中很難視覺辨認(rèn)的病變等,能夠抑制病變部的遺漏。另外,390nm 445nm或530nm 550nm是根據(jù)被血紅蛋白吸收這樣的特性和分別到達(dá)活體的表層部或深部這樣的特性而得到的數(shù)字。但是,該情況下的波段不限于此,例如由于與基于血紅蛋白的吸收和到達(dá)活體的表層部或深部有關(guān)的實(shí)驗(yàn)結(jié)果等的變動(dòng)原因,考慮波段的下限值減少0 10%左右,上限值上升0 10%左右。并且,本實(shí)施方式還能夠應(yīng)用于包含圖像處理裝置(圖像處理部)的電子設(shè)備。例如,除了內(nèi)窺鏡以外,本實(shí)施方式的圖像處理裝置還能夠搭載于數(shù)字照相機(jī)、數(shù)字?jǐn)z像機(jī)、個(gè)人計(jì)算機(jī)等的各種類型的電子設(shè)備(以電壓、電流等動(dòng)力源進(jìn)行動(dòng)作的設(shè)備)。并且,本實(shí)施方式也可以是內(nèi)窺鏡系統(tǒng),該內(nèi)窺鏡系統(tǒng)包括第I光源、第2光源、第I圖像取得部(狹義上為通常光圖像取得部320)、第2圖像取得部(狹義上為特殊光圖像取得部330)、關(guān)注候選區(qū)域檢測(cè)部341、可靠度計(jì)算部342、顯示方式設(shè)定部343、顯示部400。第I光源對(duì)活體內(nèi)的被攝體照射白色光,第2光源對(duì)活體內(nèi)的被攝體照射特定波段的光(例如窄帶光或用于產(chǎn)生熒光的激勵(lì)光)。第I圖像取得部通過第I光源的照射,取得包含具有白色光波段中的信息的被攝體像的圖像作為第I活體內(nèi)圖像,第2圖像取得部通過第2光源的照射,取得包含具有特定波段中的信息的被攝體像的圖像作為第2活體內(nèi)圖像。關(guān)注候選區(qū)域檢測(cè)部341根據(jù)第2活體內(nèi)圖像的像素的特征量檢測(cè)關(guān)注區(qū)域的候選即關(guān)注候選區(qū)域??煽慷扔?jì)算部342計(jì)算表示關(guān)注候選區(qū)域是關(guān)注區(qū)域的確定程度的可靠度。顯示方式設(shè)定部343進(jìn)行根據(jù)可靠度設(shè)定輸出圖像的顯示方式的處理。顯示部400按照所設(shè)定的顯示方式顯示輸出圖像。由此,得到基于白色光源和基于特定波段的光的2張活體內(nèi)圖像。然后,計(jì)算所得到的圖像內(nèi)的第2活體內(nèi)圖像的像素的特征量,能夠檢測(cè)關(guān)注區(qū)域(具體而言例如為病變部的區(qū)域)的候選即關(guān)注候選區(qū)域。進(jìn)而,根據(jù)由可靠度計(jì)算部342計(jì)算出的可靠度,從關(guān)注候選區(qū)域中選出關(guān)注區(qū)域,由此,能夠進(jìn)行精度更高(具體而言為確定是病變部)的區(qū)域選出,然后,能夠設(shè)定輸出圖像的顯示方式。通過按照所決定的顯示方式在顯示部400中進(jìn)行顯示,能夠?qū)ο到y(tǒng)利用者(具體而言為醫(yī)生)提示信息。并且,本實(shí)施方式也可以是圖像處理裝置,該圖像處理裝置包括第I圖像取得部、第2圖像取得部、關(guān)注區(qū)域檢測(cè)部、顯示方式設(shè)定部343。第I圖像取得部取得包含具有白色光波段中的信息的被攝體像的圖像作為第I圖像,第2圖像取得部取得包含具有特定波段中的信息的被攝體像的圖像作為第2圖像。關(guān)注區(qū)域檢測(cè)部根據(jù)第2圖像內(nèi)的像素的特征量檢測(cè)應(yīng)該關(guān)注的區(qū)域即關(guān)注區(qū)域。顯示方式設(shè)定部343進(jìn)行在與關(guān)注區(qū)域?qū)?yīng)的輸出圖像的對(duì)應(yīng)關(guān)注區(qū)域中顯示警告區(qū)域的處理,該警告區(qū)域發(fā)出與關(guān)注區(qū)域的檢測(cè)結(jié)果有關(guān)的信息。由此,取得第I圖像和第2圖像,根據(jù)第2圖像內(nèi)的像素的特征量,能夠從第2圖像中檢測(cè)關(guān)注區(qū)域。然后,從輸出圖像中檢測(cè)與關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域,顯示警告區(qū)域。由此,與直接顯示第I圖像的情況相比,能夠提高與關(guān)注區(qū)域(具體而言例如為病變部的區(qū)域)對(duì)應(yīng)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性。另外,這里的警告區(qū)域可以是如上所述通過優(yōu) 先度選出的區(qū)域,也可以是與優(yōu)先度無關(guān)的區(qū)域。并且,本實(shí)施方式也可以是程序,該程序使計(jì)算機(jī)作為第I圖像取得部、第2圖像取得部、關(guān)注候選區(qū)域檢測(cè)部341、可靠度計(jì)算部342、顯示方式設(shè)定部343發(fā)揮功能。第I圖像取得部取得包含具有白色光波段中的信息的被攝體像的圖像作為第I圖像,第2圖像取得部取得包含具有特定波段中的信息的被攝體像的圖像作為第2圖像。關(guān)注候選區(qū)域檢測(cè)部341根據(jù)第2圖像內(nèi)的像素的特征量,從第2圖像中檢測(cè)關(guān)注區(qū)域的候選即關(guān)注候選區(qū)域。可靠度計(jì)算部342計(jì)算表示關(guān)注候選區(qū)域是關(guān)注區(qū)域的確定程度的可靠度。顯示方式設(shè)定部343進(jìn)行根據(jù)可靠度設(shè)定輸出圖像的顯示方式的處理。由此,例如如膠囊型內(nèi)窺鏡等那樣,首先,蓄積圖像數(shù)據(jù),然后,能夠利用PC等計(jì)算機(jī)系統(tǒng)以軟件方式對(duì)所蓄積的圖像數(shù)據(jù)進(jìn)行處理。并且,本實(shí)施方式也可以是程序,該程序使計(jì)算機(jī)作為第I圖像取得部、第2圖像取得部、關(guān)注區(qū)域檢測(cè)部、顯示方式設(shè)定部343發(fā)揮功能。第I圖像取得部取得包含具有白色光波段中的信息的被攝體像的圖像作為第I圖像,第2圖像取得部取得包含具有特定波段中的信息的被攝體像的圖像作為第2圖像。關(guān)注區(qū)域檢測(cè)部根據(jù)第2圖像內(nèi)的像素的特征量檢測(cè)應(yīng)該關(guān)注的區(qū)域即關(guān)注區(qū)域。顯示方式設(shè)定部343進(jìn)行在與關(guān)注區(qū)域?qū)?yīng)的輸出圖像的對(duì)應(yīng)關(guān)注區(qū)域中顯示警告區(qū)域的處理,該警告區(qū)域發(fā)出與關(guān)注區(qū)域的檢測(cè)結(jié)果有關(guān)的信息。由此,例如如膠囊型內(nèi)窺鏡等那樣,首先,蓄積圖像數(shù)據(jù),然后,能夠利用PC等計(jì)算機(jī)系統(tǒng)以軟件方式對(duì)所蓄積的圖像數(shù)據(jù)進(jìn)行處理。并且,本實(shí)施方式還能夠應(yīng)用于記錄有實(shí)現(xiàn)本實(shí)施方式的各部(第I圖像取得部、 第2圖像取得部、關(guān)注候選區(qū)域檢測(cè)部、可靠度計(jì)算部、顯示方式設(shè)定部、加工部等)的程序代碼的計(jì)算機(jī)程序產(chǎn)品。這里,程序代碼實(shí)現(xiàn)第I圖像取得部,其取得包含具有白色光波段中的信息的被攝體像的圖像,作為第I圖像;第2圖像取得部,其取得包含具有特定波段中的信息的被攝體像的圖像,作為第2圖像;關(guān)注候選區(qū)域檢測(cè)部,其根據(jù)所述第2圖像內(nèi)的像素的特征量,從所述第2圖像中檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域;以及顯示方式設(shè)定部,其根據(jù)計(jì)算出的所述可靠度,進(jìn)行設(shè)定輸出圖像的顯示方式的處理。
并且,計(jì)算機(jī)程序產(chǎn)品例如是記錄有程序代碼的信息存儲(chǔ)介質(zhì)(DVD等光盤介質(zhì)、硬盤介質(zhì)、存儲(chǔ)器介質(zhì)等)、記錄有程序代碼的計(jì)算機(jī)、記錄有程序代碼的因特網(wǎng)系統(tǒng)(例如包含服務(wù)器和客戶終端的系統(tǒng))等、編入程序代碼的信息存儲(chǔ)介質(zhì)、裝置、設(shè)備或系統(tǒng)等。該情況下,本實(shí)施方式的各結(jié)構(gòu)要素和各處理過程通過各模塊安裝,由這些所安裝的模塊構(gòu)成的程序代碼記錄在計(jì)算機(jī)程序產(chǎn)品中。3 第2實(shí)施方式對(duì)本發(fā)明的第2實(shí)施方式進(jìn)行說明。除了關(guān)注候選區(qū)域檢測(cè)部341和加工部3431以外的部分與第I實(shí)施方式相同。首先,對(duì)本實(shí)施方式中的關(guān)注候選區(qū)域檢測(cè)部341的具體結(jié)構(gòu)進(jìn)行說明。圖24是說明本實(shí)施方式中的關(guān)注候選區(qū)域檢測(cè)部341的結(jié)構(gòu)的一例的框圖。關(guān)注候選區(qū)域檢測(cè)部341具有局部區(qū)域設(shè)定部3411、特征量計(jì)算部3412、分類部3413、區(qū)域設(shè)定部3414。控制部350與局部區(qū)域設(shè)定部3411、特征量計(jì)算部3412、分類部3413、區(qū)域設(shè)定部3414雙向連接,并對(duì)它們進(jìn)行控制。 首先,與第I實(shí)施方式同樣,局部區(qū)域設(shè)定部3411針對(duì)特殊光圖像設(shè)定多個(gè)局部區(qū)域。接著,與第I實(shí)施方式同樣,特征量計(jì)算部3412針對(duì)所設(shè)定的所有局部區(qū)域計(jì)算特征量。這里,使用所述色相H (m,n)作為特征量。分類部3413根據(jù)控制部350的控制,按照每個(gè)局部區(qū)域?qū)τ?jì)算出的局部區(qū)域的特征量H (m,n)與規(guī)定閾值進(jìn)行比較,根據(jù)該比較結(jié)果,將各局部區(qū)域分類為多個(gè)群組。該情況下,使用預(yù)先設(shè)定的多個(gè)閾值Thi (i=0,l…,L),在H (m,n)為Thi以上且小于Thi+1的情況下,將局部區(qū)域a (m,n)分類為群組i的局部區(qū)域。通過進(jìn)行這種處理,各局部區(qū)域被分類為群組0 群組(L-I)的群組。這里,關(guān)于閾值Thi的設(shè)定方法,可以由用戶設(shè)定任意值,也可以通過控制部350自動(dòng)設(shè)定為預(yù)先決定的值。并且,閾值Thi也可以根據(jù)特殊光圖像內(nèi)的位置而自適應(yīng)地設(shè)定。被分類成各群組的局部區(qū)域信息被輸出到區(qū)域設(shè)定部3414。在本實(shí)施方式中,區(qū)域設(shè)定部3414根據(jù)關(guān)注的程度檢測(cè)關(guān)注候選區(qū)域。例如,將由分類部3413分類為群組0 群組(L-I)的各群組后的局部區(qū)域中的、被分類為群組a的多個(gè)局部區(qū)域檢測(cè)為關(guān)注等級(jí)a的關(guān)注候選區(qū)域,將被分類為群組b的多個(gè)局部區(qū)域檢測(cè)為關(guān)注等級(jí)b的關(guān)注候選區(qū)域(這里,a、b是0 L-I的任意常數(shù),a古b)。區(qū)域設(shè)定部3414根據(jù)檢測(cè)為各關(guān)注等級(jí)的關(guān)注候選區(qū)域的多個(gè)局部區(qū)域a (m,n)的坐標(biāo)和各局部區(qū)域包含的像素的信息,計(jì)算關(guān)注候選區(qū)域中包含的所有像素的位置,將其作為各關(guān)注等級(jí)的關(guān)注候選區(qū)域信息,輸出到可靠度計(jì)算部342和顯示方式設(shè)定部343。進(jìn)而,區(qū)域設(shè)定部3414向顯示方式設(shè)定部343輸出在特殊光圖像中是否檢測(cè)到關(guān)注候選區(qū)域的控制信號(hào)。這里,區(qū)域設(shè)定部3414設(shè)關(guān)注程度為關(guān)注等級(jí)a和b這2個(gè)來進(jìn)行關(guān)注候選區(qū)域的設(shè)定,但是,當(dāng)然也可以根據(jù)需要將關(guān)注程度設(shè)定為任意數(shù)。進(jìn)而,區(qū)域設(shè)定部3414也可以針對(duì)利用各關(guān)注等級(jí)檢測(cè)為關(guān)注候選區(qū)域的多個(gè)局部區(qū)域,按照每個(gè)關(guān)注等級(jí),與第I實(shí)施方式同樣設(shè)定新的關(guān)注候選區(qū)域(例如為了提高視覺辨認(rèn)性而成為簡單的四邊形等)。接著,對(duì)顯示方式設(shè)定部343進(jìn)行說明。如所述圖11所示,顯示方式設(shè)定部343具有加工部3431和選擇部3432。這些各部的功能和動(dòng)作與所述圖11中說明的功能和動(dòng)作相同,所以省略詳細(xì)說明。
接著,對(duì)本實(shí)施方式中的加工部3431的具體結(jié)構(gòu)進(jìn)行說明。圖25是說明本實(shí)施方式中的加工部3431的結(jié)構(gòu)的一例的框圖。如圖25所示,加工部3431具有關(guān)注信息設(shè)定部34311、區(qū)域選出部34313、區(qū)域加工部34314、亮度轉(zhuǎn)換部34315。關(guān)注信息設(shè)定部34311針對(duì)各關(guān)注候選區(qū)域設(shè)定表示應(yīng)該關(guān)注的程度的關(guān)注信息。具體而言,例如存在如下的設(shè)定方式如果屬于群組a,則成為關(guān)注度a,如果是群組b,則成為關(guān)注度b。更具體而言,還考慮如下的設(shè)定方式如果病變是癌,則成為關(guān)注度5,如果是通常的炎癥,則成為關(guān)注度I。圖26 (A)是示出從通常光圖像取得部320輸出的通常光圖像和關(guān)注候選區(qū)域信息的一例。這里,虛線所示的等級(jí)a和等級(jí)b的關(guān)注候選區(qū)域中包含的所有像素的位置信息作為關(guān)注候選區(qū)域信息,被輸入到區(qū)域選出部34313。與第I實(shí)施方式同樣,區(qū)域選出部34313設(shè)定關(guān)注區(qū)域和對(duì)應(yīng)關(guān)注區(qū)域。進(jìn)而,還可以設(shè)定警告區(qū)域。區(qū)域加工部34314使用從關(guān)注候選區(qū)域檢測(cè)部341輸出的關(guān)注候選區(qū)域信息,對(duì)從通常光圖像取得部320輸出的通常光圖像進(jìn)行加工。區(qū)域加工部34314例如針對(duì)通常光圖像中的作為對(duì)應(yīng)關(guān)注區(qū)域信息而從區(qū)域選出部34313輸入的像素,使用以下的式(18) (23)進(jìn)行顏色轉(zhuǎn)換處理。這里,r (x, y)、g (x,y)、b (x,y)是顏色轉(zhuǎn)換前的通常光圖像的坐標(biāo)(x,y)中的R、G、B通道的信號(hào)值,r_out (x, y)、g_out (x, y)、b_out (x, y)是顏色轉(zhuǎn)換后的通常光圖像的R、G、B通道的信號(hào) 值。并且,Ta_r、Ta_g、Ta_b是針對(duì)等級(jí)a的對(duì)應(yīng)關(guān)注區(qū)域的任意目標(biāo)顏色的R、G、B信號(hào)值,根據(jù)由關(guān)注信息設(shè)定部34311設(shè)定的關(guān)注信息而決定。并且,Tb_r、Tb_g、Tb_b是針對(duì)等級(jí)b的對(duì)應(yīng)關(guān)注區(qū)域的任意目標(biāo)顏色的R、G、B信號(hào)值,同樣根據(jù)關(guān)注信息而決定。gain是任意的系數(shù)。等級(jí)a的對(duì)應(yīng)關(guān)注區(qū)域r—out (x,y)=gain*r (x, y) + (1-gain) *Ta—r...... (18)g—out (x,y)=gain*g (x, y) + (1-gain) *Ta—g...... (19)b—out (x,y)=gain*b (x, y) + (1-gain) *Ta—b...... (20)等級(jí)b的對(duì)應(yīng)關(guān)注區(qū)域r—out (x,y)=gain*r (x, y) + (1-gain) *Tb—r...... (21)g—out (x,y)=gain*g (x, y) + (1-gain) *Tb—g...... (22)b—out (x,y)=gain*b (x, y) + (1-gain) *Tb—b...... (23)通過進(jìn)行這種處理,在懷疑為病變部的對(duì)應(yīng)關(guān)注區(qū)域中,如圖26 (B)所示,根據(jù)關(guān)注程度,利用不同的顏色顯示對(duì)應(yīng)關(guān)注區(qū)域,在使用通常光圖像和特殊光圖像進(jìn)行診斷時(shí),能夠降低醫(yī)生的負(fù)擔(dān),并且能夠抑制病變部的遺漏。另外,區(qū)域加工部34314不限于所述處理,當(dāng)然也可以使用第I實(shí)施方式所示的不同的顏色轉(zhuǎn)換處理,根據(jù)關(guān)注程度對(duì)通常光圖像的對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行加工。并且,在本實(shí)施方式中,構(gòu)成圖像處理部300的各部由硬件構(gòu)成,但是,與第I實(shí)施方式同樣,也可以構(gòu)成為,針對(duì)預(yù)先取得的圖像,CPU進(jìn)行各部的處理,通過CPU執(zhí)行程序,也可以作為軟件來實(shí)現(xiàn)?;蛘撸部梢岳密浖?gòu)成各部進(jìn)行的處理的一部分。該情況下,除了圖19的關(guān)注區(qū)域檢測(cè)步驟和圖22的通常光圖像的加工步驟(顏色轉(zhuǎn)換處理)以外的步驟與第I實(shí)施方式相同。使用圖27的流程圖對(duì)本實(shí)施方式中的圖19的關(guān)注區(qū)域檢測(cè)步驟S13的詳細(xì)的處理順序進(jìn)行說明。在局部區(qū)域檢測(cè)步驟中,首先,利用與第I實(shí)施方式相同的方法,針對(duì)特殊光圖像設(shè)定多個(gè)局部區(qū)域S41。接著,利用與第I實(shí)施方式相同的方法,針對(duì)所設(shè)定的所有局部區(qū)域計(jì)算特征量S42。這里,作為特征量的一例,使用色相H。然后,按照每個(gè)局部區(qū)域?qū)υ谒芯植繀^(qū)域中計(jì)算出的色相H與所述規(guī)定閾值Thi進(jìn)行比較,根據(jù)該比較結(jié)果將各局部區(qū)域分類為多個(gè)群組S43。接著,利用所述方法,根據(jù)關(guān)注程度檢測(cè)關(guān)注候選區(qū)域。進(jìn)而,根據(jù)檢測(cè)為各關(guān)注等級(jí)的關(guān)注候選區(qū)域的局部區(qū)域a (m,n)的坐標(biāo)和各局部區(qū)域包含的像素的信息,計(jì)算關(guān)注區(qū)域中包含的所有像素的位置,將其作為各關(guān)注等級(jí)的關(guān)注候選區(qū)域信息進(jìn)行輸出S44。最后,輸出在特殊光圖像中是否檢測(cè)到關(guān)注候選區(qū)域的標(biāo)志信息S45。在本實(shí)施方式的圖22的顏色轉(zhuǎn)換處理步驟中,根據(jù)在關(guān)注候選區(qū)域檢測(cè)步驟中輸出的各關(guān)注等級(jí)的關(guān)注候選區(qū)域信息,如所述式(18) (23)那樣,根據(jù)關(guān)注等級(jí),使用不同的目標(biāo)顏色對(duì)通常光圖像進(jìn)行加工。
通過進(jìn)行這種處理,如圖26 (B)所示,根據(jù)關(guān)注程度,利用不同的顏色顯示懷疑為病變部的對(duì)應(yīng)關(guān)注區(qū)域,在使用通常光圖像和特殊光圖像進(jìn)行診斷時(shí),能夠降低醫(yī)生的負(fù)擔(dān),并且能夠抑制病變部的遺漏。在以上的本實(shí)施方式中,關(guān)注候選區(qū)域檢測(cè)部341包括分類部3413,該分類部3413按照每個(gè)局部區(qū)域?qū)植繀^(qū)域的特征量與給定閾值進(jìn)行比較,并將各局部區(qū)域分類成多個(gè)群組。而且,關(guān)注候選區(qū)域檢測(cè)部341檢測(cè)包含至少被分類為I個(gè)群組的各局部區(qū)域和與該局部區(qū)域相鄰的局部區(qū)域群的區(qū)域,作為關(guān)注候選區(qū)域。由此,在將各局部區(qū)域分類為群組后,在對(duì)相鄰的局部區(qū)域進(jìn)行合并后,能夠檢測(cè)關(guān)注候選區(qū)域。并且,能夠利用群組對(duì)關(guān)注候選區(qū)域進(jìn)行分類,所以,能夠按照每個(gè)群組具有不同的信息或進(jìn)行不同的處理。并且,加工部3431包括關(guān)注信息設(shè)定部34311,該關(guān)注信息設(shè)定部34311在各關(guān)注候選區(qū)域中設(shè)定表示應(yīng)該關(guān)注的程度的關(guān)注信息。然后,加工部3431根據(jù)所設(shè)定的關(guān)注信息所表示的關(guān)注程度,對(duì)在顏色轉(zhuǎn)換處理中使用的目標(biāo)顏色進(jìn)行變更。由此,例如在檢測(cè)到2種以上的病變的情況下,如圖26 (B)所示,能夠利用不同顏色分別進(jìn)行警告顯示等。具體而言,例如考慮改變?cè)诎┑牟课缓屯ǔQ装Y的部位中顯示的顏色等。4 第3實(shí)施方式對(duì)本發(fā)明的第3實(shí)施方式進(jìn)行說明。除了關(guān)注候選區(qū)域檢測(cè)部341和加工部3431以外的部分與第2實(shí)施方式相同。首先,對(duì)本實(shí)施方式中的關(guān)注候選區(qū)域檢測(cè)部341的具體結(jié)構(gòu)進(jìn)行說明。關(guān)注候選區(qū)域檢測(cè)部341根據(jù)控制部350的控制,從特殊光圖像中檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域。如所述圖24所示,該關(guān)注候選區(qū)域檢測(cè)部341具有局部區(qū)域設(shè)定部3411、特征量計(jì)算部3412、分類部3413、區(qū)域設(shè)定部3414。與第I和第2實(shí)施方式同樣,局部區(qū)域設(shè)定部3411設(shè)定多個(gè)局部區(qū)域。作為其他例子,也可以假設(shè)任意范圍的像素作為局部區(qū)域。并且,在區(qū)域分割的方法中,例如可以應(yīng)用以紋理解析為代表的公知的區(qū)域分割算法。并且,該局部區(qū)域的范圍也可以根據(jù)用戶的指示而預(yù)先設(shè)定。分割后的局部區(qū)域被輸出到特征量計(jì)算部3412。與第I實(shí)施方式同樣,特征量計(jì)算部3412計(jì)算色相H。這里,將坐標(biāo)(m,n)的局部區(qū)域中包含的表示褐色的像素?cái)?shù)表記為Cha (m,n),將其作為特征量。并且,表示疑似病變程度的特征量不限于上述,也可以分別求解顏色的特征量、空間頻率的特征量、形狀的特征量和面積的特征量等,分別賦予權(quán)重系數(shù)并進(jìn)行線性結(jié)合,作為表示各局部區(qū)域的疑似病變程度的特征量。特征量Cha (m, n)被輸出到分類部3413。分類部3413根據(jù)控制部350的控制,按照每個(gè)局部區(qū)域?qū)τ?jì)算出的局部區(qū)域的特征量Cha (m,n)與規(guī)定閾值進(jìn)行比較,根據(jù)該比較結(jié)果,將各局部區(qū)域分類為多個(gè)群組。該情況下,使用預(yù)先設(shè)定的多個(gè)閾值GrThi (i=0,l...,L),在Cha (m,n)為GrThi以上且小于GrThi+1的情況下,將坐標(biāo)(m,n)的局部區(qū)域分類為群組i的局部區(qū)域。在本實(shí)施方式中,設(shè)GrTh0=200、GrThL=257,GrThi小于GrThi+1。各局部區(qū)域被分類為群組0 群組L的群組。將在坐標(biāo)(m,n)的局部區(qū)域中設(shè)定的群組表記為i (m,n)。并且,閾值GrThi的設(shè)定方法不限于上述,也可以通過控制部350自動(dòng)設(shè)定。并且,閾值GrThi也可以根據(jù)特殊光圖、像內(nèi)的位置而自適應(yīng)地設(shè)定。分類后的群組i (m,n)被輸出到區(qū)域設(shè)定部3414。區(qū)域設(shè)定部3414根據(jù)控制部350的控制,檢測(cè)包含被分類為多個(gè)群組中的至少I個(gè)群組的各局部區(qū)域和與該局部區(qū)域相鄰的局部區(qū)域群的區(qū)域,作為關(guān)注候選區(qū)域。圖29(A)、圖29 (B)、圖29 (C)和圖29 (D)示出關(guān)注候選區(qū)域的設(shè)定方法的一例。局部區(qū)域中的數(shù)值表示對(duì)各局部區(qū)域進(jìn)行分類后的群組。首先,如圖29 (A)所示,在由紅框包圍的局部區(qū)域的8個(gè)附近位置(由粗框包圍的范圍),探索被分類為群組的局部區(qū)域。在粗框內(nèi)存在被分類為群組的局部區(qū)域的情況下,如圖29 (B)的內(nèi)側(cè)的粗框所示,將包含該局部區(qū)域的矩形區(qū)域設(shè)定為新的局部區(qū)域。接著,在新的局部區(qū)域的周邊(由外側(cè)的粗框包圍的范圍),再次探索被分類為群組的局部區(qū)域。反復(fù)進(jìn)行該處理,直到如圖29 (C)所示在局部區(qū)域的周邊不存在被分類為群組的局部區(qū)域?yàn)橹?。?dāng)探索處理結(jié)束后,如圖29 (D)所示,將新設(shè)定的局部區(qū)域合并為一個(gè)區(qū)域,按照與所述分類部3413相同的順序,再次設(shè)定局部區(qū)域的群組。這里,設(shè)合并后的局部區(qū)域內(nèi)的表示紅褐色的像素?cái)?shù)為GrTh7以上且小于GrThS,圖中示出了被分類為群組7的情況。這里,再次設(shè)定的局部區(qū)域被設(shè)定為關(guān)注候選區(qū)域。并且,局部區(qū)域的合并方法不限于上述,例如也可以應(yīng)用公知的聚類算法。該情況下,合并后的局部區(qū)域不限于矩形區(qū)域,可以是任意形狀。檢測(cè)到的關(guān)注候選區(qū)域的圖像信號(hào)、各像素的坐標(biāo)、群組被輸出到可靠度計(jì)算部342和顯示方式設(shè)定部343。接著,對(duì)加工部3431的具體結(jié)構(gòu)進(jìn)行說明。圖28是說明第3實(shí)施方式中的加工部3431的結(jié)構(gòu)的一例的框圖。如圖28所示,加工部3431具有關(guān)注信息設(shè)定部34311、合成比設(shè)定部34312、區(qū)域選出部34313、區(qū)域加工部34314、亮度轉(zhuǎn)換部34315。關(guān)注候選區(qū)域檢測(cè)部341與關(guān)注信息設(shè)定部34311、區(qū)域選出部34313、區(qū)域加工部34314連接。可靠度計(jì)算部342與區(qū)域選出部34313連接。關(guān)注信息設(shè)定部34311與合成比設(shè)定部34312連接。合成比設(shè)定部34312設(shè)定在區(qū)域加工部34314中。通常光圖像取得部320與區(qū)域選出部34313連接。區(qū)域選出部34313與區(qū)域加工部34314和亮度轉(zhuǎn)換部34315連接。區(qū)域加工部34314與亮度轉(zhuǎn)換部34315連接。亮度轉(zhuǎn)換部34315與選擇部3432連接??刂撇?50與關(guān)注信息設(shè)定部34311、合成比設(shè)定部34312、區(qū)域選出部34313、區(qū)域加工部34314、亮度轉(zhuǎn)換部34315雙向連接,并對(duì)它們進(jìn)行控制。
關(guān)注信息設(shè)定部34311根據(jù)控制部350的控制,針對(duì)檢測(cè)到的關(guān)注候選區(qū)域設(shè)定表示應(yīng)該關(guān)注的程度的關(guān)注信息。具體而言,根據(jù)從關(guān)注候選區(qū)域檢測(cè)部341輸出的關(guān)注候選區(qū)域的群組,對(duì)各關(guān)注候選區(qū)域設(shè)定應(yīng)該關(guān)注的程度At。這里,與各群組對(duì)應(yīng)的應(yīng)該關(guān)注的程度At預(yù)先設(shè)定為查閱表AtLut (i)。AtLut (i)表示群組i的情況下的應(yīng)該關(guān)注的程度,設(shè)At=AtLut (i)。并且,與各群組對(duì)應(yīng)的應(yīng)該關(guān)注的程度At也可以通過外部I/F部500而由用戶設(shè)定。計(jì)算出的At作為關(guān)注候選區(qū)域的關(guān)注信息,被輸出到合成比設(shè)定部34312。合成比設(shè)定部34312根據(jù)控制部350的控制,根據(jù)所設(shè)定的關(guān)注信息所表示的關(guān)注程度,設(shè)定關(guān)注候選區(qū)域內(nèi)的像素的像素值與對(duì)應(yīng)關(guān)注區(qū)域內(nèi)的像素的像素值的合成t匕。具體而言,根據(jù)從關(guān)注信息設(shè)定部34311輸入的關(guān)注信息At,使用以下的式(24)計(jì)算合成比alpha。alpha為0 I的范圍內(nèi)的值。 alpha=alLut (At) ...... (24)這里,alLut (X)例如為圖30 (A)所示的預(yù)先設(shè)定的合成比計(jì)算查閱表。并且,合成比計(jì)算方法不限于上述,也可以使用n次函數(shù)。式(25)示出計(jì)算合成比alpha的I次函數(shù)的例子。alpha=a*At+b...... (25)a、b是常數(shù)項(xiàng)。這里,如圖30(B)所示,在alpha為0以下的情況下,設(shè)alpha=0,在alpha為I以上的情況下,設(shè)alpha=l。所設(shè)定的合成比alpha被輸出到區(qū)域加工部34314。區(qū)域選出部34313根據(jù)控制部350的控制,選出與檢測(cè)到的關(guān)注候選區(qū)域?qū)?yīng)的通常光圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域。關(guān)于對(duì)應(yīng)關(guān)注區(qū)域選出方法,首先,預(yù)先拍攝校準(zhǔn)圖像,通過應(yīng)用公知的匹配算法,生成使通常光圖像與特殊光圖像的各像素的位置一一對(duì)應(yīng)的查閱表calLut (x,y)。這里,當(dāng)輸入特殊光圖像的各像素的坐標(biāo)(x, y)后,calLut (x,y)輸出通常光圖像的對(duì)應(yīng)的位置(x’,y’)。然后,根據(jù)從可靠度計(jì)算部342輸入的可靠度,從由關(guān)注候選區(qū)域檢測(cè)部341輸入的關(guān)注候選區(qū)域中提取關(guān)注區(qū)域。具體而言,從關(guān)注候選區(qū)域中提取具有預(yù)先設(shè)定的閾值以上的可靠度的區(qū)域,作為關(guān)注區(qū)域。然后,使用calLut (X,y)和關(guān)注區(qū)域中包含的像素的坐標(biāo),計(jì)算對(duì)應(yīng)關(guān)注區(qū)域的坐標(biāo)。并且,這里,使與關(guān)注區(qū)域?qū)?yīng)的像素位置一對(duì)一,但是,與關(guān)注區(qū)域?qū)?yīng)的像素位置也可以是多個(gè)。并且,在與關(guān)注區(qū)域?qū)?yīng)的像素位置為像素與像素之間的情況下,也可以應(yīng)用以線性插值為代表的公知的插值算法。對(duì)應(yīng)關(guān)注區(qū)域的坐標(biāo)被輸出到區(qū)域加工部34314。區(qū)域加工部34314根據(jù)控制部350的控制,對(duì)通常光圖像的對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行加工。具體而言,針對(duì)由從區(qū)域選出部34313輸出的對(duì)應(yīng)關(guān)注區(qū)域信息確定的像素,使用式
(26)進(jìn)行合成處理。這里,特殊光圖像的信號(hào)值表記為spelmg (x,y),通常光圖像的信號(hào)值表記為whilmg (x, y),合成圖像的信號(hào)值表記為blelmg (x, y)。blelmg (x,,y,)=alpha*spelmg (x,y)+ (l_alpha)*whilmg (x,,y,)...... (26)針對(duì)對(duì)應(yīng)關(guān)注區(qū)域以外的像素,使用式(27),將通常光圖像設(shè)定為合成圖像。blelmg (x,,y,)=whilmg (x,,y’)...... (27)進(jìn)行合成處理后的合成圖像blelmg被輸出到亮度轉(zhuǎn)換部34315。亮度轉(zhuǎn)換部34315根據(jù)控制部350的控制,降低對(duì)應(yīng)關(guān)注區(qū)域以外的區(qū)域中包含的像素的亮度。具體而言,針對(duì)從區(qū)域選出部34313輸出的對(duì)應(yīng)關(guān)注區(qū)域像素以外的像素,使用式(28)降低亮度。這里,亮度降低后的加工圖像的信號(hào)值表記為proclmg (x,y)。proclmg (x,,y,)=c*blelmg (x,,y,)...... (28)c是0 I的范圍內(nèi)的常數(shù)項(xiàng)。進(jìn)行了亮度轉(zhuǎn)換處理后的加工圖像proglmg被輸出到選擇部3432。并且,在本實(shí)施方式中,構(gòu)成圖像處理部300的各部由硬件構(gòu)成,但是,與第I實(shí)施方式同樣,也可以構(gòu)成為,針對(duì)預(yù)先取得的圖像,CPU進(jìn)行各部的處理,通過CPU執(zhí)行程序,也可以作為軟件來實(shí)現(xiàn)。或者,也可以利用軟件構(gòu)成各部進(jìn)行的處理的一部分。該情況下,除了圖19的關(guān)注區(qū)域檢測(cè)步驟S13和圖21的通常光圖像的加工步驟S31以外的步驟與第2實(shí)施方式相同。使用圖27的流程圖對(duì)本實(shí)施方式中的圖19的關(guān)注區(qū)域檢測(cè)步驟S13的詳細(xì)的處理順序進(jìn)行說明。
開始進(jìn)行該處理后,首先,對(duì)特殊光圖像進(jìn)行區(qū)域分割(S41)。該情況下,將特殊光圖像分割成矩形區(qū)域。該矩形區(qū)域的尺寸可以適當(dāng)設(shè)定,但是,這里,例如設(shè)為16X16像素單位。接著,依次提取分割后的局部區(qū)域,如前面的式(I) (6)所述的那樣,計(jì)算表示疑似病變程度的特征量(S42)。接著,按照每個(gè)局部區(qū)域?qū)τ?jì)算出的局部區(qū)域的特征量與規(guī)定閾值進(jìn)行比較,根據(jù)該比較結(jié)果,將各局部區(qū)域分類為多個(gè)群組(S43)。然后,檢測(cè)包含被分類為多個(gè)群組中的至少I個(gè)群組的各局部區(qū)域和與該局部區(qū)域相鄰的局部區(qū)域群的區(qū)域,作為關(guān)注候選區(qū)域(S44)。然后,輸出表示是否檢測(cè)到關(guān)注候選區(qū)域的標(biāo)志信息(S45)。接著,參照?qǐng)D31對(duì)圖21的S31中的加工處理的詳細(xì)情況進(jìn)行說明。開始進(jìn)行該處理后,首先,對(duì)檢測(cè)到的關(guān)注候選區(qū)域設(shè)定表示應(yīng)該關(guān)注的程度的關(guān)注信息(S51)。這里,根據(jù)在S13中計(jì)算出的關(guān)注候選區(qū)域的群組,對(duì)各關(guān)注候選區(qū)域設(shè)定關(guān)注信息At。這里,與各群組對(duì)應(yīng)的應(yīng)該關(guān)注的程度At預(yù)先設(shè)定為查閱表AtLut (i)。接著,根據(jù)所設(shè)定的關(guān)注信息,設(shè)定特殊光圖像的關(guān)注區(qū)域內(nèi)的像素值與通常光圖像的對(duì)應(yīng)關(guān)注區(qū)域內(nèi)的像素值的合成比(S52)。這里,根據(jù)從S51輸入的關(guān)注信息At,如前面的式(24)所述的那樣,計(jì)算合成比alpha。alpha為0 I的范圍內(nèi)的值。接著,根據(jù)包含檢測(cè)到的關(guān)注候選區(qū)域的特殊光圖像和可靠度,提取關(guān)注區(qū)域,從通常光圖像中選出與關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域(S53)。這里,預(yù)先生成將通常光圖像與特殊光圖像的各像素的位置一一對(duì)應(yīng)的查閱表calLut (x,y),計(jì)算與特殊光圖像的關(guān)注區(qū)域的各像素的坐標(biāo)(x,y)對(duì)應(yīng)的通常光圖像的位置(x’,y’)。然后,從關(guān)注候選區(qū)域中提取具有預(yù)先設(shè)定的閾值以上的可靠度的區(qū)域,作為關(guān)注區(qū)域。并且,這里,使與關(guān)注區(qū)域?qū)?yīng)的像素位置一對(duì)一,但是,與關(guān)注區(qū)域?qū)?yīng)的像素位置也可以是多個(gè)。并且,在與關(guān)注區(qū)域?qū)?yīng)的像素位置為像素與像素之間的情況下,也可以應(yīng)用以線性插值為代表的公知的插值算法。然后,根據(jù)關(guān)注區(qū)域的檢測(cè)結(jié)果,對(duì)檢測(cè)到的通常光圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行加工(S54)。這里,如前面的式(26)、式(27)所述的那樣,根據(jù)特殊光圖像和通常光圖像生成合成圖像。然后,如前面的式(28)所述的那樣,降低對(duì)應(yīng)關(guān)注區(qū)域以外的區(qū)域中包含的像素的亮度(S55)。通過進(jìn)行這種處理,能夠利用單一圖像顯示通常光圖像和特殊光圖像,所以能夠提供降低醫(yī)生的負(fù)擔(dān)且抑制病變部的遺漏的內(nèi)窺鏡系統(tǒng)。在以上的本實(shí)施方式中,作為加工處理,加工部3431進(jìn)行第I圖像和第2圖像的合成處理。由此,通過合成處理,能夠提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性。具體而言,進(jìn)行混合通常光圖像和特殊光圖像的處理。該情況下,在可靠度高的情況下,加工部3431進(jìn)行提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的合成處理。這里,例如考慮通過與給定閾值進(jìn)行比較等來判斷可靠度的聞低。由此,在可靠度高的情況下(具體而言,例如確定關(guān)注候選區(qū)域是病變部的情況下),進(jìn)行提高第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的合成處理,能夠抑制病變部的遺
漏等。并且,加工部3431包括區(qū)域選出部34313,區(qū)域選出部34313根據(jù)可靠度從關(guān)注候選區(qū)域中選出關(guān)注區(qū)域。進(jìn)而,選出與關(guān)注區(qū)域?qū)?yīng)的第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域。然后,加工部3431對(duì)對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行合成處理。由此,能夠適當(dāng)?shù)剡x出與關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域。而且,通過對(duì)對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行合成處理,能夠?qū)m當(dāng)?shù)膮^(qū)域(例如檢測(cè)為病變的區(qū)域)進(jìn)行合成處理,例如能夠抑制病變的遺漏等。并且,加工部3431包括關(guān)注信息設(shè)定部34311和合成比設(shè)定部34312。這里,關(guān)注信息設(shè)定部34311針對(duì)各關(guān)注候選區(qū)域設(shè)定表示應(yīng)該關(guān)注的程度的關(guān)注信息。合成比設(shè)定部34312設(shè)定第I圖像與第2圖像的合成比。然后,加工部3431根據(jù)由合成比設(shè)定部34312設(shè)定的合成比,進(jìn)行合成處理。由此,能夠根據(jù)應(yīng)該關(guān)注的程度來改變合成比,例如如圖30 (A)、圖30 (B)所示,實(shí)施更應(yīng)該關(guān)注的病變部的特殊光圖像的比例增大、關(guān)注度低的病變部的通常光圖像的比例增大這樣的處理。具體而言,在病變部是由褐色顯示的扁平上皮癌等的情況下,在應(yīng)該關(guān)注的病變部中,褐色的比例增大,能夠容易地判斷只要關(guān)注哪里即可。5.第4實(shí)施方式參照?qǐng)D32對(duì)本發(fā)明的第4實(shí)施方式的內(nèi)窺鏡系統(tǒng)進(jìn)行說明。在第I實(shí)施方式、第2實(shí)施方式和第3實(shí)施方式中,使用2個(gè)攝像元件取得了通常光圖像和特殊光圖像,但是,這里,例如也可以僅通過具有拜耳排列的濾色鏡的第I攝像元件,利用圖像處理取得通常光圖像和特殊光圖像。本實(shí)施方式的內(nèi)窺鏡系統(tǒng)具有光源部100、插入部200、圖像處理部300、顯示部400、外部I/F部500。另外,下面對(duì)與第I實(shí)施方式等重復(fù)的部分,適當(dāng)省略其說明。光源部100具有白色光源110和會(huì)聚透鏡120。插入部200具有用于引導(dǎo)由光源部100會(huì)聚后的光的光導(dǎo)纖維210、使通過該光導(dǎo)纖維引導(dǎo)到前端的光擴(kuò)散并照射到觀察對(duì)象的照明透鏡220、使從觀察對(duì)象返回的反射光會(huì)聚的物鏡230、以及用于檢測(cè)會(huì)聚后的反射光的第I攝像元件250。第I攝像元件250例如是用于拍攝通常光圖像的具有拜耳排列的濾色鏡的攝像元件。第I攝像元件250的濾色鏡例如具有圖4所示的分光特性。圖像處理部300具有AD轉(zhuǎn)換部310、通常光圖像取得部320、特殊光圖像取得部330、輸出圖像生成部340、控制部350。外部I/F部500是用于供用戶對(duì)該內(nèi)窺鏡系統(tǒng)進(jìn)行輸入等的接口。AD轉(zhuǎn)換部310將從第I攝像元件輸出的模擬信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)并輸出。通常光圖像取得部320根據(jù)從AD轉(zhuǎn)換部310輸出的數(shù)字信號(hào)取得通常光圖像。特殊光圖像取得部330根據(jù)從AD轉(zhuǎn)換部310輸出的數(shù)字信號(hào)取得特殊光圖像。由通常光圖像取得部320取得的通常光圖像和由特殊光圖像取得部330取得的特殊光圖像被輸出到輸出圖像生成部340。輸出圖像生成部340根據(jù)這2張圖像生成I張輸出圖像并輸出到圖像顯示部。如圖7中說明的那樣,通常光圖像取得部320具有通常光圖像生成部321和通常光圖像存儲(chǔ)部322。由于這些各部的功能和動(dòng)作與圖7中說明的功能和動(dòng)作相同,所以省略詳細(xì)說明。 接著,使用圖33對(duì)特殊光圖像取得部330進(jìn)行說明。特殊光圖像取得部330具有特殊光圖像生成部331、特殊光圖像存儲(chǔ)部332、信號(hào)提取部333、矩陣數(shù)據(jù)設(shè)定部334。特殊光圖像生成部331對(duì)由AD轉(zhuǎn)換部310轉(zhuǎn)換并輸入的數(shù)字圖像信號(hào)進(jìn)行圖像處理,生成特殊光圖像。在本實(shí)施例中,特殊光圖像為窄帶光圖像。在本實(shí)施方式中,被輸入到特殊光圖像生成部331的數(shù)字圖像信號(hào)是與被輸入到通常光圖像生成部321的數(shù)字圖像信號(hào)相同的信號(hào)。這里,對(duì)在信號(hào)提取部333、矩陣數(shù)據(jù)設(shè)定部334和特殊光圖像生成部331中生成窄帶光圖像的方法進(jìn)行說明。首先,對(duì)所輸入的數(shù)字圖像信號(hào)進(jìn)行現(xiàn)有的插值處理,生成具有R、G、B的3個(gè)通道的彩色圖像。該圖像是在白色光源下使用第I攝像元件250對(duì)被攝體進(jìn)行攝像的情況下的彩色圖像。接著,根據(jù)該彩色圖像,使用公知的分光估計(jì)技術(shù),估計(jì)彩色圖像的各像素中的被攝體的分光反射率。分光估計(jì)技術(shù)的詳細(xì)情況例如在專利文獻(xiàn)3的
中被公開,通過進(jìn)行這種處理,例如各像素在380nm 780nm中以每IOnm取得具有被攝體的分光反射率特性O(shè)(X)的分光圖像信息(這里\為380 780)。這里,將圖像上的位置(x,y)中的分光反射率特性記述為0 ( Ax,y)。并且,設(shè)本實(shí)施方式中的白色光源的分光放射率為E ( A ),光學(xué)系統(tǒng)的分光透射率為L ( A ),與第I實(shí)施方式中的第2攝像元件260的濾色鏡g2、b2對(duì)應(yīng)的像素的分光感光度分別為g2 ( A )、b2 ( X )。于是,能夠利用以下的式(29)、式(30)計(jì)算與第I實(shí)施方式的G2圖像和B2圖像對(duì)應(yīng)的G2’圖像和B2’圖像的位置(x,y)中的信號(hào)值G2’(&7)和82,(x,y)。G2,(x, y) = / E (入 〇(入 *L (入 *g2 入)d 入......(29)B2,(x, y) = / E (入 〇(入 *L (入 *b2 入)d 入......(30)通過針對(duì)圖像上的所有位置(x,y)進(jìn)行這種計(jì)算,能夠從由第I攝像元件250得到的圖像信號(hào)中取得G2’圖像和B2’圖像。接著,與實(shí)施方式I同樣,根據(jù)該G2’圖像和B2’圖像,生成具有R、G、B的3個(gè)通道的彩色圖像。這里,例如通過對(duì)彩色圖像的R通道輸入G2圖像、對(duì)G通道和B通道輸入B2圖像,生成彩色圖像。特殊光圖像生成部331進(jìn)一步對(duì)所生成的彩色圖像進(jìn)行白平衡、灰度轉(zhuǎn)換等處理,作為窄帶光圖像輸出。特殊光圖像存儲(chǔ)部332存儲(chǔ)從特殊光圖像生成部輸出的特殊光圖像。關(guān)于由通常光圖像取得部320和特殊光圖像取得部330取得圖像后的處理,只要進(jìn)行與第I、第2或第3實(shí)施方式相同的處理即可。在以上的本實(shí)施方式中,第2圖像取得部(狹義上為特殊光圖像取得部330)根據(jù)第I圖像生成第2圖像。具體而言,第2圖像取得部包括信號(hào)提取部333和矩陣數(shù)據(jù)設(shè)定部334。信號(hào)提取部333提取白色光的波段中的信號(hào)。矩陣數(shù)據(jù)設(shè)定部334設(shè)定用于計(jì)算特定波段中的信號(hào)的矩陣數(shù)據(jù)。然后,第2圖像取得部使用矩陣數(shù)據(jù),根據(jù)信號(hào)提取部333提取出的信號(hào),計(jì)算特定波段的信號(hào),生成第2圖像。由此,能夠根據(jù)第I圖像生成第2圖像,所以如圖30所示,僅利用一個(gè)攝像元件也能夠?qū)崿F(xiàn)系統(tǒng),能夠減小插入部200。并且,由于部件很少即可,所以還能夠期待降低成本的效果。6.第5實(shí)施方式 參照?qǐng)D34對(duì)本發(fā)明的第5實(shí)施方式的內(nèi)窺鏡系統(tǒng)進(jìn)行說明。本實(shí)施方式的內(nèi)窺鏡系統(tǒng)具有光源部100、插入部200、圖像處理部300、顯示部400、外部I/F部500。光源部100具有產(chǎn)生白色光的白色光源110、用于使來自光源的出射光會(huì)聚在光導(dǎo)纖維210的會(huì)聚透鏡120、以及從白色光中提取規(guī)定波段的光的旋轉(zhuǎn)濾鏡130。如圖35所示,旋轉(zhuǎn)濾鏡130由透射率特性不同的2種濾鏡F1、F2構(gòu)成。這些濾鏡F1、F2例如如圖36所示,濾鏡Fl具有透射400 650nm的波段的光的透射率特性,濾鏡F2具有透射600 650nm的波段的光的透射率特性。濾鏡Fl的光是白色光。通過濾鏡F2提取出的600 650nm的波段的光具有對(duì)Cy5這種熒光藥劑進(jìn)行激勵(lì)而產(chǎn)生660 750nm的波段的熒光的特性。這里,該熒光藥劑具有特殊地積累在腫瘤等病變部上的性質(zhì)。插入部200例如形成為細(xì)長且能夠彎曲,以使得能夠插入體腔內(nèi)。插入部200具有用于引導(dǎo)由光源部會(huì)聚后的光的光導(dǎo)纖維210、使通過該光導(dǎo)纖維210引導(dǎo)到前端的光擴(kuò)散并照射到觀察對(duì)象的照明透鏡220、使從觀察對(duì)象返回的反射光會(huì)聚的物鏡230、將會(huì)聚后的反射光和熒光分支到不同光路的二色鏡280、遮擋分支后的熒光中包含的激勵(lì)光的阻擋濾鏡270、檢測(cè)分支后的反射光的第I攝像元件250、以及檢測(cè)通過阻擋濾鏡270后的熒光的第2攝像元件260。如圖37所示,阻擋濾鏡270具有如下的透射率特性僅使通過二色鏡280從反射光分支的光中的相當(dāng)于熒光的波段660 750nm的光通過,遮斷其他光。并且,第I攝像元件250例如是具有圖4所示的R、G、B的分光特性的拜耳型彩色攝像元件,第2攝像元件260例如是在波段660 750nm中具有較高的感光度特性的單色攝像元件。圖像處理部300具有AD轉(zhuǎn)換部310、通常光圖像取得部320、特殊光圖像取得部330、輸出圖像生成部340、控制部350。控制部350與通常光圖像取得部320、特殊光圖像取得部330、輸出圖像生成部340雙向連接,并對(duì)它們進(jìn)行控制。進(jìn)而,控制部350還與所述旋轉(zhuǎn)濾鏡130雙向連接,旋轉(zhuǎn)濾鏡130根據(jù)來自控制部350的信號(hào)對(duì)電動(dòng)機(jī)進(jìn)行旋轉(zhuǎn)驅(qū)動(dòng),由此,依次切換濾鏡Fl和F2,依次對(duì)作為觀察對(duì)象的體腔內(nèi)組織照射照明光。并且,控制部350將配置在光路中的濾鏡FI、F2的信息作為觸發(fā)信號(hào),輸出到通常光圖像取得部320、特殊光圖像取得部330、輸出圖像生成部340。外部I/F部500是用于供用戶對(duì)該內(nèi)窺鏡系統(tǒng)進(jìn)行輸入等的接口。AD轉(zhuǎn)換部310將從第I攝像元件250和第2攝像元件260輸出的模擬信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)并輸出。
通常光圖像取得部320根據(jù)從AD轉(zhuǎn)換部310輸出的數(shù)字信號(hào)取得通常光圖像。特殊光圖像取得部330根據(jù)從AD轉(zhuǎn)換部310輸出的數(shù)字信號(hào)取得特殊光圖像。由通常光圖像取得部320取得的通常光圖像和由特殊光圖像取得部330取得的特殊光圖像被輸出到輸出圖像生成部340。輸出圖像生成部340根據(jù)這2張圖像生成I張輸出圖像并輸出到圖像顯示部。如所述圖7所示,通常光圖像取得部320具有通常光圖像生成部321和通常光圖像存儲(chǔ)部322。通常光圖像生成部321通過從控制部350送來的觸發(fā)信號(hào),識(shí)別濾鏡Fl位于光路中的期間,在濾鏡Fl位于光路中的期間內(nèi),針對(duì)從由第I攝像元件送來的模擬信號(hào)轉(zhuǎn)換后的數(shù)字信號(hào)進(jìn)行圖像處理,生成通常光圖像。具體而言,進(jìn)行現(xiàn)有的插值處理、白平衡、顏色轉(zhuǎn)換、灰度轉(zhuǎn)換等處理,生成通常光圖像并輸出。通常光圖像存儲(chǔ)部322存儲(chǔ)從通常光圖像生成部321輸出的通常光圖像。如所述圖8所示,特殊光圖像取得部330具有特殊光圖像生成部331和特殊光圖像存儲(chǔ)部332。特殊光圖像生成部331通過從控制部350送來的觸發(fā)信號(hào),識(shí)別濾鏡F2位于光路中的期間,在濾鏡F2位于光路中的期間內(nèi),針對(duì)從由第2攝像元件送來的模擬信號(hào)轉(zhuǎn)換后的數(shù)字信號(hào)進(jìn)行圖像處理,生成特殊光圖像。在本實(shí)施方式中,特殊光圖像為單色的熒光圖像。具體而言,針對(duì)取得了從積累有藥劑熒光的病變部產(chǎn)生的熒光的圖像信號(hào),例如進(jìn)行增益調(diào)整或灰度轉(zhuǎn)換等處理,生成單色的特殊光圖像并輸出。特殊光圖像存儲(chǔ)部332存儲(chǔ)從特殊光圖像生成部331輸出的特殊光圖像。圖40是示出位于光路中的濾鏡的種類以及在通常光圖像存儲(chǔ)部322和特殊光圖像存儲(chǔ)部332中存儲(chǔ)的圖像的圖。首先,在定時(shí)1,在光路中插入濾鏡F1。此時(shí),所照射的照明光是白色光,在通常光圖像存儲(chǔ)部322中存儲(chǔ)通常光圖像作為彩色圖像,在特殊光圖像存儲(chǔ)部332中不存儲(chǔ)圖像。接著,在定時(shí)2,在光路中插入濾鏡F2。此時(shí),所照射的照明光是激勵(lì)光,在特殊光圖像存儲(chǔ)部332中存儲(chǔ)從積累有藥劑熒光的病變部產(chǎn)生的熒光作為單色圖像,在通常光圖像存儲(chǔ)部322中不存儲(chǔ)圖像。通常光圖像存儲(chǔ)部322和特殊光圖像存儲(chǔ)部332能夠分別存儲(chǔ)多張圖像。接著,對(duì)本實(shí)施方式中的輸出圖像生成部340的具體結(jié)構(gòu)進(jìn)行說明。圖38是說明輸出圖像生成部340的結(jié)構(gòu)的一例的框圖。輸出圖像生成部340具有關(guān)注候選區(qū)域檢測(cè)部341、可靠度計(jì)算部342、顯示方式設(shè)定部343、對(duì)應(yīng)部344。在本實(shí)施方式中,由于利用通常光圖像取得部320和特殊光圖像取得部330交替取得通常光圖像和特殊光圖像,所以對(duì)應(yīng)部344進(jìn)行這些圖像的對(duì)應(yīng)。這里,對(duì)本實(shí)施方式中的對(duì)應(yīng)部344的處理進(jìn)行具體說明。圖39是示出取得在通常光圖像存儲(chǔ)部322中存儲(chǔ)的圖像的定時(shí)和取得在特殊光圖像存儲(chǔ)部332中存儲(chǔ)的圖像的定時(shí)的圖。對(duì)應(yīng)部344根據(jù)來自控制部350的控制信號(hào),從通常光圖像存儲(chǔ)部322和特殊光圖像存儲(chǔ)部332中,各讀出一張以取得圖像的定時(shí)之差最小的方式相對(duì)應(yīng)的通常光圖像和特殊光圖像。這里,最初讀出的圖像是在定時(shí)I取得的通常光圖像和在定時(shí)2取得的特殊光圖像,接著讀出的圖像是在定時(shí)2取得的特殊光圖像和在定時(shí)3取得的通常光圖像。這樣,對(duì)應(yīng)部344能夠以與圖像取得相同的定時(shí)間隔取得通常光圖像和特殊光圖像雙方。
并且,對(duì)應(yīng)部344也可以利用現(xiàn)有的對(duì)應(yīng)方法進(jìn)行對(duì)應(yīng)。圖41、圖42示出具體的對(duì)應(yīng)方法。在圖41中,在定時(shí)Tl照射白色光,在定時(shí)T2照射激勵(lì)光。由此,在定時(shí)Tl得到通常光圖像,在定時(shí)T2得到特殊光圖像。在定時(shí)T2,還能夠通過使用第I攝像元件250而取得通常光圖像(在圖40中未圖示)。這里,通過計(jì)算定時(shí)Tl的通常光圖像與定時(shí)T2的通常光圖像之間的運(yùn)動(dòng)矢量,能夠進(jìn)行定時(shí)Tl的通常光圖像與定時(shí)T2的特殊光圖像的對(duì)應(yīng)。并且,如圖42所示,也可以在根據(jù)在定時(shí)Tl和定時(shí)T3照射的白色光而得到的通常光圖像之間計(jì)算運(yùn)動(dòng)矢量。這樣,即使在定時(shí)T2沒有得到通常光圖像,也能夠計(jì)算運(yùn)動(dòng)矢量。該情況下,通過使用定時(shí)的間隔A Tl和A T2,能夠進(jìn)行定時(shí)Tl的通常光圖像與定時(shí)T2的特殊光圖像的對(duì)應(yīng)。然后,對(duì)應(yīng)的通常光圖像被輸出到顯示方式設(shè)定部343。并且,對(duì)應(yīng)的特殊光圖像被輸出到關(guān)注候選區(qū)域檢測(cè)部341和顯示方式設(shè)定部343。關(guān)注候選區(qū)域檢測(cè)部341使用從特殊光圖像取得部330輸出的特殊光圖像檢測(cè)關(guān)注區(qū)域,將關(guān)注區(qū)域信息輸出到可靠度計(jì)算部342和顯示方式設(shè)定部343??煽慷扔?jì)算部342與顯示方式設(shè)定部343連接。控制部350與關(guān)注候選區(qū)域檢測(cè)部341、可靠度計(jì)算部342、顯示方式設(shè)定部343、對(duì)應(yīng)部344雙 向連接,并對(duì)它們進(jìn)行控制。并且,顯示方式設(shè)定部343從由通常光圖像取得部320輸出的通常光圖像和由特殊光圖像取得部330輸出的特殊光圖像中選擇圖像,向顯示部400輸出圖像。進(jìn)而,顯示方式設(shè)定部343也可以根據(jù)從關(guān)注候選區(qū)域檢測(cè)部341輸出的關(guān)注區(qū)域信息,對(duì)通常光圖像或特殊光圖像進(jìn)行加工后,向顯示部400輸出圖像。關(guān)注候選區(qū)域檢測(cè)部341、可靠度計(jì)算部342和顯示方式設(shè)定部343與第I實(shí)施方式、第2實(shí)施方式或第3實(shí)施方式相同。另外,由于本實(shí)施方式中的特殊光圖像如上所述為單色的熒光圖像,所以作為在關(guān)注候選區(qū)域檢測(cè)部341中使用的特征量,例如使用熒光圖像的亮度值即可。在本實(shí)施方式中使用2種照明光,但是,使用3種以上的照明也沒有問題,也可以使用例如圖43所示的旋轉(zhuǎn)濾鏡。這里,濾鏡Fl是透射白色光的濾鏡,濾鏡F2是透射針對(duì)Cy5這樣的熒光藥劑的第I激勵(lì)光的濾鏡,濾鏡F3是透射針對(duì)不同的熒光藥劑的第2激勵(lì)光的濾鏡。該情況下,例如,能夠根據(jù)第I激勵(lì)光照明時(shí)由第2攝像元件取得的熒光圖像和第2激勵(lì)光照明時(shí)由第2攝像元件取得的熒光圖像這2種熒光圖像,進(jìn)行虛擬彩色處理,生成特殊光圖像。此時(shí),作為在關(guān)注候選區(qū)域檢測(cè)部341中使用的特征量,例如與第I實(shí)施方式和第2實(shí)施方式同樣,可以使用色相H的值,也可以使用除此之外的亮度/顏色信息。另夕卜,該情況下,需要將阻擋濾鏡變更為遮斷第I激勵(lì)光和第2激勵(lì)光并透射針對(duì)各個(gè)激勵(lì)光的熒光的特性。并且,雖然在本實(shí)施方式中使用了熒光藥劑,但是,也可以例如如現(xiàn)有的作為AFI(Auto Fluorescence Imaging :自體突光成像)而公知的技術(shù)那樣,構(gòu)成為對(duì)從活體中的骨膠原產(chǎn)生的自體熒光進(jìn)行觀察。該情況下,使用390 470nm的波段的光作為激勵(lì)光,將阻擋濾鏡變更為透射490 625nm的波段的光的特性即可。進(jìn)而,也可以取而代之而使用被血液中的血紅蛋白吸收的540 560nm的波段的光作為照明光,根據(jù)其反射光圖像和所述自體熒光圖像生成虛擬彩色圖像,用作特殊光圖像。進(jìn)而,也可以例如如現(xiàn)有的作為IRI (Infra Red Imaging :紅外成像)而公知的技術(shù)那樣,在靜脈注射了 ICG后,使用2個(gè)紅外光(790 820nm和905 970nm的波段的光)作為照明光,根據(jù)它們的反射光圖像生成虛擬彩色圖像,用作特殊光圖像。
并且,在本實(shí)施方式中,雖然構(gòu)成圖像處理部300的各部由硬件構(gòu)成,但是,與第I實(shí)施方式同樣,也可以構(gòu)成為,針對(duì)預(yù)先取得的圖像,CPU進(jìn)行各部的處理,通過CPU執(zhí)行程序,也可以作為軟件來實(shí)現(xiàn)?;蛘撸部梢岳密浖?gòu)成各部進(jìn)行的處理的一部分。作為利用軟件構(gòu)成各部進(jìn)行的處理的一部分的情況的一例,使用圖44的流程圖說明針對(duì)預(yù)先取得的通常光圖像和特殊光圖像、利用軟件實(shí)現(xiàn)圖38的輸出圖像生成部340的處理的情況下的處理順序。在本實(shí)施方式中,由于交替取得通常光圖像和特殊光圖像,所以首先根據(jù)取得各個(gè)圖像的定時(shí)信息,利用所述方法進(jìn)行這些圖像的對(duì)應(yīng)S61。接著,將特殊光圖像讀入存儲(chǔ)器中S62,將與該特殊光圖像相對(duì)應(yīng)的通常光圖像讀入存儲(chǔ)器中S63。關(guān)注區(qū)域檢測(cè)步驟S64和顯示方式?jīng)Q定步驟S65與第I實(shí)施方式、第2實(shí)施方式或第3實(shí)施方式相同。然后,在針對(duì)所有圖像完成了一連串處理的情況下,結(jié)束處理,在殘留有未處理的圖像的情況下,繼續(xù)進(jìn)行同樣的處理S66。在以上的本實(shí)施方式中,輸出圖像生成部340包括對(duì)應(yīng)部344,該對(duì)應(yīng)部344根據(jù) 識(shí)別第I圖像的第I識(shí)別信息和識(shí)別第2圖像的第2識(shí)別信息,進(jìn)行第I圖像與第2圖像的對(duì)應(yīng)。由此,即使在第I圖像與第2圖像的攝像定時(shí)錯(cuò)開時(shí),也能夠明確地進(jìn)行第I圖像與第2圖像的對(duì)應(yīng)。作為進(jìn)行對(duì)應(yīng)的理由,舉出要檢測(cè)關(guān)注區(qū)域(具體而言為病變部)的圖像是第2圖像,要進(jìn)行圖像加工的圖像是第I圖像。即,在希望對(duì)第I圖像的病變部進(jìn)行加工時(shí),要是第I圖像與第2圖像錯(cuò)開,則可能對(duì)估計(jì)錯(cuò)的位置進(jìn)行加工。因此,在能夠同時(shí)取得第I圖像和第2圖像的情況下,沒有特別的問題,但是,如本實(shí)施方式那樣,在產(chǎn)生錯(cuò)開的情況下最好進(jìn)行對(duì)應(yīng)。并且,第I圖像取得部取得白色光圖像,第2圖像取得部取得使用了具有特定波段的光源的圖像。而且,第I識(shí)別信息是對(duì)第I圖像進(jìn)行攝像的定時(shí)的信息,第2識(shí)別信息是對(duì)第2圖像進(jìn)行攝像的定時(shí)的信息。然后,對(duì)應(yīng)部將第I圖像的攝像定時(shí)與第2圖像的攝像定時(shí)在時(shí)間上接近的第I圖像和第2圖像相對(duì)應(yīng)。由此,在時(shí)間上接近的2張圖像相對(duì)應(yīng)。具體而言,在圖39中,定時(shí)I的通常光圖像與定時(shí)2的特殊光圖像相對(duì)應(yīng),定時(shí)2的特殊光圖像與定時(shí)3的通常光圖像相對(duì)應(yīng)。因此,能夠?qū)⑽恢缅e(cuò)開抑制得較小,能夠在第I圖像上對(duì)適當(dāng)位置進(jìn)行加工。并且,第I圖像和第2圖像也可以是拍攝了活體內(nèi)的活體內(nèi)圖像。而且,活體內(nèi)圖像中包含的特定波段也可以是熒光物質(zhì)發(fā)出的熒光的波段。具體而言為490nm 625nm的波段。由此,能夠進(jìn)行被稱為AFI的熒光觀察。通過照射激勵(lì)光(390nm 470nm),能夠?qū)碜怨悄z原等熒光物質(zhì)的自體熒光進(jìn)行觀察。在這種觀察中,能夠利用與正常粘膜不同的色調(diào)對(duì)病變進(jìn)行強(qiáng)調(diào)顯示,能夠抑制病變部的遺漏等。另外,490nm 625nm這樣的數(shù)字表示在照射所述激勵(lì)光時(shí)、骨膠原等熒光物質(zhì)發(fā)出的自體熒光的波段。但是,該情況下的波段不限于此,例如由于與熒光物質(zhì)發(fā)出的熒光的波段有關(guān)的實(shí)驗(yàn)結(jié)果等的變動(dòng)原因,考慮波段的下限值減少0 10%左右,上限值上升0 10%左右。并且,也可以同時(shí)照射被血紅蛋白吸收的波段(540nm 560nm),生成虛擬彩色圖像。并且,第I圖像和第2圖像也可以是拍攝了活體內(nèi)的活體內(nèi)圖像。而且,活體內(nèi)圖像中包含的特定波段也可以是紅外光的波段。具體而言為790nm 820nm或905nm 970nm的波段。由此,能夠進(jìn)行被稱為IRI的紅外光觀察。在靜脈注射了容易吸收紅外光的作為紅外指示藥劑的ICG (吲哚菁綠)后,通過照射上述波段的紅外光,能夠?qū)θ祟愌劬茈y視覺辨認(rèn)的粘膜深部的血管或血流信息進(jìn)行強(qiáng)調(diào)顯示,能夠進(jìn)行胃癌的深度診斷和治療方針的判定等。另外,790nm 820nm這樣的數(shù)字是根據(jù)紅外指示藥劑的吸收最強(qiáng)這樣的特性而求出的,905nm 970nm這樣的數(shù)字是根據(jù)紅外指示藥劑的吸收最弱這樣的特性而求出的。但是,該情況下的波段不限于此,例如由于與紅外指示藥劑的吸收有關(guān)的實(shí)驗(yàn)結(jié)果等的變動(dòng)原因,考慮波段的下限值減少O 10%左右,上限值上升O 10%左右。以上對(duì)應(yīng)用了本發(fā)明的5個(gè)實(shí)施方式I 5及其變形例進(jìn)行了說明,但是,本發(fā)明不限于各實(shí)施方式I 5及其變形例本身,在實(shí)施階段,能夠在不脫離發(fā)明主旨的范圍內(nèi)對(duì)結(jié)構(gòu)要素進(jìn)行變形而具體化。并且,通過適當(dāng)組合上述各實(shí)施方式I 5和變形例所公開的多個(gè)結(jié)構(gòu)要素,能夠形成各種發(fā)明。例如,可以從各實(shí)施方式I 5和變形例所記載的全 部結(jié)構(gòu)要素中刪除若干個(gè)結(jié)構(gòu)要素。進(jìn)而,可以適當(dāng)組合不同實(shí)施方式和變形例中說明的結(jié)構(gòu)要素。這樣,能夠在不脫離發(fā)明主旨的范圍內(nèi)進(jìn)行各種變形和應(yīng)用。并且,在說明書或附圖中,至少一次與更廣義或同義的不同用語(第I圖像、第2圖像等)一起記載的用語(通常光圖像、特殊光圖像等)在說明書或附圖的任意部位中,能夠置換為與其不同的用語。標(biāo)號(hào)說明100 :光源部;110 白色光源;120 :會(huì)聚透鏡;130 :旋轉(zhuǎn)濾鏡;200 :插入部;210 光導(dǎo)纖維;220 :照明透鏡;230 :物鏡;240 :半透半反鏡;250 :第I攝像元件;260 :第2攝像元件;280 :二色鏡;300 :圖像處理部;310 :AD轉(zhuǎn)換部;310a :AD轉(zhuǎn)換部;310b :AD轉(zhuǎn)換部;320 :通常光圖像取得部;321 :通常光圖像生成部;322 :通常光圖像存儲(chǔ)部;330 :特殊光圖像取得部;331 :特殊光圖像生成部;332 :特殊光圖像存儲(chǔ)部;333 :信號(hào)提取部;334 矩陣數(shù)據(jù)設(shè)定部;340 :輸出圖像生成部;341 :關(guān)注候選區(qū)域檢測(cè)部;342 :可靠度計(jì)算部;343 :顯示方式設(shè)定部;344 :對(duì)應(yīng)部;345 :優(yōu)先度設(shè)定部;350 :控制部;400 :顯示部;500 外部 I/F 部;600 :計(jì)算機(jī)系統(tǒng);610 :主體部;611 CPU ;612 RAM ;613 R0M ;614 =HDD ;615 CD-ROM 驅(qū)動(dòng)器;616 =USB 端口 ;617 :1/0 接口 ;618 :LAN 接口 ;620 :顯示器;621 :顯示畫面;630 :鍵盤;640 鼠標(biāo);650 :調(diào)制解調(diào)器;660 :CD_R0M ;670 =USB 存儲(chǔ)器;681 PC ;682 服務(wù)器;683 :打印機(jī);3411 :局部區(qū)域設(shè)定部;3412 :特征量計(jì)算部;3413 :分類部;3414 區(qū)域設(shè)定部;3431 :加工部;3432 :選擇部;34311 :關(guān)注信息設(shè)定部;34312 :合成比設(shè)定部;34313 :區(qū)域選出部;34314 :區(qū)域加工部;34315 :亮度轉(zhuǎn)換部;N1 LAN/WAN ;N3 :公共線路。
權(quán)利要求
1.ー種圖像處理裝置,其特征在于,該圖像處理裝置包括 第I圖像取得部,其取得包含具有白色光波段中的信息的被攝體像的圖像,作為第I圖像; 第2圖像取得部,其取得包含具有特定波段中的信息的被攝體像的圖像,作為第2圖像; 關(guān)注候選區(qū)域檢測(cè)部,其根據(jù)所述第2圖像內(nèi)的像素的特征量,檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域; 可靠度計(jì)算部,其計(jì)算表示所檢測(cè)到的所述關(guān)注候選區(qū)域是關(guān)注區(qū)域的確定程度的可靠度;以及 顯示方式設(shè)定部,其進(jìn)行根據(jù)計(jì)算出的所述可靠度設(shè)定輸出圖像的顯示方式的處理。
2.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述顯示方式設(shè)定部進(jìn)行提高與所述第2圖像的所述關(guān)注區(qū)域?qū)?yīng)的所述第I圖像的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的顯示方式設(shè)定處理。
3.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述顯示方式設(shè)定部包括加工部,該加工部根據(jù)計(jì)算出的所述可靠度和所述第I圖像,進(jìn)行所述第I圖像的加工處理, 所述顯示方式設(shè)定部通過進(jìn)行所述加工處理,設(shè)定所述輸出圖像的顯示方式。
4.根據(jù)權(quán)利要求3所述的圖像處理裝置,其特征在干, 所述加工部進(jìn)行提高與判斷為所述可靠度高的所述關(guān)注候選區(qū)域?qū)?yīng)的所述第I圖像內(nèi)的對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的加工處理。
5.根據(jù)權(quán)利要求3所述的圖像處理裝置,其特征在干, 作為所述加工處理,所述加工部進(jìn)行所述第I圖像的轉(zhuǎn)換處理。
6.根據(jù)權(quán)利要求3所述的圖像處理裝置,其特征在干, 作為所述加工處理,所述加工部進(jìn)行將所述第2圖像的所述關(guān)注區(qū)域的部分的圖像即部分圖像與所述第I圖像相關(guān)聯(lián)的處理。
7.根據(jù)權(quán)利要求3所述的圖像處理裝置,其特征在干, 所述加工部包括區(qū)域選出部,該區(qū)域選出部根據(jù)所述可靠度,從所述關(guān)注候選區(qū)域檢測(cè)部檢測(cè)到的所述關(guān)注候選區(qū)域中選出所述關(guān)注區(qū)域。
8.根據(jù)權(quán)利要求7所述的圖像處理裝置,其特征在干, 所述區(qū)域選出部根據(jù)優(yōu)先度,從所述關(guān)注區(qū)域中選出警告區(qū)域。
9.根據(jù)權(quán)利要求8所述的圖像處理裝置,其特征在干, 根據(jù)所述可靠度、像素的特征量和應(yīng)該關(guān)注的程度中的至少ー個(gè)信息,設(shè)定所述優(yōu)先度。
10.根據(jù)權(quán)利要求8所述的圖像處理裝置,其特征在干, 所述區(qū)域選出部保持與所述警告區(qū)域的上限數(shù)有關(guān)的信息,在預(yù)測(cè)為所述警告區(qū)域超過所述上限數(shù)的情況下,不將超過該上限數(shù)的量的所述關(guān)注區(qū)域設(shè)定為所述警告區(qū)域。
11.根據(jù)權(quán)利要求10所述的圖像處理裝置,其特征在干, 所述加工部包括區(qū)域加工部, 所述區(qū)域加工部進(jìn)ー步保持與所述警告區(qū)域的加工處理的優(yōu)先度有關(guān)的信息,從所述加工處理的優(yōu)先度高的警告區(qū)域起依次進(jìn)行加工處理。
12.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述可靠度計(jì)算部根據(jù)檢測(cè)到的所述關(guān)注候選區(qū)域的尺寸,計(jì)算所述可靠度。
13.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述可靠度計(jì)算部根據(jù)檢測(cè)到的所述關(guān)注候選區(qū)域內(nèi)的像素的特征量,計(jì)算所述可靠度。
14.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述關(guān)注候選區(qū)域檢測(cè)部包括 局部區(qū)域設(shè)定部,其將所述第2圖像分割成多個(gè)局部區(qū)域;以及特征量計(jì)算部,其使用所述多個(gè)局部區(qū)域的各局部區(qū)域內(nèi)的像素的信息,計(jì)算所述各局部區(qū)域的特征量, 所述關(guān)注候選區(qū)域檢測(cè)部根據(jù)計(jì)算出的所述各局部區(qū)域的特征量,檢測(cè)所述關(guān)注候選區(qū)域。
15.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述關(guān)注候選區(qū)域檢測(cè)部包括 局部區(qū)域設(shè)定部,其將所述第I圖像分割成多個(gè)局部區(qū)域;以及特征量計(jì)算部,其使用與所述多個(gè)局部區(qū)域的各局部區(qū)域內(nèi)的像素對(duì)應(yīng)的第2圖像內(nèi)的像素的信息,計(jì)算所述各局部區(qū)域的特征量, 所述關(guān)注候選區(qū)域檢測(cè)部根據(jù)計(jì)算出的所述各局部區(qū)域的特征量,檢測(cè)所述關(guān)注候選區(qū)域。
16.根據(jù)權(quán)利要求14或15所述的圖像處理裝置,其特征在干, 所述關(guān)注候選區(qū)域檢測(cè)部包括分類部,該分類部按照每個(gè)局部區(qū)域?qū)τ?jì)算出的所述各局部區(qū)域的特征量與給定閾值進(jìn)行比較,根據(jù)比較結(jié)果將多個(gè)局部區(qū)域分類為多個(gè)群組,所述關(guān)注候選區(qū)域檢測(cè)部檢測(cè)包含被分類為所述多個(gè)群組中的至少ー個(gè)群組的局部區(qū)域和與該局部區(qū)域相鄰的局部區(qū)域群的區(qū)域,作為所述關(guān)注候選區(qū)域。
17.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述關(guān)注候選區(qū)域檢測(cè)部包括特征量計(jì)算部,該特征量計(jì)算部使用所述第2圖像中包含的像素的信息,計(jì)算各像素的特征量, 所述關(guān)注候選區(qū)域檢測(cè)部根據(jù)計(jì)算出的所述各像素的特征量,檢測(cè)應(yīng)該關(guān)注的關(guān)注像素,將至少包含檢測(cè)到的所述關(guān)注像素的區(qū)域檢測(cè)為關(guān)注候選區(qū)域。
18.根據(jù)權(quán)利要求17所述的圖像處理裝置,其特征在干, 所述關(guān)注候選區(qū)域包含檢測(cè)到的所述關(guān)注像素和從非關(guān)注像素中選擇出的像素即選擇非關(guān)注像素, 所述非關(guān)注像素是所述第2圖像中包含的像素,是未檢測(cè)為所述關(guān)注像素的像素。
19.根據(jù)權(quán)利要求18所述的圖像處理裝置,其特征在干, 所述關(guān)注候選區(qū)域檢測(cè)部選擇所述選擇非關(guān)注像素,以使得由所述關(guān)注像素和所述選擇非關(guān)注像素構(gòu)成的所述關(guān)注候選區(qū)域形成規(guī)定圖形。
20.根據(jù)權(quán)利要求5所述的圖像處理裝置,其特征在干, 所述加工部進(jìn)行提高與判斷為所述可靠度高的所述關(guān)注候選區(qū)域?qū)?yīng)的所述第I圖像內(nèi)的所述對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的顔色轉(zhuǎn)換處理。
21.根據(jù)權(quán)利要求5所述的圖像處理裝置,其特征在干, 所述加工部包括區(qū)域選出部,該區(qū)域選出部根據(jù)所述可靠度,從所述關(guān)注候選區(qū)域檢測(cè)部檢測(cè)到的所述關(guān)注候選區(qū)域中選出所述關(guān)注區(qū)域,并在所述第I圖像內(nèi)選出與所選出的所述關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域, 所述加工部對(duì)所述對(duì)應(yīng)關(guān)注區(qū)域進(jìn)行顏色轉(zhuǎn)換處理。
22.根據(jù)權(quán)利要求21所述的圖像處理裝置,其特征在干, 所述加工部通過進(jìn)行所述對(duì)應(yīng)關(guān)注區(qū)域內(nèi)包含的像素的顏色和目標(biāo)顏色的加權(quán)相加處理,進(jìn)行所述顏色轉(zhuǎn)換處理。
23.根據(jù)權(quán)利要求21所述的圖像處理裝置,其特征在干, 所述加工部通過進(jìn)行將位于所述對(duì)應(yīng)關(guān)注區(qū)域周緣的像素的顔色轉(zhuǎn)換為目標(biāo)顏色的處理,進(jìn)行所述顏色轉(zhuǎn)換處理。
24.根據(jù)權(quán)利要求21所述的圖像處理裝置,其特征在干, 所述加工部包括關(guān)注信息設(shè)定部,該關(guān)注信息設(shè)定部對(duì)檢測(cè)到的所述關(guān)注候選區(qū)域設(shè)定表示應(yīng)該關(guān)注的程度的關(guān)注信息, 所述加工部根據(jù)所設(shè)定的所述關(guān)注信息所表示的關(guān)注程度,對(duì)在所述顏色轉(zhuǎn)換處理時(shí)使用的顏色進(jìn)行變更。
25.根據(jù)權(quán)利要求5所述的圖像處理裝置,其特征在干, 所述加工部進(jìn)行提高與判斷為所述可靠度高的所述關(guān)注候選區(qū)域?qū)?yīng)的所述第I圖像內(nèi)的所述對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的亮度轉(zhuǎn)換處理。
26.根據(jù)權(quán)利要求5所述的圖像處理裝置,其特征在干, 所述加工部包括區(qū)域選出部,該區(qū)域選出部根據(jù)所述可靠度,從所述關(guān)注候選區(qū)域檢測(cè)部檢測(cè)到的所述關(guān)注候選區(qū)域中選出所述關(guān)注區(qū)域,并在所述第I圖像內(nèi)選出與所選出的所述關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域, 所述加工部對(duì)所述對(duì)應(yīng)關(guān)注區(qū)域以外的區(qū)域進(jìn)行亮度轉(zhuǎn)換處理。
27.根據(jù)權(quán)利要求26所述的圖像處理裝置,其特征在干, 所述加工部通過降低所述對(duì)應(yīng)關(guān)注區(qū)域以外的區(qū)域中包含的像素的亮度,進(jìn)行所述亮度轉(zhuǎn)換處理。
28.根據(jù)權(quán)利要求6所述的圖像處理裝置,其特征在干, 作為提高與判斷為所述可靠度高的所述關(guān)注候選區(qū)域?qū)?yīng)的所述第I圖像內(nèi)的所述對(duì)應(yīng)關(guān)注區(qū)域的視覺辨認(rèn)性的處理,所述加工部進(jìn)行將所述第2圖像的所述關(guān)注候選區(qū)域的所述部分圖像與所述第I圖像相關(guān)聯(lián)的處理。
29.根據(jù)權(quán)利要求6所述的圖像處理裝置,其特征在干, 所述加工部包括區(qū)域選出部,該區(qū)域選出部根據(jù)所述可靠度,從所述關(guān)注候選區(qū)域檢測(cè)部檢測(cè)到的所述關(guān)注候選區(qū)域中選出所述關(guān)注區(qū)域,并在所述第I圖像內(nèi)選出與所選出的所述關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域, 所述加工部進(jìn)行在所述第I圖像的附近顯示所述第2圖像的所述關(guān)注區(qū)域的所述部分圖像的處理。
30.根據(jù)權(quán)利要求6所述的圖像處理裝置,其特征在干,所述加工部包括區(qū)域選出部,該區(qū)域選出部根據(jù)所述可靠度,從所述關(guān)注候選區(qū)域檢測(cè)部檢測(cè)到的所述關(guān)注候選區(qū)域中選出所述關(guān)注區(qū)域,并在所述第I圖像內(nèi)選出與所選出的所述關(guān)注區(qū)域?qū)?yīng)的對(duì)應(yīng)關(guān)注區(qū)域, 所述加工部進(jìn)行將所述第2圖像的所述關(guān)注區(qū)域的所述部分圖像置換為所述第I圖像的所述對(duì)應(yīng)關(guān)注區(qū)域的部分圖像的處理。
31.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述圖像處理裝置包括對(duì)應(yīng)部,該對(duì)應(yīng)部根據(jù)識(shí)別所述第I圖像的第I識(shí)別信息和識(shí)別所述第2圖像的第2識(shí)別信息,將所述第I圖像與所述第2圖像相對(duì)應(yīng)。
32.根據(jù)權(quán)利要求31所述的圖像處理裝置,其特征在干, 所述第I圖像取得部通過使用了白色光源的攝像而取得所述第I圖像, 所述第2圖像取得部通過使用了具有所述特定波段的光源的攝像而取得所述第2圖像, 所述第I識(shí)別信息是對(duì)所述第I圖像進(jìn)行攝像的定時(shí)的信息, 所述第2識(shí)別信息是對(duì)所述第2圖像進(jìn)行攝像的定時(shí)的信息, 所述對(duì)應(yīng)部將對(duì)所述第I圖像進(jìn)行攝像的定時(shí)和對(duì)所述第2圖像進(jìn)行攝像的定時(shí)在時(shí)間上接近的所述第I圖像與所述第2圖像相對(duì)應(yīng)。
33.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述特定波段是比所述白色光的波段窄的波段。
34.根據(jù)權(quán)利要求33所述的圖像處理裝置,其特征在干, 所述第I圖像和所述第2圖像是對(duì)活體內(nèi)進(jìn)行了拍攝的活體內(nèi)圖像, 所述活體內(nèi)圖像中包含的所述特定波段是被血液中的血紅蛋白吸收的波長的波段。
35.根據(jù)權(quán)利要求34所述的圖像處理裝置,其特征在干, 所述波段為390納米 445納米或530納米 550納米。
36.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述第I圖像和所述第2圖像是對(duì)活體內(nèi)進(jìn)行了拍攝的活體內(nèi)圖像, 所述活體內(nèi)圖像中包含的所述特定波段是熒光物質(zhì)發(fā)出的熒光的波段。
37.根據(jù)權(quán)利要求36所述的圖像處理裝置,其特征在干, 所述特定波段是490納米 625納米的波段。
38.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述第I圖像和所述第2圖像是對(duì)活體內(nèi)進(jìn)行了拍攝的活體內(nèi)圖像, 所述活體內(nèi)圖像中包含的所述特定波段是紅外光的波段。
39.根據(jù)權(quán)利要求38所述的圖像處理裝置,其特征在干, 所述波段是790納米 820納米或905納米 970納米的波段。
40.根據(jù)權(quán)利要求I所述的圖像處理裝置,其特征在干, 所述第2圖像取得部根據(jù)所取得的所述第I圖像生成所述第2圖像。
41.根據(jù)權(quán)利要求40所述的圖像處理裝置,其特征在干, 所述第2圖像取得部包括信號(hào)提取部,該信號(hào)提取部從所取得的所述第I圖像中提取白色光波段中的信號(hào), 所述第2圖像取得部根據(jù)提取出的所述信號(hào),生成包含所述特定波段中的信號(hào)的所述第2圖像。
42.根據(jù)權(quán)利要求41所述的圖像處理裝置,其特征在干, 所述第2圖像取得部包括矩陣數(shù)據(jù)設(shè)定部,該矩陣數(shù)據(jù)設(shè)定部根據(jù)所述白色光波段中的信號(hào),設(shè)定用于計(jì)算所述特定波段中的信號(hào)的矩陣數(shù)據(jù), 所述第2圖像取得部使用所設(shè)定的所述矩陣數(shù)據(jù),根據(jù)所述白色光波段中的信號(hào)計(jì)算所述特定波段中的信號(hào),生成所述第2圖像。
43.—種電子設(shè)備,其特征在于,該電子設(shè)備包括權(quán)利要求I 42中的任意一項(xiàng)所述的圖像處理裝置。
44.一種內(nèi)窺鏡系統(tǒng),其特征在于,該內(nèi)窺鏡系統(tǒng)包括 第I光源,其對(duì)活體內(nèi)的被攝體照射白色光; 第2光源,其對(duì)活體內(nèi)的被攝體照射特定波段的光; 第I圖像取得部,其通過所述第I光源的照射,取得包含具有白色光波段中的信息的被攝體像的圖像,作為第I活體內(nèi)圖像; 第2圖像取得部,其通過所述第2光源的照射,取得包含具有特定波段中的信息的被攝體像的圖像,作為第2活體內(nèi)圖像; 關(guān)注候選區(qū)域檢測(cè)部,其根據(jù)所述第2活體內(nèi)圖像內(nèi)的像素的特征量,檢測(cè)關(guān)注區(qū)域的候選即關(guān)注候選區(qū)域; 可靠度計(jì)算部,其計(jì)算表示所檢測(cè)到的所述關(guān)注候選區(qū)域是所述關(guān)注區(qū)域的確定程度的可靠度; 顯示方式設(shè)定部,其進(jìn)行根據(jù)計(jì)算出的所述可靠度設(shè)定輸出圖像的顯示方式的處理;以及 顯示部,其按照所設(shè)定的所述顯示方式顯示所述輸出圖像。
45.ー種圖像處理裝置,其特征在于,該圖像處理裝置包括 第I圖像取得部,其取得包含具有白色光波段中的信息的被攝體像的圖像,作為第I圖像; 第2圖像取得部,其取得包含具有特定波段中的信息的被攝體像的圖像,作為第2圖像; 關(guān)注區(qū)域檢測(cè)部,其根據(jù)所述第2圖像內(nèi)的像素的特征量,檢測(cè)應(yīng)該關(guān)注的區(qū)域即關(guān)注區(qū)域;以及 顯示方式設(shè)定部,其進(jìn)行在與所述關(guān)注區(qū)域?qū)?yīng)的輸出圖像的對(duì)應(yīng)關(guān)注區(qū)域中顯示警告區(qū)域的處理,該警告區(qū)域發(fā)出與所述關(guān)注區(qū)域的檢測(cè)結(jié)果有關(guān)的信息。
46.ー種程序,其特征在于,該程序使計(jì)算機(jī)作為以下部分發(fā)揮功能 第I圖像取得部,其取得包含具有白色光波段中的信息的被攝體像的圖像,作為第I圖像; 第2圖像取得部,其取得包含具有特定波段中的信息的被攝體像的圖像,作為第2圖像; 關(guān)注候選區(qū)域檢測(cè)部,其根據(jù)所述第2圖像內(nèi)的像素的特征量,檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域; 可靠度計(jì)算部,其計(jì)算表示所檢測(cè)到的所述關(guān)注候選區(qū)域是關(guān)注區(qū)域的確定程度的可靠度;以及 顯示方式設(shè)定部,其進(jìn)行根據(jù)計(jì)算出的所述可靠度設(shè)定輸出圖像的顯示方式的處理。
47.ー種程序,其特征在于,該程序使計(jì)算機(jī)作為以下部分發(fā)揮功能 第I圖像取得部,其取得包含具有白色光波段中的信息的被攝體像的圖像,作為第I圖像; 第2圖像取得部,其取得包含具有特定波段中的信息的被攝體像的圖像,作為第2圖像; 關(guān)注區(qū)域檢測(cè)部,其根據(jù)所述第2圖像內(nèi)的像素的特征量,檢測(cè)應(yīng)該關(guān)注的區(qū)域即關(guān)注區(qū)域;以及 顯示方式設(shè)定部,其進(jìn)行在與所述關(guān)注區(qū)域?qū)?yīng)的輸出圖像的對(duì)應(yīng)關(guān)注區(qū)域中顯示警告區(qū)域的處理,該警告區(qū)域發(fā)出與所述關(guān)注區(qū)域的檢測(cè)結(jié)果有關(guān)的信息。
全文摘要
本發(fā)明提供如下的圖像處理裝置等能夠取得與白色光的波長區(qū)域?qū)?yīng)的第1圖像和與特定波長區(qū)域?qū)?yīng)的第2圖像,設(shè)定輸出圖像的適當(dāng)?shù)娘@示方式。圖像處理裝置包括第1圖像取得部(320),其取得包含具有白色光波段中的信息的被攝體像的圖像,作為第1圖像;第2圖像取得部(330),其取得包含具有特定波段中的信息的被攝體像的圖像,作為第2圖像;關(guān)注候選區(qū)域檢測(cè)部(341),其根據(jù)第2圖像內(nèi)的像素的特征量,檢測(cè)應(yīng)該關(guān)注的區(qū)域的候選即關(guān)注候選區(qū)域;可靠度計(jì)算部(342),其計(jì)算表示所檢測(cè)到的關(guān)注候選區(qū)域是關(guān)注區(qū)域的確定程度的可靠度;以及顯示方式設(shè)定部(343),其進(jìn)行根據(jù)計(jì)算出的可靠度設(shè)定輸出圖像的顯示方式的處理。
文檔編號(hào)A61B1/04GK102665527SQ20108005124
公開日2012年9月12日 申請(qǐng)日期2010年11月9日 優(yōu)先權(quán)日2009年11月13日
發(fā)明者吉野浩一郎, 森田惠仁 申請(qǐng)人:奧林巴斯株式會(huì)社