信息處理設備、信息處理方法和信息處理程序的制作方法
【專利摘要】信息處理設備、信息處理方法和信息處理程序,所述信息處理設備包括:顯示處理單元、更新單元、振動單元、設置單元和控制器。顯示處理單元,其被配置為在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域。更新單元,其被配置為從用戶接受指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置。振動單元,其能夠引起振動。設置單元,其被配置為在病理圖像上設置振動區(qū)域以通過振動單元引起振動??刂破?,其被配置為當在所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,控制振動單元振動。
【專利說明】信息處理設備、信息處理方法和信息處理程序
[0001]相關申請的交叉引用
[0002]本公開包括與在2012年9月24日在日本專利局提交的日本優(yōu)先權專利申請JP2012-209655中公開的主題有關的主題,所述申請的全部內容通過引用合并于此。
【技術領域】
[0003]本公開涉及信息處理設備、信息處理方法和信息處理程序,當在醫(yī)療保健、病理和材料等領域中觀察通過顯微鏡獲得的圖像時利用所述信息處理設備、信息處理方法和信息處理程序執(zhí)行控制。
【背景技術】
[0004]在醫(yī)療保健和病理等領域中,提出一種系統(tǒng)用于醫(yī)生和病理學家等以基于通過數(shù)字化已經(jīng)由光學顯微鏡獲得的關于生物細胞、組織和器官等的圖像而獲得的數(shù)字圖像(病理圖像)來檢查組織等并診斷病人。
[0005]例如,在日本專利申請公布第2009-37250號(在下文中,被稱為專利文件I)中公開的方法中,由配備CCD (電荷耦合器件)的攝影機來數(shù)字化通過顯微鏡光學地獲得的圖像,并且向控制計算機系統(tǒng)輸入所獲得的數(shù)字信號,以便在監(jiān)視器上可視化。病理學家觀看在監(jiān)視器上顯示的圖像并執(zhí)行檢查等(例如,參見專利文件I的第(0027 )和(0028 )段及圖5 )。這樣的系統(tǒng)通常被稱為虛擬顯微鏡。
【發(fā)明內容】
[0006]順便提及,在如專利文件I中公開的現(xiàn)有技術的虛擬顯微鏡中,當用戶移動病理圖像的顯示范圍或者放大或縮小圖像時,用戶重復例如拖動鼠標或旋轉滾輪的操作。然而,由虛擬顯微鏡處理的病理圖像是具有50X50 (Kpixel:千像素)大小的巨大圖像,并且全面觀察這樣的圖像對用戶是麻煩的任務。具體地,因為病理學家整天執(zhí)行這樣的任務,所述麻煩的任務引起壓力,并且因此可能忽略本質上要發(fā)現(xiàn)的病理組織的改變而導致誤診。
[0007]此外,在使用病理圖像的圖像診斷中,將注釋添加到圖像用于指示圖像內需要關注的位置(例如,癌癥細胞的位置)。在由多個病理學家再次檢查病理圖像或從他們得到第二意見的任務中,也需要關注被添加到病理圖像的注釋。然而,當用戶在以高速平移圖像的同時觀察觀察器的屏幕上的病理圖像時,或當由于注釋的顏色和背景圖像的顏色之間的對比度使得注釋不易察覺時,可能忽略注釋。此外,因為當以低顯示放大倍率觀察病理圖像時,以小尺寸顯示添加到以高顯示放大倍率顯示的病理圖像的注釋,也可能忽略該情況下的注釋。
[0008]鑒于如上所述的情況,需要信息處理設備、信息處理方法和信息處理程序,當觀察病理圖像時,利用所述信息處理設備、信息處理方法和信息處理程序可以使用振動改進n(用戶界面)的可操作性。
[0009]( I)根據(jù)本公開的實施例,提供一種信息處理設備,包括:顯示處理單元,其被配置為在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域;更新單元,其被配置為從用戶接受指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置;振動單元,其能夠引起振動;設置單元,其被配置為在病理圖像上設置振動區(qū)域以通過振動單元引起振動;以及控制器,其被配置為當所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,控制振動單元振動。
[0010]在該實施例中,用戶通過顯示處理單元和更新單元觀察病理圖像的各種部分。當通過設置單元在病理圖像上預設的振動區(qū)域在例如振動區(qū)域進入屏幕或接近屏幕的中心的情況下滿足與信息處理設備的屏幕(即,顯示區(qū)域)的預定位置關系時,控制器指示振動單元振動。振動區(qū)域被設置在需要用戶關注的位置處。因為這樣提示用戶關注振動區(qū)域,所以可以改進UI的可操作性。
[0011](2)根據(jù)本公開的實施例,信息處理設備還可以包括:注釋設置單元,其被配置為響應于來自用戶的指令,在病理圖像的至少部分區(qū)域中設置注釋;以及貯存器,其被配置為存儲所設置注釋的區(qū)域的位置信息。在該情況下,設置單元基于所存儲的位置信息設置振動區(qū)域。
[0012]在該實施例中,基于在病理圖像上設置的注釋區(qū)域的位置信息設置振動區(qū)域。因此,當病理圖像上的注釋滿足在屏幕(顯示區(qū)域)上預設的位置關系時,向用戶通知注釋,其結果是可以減少用戶忽略注釋的可能性。
[0013](3)根據(jù)本公開的實施例,在信息處理設備中,位置關系可以是如下關系:振動區(qū)域和顯示區(qū)域之間匹配的位置的位置關系。
[0014]在該實施例中,當存在在振動區(qū)域和顯示區(qū)域之間匹配的位置時,S卩,當振動區(qū)域被顯示在屏幕上時,引起振動。利用該結構,可以明確地向用戶通知屏幕上的振動區(qū)域。
[0015](4)根據(jù)本公開的實施例,在信息處理設備中,位置關系可以是顯示區(qū)域通過該顯示區(qū)域的移動而與振動區(qū)域接觸的位置關系。
[0016]在該實施例中,因為在振動區(qū)域與屏幕(顯示區(qū)域)接觸的瞬間引起振動,所以用戶可以感覺到振動區(qū)域與屏幕的邊界接觸。
[0017](5)根據(jù)本公開的實施例,在信息處理設備中,控制器可以控制振動單元振動,同時區(qū)分在其中在振動區(qū)域和顯示區(qū)域之間匹配的位置存在的事件出現(xiàn)的時間以及在其中振動區(qū)域包括顯示區(qū)域的中心點的事件出現(xiàn)的時間之間的振動模式。
[0018]在該實施例下,當顯示區(qū)域和振動區(qū)域處于不同的位置關系時使用不同的振動模式引起振動。因此,用戶可以通過振動模式中的差異來掌握顯示區(qū)域和振動區(qū)域處于哪種位置關系。
[0019](6)根據(jù)本公開的實施例,在信息處理設備中,當控制振動單元振動時,控制器可以控制振動單元以與在顯示區(qū)域中顯示的病理圖像的范圍內設置的振動區(qū)域的數(shù)量對應的振動模式振動。
[0020]在該實施例中,當用戶正在觀察在顯示區(qū)域中顯示的病理圖像時,以與在顯示區(qū)域中顯示的病理圖像的部分中設置的振動區(qū)域的數(shù)量對應的振動模式引起振動。利用該結構,用戶可以根據(jù)振動掌握顯示區(qū)域中包括的振動區(qū)域的數(shù)量。
[0021](7)根據(jù)本公開的實施例,在信息處理設備中,控制器可以控制振動單元以具有不同振動計數(shù)的振動模式振動,所述振動模式與振動區(qū)域的數(shù)量對應。[0022]在該實施例中,當用戶正在觀察在顯示區(qū)域中顯示的病理圖像時,振動計數(shù)根據(jù)在顯示區(qū)域中顯示的病理圖像的部分中設置的振動區(qū)域的數(shù)量而改變。利用該結構,用戶可以通過計數(shù)振動計數(shù)來簡單地掌握顯示區(qū)域中包括的振動區(qū)域的數(shù)量。
[0023](8)根據(jù)本公開的實施例,在信息處理設備中,注釋設置單元可以與病理圖像相關聯(lián)地在貯存器中存儲關于當設置注釋時使用的病理圖像的顯示放大倍率的信息。在該情況下,當控制振動單元振動時,控制器可以控制振動單元如下振動模式振動:所述振動模式取決于關于顯示放大倍率的所存儲的信息是否與當在顯示區(qū)域中顯示病理圖像時使用的顯示放大倍率相同而不同。
[0024]在該實施例中,振動模式取決于在設置注釋時在顯示區(qū)域中的病理圖像的顯示放大倍率是否與在觀察病理圖像時其顯示放大倍率相同而不同。因此,用戶可以在將顯示放大倍率改變?yōu)樵谝呀?jīng)設置注釋時的顯示放大倍率之后觀察病理圖像。
[0025](9)根據(jù)本公開的實施例,在信息處理設備中,設置單元可以基于來自用戶的輸入設置振動區(qū)域。
[0026]在該實施例中,因為替代根據(jù)注釋的設置范圍設置振動區(qū)域,振動區(qū)域通過來自用戶的輸入直接設置,所以用戶可以自由地在希望的范圍內設置振動區(qū)域。
[0027](10)根據(jù)本公開的實施例,提供一種信息處理方法,包括:通過顯示處理單元在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域;通過更新單元接受來自用戶的指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置;通過振動單元引起振動;通過設置單元在病理圖像上設置振動區(qū)域以通過振動單元引起振動;以及當所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,通過控制器控制振動單元振動。
[0028](11)根據(jù)本公開的實施例,提供一種使得包括能夠引起振動的振動單元的計算機作為下列部件操作的信息處理程序:顯示處理單元,其被配置為在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域;更新單元,其被配置為從用戶接受指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置;設置單元,其被配置為在病理圖像上設置振動區(qū)域以通過振動單元引起振動;以及控制器,其被配置為當所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,控制振動單元振動。
[0029]如上所述,根據(jù)本公開的實施例,可以使用振動改進觀察病理圖像時n的可操作性。
[0030]如在附圖中所示,根據(jù)本公開的最佳模式實施例的下列詳細描述,本公開的這些和其他目的、特征和優(yōu)點將變得更明顯。
【專利附圖】
【附圖說明】
[0031]圖1是示出根據(jù)本公開的實施例的典型使用環(huán)境的示圖;
[0032]圖2是示出根據(jù)本公開的實施例的觀察器計算機500的硬件結構的框圖;
[0033]圖3是圖像管理服務器400的功能框圖;
[0034]圖4是觀察器計算機500的功能框圖;
[0035]圖5是示出矩形振動區(qū)域通過用戶的平移操作從上面進入觀察器計算機500的屏幕(顯示區(qū)域)的狀態(tài)的示圖;[0036]圖6是示出振動區(qū)域通過用戶的平移操作從屏幕的右手側移動到與屏幕(顯示區(qū)域)的中心點接觸(重疊)的狀態(tài)的示圖。
[0037]圖7是示出觀察器計算機500上的觀察器的指針與振動區(qū)域接觸的狀態(tài)的示圖;
[0038]圖8是示出在振動區(qū)域已在顯示區(qū)域中存在的狀態(tài)下,由于新進入顯示區(qū)域的振動區(qū)域,兩次引起振動的示例的示圖;
[0039]圖9是示出當一個振動區(qū)域移動出顯示區(qū)域時,由于仍然存在留在顯示區(qū)域中的其他振動區(qū)域而兩次引起振動的示例的示圖;
[0040]圖10是用于解釋整體處理流程的流程圖;
[0041]圖11是示出確定振動計數(shù)和長度的處理流程的流程圖;
[0042]圖12是示出在振動區(qū)域編輯模式中創(chuàng)建的振動區(qū)域的示例的示圖;
[0043]圖13是示出在關于振動區(qū)域的Z-軸方向上定義前后關系的狀態(tài)的示圖;
[0044]圖14是示出由于與以振動強度4振動的振動區(qū)域重疊的指針引起具有振動強度4的振動的狀態(tài)的示圖;
[0045]圖15是示出檢查指針的位置是否包括在Z-軸方向前的振動區(qū)域的范圍內的狀態(tài)的示圖;以及
[0046]圖16是用于解釋使控制器30振動的處理流程的流程圖。
【具體實施方式】
[0047]在下文中,將參考附圖描述本公開的實施例。
[0048]<第一實施例>
[0049](本公開的概要)
[0050]如上所述,添加到病理圖像的注釋最初僅通過視覺信息表達注釋本身的存在,并且由此一直存在注釋將被忽略的可能性。因此,在本公開的實施例中,為了向用戶通知注釋,除了視覺信息之外,使用振動。作為結果,可以獲得減少忽略注釋的可能性的效果。
[0051]具體地,隨著當用戶在通過平移操作移動病理圖像的同時正在觀察病理圖像時,開始將注釋顯示在用于觀察病理圖像的觀察器的顯示屏幕中,用戶手持的、用于執(zhí)行觀察器操作的控制器振動。通過振動控制器,明確地通知用戶注釋正顯示在觀察器的顯示屏幕中。
[0052]應注意即使當通過觀察器的設置而不顯示注釋時,當未顯示的注釋進入觀察器的顯示屏幕時也引起振動。因此,可以獲得用戶可以掌握注釋的存在的效果。
[0053](本公開的使用環(huán)境)
[0054]首先,將描述本公開的使用環(huán)境。在病理診斷中,病理學家使用通過使用顯微鏡拍攝樣本而獲得的虛擬玻片圖像(病理圖像)以進行診斷。病理學家使用在觀察器計算機上的觀察器來觀察病理圖像并執(zhí)行圖像診斷。
[0055]圖1是示出根據(jù)本公開的實施例的典型使用環(huán)境的示圖。
[0056]由顯微鏡100和掃描儀計算機20構成的數(shù)字病理掃描儀100被放置在醫(yī)院中的組織學實驗室(HL)中。通過顯微鏡10拍攝的RAW圖像在掃描儀計算機20上經(jīng)受諸如顯影處理、著色(shading)處理、色彩平衡校正、伽馬校正和8-位處理之類的圖像處理。其后,圖像例如以矩陣形式被分為256像素的圖塊(tile),并被轉換為JPEG (聯(lián)合圖像專家組)圖像。在壓縮JPEG圖像之后,在硬盤HDl中存儲圖像。
[0057]接著,在掃描儀計算機20的硬盤HDl中存儲的JPEG圖像經(jīng)由網(wǎng)絡300上傳到在同一醫(yī)院的數(shù)據(jù)中心DC中的圖像管理服務器400的硬盤HD2中。
[0058]作為觀察者的病理學家使用醫(yī)院的病理室PR中的觀察器計算機500,或使用在醫(yī)院外部的建筑物EX中經(jīng)由網(wǎng)絡300連接到圖像管理服務器400的觀察器計算機500,以觀察在圖像管理服務器400的硬盤HD2中存儲的JPEG圖像。
[0059]病理學家使用連接到觀察器計算機500的控制器(未示出)以在觀察JPRG圖像時執(zhí)行平移操作和縮放操作。所述控制器包括內置振動馬達,并且通過操作所述振動馬達,可以在病理學家操作控制器的同時向觀察JPEG圖像的病理學家的手傳播振動。
[0060](觀察器計算機500的結構)
[0061]接著,將描述觀察器計算機500的硬件結構。
[0062]圖2是示出根據(jù)本公開的實施例的觀察器計算機500的硬件結構的框圖。
[0063]觀察器計算機500包括用于執(zhí)行操作控制的CPU (中央處理單元)21、ROM (只讀存儲器)22、作為CPU21的工作存儲器的RAM (隨機訪問存儲器)23以及向其輸入與用戶操作對應的指令的操作輸入單元24。觀察器計算機500還包括接口單元25、輸出單元26(顯示單元)、貯存器27、網(wǎng)絡接口單元28以及連接那些單元的總線29。
[0064]R0M22存儲用于執(zhí)行各種類型的處理的程序??刂破?0連接到接口單元25??刂破?0包括各種按鈕和搖桿,從而可以接受由用戶做出的各種輸入。
[0065]此外,控制器30包括內置加速度傳感器或傾斜傳感器,并且通過用戶傾斜或擺動控制器30,可以接受對控制器30的指令。
[0066]控制器30還包括例如通過振動馬達引起振動的振動單元。響應于來自CPU21的指令,振動單元可以引起各種頻率、強度、持續(xù)時間和計數(shù)等的振動。
[0067]網(wǎng)絡300連接到網(wǎng)絡接口單元28。作為輸出單元26,液晶顯示器、EL (電致發(fā)光)顯示器、或等離子顯示器等適用于圖像顯示器。作為貯存器27,應用由HDD (硬盤驅動器)作為典型的磁盤、半導體存儲器、或光盤等。
[0068]在RAM23中CPU21根據(jù)在R0M22和貯存器27等中存儲的多個程序開發(fā)與來自操作輸入單元24的指令對應的程序,并適當?shù)馗鶕?jù)所開發(fā)的程序控制輸出單元26和貯存器27。
[0069]CPU21實現(xiàn)將稍后描述的各種功能塊。CPU21執(zhí)行在R0M22和貯存器27等中存儲的程序,并在需要時控制上述部件。利用該結構,觀察器計算機500可以實現(xiàn)各種功能塊并使得上述部件作為觀察器計算機500操作。
[0070](圖像管理服務器400的結構)
[0071]接著,將描述圖像管理服務器400的硬件結構。
[0072]除了控制器30沒有連接到接口單元25之外,圖像管理服務器400的硬件結構與觀察器計算機500的硬件結構基本相同。因此,將省略其詳細描述。
[0073](圖像管理服務器400的功能塊)
[0074]接著,將描述圖像管理服務器400的功能塊。圖像管理服務器400的主要功能是響應于來自觀察器計算機500的請求提供病理圖像。
[0075]第二功能是存儲病理學家添加到觀察器上的病理圖像的具體位置的注釋。[0076]圖3是圖像管理服務器400的功能框圖。
[0077]圖像管理服務器400包括圖像貯存器41和圖像提供單元42的功能塊。
[0078]圖像貯存器41存儲被分為圖塊并被壓縮為JPEG圖像的病理圖像。響應于來自觀察器計算機500的請求經(jīng)由圖像提供單元42向觀察器計算機500提供所存儲的病理圖像。圖像貯存器41還存儲用戶使用在觀察器計算機500上的觀察器添加到病理圖像的注釋。
[0079]圖像提供單元42從圖像貯存器41獲取與經(jīng)由網(wǎng)絡300從觀察器計算機500傳送的圖像請求對應的病理圖像(包括注釋),并經(jīng)由網(wǎng)絡300向觀察器計算機500傳送所述病理圖像。
[0080]應注意,因為圖像管理服務器400和觀察器計算機500構成客戶端-服務器系統(tǒng),所以將哪個功能分給客戶端側和將哪個功能分給服務器側的決策是設計問題。因此,在哪里執(zhí)行功能塊不限于上述圖像管理服務器400,并且可以由客戶端側上的觀察器計算機500執(zhí)行功能塊。
[0081 ](觀察器計算機500的功能塊)
[0082]然后,將描述觀察器計算機500的功能塊。觀察器計算機500的主要功能是從作為用戶的病理學家接受操作指令,從圖像管理服務器400獲取相關的病理圖像(包括注釋),并且向用戶顯示病理圖像。第二功能是在顯示病理圖像時,當注釋出現(xiàn)在觀察器計算機500的屏幕上時通過振動控制器30通知用戶該注釋。
[0083]圖4是觀察器計算機500的功能框圖。
[0084]觀察器計算機500包括圖像獲取單元51、顯示處理單元52 (顯示處理單元)、顯示區(qū)域更新單元53 (更新單元)、振動區(qū)域設置單元54 (設置單元)、振動控制器55 (控制器)以及注釋設置單元56 (注釋設置單元)的功能框圖。
[0085]圖像獲取單元51經(jīng)由網(wǎng)絡300從圖像管理服務器400獲取與來自作為用戶的病理學家的指令對應的病理圖像,所述指令已從操作輸入單元24輸入。所獲取的病理圖像在被顯示處理單元52處理之后,經(jīng)由輸出單元26向用戶呈現(xiàn)。
[0086]顯示處理單元52與在觀察器計算機500的屏幕上的顯示區(qū)域對應地進行向輸出單元26輸出病理圖像的至少一部分的處理。
[0087]響應于已經(jīng)由操作輸入單元24接受的平移和縮放等的用戶操作,顯示區(qū)域更新單元53進行移動顯示區(qū)域并更新在觀察器的屏幕上顯示的病理圖像的處理。
[0088]振動區(qū)域設置單元54在病理圖像上設置振動振動單元31的振動區(qū)域。可以基于關于在貯存器27中存儲的注釋的位置的信息來設置振動區(qū)域,或者用戶可以通過指定范圍直接設置振動區(qū)域。
[0089]振動控制器55檢查在觀察器計算機500的屏幕上的顯示區(qū)域和在病理圖像上設置的振動區(qū)域之間的位置關系,并當位置關系滿足預定關系(將稍后描述)時,使得振動單元31以給定的強度、長度、計數(shù)、頻率振動。
[0090]當用戶正在以特定顯示放大倍率觀察病理圖像的特定位置時,注釋設置單元56與病理圖像一起存儲由用戶添加的注釋。所添加的注釋經(jīng)由網(wǎng)絡300被傳送回圖像管理服務器400,并與病理圖像一起存儲在圖像貯存器41中。
[0091]此外,注釋設置單元56能夠基于用戶指令選擇是否使得當設置注釋時所設置的區(qū)域作為振動區(qū)域振動。應注意,當設置注釋時作為注釋的屬性記錄的信息是例如注釋的位置、寬度、高度、當設置注釋時使用的顯示放大倍率、或當注釋的區(qū)域是矩形時振動的存在(presence)。
[0092]在下文中,描述了觀察器計算機500的功能塊。應注意,因為觀察器計算機500和圖像管理服務器400構成客戶端-服務器系統(tǒng),所以將哪個功能分給客戶端側和將哪個功能分給服務器側的決策是設計問題。因此,在哪里執(zhí)行功能塊不限于上述觀察器計算機500,并且可以由服務器側上的圖像管理服務器400執(zhí)行功能塊。
[0093](在振動區(qū)域和顯示區(qū)域之間的位置關系和振動)
[0094]接著,將對于在振動區(qū)域和顯示區(qū)域之間的位置關系處于特定狀態(tài)的情況下振動振動單元的振動模式的示例給出描述。
[0095]圖5是示出矩形振動區(qū)域通過用戶的平移操作從上進入觀察器計算機500的屏幕(顯示區(qū)域)的示圖。在圖中示出的示例中,當振動區(qū)域的下側與顯示區(qū)域的邊界接觸(重疊)時,振動單元31微弱地振動。振動區(qū)域的上側與顯示區(qū)域的邊界接觸(重疊)時,振動單元31也微弱地振動。
[0096]應注意,雖然在該示例中僅當振動區(qū)域的上或下側與顯示區(qū)域的邊界接觸時引起短振動,但是在振動區(qū)域和顯示區(qū)域彼此重疊時,可以連續(xù)地引起弱振動。
[0097]圖6是示出通過用戶的平移操作振動區(qū)域從屏幕的右手側移動到與屏幕的中心點接觸(重疊)的振動區(qū)域的示圖。在該狀態(tài)下,例如,振動區(qū)域31強烈地振動。
[0098]應注意,如上所述,僅當顯示區(qū)域的中心點與振動區(qū)域接觸時,可以引起短振動,并且在顯不區(qū)域的中心點被包括在振動區(qū)域中時,可以引起連續(xù)振動。
[0099]此外,也可以在振動區(qū)域進入顯示區(qū)域時微弱地開始振動,隨著振動區(qū)域接近顯示區(qū)域的中心點,振動逐漸變得更強,并且當振動區(qū)域與顯示區(qū)域的中心點重疊時,以最大的強度振動。
[0100]圖7是示出觀察器計算機500的觀察器的指針與振動區(qū)域接觸的狀態(tài)的示圖。在該狀態(tài)下,例如,振動單元31強烈地振動。
[0101]應注意,當指針與振動區(qū)域接觸時,可以僅在短時間段內引起振動,并且在指針在振動區(qū)域內部時,可以引起連續(xù)振動。
[0102](顯示放大倍率和振動)
[0103]接著,將對觀察器的屏幕上病理圖像的顯示放大倍率和用于振動振動單元的振動模式的不例給出描述。
[0104]通常,當觀看在病理圖像中設置的注釋時,希望使用當設置注釋時使用的顯示放大倍率來觀察病理圖像。因此,在設置注釋時,注釋設置單元56存儲當設置注釋時使用的顯示放大倍率作為注釋屬性信息。振動控制器55控制振動單元31以取決于當設置注釋時使用的所存儲的顯示放大倍率是否與當再次觀察病理圖像時使用的顯示放大倍率相同而以不同的振動模式振動。
[0105]作為振動模式,例如,當在設置注釋時使用的顯示放大倍率與在當前觀察中使用的顯示放大倍率相同時,引起長振動,并且當顯示放大倍率不同時,引起短振動。應注意,用于使得振動單元31振動的觸發(fā)是在顯示區(qū)域和振動區(qū)域之間的位置關系滿足如上所述的特定關系。
[0106](使用振動通知注釋的存在)[0107]接著,將對使用振動向用戶通知在顯示區(qū)域內是否存在注釋的示例給出描述。在此,作為前提,當顯示區(qū)域中存在注釋的振動區(qū)域時,振動計數(shù)為2,并且當顯示區(qū)域中不存在注釋的振動區(qū)域時,振動計數(shù)為I。
[0108]圖8是示出在振動區(qū)域已存在于顯示區(qū)域中的狀態(tài)下,由于新進入顯示區(qū)域的振動區(qū)域而兩次引起振動的示例的示圖。此外,圖9是示出當一個振動區(qū)域移出顯示區(qū)域時,由于仍然存在留在顯示區(qū)域中的其他振動區(qū)域,而兩次引起振動的示例的示圖;
[0109]如上所述,當在顯示區(qū)域和振動區(qū)域之間的位置關系滿足特定關系時引起振動時,通過向用戶通知顯示區(qū)域中其他振動區(qū)域的存在,用戶可以掌握顯示區(qū)域中是否存在其他注釋。
[0110](使用振動通知注釋的數(shù)量(修改示例))
[0111]接著,將對使用振動向用戶通知顯示區(qū)域中存在的注釋的數(shù)量的示例給出描述。在當在顯示區(qū)域和振動區(qū)域之間的位置關系滿足特定關系時引起振動時,振動控制器55可以使用振動向用戶通知顯示區(qū)域中存在的振動區(qū)域的數(shù)量。圖8和9將作為示例描述。
[0112]在圖8中示出的狀態(tài)下,在顯示區(qū)域中存在兩個振動區(qū)域,并且為了通知振動區(qū)域的數(shù)量,當振動區(qū)域新進入顯示區(qū)域時兩次引起振動。此外,在圖9中示出的狀態(tài)下,當振動區(qū)域移動出顯示區(qū)域時,由于仍然存在兩個振動區(qū)域留在顯示區(qū)域中而兩次引起振動。
[0113]如上所述,當在顯示區(qū)域和振動區(qū)域之間的位置關系滿足特定關系時引起振動時,通過向用戶通知顯示區(qū)域中存在的振動區(qū)域的數(shù)量,用戶可以掌握在顯示區(qū)域中呈現(xiàn)的注釋的數(shù)量。
[0114]((整體)處理流程)
[0115]接著,將描述整體處理流程。圖10是用于解釋整體處理流程的流程圖。
[0116]首先,顯示區(qū)域更新單元53根據(jù)由用戶經(jīng)由操作輸入單元24輸入的平移和縮放操作而改變顯示區(qū)域的位置(步驟SI)。
[0117]然后,對于所有注釋(步驟S2),振動控制器55判斷注釋的振動區(qū)域是否與顯示區(qū)域重疊(步驟S3)。
[0118]當振動區(qū)域和顯示區(qū)域重疊時(步驟S3為“是”),振動控制器55將表示“正在顯示”標記設置到相關的注釋(步驟S4)。
[0119]當振動區(qū)域和顯示區(qū)域不重疊時(步驟S3為“否”),振動控制器55將表示“未顯示”的標記設置到相關的注釋(步驟S5)。
[0120]隨后,振動控制器55獲取被記錄為“正在顯示”的注釋的數(shù)量和當前顯示放大倍率(步驟S6)。
[0121]然后,振動控制器55判斷正在顯示的注釋的振動區(qū)域的邊框線是否與顯示區(qū)域的邊界接觸(步驟S7),并且當判斷為“是”時(步驟S7為“是”),振動控制器55將振動強度設置為“弱”(步驟S8)。
[0122]其后,振動控制器55判斷正在顯示的注釋的振動區(qū)域是否與顯示區(qū)域的中心點接觸(重疊),并且當判斷為“是”時(步驟S9為“是”),振動控制器55將振動強度設置為“強”(步驟S10)。
[0123]然后,振動控制器55確定振動計數(shù)和長度(步驟SI I)。[0124]最后,振動控制器55使得振動單元31以設置的振動強度、長度和計數(shù)來振動(步驟 S12)。
[0125]至此已經(jīng)描述了使得振動單元31基于在顯示區(qū)域和振動區(qū)域之間的位置關系振動的整體處理流程。
[0126](處理流程(振動計數(shù)和長度的確定))
[0127]接著,將描述使得振動單元31振動的處理的、基于在顯示區(qū)域和振動區(qū)域之間的位置關系確定振動計數(shù)和長度的處理流程。圖11是示出確定振動計數(shù)和長度的處理流程的流程圖。
[0128]首先,振動控制器55判斷由用戶在病理圖像的當前觀察中使用的顯示放大倍率是否與當設置注釋時使用的所存儲的顯示放大倍率相同(步驟SI 11)。
[0129]當顯示放大倍率相同時(步驟Slll為“是”),振動控制器55將振動長度設置為“長”(步驟S112)。當顯示放大倍率不同時(步驟Slll為“否”),振動控制器55將振動長度設置為“短”(步驟SI 13)。
[0130]然后,振動控制器55判斷當前顯示區(qū)域中是否包括注釋(步驟S114)。
[0131]當包括注釋時(步驟S114為“是”),振動控制器55將振動計數(shù)設置為2 (步驟
5115)。當不包括注釋時(步驟S114為“否”),振動控制器55將振動計數(shù)設置為I(步驟
5116)。
[0132]上面描述的是確定振動計數(shù)和長度的處理流程。
[0133](本公開的效果)
[0134]在本公開中,在使用觀察器觀察病理圖像時,除了從過去起使用的視覺信息之外,還使用取決于由振動引起的觸覺的信息,以便不忽略在病理圖像上設置的注釋。作為結果,減少了忽略注釋的可能性。
[0135]此外,在蜂窩電話中的靜音模式中時,即使當禁止聲音時,可以通過使用振動僅向操作控制器的用戶通知信息,而不給他人引起麻煩。
[0136]通過向用戶通知作為振動計數(shù)的、在觀察器的顯示區(qū)域(屏幕)中顯示的注釋的數(shù)量,用戶可以掌握在顯示區(qū)域中存在要關注的其他注釋。
[0137]關于顯示放大倍率,通過取決于當設置注釋時使用的顯示放大倍率與用戶觀察時使用的顯示放大倍率是否相同來區(qū)分振動模式,用戶可以掌握當設置注釋時使用的顯示放大倍率。
[0138](與自動診斷系統(tǒng)的合作)
[0139]在上面的描述中,基于由用戶做出的注釋的設置來設置要振動的振動區(qū)域。作為另一振動區(qū)域設置方法,存在一種與自動診斷系統(tǒng)合作的方法。
[0140]首先,病理圖像經(jīng)受自動診斷系統(tǒng),并且由該系統(tǒng)呈現(xiàn)被認為是受癌癥影響的部分。接著,在使用本公開的觀察器計算機中,振動區(qū)域被設置為被認為是受癌癥影響的部分。利用該結構,減少了忽略在明確診斷中被自動診斷系統(tǒng)確定為有問題的部分的可能性。
[0141]〈第二實施例〉
[0142]在第二實施例中,除非另外說明,觀察器計算機500的功能塊等與第一實施例的功能塊相同。
[0143](本公開的概述)[0144]首先,將描述本公開的第二實施例的概述。
[0145]在第一實施例中,當在屏幕(顯示區(qū)域)中顯示由用戶在病理圖像上預設的注釋的振動區(qū)域時振動單元31振動。在該情況下的振動模式是考慮到系統(tǒng)的預定模式。
[0146]相反,在第二實施例中,不管注釋如何地而設置振動區(qū)域,從而可以以希望的振動模式在用戶希望的位置處引起振動。
[0147]第二實施例假設為主要用在圖像診斷教學中。為了使得學習者能夠自己找到受影響的部分,在圖像上不顯示由訓練者預設的病理圖像的振動區(qū)域。通過學習者移動觀察器的指針,從而其與振動區(qū)域重疊,用于判斷該部分是否是正確的受影響部分,并且因此學習者可以掌握該部分是訓練者意指的部分。
[0148](編輯模式)
[0149]接著,將模式振動區(qū)域編輯模式。
[0150]本公開的第二實施例的特征在于不存在注釋設置單元作為觀察器計算機500的功能塊,并且替換地,振動區(qū)域設置單元基于用戶指令具體地設置振動區(qū)域。
[0151]通過用戶調用觀察器的振動區(qū)域編輯模式,用戶(訓練者)可以在病理圖像上設置振動區(qū)域,同時指定其位置和大小。
[0152](振動區(qū)域)
[0153]接著,將描述振動區(qū)域的具體示例。
[0154]圖12是示出在振動區(qū)域編輯模式中創(chuàng)建的振動區(qū)域的示例的示圖。在圖中被描述為“值:1”的區(qū)域中,當指針與該區(qū)域重疊時,引起強度I的振動。在被描述為“值:4”的區(qū)域中,類似地引起強度4 (比I更強)的振動。
[0155]如圖13中所示,對振動區(qū)域定義在Z-軸方向上的前后關系。在該方面,在將振動強度首先變?yōu)镮的矩形區(qū)域設置為振動區(qū)域時,用戶(訓練者)將振動強度在該區(qū)域內變?yōu)?的更小的矩形區(qū)域設置為振動區(qū)域(Z-軸方向前)。
[0156]應注意,雖然在該示例中振動區(qū)域是矩形,但是振動區(qū)域的形狀不限于矩形并且只要可以指定區(qū)域,振動區(qū)域就可以是任何形狀。
[0157](引起振動的位置關系)
[0158]接著,將描述在觀察器的指針和引起振動的振動區(qū)域之間的位置關系。
[0159]基本上,當指針通過用戶操作進入振動區(qū)域時,振動控制器55使得振動單元31使用對振動區(qū)域設置的振動強度振動。
[0160]圖14是示出由于指針與具有振動強度4的振動區(qū)域重疊而引起具有振動強度4的振動的狀態(tài)的示圖。
[0161]應注意,雖然在圖14中示出的指針的位置處,指針也處于具有振動強度I的振動區(qū)域中,但是如圖15中所示地檢查在Z-軸方向前的振動區(qū)域的范圍中是否包括指針的位置。因為指針首先進入的振動區(qū)域的強度指定是優(yōu)先的,所以使用振動強度4引起振動。
[0162](使得控制器振動的處理流程)
[0163]接著,將描述使得控制器30振動的處理流程。圖16是用于解釋使得控制器30振動的處理流程的流程圖。
[0164]首先,顯示處理單元52基于用戶操作移動觀察器的指針(步驟S21)。
[0165]然后,振動控制器55獲取關于在指針的新位置處在Z-軸方向上位于正前(上側)的振動區(qū)域的數(shù)據(jù)(步驟S22)。
[0166]然后,振動控制器55判斷指針的位置是否在步驟22中已對其獲取數(shù)據(jù)的振動區(qū)域的范圍內(步驟S23)。
[0167]當指針的位置在振動區(qū)域的范圍內時(步驟S23為“是”),振動控制器55從振動區(qū)域的數(shù)據(jù)中提取并獲取振動強度(步驟S24)。
[0168]隨后,振動控制器55使得控制器30的振動單元31使用所獲取的振動強度振動(步驟S25)。
[0169]應注意,當指針的位置處于在步驟S23中已對其獲取數(shù)據(jù)的振動區(qū)域的范圍外部時(步驟S23為“否”),振動控制器55判斷在Z-軸方向上是否存在關于當前的振動區(qū)域后的振動區(qū)域的數(shù)據(jù)(步驟S26)。
[0170]當存在關于隨后的振動區(qū)域的數(shù)據(jù)(步驟S26為“是”),振動控制器55獲取關于振動區(qū)域的數(shù)據(jù)(步驟S27)并返回步驟S23以繼續(xù)處理。
[0171]直到此時已描述使得控制器30振動的處理流程。
[0172](本公開的其他結構)
[0173]本公開還可以采用下列結構。
[0174](I) 一種信息處理設備,包括:
[0175]顯示處理單元,其被配置為在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域;
[0176]更新單元,其被配置為從用戶接受指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置;
[0177]振動單元,其能夠引起振動;
[0178]設置單元,其被配置為在病理圖像上設置振動區(qū)域以通過振動單元引起振動;以及
[0179]控制器,其被配置為當在所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,控制振動單元振動。
[0180](2)根據(jù)(I)的信息處理設備,還包括:
[0181]注釋設置單元,其被配置為響應于來自用戶的指令,在病理圖像的至少部分區(qū)域中設置注釋;以及
[0182]貯存器,其被配置為存儲所設置注釋的區(qū)域的位置信息,
[0183]其中,設置單元基于所存儲的位置信息設置振動區(qū)域。
[0184](3)根據(jù)上面的(I)或(2)的信息處理設備,
[0185]其中位置關系是在振動區(qū)域和顯示區(qū)域之間匹配的位置存在的位置關系。
[0186](4)根據(jù)上面的(I)或(2)的信息處理設備,
[0187]其中,位置關系是通過顯示區(qū)域的移動而使顯示區(qū)域與振動區(qū)域接觸的位置關系。
[0188](5)根據(jù)上面的(I)或(2)的信息處理設備,
[0189]其中,控制器控制振動單元振動,同時區(qū)分在其中在振動區(qū)域和顯示區(qū)域之間匹配的位置存在的事件出現(xiàn)的時間以及在其中振動區(qū)域包括顯示區(qū)域的中心點的事件出現(xiàn)的時間之間的振動模式。[0190](6)根據(jù)上面的(I)或(5)的信息處理設備,
[0191]其中,當控制振動單元振動時,控制器控制振動單元以與在顯示區(qū)域中顯示的病理圖像的范圍內設置的振動區(qū)域的數(shù)量對應的振動模式振動。
[0192](7)根據(jù)上面的(6)的信息處理設備,
[0193]其中,控制器控制振動單元以具有不同振動計數(shù)的振動模式振動,所述振動模式與振動區(qū)域的數(shù)量對應。
[0194](8)根據(jù)上面的(2)的信息處理設備,
[0195]其中,注釋設置單元與病理圖像相關聯(lián)地在貯存器中存儲關于當設置注釋時使用的病理圖像的顯示放大倍率的信息,以及
[0196]其中,當控制振動單元振動時,控制器控制振動單元以如下振動模式振動:取決于關于顯示放大倍率的所存儲的信息是否與當在顯示區(qū)域中顯示病理圖像時使用的顯示放大倍率相同而不同。
[0197](9)根據(jù)上面的(I)的信息處理設備,
[0198]其中,設置單元基于來自用戶的輸入設置振動區(qū)域。
[0199](10) 一種信息處理方法,包括:
[0200]通過顯示處理單元在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域;
[0201]通過更新單元接受來自用戶的指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置;
[0202]通過振動單元引起振動;
[0203]通過設置單元在病理圖像上設置振動區(qū)域以通過振動單元引起振動;以及
[0204]當所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,通過控制器控制振動單元振動。
[0205](11) 一種使得包括能夠引起振動的振動單元的計算機作為下列部件操作的信息處理程序:
[0206]顯示處理單元,其被配置為在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域;
[0207]更新單元,其被配置為從用戶接受指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置;
[0208]設置單元,其被配置為在病理圖像上設置振動區(qū)域以通過振動單元引起振動;以及
[0209]控制器,其被配置為當所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,控制振動單元振動。
[0210]本領域技術人員應理解,取決于設計需求和其他因素,只要各種修改、組合、子組合和變化在所附權利要求或其等效物的范圍內,其就可以發(fā)生。
【權利要求】
1.一種信息處理設備,包括: 顯示處理單元,其被配置為在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域; 更新單元,其被配置為從用戶接受指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置; 振動單元,其能夠引起振動; 設置單元,其被配置為在病理圖像上設置振動區(qū)域以通過振動單元引起振動;以及 控制器,其被配置為當在所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,控制振動單元振動。
2.如權利要求1所述的信息處理設備,還包括: 注釋設置單元,其被配置為響應于來自用戶的指令,在病理圖像的至少部分區(qū)域中設置注釋;以及 貯存器,其被配置為存儲所設置注釋的區(qū)域的位置信息, 其中,設置單元基于所存儲的位置信息設置振動區(qū)域。
3.如權利要求2所述的信息處理設備, 其中位置關系是在振動區(qū)域和顯示區(qū)域之間匹配的位置存在的位置關系。
4.如權利要求2所述的信息處理設備, 其中,位置關系是通過顯示區(qū)域的移動而使顯示區(qū)域與振動區(qū)域接觸的位置關系。
5.如權利要求2所述的信息處理設備, 其中,控制器控制振動單元振動,同時區(qū)分在振動區(qū)域和顯示區(qū)域之間匹配的位置存在的事件出現(xiàn)的時間與振動區(qū)域包括顯示區(qū)域的中心點的事件出現(xiàn)的時間之間的振動模式。
6.如權利要求5所述的信息處理設備, 其中,當控制振動單元振動時,控制器控制振動單元以與在顯示區(qū)域中顯示的病理圖像的范圍內設置的振動區(qū)域的數(shù)量對應的振動模式振動。
7.如權利要求6所述的信息處理設備, 其中,控制器控制振動單元以具有不同振動計數(shù)的振動模式振動,所述振動模式與振動區(qū)域的數(shù)量對應。
8.如權利要求2所述的信息處理設備, 其中,注釋設置單元與病理圖像相關聯(lián)地在貯存器中存儲關于當設置注釋時使用的病理圖像的顯示放大倍率的信息,以及 其中,當控制振動單元振動時,控制器控制振動單元以如下振動模式振動:取決于關于顯示放大倍率的所存儲的信息是否與當在顯示區(qū)域中顯示病理圖像時使用的顯示放大倍率相同而不同。
9.如權利要求1所述的信息處理設備, 其中,設置單元基于來自用戶的輸入設置振動區(qū)域。
10.一種信息處理方法,包括: 通過顯示處理單元在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域; 通過更新單元接受來自用戶的指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置;通過振動單元引起振動; 通過設置單元在病理圖像上設置振動區(qū)域以通過振動單元引起振動;以及當所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,通過控制器控制振動單元振動。
11.一種使得包括能夠引起振動的振動單元的計算機作為下列部件操作的信息處理程序: 顯示處理單元,其被配置為在顯示單元上顯示病理圖像的至少一部分作為顯示區(qū)域;更新單元,其被配置為從用戶接受指令以在病理圖像上移動顯示區(qū)域,并在更新單元上更新所顯示的顯示區(qū)域的位置; 設置單元,其被配置為在病理圖像上設置振動區(qū)域以通過振動單元引起振動;以及控制器,其被配置為當所設置的振動區(qū)域和顯示區(qū)域之間的位置關系滿足預定關系時,控制振動單元振動。`
【文檔編號】G02B21/36GK103679633SQ201310424746
【公開日】2014年3月26日 申請日期:2013年9月17日 優(yōu)先權日:2012年9月24日
【發(fā)明者】小倉浩次, 長谷川寬, 梶本雅人, 木元雅士 申請人:索尼公司