專利名稱:信息呈現(xiàn)裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及將對象物的像和與該對象物相關(guān)的信息一起呈現(xiàn)給操作
者的信息呈現(xiàn)裝置(information presentation apparatus)。
背景技術(shù):
作為便攜式信息呈現(xiàn)裝置,例如已知有日本特開平5-323229號公報 和日本特開平5-303054號公報所公開的光學透射(Optical See Through) 式信息呈現(xiàn)裝置。其是使信息呈現(xiàn)裝置保持在操作者的頭部側(cè)方以便在 操作者的視線上配置半透半反鏡等,利用信息顯示部將規(guī)定的圖像重疊 顯示在透過該半透半反鏡觀察到的觀察對象的實像上,由此來進行信息 提示的信息呈現(xiàn)裝置。
此外,在US 2003/0064758 Al中公開有如下技術(shù)在具有顯示部和 操作部的折疊式便攜信息終端中,根據(jù)其開閉姿勢適當轉(zhuǎn)換顯示部的顯 示方向地進行顯示。
在上述日本特開平5-323229號公報和日本特開平5-303054號公報所 公開的便攜式信息呈現(xiàn)裝置中,觀察該信息呈現(xiàn)裝置時使用的眼(右眼 或左眼)和保持裝置的手(右手或左手)因操作者或其使用狀況而不同。 因此,需要根據(jù)信息呈現(xiàn)裝置的使用狀況來切換用戶界面、即顯示圖像 的方向和操作部的按鈕功能。但是,以往由于要利用操作者操作的切換 開關(guān)來進行該切換,因而非常麻煩。
在此,對于顯示方向的切換,有上述US 2003/0064758 Al所公開的
技術(shù)。但該技術(shù)與觀察顯示時使用的眼沒有關(guān)系,無法將該技術(shù)直接應 用于上述那樣的信息呈現(xiàn)裝置中。
發(fā)明內(nèi)容
本發(fā)明正是鑒于上述問題而完成的,其目的在于,提供一種可根據(jù) 使用狀況自動地切換用戶界面的信息呈現(xiàn)裝置。
作為本發(fā)明的信息呈現(xiàn)裝置的一種形式是一種將對象物的像和與該 對象物相關(guān)的信息一起呈現(xiàn)給操作者的信息呈現(xiàn)裝置,其特征在于,該 信息呈現(xiàn)裝置具有
用戶界面部,其包括由上述操作者進行操作的操作部或者對該操作 者呈現(xiàn)信息的顯示部;以及
用戶界面控制部,其檢測或者估計上述操作部或者上述顯示部的姿 勢,根據(jù)該檢測出或者估計出的姿勢切換上述用戶界面部的動作或者功
圖1是表示本發(fā)明的第1實施例的信息呈現(xiàn)裝置的外觀的立體圖。 圖2是本發(fā)明的第1實施例的信息呈現(xiàn)裝置的結(jié)構(gòu)框圖。 圖3是表示信息呈現(xiàn)裝置的使用狀態(tài)的立體圖。 圖4是用于說明顯示部的結(jié)構(gòu)的示意圖。
圖5是用于說明信息呈現(xiàn)裝置的右手保持狀態(tài)的圖。
圖6是用于說明信息呈現(xiàn)裝置的左手保持狀態(tài)的圖。
圖7是表示用戶界面控制部的動作流程的圖。
圖8是本發(fā)明的第2實施例的信息呈現(xiàn)裝置的結(jié)構(gòu)框圖。
圖9是本發(fā)明的第3實施例的信息呈現(xiàn)裝置的結(jié)構(gòu)框圖。
圖10是表示第3實施例的信息呈現(xiàn)裝置的使用狀態(tài)的立體圖。
具體實施例方式
以下,參照
用于實施本發(fā)明的優(yōu)選方式。 [第1實施例]
如圖1和圖2所示,本發(fā)明的第1實施例的信息呈現(xiàn)裝置10具有顯 示部,該顯示部在操作者前方規(guī)定位置的畫面上顯示表示規(guī)定信息的規(guī) 定圖像(由字符、符號或者圖像等構(gòu)成的信息)。該顯示部包括作為半透
半反鏡的透明反射板11、和液晶顯示器等信息顯示部12。透明反射板11 具有透射功能。由此,如圖3所示,在操作者100用自己的右手101保
持信息呈現(xiàn)裝置10,將該信息呈現(xiàn)裝置10貼在操作者頭部102上而用右 眼103觀看時,可透過該透明反射板ll來觀察觀察對象的實像。并且, 如圖4所示,利用該透明反射板11的反射功能,在其反射面向右眼球103A 反射顯示在上述信息顯示部12上的上述規(guī)定圖像的投影像。因此,上述 規(guī)定圖像也可重疊在上述觀察對象的實像上而使操作者100進行觀察。 即,可將透明反射板11作為顯示畫面。
此外,信息呈現(xiàn)裝置IO具有包括操作者IOO進行操作的多個操作按 鈕的操作部13。如圖5所示,該操作部13包括多個操作按鈕(例如A 按鈕13A和B按鈕13B),它們被配置在操作者100用右眼103進行觀察 的保持或安裝狀態(tài)下為上側(cè)的信息呈現(xiàn)裝置10的側(cè)面。并且,如圖6所 示,操作部13還包括多個操作按鈕(例如C按鈕13C和D按鈕13D), 它們被配置在操作者100用左眼104進行觀察的保持或安裝狀態(tài)下為上 側(cè)的信息呈現(xiàn)裝置IO的側(cè)面。這樣,通過將操作按鈕配置在信息呈現(xiàn)裝 置10的兩側(cè),能夠根據(jù)操作者100的慣用眼和慣用手來增加使用方式的 自由度。
上述信息顯示部12 (以及透明反射板11)和操作部13構(gòu)成用戶界 面部14。
此外,信息呈現(xiàn)裝置IO還具有圖像輸入部15和顯示信息檢索部16。 圖像輸入部15包括照相機,該照相機用于拍攝包括操作者IOO經(jīng)由透明 反射板11觀察到的觀察對象在內(nèi)的圖像。顯示信息檢索部16根據(jù)從上 述圖像輸入部15輸入的圖像,檢索應顯示在上述信息顯示部12上且重 疊顯示在觀察對象的實像上的信息或圖像。即,這些圖像輸入部15和顯 示信息檢索部16構(gòu)成圖像生成部17,該圖像生成部17生成作為顯示在 上述顯示部上的規(guī)定圖像的、與輸入圖像相關(guān)的信息或圖像。
另外,作為信息呈現(xiàn)裝置10的保持或安裝狀態(tài),即便上述顯示部和 上述操作部13的實質(zhì)上的相對位置關(guān)系相同,在操作者IOO保持或安裝 信息呈現(xiàn)裝置10以便如圖5所示用右眼103進行觀察的情況下、和在操作者100保持或安裝信息呈現(xiàn)裝置10以便如圖6所示用左眼104進行觀 察的情況下,信息呈現(xiàn)裝置10的上下關(guān)系相反。為此,需要根據(jù)該保持 或安裝狀態(tài)來變更顯示在信息顯示部12上的圖像方向。
此外,例如有時顯示代表對于操作者100而言分別向左側(cè)、右側(cè)巻 動圖像的圖標,操作者100據(jù)此進行巻動圖像的操作。如圖5所示,當 在操作者頭部102右側(cè)保持信息呈現(xiàn)裝置10時,操作者100用右手保持 信息呈現(xiàn)裝置10。在該情況下,在該右手的第1手指(大拇指) 第5 手指(小拇指)中,與用第4手指(無名指)操作用于指示右?guī)唲拥陌?鈕相比,用第3手指(中指)操作用于指示右?guī)唲拥陌粹o更易于直觀地 進行操縱。同樣地,用右手的第4手指(無名指)操作用于指示左巻動 的按鈕更為自然。由此,優(yōu)選的是作為這樣的指示右?guī)唲拥牟僮鞑?3的 按鈕分配上述A按鈕13A,作為指示左巻動的操作部13的按鈕分配上述 B按鈕13B。另一方面,當操作者100如圖6所示在操作者頭部102左側(cè) 保持信息呈現(xiàn)裝置10時,用左手保持信息呈現(xiàn)裝置10。因此,在該左手 的第l手指(大拇指) 第5手指(小拇指)中,與用第3手指(中指) 操作用于指示右?guī)唲拥陌粹o相比,用第4手指(無名指)操作用于指示 右?guī)唲拥陌粹o更易于直觀地進行操縱。同樣地,用左手的第3手指(中 指)操作用于指示左巻動的按鈕更為自然。由此,優(yōu)選的是作為這樣的 指示右?guī)唲拥牟僮鞑?3的按鈕分配上述C按鈕13C,作為指示左巻動的 操作部13的按鈕分配上述D按鈕13D。
由此,操作部13的按鈕的分配也需要根據(jù)信息呈現(xiàn)裝置10的保持 或者安裝的方式而進行變更。
因此,為了根據(jù)這樣的信息呈現(xiàn)裝置IO的保持或者安裝的方式而變 更顯示方向和操作按鈕分配,在本實施例中,信息呈現(xiàn)裝置10具有姿勢 估計/檢測部18、操作指示判定部19以及顯示轉(zhuǎn)換部20。上述姿勢估計/ 檢測部18估計或者檢測上述用戶界面部14的姿勢、即上述用戶界面部 14的相對的上方向或者下方向。上述操作指示判定部19根據(jù)該姿勢估計 /檢測部18的估計或者檢測結(jié)果,來切換分配給上述操作部13的功能。 上述顯示轉(zhuǎn)換部20根據(jù)上述姿勢估計/檢測部18的估計或者檢測結(jié)果,
轉(zhuǎn)換顯示在上述信息顯示部12上的圖像。這些姿勢估計/檢測部18、操
作指示判定部19以及顯示轉(zhuǎn)換部20構(gòu)成用戶界面控制部21。
參照圖7的流程圖說明該用戶界面控制部21的動作。首先,在信息 顯示部12上進行例如"請操作上側(cè)的操作部"這樣的催促操作相對上側(cè) 或者相對下側(cè)的上述操作部13的顯示(步驟S1)。不管信息呈現(xiàn)裝置10 是圖5和圖6的哪個保持或者安裝狀態(tài),為了操作者100能夠理解,向 上向下都要進行上述顯示。然后,姿勢估計/檢測部18檢測與上述催促操 作操作部13的顯示對應的上述操作者100的操作(步驟S2),根據(jù)其檢 測結(jié)果,估計上述用戶界面部14的姿勢(上下方向)(步驟S3)。即,在 操作部13的上述A按鈕13A或者B按鈕13B被操作的情況下,估計為 是圖5所示的保持或者安裝狀態(tài),且配置有這些A按鈕13A和B按鈕13B 的一側(cè)是上方向。此外,在操作部13的上述C按鈕13C或者D按鈕13D 被操作的情況下,估計為是圖6所示的保持或者安裝狀態(tài),且配置有這 些C按鈕13C和D按鈕13D的一側(cè)是上方向。
然后,操作指示判定部19根據(jù)上述估計來變更操作部13的功能分 配,顯示轉(zhuǎn)換部20變更信息顯示部12的顯示方向(步驟S4)。另外,在 本實施例中,信息呈現(xiàn)裝置10默認為是圖5所示的保持或者安裝狀態(tài)。 因此,實際上在估計出如圖5所示配置有A按鈕13A和B按鈕13B的一 側(cè)是上方向的情況下,上述步驟S4的動作都不進行。S卩,僅在估計出如 圖6所示配置有C按鈕13C和D按鈕13D的一側(cè)是上方向的情況下,進 行該步驟S4的動作。在該情況下,操作指示判定部19例如將指示顯示 圖像的右?guī)唲拥墓δ芊峙浣o上述C按鈕13C,將指示左巻動的功能分配 給上述D按鈕13D,將其它功能分配給上述A按鈕13A和B按鈕13B。 并且,當操作部13的任意一個按鈕被操作時,將按照該所分配的功能的 操作指示內(nèi)容給與上述圖像生成部17的顯示信息檢索部16,使其進行新 的檢索等而生成圖像。此外,顯示轉(zhuǎn)換部20變更由上述顯示信息檢索部 16生成的圖像的方向,使該圖像顯示到信息顯示部12上。
另外,在圖像生成部17中,在可由上述用戶界面控制部21進行上 下判定之前,不生成與應與觀察對象的實像重疊顯示的輸入圖像相關(guān)的
信息或者圖像。并且,在進行上述上下判定之后,上述顯示轉(zhuǎn)換部20轉(zhuǎn) 換由圖像生成部17生成的信息或者圖像的上下方向,并顯示到信息顯示 部12上。
此外,在實際使用信息呈現(xiàn)裝置io時,不僅僅是根據(jù)上述上下判定
來切換用戶界面部14,雖然詳細說明省略,但當然需要在實際開始觀察
觀察對象之前先執(zhí)行視線校準的操作和處理。其是如下的操作和處理 觀察預定的校準對象的像,針對其實像在預定位置上重疊顯示由上述圖
像生成部17生成的信息或者圖像。
如上所述,根據(jù)本發(fā)明的第l實施例,根據(jù)信息顯示部12進行催促 操作相對上側(cè)或者相對下側(cè)的操作部13的顯示后的操作者100的操作, 估計用戶界面部14的姿勢。由此,能夠提供一種可根據(jù)使用狀況自動地 切換用戶界面部14的信息呈現(xiàn)裝置10。
在上述第1實施例中,姿勢估計/檢測部18根據(jù)信息顯示部12進行 催促操作相對上側(cè)或者相對下側(cè)的操作部13的顯示后的操作者100的操 作,估計用戶界面部14的姿勢。
對此,在本發(fā)明的第2實施例的信息呈現(xiàn)裝置10中,如圖8所示, 姿勢估計/檢測部18構(gòu)成為包括檢測重力方向的重力傳感器。因此,無需 如上述第1實施例那樣等待操作者100的操作,而僅通過該姿勢估計/檢 測部18即可估計用戶界面部14的姿勢。
這樣,根據(jù)本發(fā)明的第2實施例,通過使用重力傳感器可容易地估 計用戶界面部14的姿勢。因此,能夠提供一種可根據(jù)使用狀況自動地切 換用戶界面部14的信息呈現(xiàn)裝置10。
在本發(fā)明的第3實施例的信息呈現(xiàn)裝置10中,如圖9所示,圖像生 成部17除了圖像輸入部15和顯示信息檢索部16之外還包括姿勢估計/ 檢測部18。此外,用戶界面控制部21除了姿勢估計/檢測部18、操作指 示判定部19以及顯示轉(zhuǎn)換部20之外還包括圖像輸入部15。即,圖像輸 入部15和姿勢估計/檢測部18在被用作圖像生成部17的一部分的同時, 還被用作用戶界面控制部21的一部分。另外,在本實施例中,姿勢估計 /檢測部18構(gòu)成為包括位置及姿勢判定部。
艮口,在本實施例中,如圖10所示,在桌面200等基準面上除了對象 物201之外還配置有基準面判定用標記202。并且,姿勢估計/檢測部18 的位置及姿勢判定部根據(jù)該基準面判定用標記202看起來的樣子來判定 用戶界面部14的上下方向。即,該位置及姿勢判定部利用由圖像輸入部 (照相機)15拍攝真實世界中的絕對坐標系下的位置及姿勢和光學特征 已知的基準面判定用標記202而成的圖像,來估計拍攝該基準面判定用 標記202時該圖像輸入部(照相機)15的姿勢。上述估計可通過使用根 據(jù)基準標記位置求出圖像輸入單元的位置及姿勢的方法來容易地實現(xiàn), 上述方法例如公開在「VR, y夕一7工一70t&0単眼^:上3長方 形7 —力一位置 姿勢(D高精度実時間推定法」("用于VR界面的基于 單眼的長方形標記位置及姿勢的高精度實時估計法")(3D Image Conference,96予稿集(征求意見稿集)pp.167-172高橋章、石井郁夫、 牧野秀夫、中靜真1996)中。由此,其詳細說明省略。
此外,圖像生成部17的顯示信息檢索部16使用上述姿勢估計/檢測 部18的輸出來檢索顯示信息。即,檢索關(guān)于上述拍攝到的基準面判定用 標記202的相關(guān)信息或者圖像。
并且,在本實施例中,用戶界面控制部21的顯示轉(zhuǎn)換部20不僅如 上述第1和第2實施例那樣轉(zhuǎn)換上下方向,還根據(jù)由包括上述位置及姿 勢判定部在內(nèi)的姿勢估計/檢測部18估計出的用戶界面部14的位置及姿 勢,變更由上述顯示信息檢索部檢索到的相關(guān)信息或者圖像的位置及姿 勢,并顯示到信息顯示部12上。由此,能夠以與對象物201的位置及姿 勢對應的位置及姿勢,使操作者100觀察這些相關(guān)信息或者圖像。另外, 重疊顯示關(guān)于這樣拍攝到的基準面判定用標記202的相關(guān)信息的方法, 可通過使用根據(jù)圖像輸入單元的視點來顯示相關(guān)信息的方法來容易地實 現(xiàn),上述方法例如公開在USP6, 577,249中。
另外,作為本實施例的信息呈現(xiàn)裝置10的使用上的順序,當然是在 對基準面判定用標記202進行識別之前不重疊呈現(xiàn)信息。
如上所述,根據(jù)本第3實施例,可容易地估計用戶界面部14的姿勢, 能夠提供一種可根據(jù)使用狀況自動地切換用戶界面部14的信息呈現(xiàn)裝置
10。并且,應重疊顯示的圖像不僅可以以其上下方向的方向進行呈現(xiàn), 還可以以與用戶界面部14的位置及姿勢對應的位置及姿勢進行呈現(xiàn)。
根據(jù)以上實施例對本發(fā)明進行了說明,但本發(fā)明不限于上述實施例, 當然可以在本發(fā)明的宗旨的范圍內(nèi)進行各種變形和應用。
例如,對于信息呈現(xiàn)裝置10說明了用單手保持的裝置的情況,但也 可以不用手而用任意的保持工具保持或者安裝到操作者頭部102,并用手 僅進行操作部13的操作。此外,只要沒有實質(zhì)性地改變顯示部和操作部 13的相對位置及姿勢,則也可以采用如下方式使得包括操作部13在內(nèi) 的部位與顯示部分體形成,例如將顯示部保持或者安裝到操作者頭部 102,而將包括操作部13在內(nèi)的部位安裝到操作者100的腰部的側(cè)部、 腰帶等處。
(附記)
根據(jù)上述具體的實施例,能夠提取出具有以下結(jié)構(gòu)的發(fā)明。 (1) 一種信息呈現(xiàn)裝置,其將對象物的像和與該對象物相關(guān)的信息 一起呈現(xiàn)給操作者,其特征在于,該信息呈現(xiàn)裝置具有
用戶界面部,其包括由上述操作者進行操作的操作部或者對該操作 者呈現(xiàn)信息的顯示部;以及
用戶界面控制部,其檢測或者估計上述操作部或者上述顯示部的姿 勢,根據(jù)該檢測出或者估計出的姿勢來切換上述用戶界面部的動作或者 功能。
(對應的實施例)
與本技術(shù)方案(1)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1 第 3實施例。
(作用效果)
本技術(shù)方案(1)所述的信息呈現(xiàn)裝置根據(jù)檢測出或者估計出的鉛直 方向來切換用戶界面部的動作。
因此,根據(jù)本技術(shù)方案(1)所述的信息呈現(xiàn)裝置,可根據(jù)使用狀況
自動地切換用戶界面部。
(2) 根據(jù)技術(shù)方案(1)所述的信息呈現(xiàn)裝置,其特征在于,上述 顯示部將上述對象物的實像和表示預定信息的預定圖像進行重疊,顯示 給上述操作者。
(對應的實施例)
與本技術(shù)方案(2)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1 第 3實施例。
(作用效果)
在本技術(shù)方案(2)所述的信息呈現(xiàn)裝置中,顯示部將對象物的實像 和所生成的圖像進行重疊而呈現(xiàn)給操作者。
因此,根據(jù)本技術(shù)方案(2)所述的信息呈現(xiàn)裝置,能夠使操作者觀
察觀察對象物的實像和圖像。
(3) 根據(jù)技術(shù)方案(2)所述的信息呈現(xiàn)裝置,其特征在于,該信 息呈現(xiàn)裝置還具有圖像信息生成部,該圖像信息生成部生成與所輸入的 圖像相關(guān)的信息或者圖像,作為上述預定圖像。
(對應的實施例)
與本技術(shù)方案(3)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1 第 3實施例。
(作用效果)
本技術(shù)方案(3)所述的信息呈現(xiàn)裝置還具有生成與所輸入的圖像相 關(guān)的信息或者圖像的圖像信息生成部。
因此,根據(jù)本技術(shù)方案(3)所述的信息呈現(xiàn)裝置,能夠一并呈現(xiàn)與 所輸入的圖像相關(guān)的信息或者圖像。
(4) 根據(jù)技術(shù)方案(1)所述的信息呈現(xiàn)裝置,其特征在于,存在 多種安裝在上述操作者上或者由上述操作者進行保持的方式。
(對應的實施例)
與本技術(shù)方案(4)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1 第 3實施例。
(作用效果)
本技術(shù)方案(4)所述的信息呈現(xiàn)裝置具有多種安裝或者保持的方式 (保持或者安裝的方式)。
因此,根據(jù)本技術(shù)方案(4)所述的信息呈現(xiàn)裝置,可實現(xiàn)多種保持 或者安裝的方式。
(5) 根據(jù)技術(shù)方案(4)所述的信息呈現(xiàn)裝置,其特征在于,在上
述多種方式中,上述顯示部和上述操作部的實質(zhì)的相對位置關(guān)系相同。 (對應的實施例)
與本技術(shù)方案(5)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1 第 3實施例。
(作用效果)
對于本技術(shù)方案(5)所述的信息呈現(xiàn)裝置,在多種安裝或者保持的 方式中,顯示部和操作部的"相對位置及姿勢"相同。
因此,根據(jù)本技術(shù)方案(5)所述的信息呈現(xiàn)裝置,操作者不會對該 保持或者安裝的方式產(chǎn)生困惑,設備自身的處理也無需根據(jù)保持或者安 裝的方式而作較大變更。
(6) 根據(jù)技術(shù)方案(4)所述的信息呈現(xiàn)裝置,其特征在于,在上 述多種方式中,顯示在上述顯示部上的圖像的方向不同。
(對應的實施例)
與本技術(shù)方案(6)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1 第 3實施例。
(作用效果)
對于本技術(shù)方案(6)所述的信息呈現(xiàn)裝置,在多種"方式"中,顯 示在顯示部上的圖像的方向不同。
因此,根據(jù)本技術(shù)方案(6)所述的信息呈現(xiàn)裝置,無論多種安裝或 者保持的方式怎樣都能夠始終在正確的方向上向操作者呈現(xiàn)圖像。
(7) 根據(jù)技術(shù)方案(4)所述的信息呈現(xiàn)裝置,其特征在于,在上 述多種方式中,上述顯示部被安裝或者保持在上述操作者的側(cè)部。
(對應的實施例)
與本技術(shù)方案(7)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1 第
3實施例。
(作用效果)
在本技術(shù)方案(7)所述的信息呈現(xiàn)裝置中,操作部被安裝或者保持 在操作者的側(cè)部。
因此,根據(jù)本技術(shù)方案(7)所述的信息呈現(xiàn)裝置,能夠?qū)ú僮?部在內(nèi)的部位設為分體,因此使用方式變得豐富多彩。
(8) 根據(jù)技術(shù)方案(1)所述的信息呈現(xiàn)裝置,其特征在于,上述
用戶界面控制部具有
姿勢估計/檢測部,其估計或者檢測上述用戶界面部的姿勢;
操作指示判定部,其根據(jù)上述姿勢估計/檢測部的估計或者檢測結(jié)
果,來切換分配給上述操作部的功能;以及
顯示轉(zhuǎn)換部,其根據(jù)上述姿勢估計/檢測部的估計或者檢測結(jié)果,來 轉(zhuǎn)換顯示在上述顯示部上的圖像。 (對應的實施例)
與本技術(shù)方案(8)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1 第 3實施例。
(作用效果)
本技術(shù)方案(8)所述的信息呈現(xiàn)裝置估計或者檢測用戶界面部的姿 勢,根據(jù)其結(jié)果切換分配給上述操作部的功能,并且轉(zhuǎn)換顯示在上述顯 示部上的圖像。
因此,根據(jù)本技術(shù)方案(8)所述的信息呈現(xiàn)裝置,可根據(jù)用戶界面 部的姿勢來自動地切換操作部或者顯示部。
(9) 根據(jù)技術(shù)方案(8)所述的信息呈現(xiàn)裝置,其特征在于,上述 姿勢估計/檢測部檢測上述用戶界面部的相對的上方向或者下方向。
(對應的實施例)
與本技術(shù)方案(9)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1和第 2實施例。
(作用效果)
本技術(shù)方案(9)所述的信息呈現(xiàn)裝置檢測用戶界面部的相對的上方
向或者下方向。
因此,根據(jù)本技術(shù)方案(9)所述的信息呈現(xiàn)裝置,可根據(jù)用戶界面 部的相對的上方向或者下方向自動地切換操作部或者顯示部。
(10) 根據(jù)技術(shù)方案(8)所述的信息呈現(xiàn)裝置,其特征在于,上述
姿勢估計/檢測部包括檢測重力方向的重力傳感器。 (對應的實施例)
與本技術(shù)方案(10)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第2實 施例。
(作用效果)
本技術(shù)方案(10)所述的信息呈現(xiàn)裝置通過由重力傳感器檢測重力 方向,來估計或者檢測用戶界面部的姿勢。
因此,根據(jù)本技術(shù)方案(10)所述的信息呈現(xiàn)裝置,無需操作者動 手即可容易地估計或者檢測用戶界面部的姿勢。
(11) 根據(jù)技術(shù)方案(8)所述的信息呈現(xiàn)裝置,其特征在于,上述 姿勢估計/檢測部根據(jù)在上述顯示部上進行的催促操作相對上側(cè)或者相對 下側(cè)的上述操作部的顯示后的上述操作者的操作,來估計上述用戶界面 部的姿勢。
(對應的實施例)
與本技術(shù)方案(11)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第1實 施例。
(作用效果)
本技術(shù)方案(11)所述的信息呈現(xiàn)裝置根據(jù)顯示了請求操作上方向 或者下方向的操作部的顯示后的操作,來估計或者檢測用戶界面部的姿 勢。
因此,根據(jù)本技術(shù)方案(11)所述的信息呈現(xiàn)裝置,無需設置特殊 的檢測機構(gòu)即可估計或者檢測用戶界面部的姿勢。
(12) 根據(jù)技術(shù)方案(8)所述的信息呈現(xiàn)裝置,其特征在于,上述 姿勢估計/檢測部包括位置及姿勢判定部,該位置及姿勢判定部利用由照 相機拍攝真實世界中的絕對坐標系下的位置及姿勢和光學特征已知的標
記而成的圖像,來估計拍攝該標記時該照相機的姿勢。 (對應的實施例)
與本技術(shù)方案(12)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第3實 施例。
(作用效果)
本技術(shù)方案(12)所述的信息呈現(xiàn)裝置可根據(jù)標記圖像來估計或者 檢測用戶界面部的姿勢。
因此,根據(jù)本技術(shù)方案(12)所述的信息呈現(xiàn)裝置,可對不僅包括 單純的用戶界面部的上下方向還包括傾斜度、方向等的位置及姿勢進行 估計或者檢測。
(13) 根據(jù)技術(shù)方案(12)所述的信息呈現(xiàn)裝置,其特征在于,在
生成顯示在上述顯示部上的圖像時,利用上述位置及姿勢判定部的輸出。 (對應的實施例)
與本技術(shù)方案(13)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第3實 施例。
(作用效果)
本技術(shù)方案(13)所述的信息呈現(xiàn)裝置可利用估計出或者檢測出的 位置及姿勢來生成要顯示的圖像。
因此,根據(jù)本技術(shù)方案(13)所述的信息呈現(xiàn)裝置,可以以與估計 出或者檢測出的位置及姿勢對應的位置及姿勢進行呈現(xiàn)。
(14) 根據(jù)技術(shù)方案(8)所述的信息呈現(xiàn)裝置,其特征在于,上述 顯示轉(zhuǎn)換部根據(jù)上述姿勢估計/檢測部的輸出來切換上述顯示部的動作。
(對應的實施例)
與本技術(shù)方案(14)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第l 第3實施例。
(作用效果)
在本技術(shù)方案(14)所述的信息呈現(xiàn)裝置中,顯示轉(zhuǎn)換部根據(jù)姿勢 估計/檢測的輸出來切換顯示部的動作。
因此,根據(jù)本技術(shù)方案(14)所述的信息呈現(xiàn)裝置,能夠按照估計 出或者檢測出的位置及姿勢來切換顯示部的動作。
(15) 根據(jù)技術(shù)方案(14)所述的信息呈現(xiàn)裝置,其特征在于,由 上述顯示轉(zhuǎn)換部切換的上述顯示部的動作,是顯示在該顯示部上的圖像 的方向。
(對應的實施例)
與本技術(shù)方案(15)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第l ,作用效果)
本技術(shù)方案(15)所述的信息呈現(xiàn)裝置按照估計出或者檢測出的位
置及姿勢切換顯示在顯示部上的圖像的方向。
因此,根據(jù)本技術(shù)方案(15)所述的信息呈現(xiàn)裝置,無論顯示部的
姿勢怎樣都可在顯示部上按照正確的方向呈現(xiàn)圖像。
(16) 根據(jù)技術(shù)方案(8)所述的信息呈現(xiàn)裝置,其特征在于,上述 操作指示判定部根據(jù)上述姿勢估計/檢測部的輸出,來切換分配給上述操 作部的功能。
(對應的實施例)
與本技術(shù)方案(16)所述的信息呈現(xiàn)裝置相關(guān)的實施例對應第l 第3實施例。
(作用效果)
本技術(shù)方案(16)所述的信息呈現(xiàn)裝置按照估計出或者檢測出的位 置及姿勢來切換分配給操作部的功能。
因此,根據(jù)本技術(shù)方案(16)所述的信息呈現(xiàn)裝置,可提供一種無 論操作部的姿勢怎樣都易于進行操作的操作部。
權(quán)利要求
1.一種信息呈現(xiàn)裝置(10),其將對象物的像和與該對象物相關(guān)的信息一起呈現(xiàn)給操作者,其特征在于,該信息呈現(xiàn)裝置具有用戶界面部(14),其包括由上述操作者進行操作的操作部(13)或者對該操作者呈現(xiàn)信息的顯示部;以及用戶界面控制部(21),其檢測或者估計上述操作部(13)或者上述顯示部的姿勢,根據(jù)該檢測出或者估計出的姿勢來切換上述用戶界面部(14)的動作或者功能。
2. 根據(jù)權(quán)利要求l所述的信息呈現(xiàn)裝置,其特征在于,上述顯示部 對上述對象物的實像和表示預定信息的預定圖像進行重疊,而顯示給上 述操作者。
3. 根據(jù)權(quán)利要求2所述的信息呈現(xiàn)裝置,其特征在于,該信息呈現(xiàn) 裝置還具有圖像信息生成部(17),該圖像信息生成部(17)生成與所輸 入的圖像相關(guān)的信息或者圖像,作為上述預定圖像。,
4. 根據(jù)權(quán)利要求l所述的信息呈現(xiàn)裝置,其特征在于,存在多種安 裝在上述操作者上或者由上述操作者進行保持的方式。
5. 根據(jù)權(quán)利要求4所述的信息呈現(xiàn)裝置,其特征在于,在上述多種 方式中,上述顯示部和上述操作部(13)的實質(zhì)的相對位置關(guān)系相同。
6. 根據(jù)權(quán)利要求4所述的信息呈現(xiàn)裝置,其特征在于,在上述多種 方式中,顯示在上述顯示部上的圖像的方向不同。
7. 根據(jù)權(quán)利要求4所述的信息呈現(xiàn)裝置,其特征在于,在上述多種 方式中,上述顯示部被安裝或者保持在上述操作者的側(cè)部。
8. 根據(jù)權(quán)利要求l所述的信息呈現(xiàn)裝置,其特征在于,上述用戶界 面控制部(21)具有姿勢估計/檢測部(18),其估計或者檢測上述用戶界面部(14)的 姿勢;操作指示判定部(19),其根據(jù)上述姿勢估計/檢測部(18)的估計 或者檢測結(jié)果,來切換分配給上述操作部(13)的功能;以及 顯示轉(zhuǎn)換部(20),其根據(jù)上述姿勢估計/檢測部(18)的估計或者 檢測結(jié)果,來轉(zhuǎn)換顯示在上述顯示部上的圖像。
9. 根據(jù)權(quán)利要求8所述的信息呈現(xiàn)裝置,其特征在于,上述姿勢估 計/檢測部(18)檢測上述用戶界面部(14)的相對上方向或者相對下方 向。
10. 根據(jù)權(quán)利要求8所述的信息呈現(xiàn)裝置,其特征在于,上述姿勢 估計/檢測部(18)包括檢測重力方向的重力傳感器。
11. 根據(jù)權(quán)利要求8所述的信息呈現(xiàn)裝置,其特征在于,上述姿勢 估計/檢測部(18)根據(jù)在上述顯示部上進行的催促操作相對上側(cè)或者相 對下側(cè)的上述操作部(13)的顯示后的上述操作者的操作,來估計上述 用戶界面部(14)的姿勢。
12. 根據(jù)權(quán)利要求8所述的信息呈現(xiàn)裝置,其特征在于,上述姿勢 估計/檢測部(18)包括位置及姿勢判定部(18),該位置及姿勢判定部(18) 利用由照相機(15)拍攝真實世界中的絕對坐標系下的位置及姿勢和光 學特征已知的標記(202)而成的圖像,來估計拍攝該標記時該照相機的 姿勢。
13. 根據(jù)權(quán)利要求12所述的信息呈現(xiàn)裝置,其特征在于,在生成顯 示在上述顯示部上的圖像時,利用上述位置及姿勢判定部(18)的輸出。
14. 根據(jù)權(quán)利要求8所述的信息呈現(xiàn)裝置,其特征在于,上述顯示 轉(zhuǎn)換部(20)根據(jù)上述姿勢估計/檢測部(18)的輸出來切換上述顯示部 的動作。
15. 根據(jù)權(quán)利要求14所述的信息呈現(xiàn)裝置,其特征在于,由上述顯 示轉(zhuǎn)換部(20)切換的上述顯示部的動作,是顯示在該顯示部上的圖像 的方向。
16. 根據(jù)權(quán)利要求8所述的信息呈現(xiàn)裝置,其特征在于,上述操作 指示判定部(19)根據(jù)上述姿勢估計/檢測部(18)的輸出,來切換分配 給上述操作部(13)的功能。
全文摘要
本發(fā)明提供一種信息呈現(xiàn)裝置(10),其將對象物的像和與該對象物相關(guān)的信息一起呈現(xiàn)給操作者,該信息呈現(xiàn)裝置(10)由如下部分構(gòu)成用戶界面部(14),其包括由上述操作者進行操作的操作部(13)或者對該操作者呈現(xiàn)信息的顯示部(信息顯示部(12)和透明反射板);以及用戶界面控制部(21),其檢測或者估計上述操作部或者上述顯示部的姿勢,根據(jù)該檢測出或者估計出的姿勢來切換上述用戶界面部的動作或者功能。
文檔編號G09G5/00GK101180671SQ20068001758
公開日2008年5月14日 申請日期2006年3月20日 優(yōu)先權(quán)日2006年3月20日
發(fā)明者峯泰治, 杉田岳雅, 白井虔, 福山直宏, 赤塚祐一郎, 高橋和彥, 齊藤明人 申請人:奧林巴斯株式會社