專利名稱:移動終端,鼠標應用程序,以及利用移動終端作為無線鼠標裝置的方法
技術領域:
本發(fā)明涉及適用于移動裝置的移動終端,例如移動電話,個人手持電話系統(tǒng)(PHS),以及個人數(shù)字助理(PDA),這些裝置分別具有攝像功能和無線通信功能,例如基于藍牙(注冊商標)或者紅外數(shù)據(jù)連接關系(IrDA)的短距離無線通信功能,或者基于射頻識別信息(RFID)的非接觸無線通信功能。更具體的是,本發(fā)明涉及一種作為上述的移動裝置、可以具有無線鼠標功能的移動終端,鼠標應用程序,以及利用該移動終端作為無線鼠標裝置的方法。
背景技術:
日本未經審查的專利申請公開2004-164559(專利文獻1)公開了一種移動終端,其中在顯示單元中顯示的指示符(pointer)可以根據(jù)通過為終端主體提供的攝像機所拍攝的圖像之間的變化(shift)而移動。
在此移動終端中,當指向模式(pointing mode)被規(guī)定時,攝像機依次拍攝操作桌表面的圖像,移動終端被放置在所述操作桌上并且被操作。兩個依次拍攝的圖像被比較,從而獲得兩個圖像之間的變化。根據(jù)該變化確定移動終端所移動的方向和距離。在顯示單元上顯示的指示符根據(jù)該方向和距離移動。因而,在為移動終端提供的顯示單元上顯示的指示符可以被移動。
通常,當攜帶一個筆記本式個人計算機時,用戶也攜帶一個專用的鼠標裝置。用戶將該鼠標裝置連接到計算機,然后在遠處使用該計算機。
發(fā)明內容不利地是,用戶在筆記本式個人計算機之外還攜帶鼠標裝置是不方便的,因為所要攜帶的物品數(shù)目增加。
在專利文獻1所公開的移動終端中,在顯示單元上顯示的指示符被移動并且顯示單元被合并在該移動終端中。換句話說,在移動終端的顯示單元上顯示的指示符被控制。不利地是,移動遠離移動終端的臺式或者筆記本式個人計算機的監(jiān)視器上顯示的指示符很困難。
考慮到上述缺點而做出本發(fā)明。期望提供一種能夠移動物理上與移動終端分離的顯示器上所顯示的指示符的移動終端,鼠標應用程序,以及利用移動終端作為無線鼠標裝置的方法。利用該移動終端,消除了與例如筆記本式個人計算機一起攜帶專用鼠標裝置的需要。
根據(jù)本發(fā)明的一個實施例,提供一種具有對物體進行成像的攝像機單元的移動終端,包括移動判斷單元,在鼠標模式中根據(jù)通過攝像機單元順序拍攝的圖像之間的變化確定移動終端主體所移動的方向和距離;短距離無線通信單元;以及控制單元,用于控制短距離無線通信單元通過短距離無線方式發(fā)送表示由移動判斷單元確定的所述方向和距離的信息到一個操作裝置,該操作裝置包括顯示單元并且根據(jù)接收到的表示方向和距離的信息控制在顯示單元上顯示的指示符。
根據(jù)本發(fā)明的另一實施例,提供一種鼠標應用程序,其允許計算機用作移動判斷控制裝置,用于控制移動判斷裝置根據(jù)通過攝像機單元順序拍攝的圖像之間的變化確定具有攝像機單元的主體移動的方向和距離;以及短距離無線通信控制裝置,用于控制短距離無線通信裝置通過短距離無線方式發(fā)送表示通過允許計算機用作移動判斷控制裝置而確定的方向和距離的信息到一個操作裝置,該操作裝置包括顯示裝置并且根據(jù)接收到的表示方向和距離的信息控制在顯示裝置上顯示的指示符。
根據(jù)本發(fā)明的另一實施例,提供一種利用移動終端作為無線鼠標裝置的方法,該方法包括步驟通過包含在該移動終端中的攝像機單元順序拍攝的圖像之間的變化確定移動終端的主體移動的方向和距離;以及通過短距離無線方式發(fā)送表示確定的方向和距離的信息到一個操作裝置,該操作裝置包括顯示裝置并根據(jù)接收到的表示方向和距離的信息控制在顯示裝置上顯示的指示符。
根據(jù)本發(fā)明的上述實施例,移動終端的主體所移動的方向和距離根據(jù)借助于包含在該移動終端中的攝像機單元順序拍攝的圖像之間的變化而確定。表示所確定的方向和距離的信息通過短距離無線方式發(fā)送到操作裝置,該操作裝置包括顯示單元并根據(jù)接收到的信息移動在該顯示單元上顯示的指示符。因而,該移動終端可以被用作無線鼠標裝置。
根據(jù)本發(fā)明的實施例,移動終端可以用作無線鼠標裝置。因此,不必在例如筆記本式個人計算機之外攜帶專用鼠標裝置。
圖1是根據(jù)本發(fā)明的一個實施例的一種移動電話的框圖;圖2A到2C是根據(jù)本實施例移動電話的外部視圖;圖3是示出根據(jù)本實施例作為無線鼠標裝置操作的移動電話的示意圖;圖4是鼠標模式操作的流程圖,其中根據(jù)本實施例的移動電話用作無線鼠標裝置;圖5是一個示意圖,示出了根據(jù)本實施例的移動電話用作無線鼠標裝置并且使用該移動電話移動在個人計算機的監(jiān)視器上顯示的指示符的狀態(tài);圖6是根據(jù)本實施例在移動電話的鼠標模式中計算運動矢量的處理過程的流程圖;以及圖7A和7B是說明根據(jù)本實施例在移動電話的鼠標模式中計算運動矢量的處理過程的示意圖。
具體實施方式本發(fā)明可以被用于一種具有攝像功能和無線通信功能的移動電話,例如具有幾十厘米的無線電通信距離的基于射頻識別信息(RFID)的非接觸通信功能或者具有幾十米的無線電通信距離的基于藍牙(注冊商標)或者紅外數(shù)據(jù)連接關系(IrDA)的短距離無線通信功能。
移動電話的結構電學結構參考圖1,根據(jù)本發(fā)明的一個實施例的一種移動電話包括天線1,通信電路2,揚聲器單元3,麥克風單元4,顯示單元5,以及操作單元6。通信電路2通過天線1與基站進行無線通信。揚聲器單元3產生聲學輸出,例如呼入(來電)響鈴聲和接收到的語音。麥克風單元4采集將被發(fā)送的語音。顯示單元5顯示圖像,例如活動圖像和靜止圖像,和文本。操作單元6用于預定輸入操作。
該移動電話進一步包括發(fā)光單元7(發(fā)光二極管(LED)),攝像機單元8,振動單元9,短距離無線通信天線10,以及短距離無線通信單元11。該發(fā)光單元7使用光來指示呼入和呼出。攝像機單元8拍攝所需物體的靜止或者活動圖像。振動單元9振動移動電話的主體來向用戶通知來電。短距離無線通信天線10和短距離無線通信單元11例如具有幾十米的無線通信距離。在移動電話用作無線鼠標裝置的鼠標模式中,短距離無線通信單元11通過短距離無線通信天線10以無線電方式發(fā)送關于運動矢量的信息(運動矢量信息),運動矢量相應于移動電話的移動。
另外,該移動電話包括運動矢量計算單元12,存儲器13,以及控制單元14。在鼠標模式中,運動矢量計算單元12計算相應于移動電話的移動的運動矢量來產生運動矢量信息。存儲器13存儲用于通信處理的通信處理程序(通信程序),各種應用程序,當移動電話用作音樂播放器時將被播放的音樂數(shù)據(jù),日程表,電話簿,發(fā)送和接收到的電子郵件的數(shù)據(jù),以及呼叫的呼叫歷史和電子郵件??刂茊卧?4控制整個移動電話的操作。
存儲在存儲器13中的應用程序的例子包括音樂播放器程序,攝像機控制程序,鼠標應用程序,以及短距離無線通信程序。當用戶使用移動電話作為音樂播放器時該音樂播放器程序被啟動。當用戶使用攝像機單元8拍攝所需物體時該攝像機控制程序被啟動。當用戶使用移動電話作為無線鼠標裝置時該鼠標應用程序被啟動。該短距離無線通信程序用于在鼠標應用程序執(zhí)行期間通過運動矢量計算單元12所產生的運動矢量信息的短距離無線傳輸。
外部結構圖2A是根據(jù)本實施例的移動電話的主視圖。圖2B是該移動電話的后視圖。圖2C是該移動電話的側視圖。參考圖2A到2C,該移動電話是一種滑動型的,即上、下部分20和21是可以相對彼此在部分20和21的縱向方向上滑動的。
上部分20包括顯示單元5,可旋轉操作單元22,掛機鍵23,摘機鍵24,第一軟鍵25,以及第二軟鍵26??尚D的操作單元22靠近顯示單元5的下側端被放置。掛機鍵23和摘機鍵24被配置成使得可旋轉操作單元22被設置在其間。第一軟鍵25遠離顯示單元5設置在掛機鍵23下方。第二軟鍵26遠離顯示單元5設置在摘機鍵24下方。下部分21包括主操作單元,例如數(shù)字鍵盤。當上、下部分20和21相對彼此滑動時,該主操作單元被露出。
可旋轉操作單元22包括輸入鍵27,輕推表盤(jog dial)28,以及可旋轉操作鍵29。該輕推表盤28與輸入鍵27同心并圍繞輸入鍵27。可旋轉操作鍵29也與輸入鍵27同心并圍繞輕推表盤28。
輸入鍵27是按壓型的??尚D操作鍵29是可360度旋轉的。輕推表盤28是按壓型的。該輕推表盤28的上、下、右、左、右上、左下部分可以被按壓。
參考圖2B,下部分21包括攝像機單元8和用于照明的發(fā)光單元30。發(fā)光單元30靠近攝像機單元8。攝像機單元8和發(fā)光單元30在非成像模式中被攝像機蓋31遮蓋。在成像模式中,攝像機蓋31在下部分21的縱向滑動來露出攝像機單元8和發(fā)光單元30。
當用戶使用移動電話作為無線鼠標裝置時,用戶手持該移動電話,使得用戶的手掌位于上部分20的顯示單元5上,中指放在第一軟鍵25上,食指放在第二軟鍵26上,如圖3中通過虛線示出。
當鼠標應用程序被啟動時,第一軟鍵25用作右點擊鍵而第二軟鍵26用作左點擊鍵。該鼠標應用程序提供一種″鍵-和攝像機(鍵+攝像機)模式″和一種″鍵模式″。在鍵+攝像機模式中,該移動電話的主體的移動根據(jù)通過攝像機單元8拍攝的圖像被確定,來移動指示符。在鍵模式中,輕推表盤28用作方向鍵來移動指示符。
在用戶選擇了鍵+攝像機模式的情況下,用戶在如上面所述那樣手持移動電話時移動移動電話的主體,因而移動了指示符。用戶使用中指操作第一軟鍵25、等同于右點擊,并且使用食指操作第二軟鍵26、等同于左電擊。
在用戶選擇了鍵模式的情況下,用戶當如上所述那樣手持移動電話時用食指或者中指按壓輕推表盤28因而移動了指示符。用戶使用中指操作第一軟鍵25、等同于右點擊,并且使用食指操作第二軟鍵26、等同于左點擊。
關于鍵+攝像機模式和鍵模式,用戶可以通過按壓圖2A和3所示的鼠標模式改變鍵33將所選擇的方式切換到另一模式??刂茊卧?4設置鍵+攝像機模式作為默認模式。然后每當該鼠標模式改變鍵33被按下時,鼠標模式在鍵+攝像機模式和鍵模式之間切換。
在鍵+攝像機模式中,移動電話所移動的方向和距離根據(jù)通過攝像機單元8拍攝的圖像來確定,如下面將要描述的。因此,該移動電話可以象普通鼠標裝置一樣在一個平面上二維移動來移動指示符。另外,該移動電話可以在所要求的空間中三維移動來移動指示符。
在移動電話象普通鼠標裝置一樣在一個平面上二維移動以便移動指示符的情況下,如圖2C所示,該攝像機單元8的攝像機蓋31與操作平面接觸(移動電話在該操作平面上放置并操作),因而在攝像機單元8和操作平面之間提供了一個合適的空隙。該空隙等于攝像機蓋31的厚度。因此,即使當攝像機單元8接近操作平面的時候,操作平面的良好的圖像也可以被拍攝。
在本實施例中,攝像機單元8設置在下部分21上。攝像機單元8可以設置在上部分20或者設置在上部分20或者下部分21中任何一個的側面。
無線鼠標操作當使用該移動電話作為無線鼠標裝置時,用戶通過操作單元6從功能選擇菜單中選擇鼠標功能。當控制單元14檢測鼠標功能的選擇時,單元14讀出存儲在存儲器13中的鼠標應用程序并開始圖4流程圖所示的處理過程。
在該流程開始的時候,控制單元14執(zhí)行初始化來清除通過攝像機單元8拍攝的圖像和在鼠標應用程序的先前執(zhí)行中計算的數(shù)值,然后進行到步驟S2。
如上所述,當激活鼠標應用程序時,控制單元14設置鍵+攝像機模式為默認模式。在鍵+攝像機模式中,主體的移動根據(jù)通過攝像機單元8拍攝的圖像來確定,從而移動指示符。可以通過按壓鼠標模式改變鍵33在鍵+攝像機模式和鍵模式之間切換鼠標模式,在鍵模式中使用輕推表盤28作為方向鍵移動指示符。
在步驟S2中,控制單元14檢測鼠標模式改變鍵33的按壓是否存在,從而確定是否給出了改變鼠標模式的指令。當控制單元14沒有檢測到鼠標模式改變鍵33的按壓時,這意味著用戶沒有給出改變鼠標模式的指令。該控制單元14進行步驟S3的處理來執(zhí)行默認設置的鍵+攝像機模式。
如果控制單元14檢測到鼠標模式改變鍵33的按壓時,這意味著用戶給出了改變鼠標模式的指令。因此,該控制單元14將默認的鍵+攝像機模式改變?yōu)殒I模式并進行步驟S9的處理。
在控制單元14進行步驟S3的處理來執(zhí)行鍵+攝像機模式的情況下,控制單元14啟動攝像機單元8并且進行步驟S4的處理。當攝像機單元8被啟動時,發(fā)光單元30可以被打開。為了支持通過攝像機單元8拍攝圖像,用戶可以根據(jù)環(huán)境光的亮度打開發(fā)光單元30。
在步驟S4,控制單元14控制運動矢量計算單元12比較通過攝像機單元8拍攝的連續(xù)幀圖像(幀),并且計算先前和當前幀之間的變化。在步驟S5中,控制單元14確定所述幀之間是否存在變化。
如上所述,在鍵+攝像機模式中,移動電話的主體進行二維或者三維移動。當移動電話的主體被二維操作時,例如,攝像機單元8拍攝鼠標墊或者桌面的圖像。當移動電話的主體被三維操作時,攝像機單元8拍攝外界例如辦公室的圖像??刂茊卧?4根據(jù)通過攝像機單元8拍攝的圖像確定先前和當前幀之間的變化。
如果在步驟S5確定先前和當前幀之間不存在變化,這意味著移動電話的主體沒有移動。因此,控制單元14返回步驟S4的處理并且繼續(xù)確定所述幀之間的變化。
另一方面,如果在步驟S5確定先前和當前幀之間存在變化,這意味著移動電話的主體已經移動??刂茊卧?4進行步驟S6的處理并且控制短距離無線通信單元11發(fā)送關于相應于幀之間的變化的運動矢量的信息,該變化通過運動矢量計算單元12被計算。
因此,例如如圖5所示,運動矢量信息從移動電話40的短距離無線通信單元11通過短距離無線通信天線10和短距離無線通信天線43之間的短距離無線鏈路發(fā)送到短距離無線通信單元42,該短距離無線通信單元42外部連接到(或者內置于)桌面?zhèn)€人計算機41。
該桌面?zhèn)€人計算機41在該方向上通過該距離移動在監(jiān)視器44上顯示的指示符P,所述方向和距離由通過短距離無線通信單元42和短距離無線通信天線43所接收到的運動矢量信息規(guī)定。因而,監(jiān)視器44上的指示符P可以響應于移動電話的二維或者三維移動而移動。
在運動矢量信息的發(fā)送之后,控制單元14進行步驟S7的處理并且檢測是否存在鼠標模式改變鍵33上的按壓。如果控制單元14檢測到在鼠標模式改變鍵33上的按壓,則這意味著用戶給出了將鍵+攝像機模式改變?yōu)殒I模式的指令。然后,該處理進行到步驟S9。
另一方面,如果控制單元14沒有檢測到鼠標模式改變鍵33上的任何按壓,則單元14進行步驟S8的處理并且確定是否給出了結束當前鼠標模式的指令。當確定給出了該指令時,控制單元14結束圖4的流程。當確定沒有給出該指令時,控制單元14返回步驟S4的處理并且繼續(xù)確定上述幀之間的變化。因此,對連續(xù)的幀順序地互相比較、直到用戶給出結束鼠標模式(亦即當移動電話用作無線鼠標裝置時)的指令。監(jiān)視器44上指示符P的移動根據(jù)幀之間的變化被控制。
除確定移動電話主體的移動之外,控制單元14還監(jiān)控圖3所示的第一軟鍵25或者第二軟鍵26上的按壓是否存在,該監(jiān)控在圖4的流程中未示出。當檢測到第一軟鍵25的按壓時,控制單元14控制短距離無線通信單元11通過短距離無線方式發(fā)送相應于右點擊的命令到桌面?zhèn)€人計算機41的短距離無線通信單元42。當檢測到第二軟鍵26的按壓時,控制單元14控制短距離無線通信單元11通過短距離無線方式發(fā)送相應于左點擊的命令到桌面?zhèn)€人計算機41的短距離無線通信單元42。
當在步驟S2或者S7檢測到鼠標模式改變鍵33的按壓之后進行步驟S9的處理時,控制單元14將鼠標模式從鍵+攝像機模式改變到鍵模式并且確定圖3的輕推表盤28是否被操作。
換句話說,在如上所述的鍵模式中,用戶借助于用作方向鍵的輕推表盤28來移動指示符P。因此,當鼠標模式變化到鍵模式時,控制單元14在步驟S9中檢測輕推表盤28上的操作是否存在。
在輕推表盤28上沒有檢測到操作的事實意味著用戶沒有給出移動指示符P的指令。因此,當沒有檢測到輕推表盤28上的操作時,控制單元14進行步驟S12的處理來確定是否給出了改變鼠標模式的指令,然后進行步驟S13的處理來確定是否給出了結束鼠標模式的指令。
另一方面,檢測到輕推表盤28上的操作的事實意味著用戶給出了移動指示符P的指令。按壓輕推表盤28的上、下、左、右、右上或者左下部分指定指示符P的移動方向。輕推表盤28被按下并且被保持的時間段(在下文中,稱為按壓-保持時間),表示了指示符P將要移動的距離。
因此,在步驟S10,控制單元14控制運動矢量計算單元12確定通過操縱輕推表盤28指定的移動方向,例如上、下、左、右、右上或者左下,根據(jù)輕推表盤28的按壓-保持時間計算出指示符P將要移動的距離,并且產生關于相應于確定的方向和計算的距離的運動矢量的信息。在步驟S11,控制單元14控制短距離無線通信單元11通過短距離無線方式發(fā)送通過運動矢量計算單元12產生的運動矢量信息。
因此,監(jiān)視器44上的指示符P在通過操作輕推表盤28規(guī)定的方向上以相應于輕推表盤28的按壓-保持時間的距離而移動。
在運動矢量信息的發(fā)送之后,控制單元14進行步驟S12的處理并且檢測鼠標模式改變鍵33上的按壓是否存在。如果控制單元14檢測到在鼠標模式改變鍵33上的按壓,則這意味著用戶給出了將模式從鍵模式改變到鍵+攝像機模式的指令。然后,該處理返回到步驟S3。
另一方面,如果控制單元14沒有檢測到鼠標模式改變鍵33上的任何按壓,處理進行到步驟S13。控制單元14確定是否給出了結束當前鼠標模式的指令。如果控制單元14確定該指令被給出,則單元14結束圖4所示流程的處理。如果控制單元14確定沒有給出該指令,則單元14返回步驟S9的處理并且繼續(xù)檢測輕推表盤28上的操作是否存在。因而,監(jiān)視器44上的指示符P響應于輕推表盤28上的按壓而移動,直到用戶給出結束鼠標模式(亦即當該用戶使用移動電話作為無線鼠標裝置時)的指令。
在鍵模式中,控制單元14象在上述鍵+攝像機模式情況下一樣監(jiān)視圖3中的第一軟鍵25或者第二軟鍵26上的按壓是否存在。當檢測到第一軟鍵25上的按壓時,控制單元14控制短距離無線通信單元11通過短距離無線方式發(fā)送相應于右點擊的命令到桌面?zhèn)€人計算機41的短距離無線通信單元42。當檢測到第二軟鍵26上的按壓時,控制單元14控制短距離無線通信單元11通過短距離無線方式發(fā)送相應于左點擊的命令到桌面?zhèn)€人計算機41的短距離無線通信單元42。
確定變化的操作下面將詳細說明在圖4的流程圖中的步驟S4中確定幀之間的變化的操作。圖6是確定幀之間的變化的操作(處理)的流程圖。圖6的流程在啟動鼠標應用程序時將鍵+攝像機模式設置為默認模式的時候開始,或者,在鼠標模式響應于用戶按壓鼠標模式改變鍵33而從鍵模式改變?yōu)殒I+攝像機模式時開始。
在鍵+攝像機模式開始后,在步驟S21,控制單元14執(zhí)行初始化以清除運動矢量計算單元12的計算結果。該處理進行到步驟S22。
在步驟S22,控制單元14控制運動矢量計算單元12開始裝載通過攝像機單元8拍攝的圖像,對例如先前幀的中心塊和當前幀中的預定塊進行比較,從而獲得像素值,例如,每一個像素和塊中相對應像素之間的亮度上的差異。
例如,在移動電話的顯示單元5中的有效像素的長寬比,如圖7A所示是120×160像素,即″QQVGA(Quarter Quarter Video Graphics Array,四分之一的四分之一的視頻圖形陣列)大小。參考圖7A和7B,每個塊長寬各是5個像素,即每個塊具有5×5像素的大小(25像素)。
運動矢量計算單元12將先前幀分離為多個塊,每個塊具有5×5像素的大小。在這些塊中,位于先前幀中央的塊被設置為″比較塊″。原因如下通常,所需物體被攝像機單元8成像為使得該物體位于整個圖像的中央。在此例子中,在先前幀中央的塊被設置為比較塊。運動矢量計算單元12將比較塊的每一個像素和當前幀的第一塊的相應像素進行比較來確定像素值的差值。
在步驟S23,控制單元14監(jiān)控運動矢量計算單元12的計算狀態(tài)來確定先前幀中的比較塊和當前幀中的第一塊之間的像素值差值的確定是否完成。如果該確定沒有完成,則處理返回步驟S22??刂茊卧?4控制運動矢量計算單元12繼續(xù)確定,直到先前幀中的比較塊的每一像素和當前幀中的第一塊的相應像素之間的像素值差值完成。
另一方面,如果該確定完成,則控制單元14進行步驟S24的處理并且控制運動矢量計算單元12計算在步驟S22確定的25個差值的和。
在步驟S24,控制單元14控制運動矢量計算單元12比較在步驟S24計算的最新的和與先前計算的和。在步驟S26,確定最新的和是否小于先前的和。
在先前幀中的比較塊和當前幀中的第一塊之間的像素值差值的和被計算出之后,先前的和不存在。在此情況下,控制單元14返回步驟S22的處理并且控制運動矢量計算單元12計算比較塊和當前幀中的第二塊之間的像素值差值的和。
在涉及第二塊的差值的和被計算出之后,在步驟S26中對涉及第二塊的差值的和與涉及第一塊的差值的和進行比較。
當在步驟S26確定涉及當前幀中的第二塊的差值的和(最新和)小于涉及當前幀中的第一塊的差值的和(先前和)時,控制單元14進行步驟S27的處理。另一方面,當在步驟S26確定最新和大于先前和時,控制單元14進行步驟S28的處理。
在步驟S27,控制單元14使得存儲器13臨時存儲具有小于第一塊的和的第二塊的位置信息。然后,處理進行到步驟S28。
在步驟S28,控制單元14確定比較塊和QQVGA大小幀的24×32個塊中的每一個塊之間的和的比較是否完成。如果該比較沒有完成,則控制單元14將處理返回到步驟S22。當確定涉及所有塊的比較完成時,控制單元14進行步驟S29的處理。
換言之,控制單元14設置先前幀中央的塊為比較塊并且順序地將先前幀中的比較塊的第一個像素與當前幀中的第一、第二、第三...以及最后塊的每一個的相應像素進行比較。在比較完成之后,具有最小差值和的塊(最小和塊)被確定為具有與比較塊相同圖像的塊。
在步驟S29,控制單元14控制運動矢量計算單元12計算運動矢量,該運動矢量表示從相應于先前幀中的比較塊的一個點到相應于當前幀中的最小和塊的一個點的方向和距離,并且如圖7所示產生關于該運動矢量的信息。然后控制單元14結束圖6的流程。如上所述,所獲得的運動矢量信息在圖4的步驟S6中以短距離無線方式被發(fā)送到桌面?zhèn)€人計算機41的短距離無線通信單元42。這樣,在監(jiān)視器44上顯示的指示符P被移動。
在鼠標模式中接收到來電時的操作當根據(jù)本實施例的移動電話在被用作無線鼠標裝置時接收到來電或者電子郵件時,該鼠標模式中的移動電話在監(jiān)視器44上顯示消息來向用戶通知來電或者電子郵件的接收。另外,當用戶執(zhí)行預定操作時,該移動電話提供免提對話或者顯示電子郵件。
具體地,當移動電話在被用作無線鼠標裝置時接收到來電或者電子郵件時,控制單元14控制短距離無線通信單元11在鼠標模式執(zhí)行期間通過短距離無線方式發(fā)送關于指示接收的消息,例如″接收到來電″或者″接收到電子郵件″的數(shù)據(jù)。當接收到來電時,控制單元14進一步控制短距離無線通信單元11除了消息數(shù)據(jù)之外還通過短距離無線方式發(fā)送關于免提對話圖標的數(shù)據(jù)。當接收到電子郵件時,控制單元14控制短距離無線通信單元11通過短距離無線方式發(fā)送關于顯示電子郵件的圖標的數(shù)據(jù)。從而,該消息和圖標在監(jiān)視器44上顯示。
該用戶可以從監(jiān)測器44上顯示的消息識別出來電或者電子郵件的接收。為了回復該來電,用戶將上述鍵+攝像機模式或者鍵模式中在監(jiān)測器44上顯示的指示符P,移動到為免提對話顯示的圖標。或者,為了讀取收到的電子郵件,用戶將指示符P移動到為電子郵件顯示的顯示圖標。然后,用戶雙擊例如圖3所示的第二軟鍵26。此操作等同于雙擊左點擊鍵。
移動電話中的控制單元14根據(jù)通過短距離無線發(fā)送到桌面?zhèn)€人計算機41的運動矢量信息監(jiān)視指示符P在監(jiān)視器44上的位置,并且也監(jiān)視第二軟鍵26的狀態(tài)來確定在指示符P移動到圖標之上后是否雙擊了左點擊鍵。
當確定指示符P被移動并且位于該圖標上,并且在來電接收之后雙擊了左點擊鍵時,控制單元14控制揚聲器裝置3和麥克風單元4以將每個放大器的增益設置為一個用于在鼠標模式執(zhí)行期間的免提通話的值,從而提供一種摘機狀態(tài)。因此,當使用移動電話作為無線鼠標裝置時用戶可以進行免提通話。
當在電子郵件接收之后檢測到將指示符P移動到圖標上并且雙擊左點擊鍵的操作時,控制單元14在鼠標模式執(zhí)行期間控制移動電話的顯示單元5顯示接收到的電子郵件的文本。這樣,當使用移動電話作為無線鼠標裝置時,用戶可以讀出接收到的電子郵件。
在上述說明中,接收到的電子郵件在顯示單元5上顯示??刂茊卧?4可以通過短距離無線方式將關于在接收到的電子郵件中的文本的信息發(fā)送到桌面?zhèn)€人計算機41,并且該文本可以在監(jiān)視器44上顯示。
優(yōu)點從上述說明可以顯而易見地看出,根據(jù)本發(fā)明本實施例的移動電話具有如下優(yōu)點1.該移動電話可以移動在個人計算機上顯示的指示符。
2.通常,在攜帶筆記本式個人計算機時,有必要隨著計算機攜帶一種專用鼠標裝置。根據(jù)本實施例,因為移動電話可以被用作鼠標裝置,攜帶專用鼠標裝置的問題被解決。
3.除電話功能、電子郵件功能、音樂播放器功能、廣播接收機功能、以及攝像機功能之外,可以將鼠標功能添加到移動電話,改善了移動電話的多功能性。
4.因為指示符P的移動的位置信息根據(jù)通過攝像機單元8拍攝的圖像而產生,該移動電話可以像已知的鼠標裝置一樣二維地移動,從而移動指示符P。另外,該移動電話可以被三維移動來移動指示符P。換言之,該移動電話可以被用作空中鼠標裝置。因此,該移動電話可以用作一種與位置無關的鼠標裝置。
5.因為鼠標功能可以使用現(xiàn)有攝像功能實現(xiàn),所以沒有必要給移動電話的主體增加一種新的特殊部件。因此,該移動電話可以包括鼠標功能同時保持主體的合適大小。因此,用戶可以使用移動電話作為鼠標裝置同時用一只手持有具有合適大小的主體的移動電話,從而以高操作性移動指示符P。另外,用戶可以象操作通常使用的鼠標裝置那樣操作移動電話。
6.發(fā)光單元30具有閃光功能來支持在暗處拍攝圖像。該移動電話因此可以在暗處被用作鼠標裝置。
7.當移動電話被用作鼠標裝置時發(fā)生例如來電或者電子郵件的接收的事件時,指示該事件的發(fā)生的消息可以在個人計算機41的監(jiān)視器44上被顯示。因此,該移動電話當用作鼠標裝置時可以向用戶通知該來電或者電子郵件的接收。
8.處理事件的圖標與指示事件發(fā)生的消息一起被顯示在個人計算機的顯示屏幕上。當指示符P移動到圖標之上并且預定的操作,例如雙擊被檢測到時,該處理被執(zhí)行。在收到來電的情況下,移動電話進入免提通話模式。在接收到電子郵件的情況下,移動電話的顯示單元5顯示接收到的電子郵件。用戶因此可以在使用移動電話作為鼠標裝置時進行免提通話或者讀出接收到的電子郵件。
修改在上述實施例中,本發(fā)明被用于移動電話。本發(fā)明可以用于其他移動終端,例如PHS和PDA。在此情況下,可以獲得如上所述相同的優(yōu)點。
本領域技術人員可以理解的是,可以根據(jù)設計需求以及其他因素作出各種修改、組合、子組合以及改變,它們處于所附權利要求
及其等同物的范圍之內。
權利要求
1.一種具有對物體進行成像的攝像機單元的移動終端,包括移動判斷裝置,用于在鼠標模式中根據(jù)通過攝像機單元順序拍攝的圖像之間的變化來確定移動終端主體移動的方向和距離;短距離無線通信裝置;以及控制裝置,用于對短距離無線通信裝置進行控制,從而通過短距離無線方式將表示由移動判斷裝置確定的方向和距離的信息發(fā)送到操作裝置,所述操作裝置包括顯示裝置并且根據(jù)接收到的表示所述方向和距離的信息控制顯示在顯示裝置上的指示符。
2.如權利要求
1所述的移動終端,其中攝像機單元包括具有預定厚度的攝像機蓋,當沒有使用該攝像機單元時,該攝像機單元被攝像機蓋遮蓋,而當使用該攝像機單元時,該攝像機單元不被所述攝像機蓋遮蓋,以及當該移動終端在鼠標模式中二維移動時,攝像機蓋的厚度在攝像機單元和操作平面之間提供預定的空隙,以便允許攝像機單元以良好的狀況拍攝操作平面的表面的圖像,其中移動終端在所述操作平面上放置并且被操作。
3.如權利要求
1或者2所述的移動終端,進一步包括無線通信裝置,用于與無線基站進行無線通信,其中當無線通信裝置檢測到來電或者電子郵件的接收時,控制裝置對短距離無線通信裝置進行控制,從而通過短距離無線方式將表示來電或者電子郵件的接收的信息發(fā)送到所述操作裝置。
4.如權利要求
3所述的移動終端,其中當在來電接收之后檢測到預定操作時,控制裝置執(zhí)行控制以便在鼠標模式執(zhí)行期間提供免提通話,或者當在電子郵件接收之后檢測到預定操作時,控制裝置控制包含在移動終端中的顯示裝置以便在鼠標模式執(zhí)行期間顯示接收到的電子郵件,或者控制短距離無線通信裝置以便通過短距離無線方式將接收到的電子郵件發(fā)送到所述操作裝置。
5.一種鼠標應用程序,使計算機能夠用作移動判斷控制裝置,用于控制移動判斷裝置根據(jù)通過攝像機單元順序拍攝的圖像之間的變化確定具有攝像機單元的主體移動的方向和距離;以及短距離無線通信控制裝置,用于對短距離無線通信裝置進行控制,從而通過短距離無線方式將表示方向和距離的信息發(fā)送到操作裝置,該方向和距離是通過使計算機用作移動判斷控制裝置而確定的,該操作裝置包括顯示裝置并且根據(jù)接收到的表示方向和距離的信息控制在顯示裝置上顯示的指示符。
6.一種使用移動終端作為無線鼠標裝置的方法,該方法包括步驟根據(jù)通過包含在移動終端中的攝像機單元順序拍攝的圖像之間的變化確定移動終端的主體移動的方向和距離;以及通過短距離無線方式將表示所確定的方向和距離的信息發(fā)送到操作裝置,該操作裝置包括顯示裝置并且根據(jù)接收到的表示方向和距離的信息控制在顯示裝置上顯示的指示符。
7.一種具有對物體進行成像的攝像機單元的移動終端,包括移動判斷單元,用于在鼠標模式中根據(jù)通過攝像機單元順序拍攝的圖像之間的變化確定移動終端的主體移動的方向和距離;短距離無線通信單元;以及控制單元,用于對短距離無線通信單元進行控制,從而通過短距離無線方式將表示由移動判斷單元確定的方向和距離的信息發(fā)送到操作裝置,該操作裝置包括顯示單元并且根據(jù)接收到的表示方向和距離的信息控制在顯示單元上顯示的指示符。
專利摘要
本發(fā)明提供一種具有對物體成像的攝像機單元的移動終端。該移動終端包括移動判斷單元,在鼠標模式中根據(jù)通過攝像機單元順序拍攝的圖像之間的變化確定移動終端主體移動的方向和距離;短距離無線通信單元,以及控制單元,控制短距離無線通信單元通過短距離無線方式將表示由移動判斷單元確定的方向和距離的信息發(fā)送到操作裝置,其包括顯示單元并且根據(jù)接收到的表示方向和距離的信息控制在顯示單元上顯示的指示符。
文檔編號H04Q7/32GK1991709SQ200610064198
公開日2007年7月4日 申請日期2006年10月24日
發(fā)明者椎名敬, 田中亮 申請人:索尼愛立信移動通信日本株式會社導出引文BiBTeX, EndNote, RefMan