控制顯示器的方法及設備的制作方法
【專利摘要】一種控制顯示器的方法及設備。所述方法包括:通過電子眼鏡拍攝人眼獲得人眼圖像;從人眼圖像中提取人眼特征信息;檢測電子眼鏡的眼鏡位置和姿態(tài)信息;根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點;根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作;根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。根據(jù)本發(fā)明可以根據(jù)人眼圖像控制顯示器。
【專利說明】控制顯示器的方法及設備
【技術領域】
[0001]本發(fā)明涉及顯示器的控制領域,更具體地講,涉及一種控制顯示器的方法及設備。【背景技術】
[0002]在人們的生活中,顯示器已經(jīng)成為不可或缺的一部分,無論是電視顯示器,還是電腦顯示器,用戶越來越希望使用更為便捷的控制方法來控制顯示器。
[0003]在現(xiàn)有的技術條件下,用戶通常使用手持式遙控裝置或顯示器面板上的按鈕來控制顯示器,這使得操作過程離不開手的參與,人們無法將手從控制裝置中解放出來,尤其對于雙手殘疾的人來說,更為不便。
[0004]因此,需要一種控制顯示器的方法及設備,以能夠不通過人手控制顯示器。
【發(fā)明內(nèi)容】
[0005]本發(fā)明的目的在于提供一種控制顯示器的方法及設備,其能夠根據(jù)人眼圖像來控制顯示器。
[0006]本發(fā)明的第一方面提供一種控制顯示器的方法,包括:通過電子眼鏡拍攝人眼獲得人眼圖像;從人眼圖像中提取人眼特征信息;檢測電子眼鏡的眼鏡位置和姿態(tài)信息;根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點;根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作;根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0007]可選地,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點的步驟包括:根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點;根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。
[0008]可選地,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點的步驟包括:根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。
[0009]可選地,所述人眼動作包括閉眼、注視、眼跳、平滑運動中的至少一個。
[0010]可選地,當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼;當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。
[0011]可選地,在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0012]可選地,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作的步驟包括:當屏幕顯示圖像時,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于屏幕上的人眼注視點附近的圖像進行放大并顯示;在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,將人眼所追蹤的物體展示在屏幕的中央;當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。
[0013]可選地,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作的步驟包括:當屏幕顯示用戶界面時,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ埽划斎搜蹌幼鳛槠交\動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域。
[0014]可選地,所述控制顯示器的方法還包括:根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度;根據(jù)觀看角度調(diào)整屏幕的深度。
[0015]可選地,根據(jù)觀看角度調(diào)整屏幕的深度的步驟包括:當觀看角度超過預定角度閾值時,將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于預定角度閾值。
[0016]本發(fā)明的第二方面提供一種控制顯示器的設備,包括:人眼圖像獲取單元,通過電子眼鏡拍攝人眼獲得人眼圖像;特征提取單元,從人眼圖像中提取人眼特征信息;位置姿態(tài)檢測單元,檢測電子眼鏡的眼鏡位置和姿態(tài)信息;注視點檢測單元,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點;人眼動作檢測單元,根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作;控制單元,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0017]可選地,注視點檢測單元包括:眼鏡注視點檢測單元,根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點;屏幕注視點檢測單元,根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。
[0018]可選地,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,眼鏡注視點檢測單元包括:計算單元,根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。
[0019]可選地,人眼動作檢測單元用來檢測閉眼、注視、眼跳、平滑運動中的至少一個人眼動作。
[0020]可選地,當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼;當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。
[0021]可選地,控制單元在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0022]可選地,當屏幕顯示圖像時,控制單元根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于屏幕上的人眼注視點附近的圖像進行放大并顯示;在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,將人眼所追蹤的物體展示在屏幕的中央;當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。[0023]可選地,當屏幕顯示用戶界面時,控制單元根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ埽划斎搜蹌幼鳛槠交\動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域。
[0024]可選地,所述控制顯示器的設備還包括:觀看角度檢測單元,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度;深度調(diào)整單元,根據(jù)觀看角度調(diào)整屏幕的深度。
[0025]可選地,當觀看角度超過預定角度閾值時,深度調(diào)整單元將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于角度預定閾值。
[0026]本發(fā)明的第三方面提供一種利用電子眼鏡遙控顯示器的方法,包括:通過電子眼鏡拍攝人眼獲得人眼圖像;從人眼圖像中提取人眼特征信息;檢測電子眼鏡的眼鏡位置和姿態(tài)信息;發(fā)送拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息到顯示器。
[0027]本發(fā)明的第四方面提供一種利用電子眼鏡遙控顯示器的設備,包括:人眼圖像獲取單元,通過拍攝人眼獲得人眼圖像;特征提取單元,從人眼圖像中提取人眼特征信息;位置姿態(tài)檢測單元,檢測電子眼鏡的眼鏡位置和姿態(tài)信息;發(fā)送單元,發(fā)送拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息到顯示器。
[0028]本發(fā)明的第五方面提供一種控制顯示器的方法,包括:從電子眼鏡接收拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息;根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點;根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作;根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0029]可選地,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點的步驟包括:根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點;根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。
[0030]可選地,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點的步驟包括:根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的注視點。
[0031]可選地,所述人眼動作包括閉眼、注視、眼跳、平滑運動中的至少一個。
[0032]可選地,當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼;當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。
[0033]可選地,在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0034]可選地,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作的步驟包括:當屏幕顯示圖像時,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于屏幕上的人眼注視點附近的圖像進行放大并顯示;在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,將人眼所追蹤的物體展示在屏幕的中央;當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。
[0035]可選地,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作的步驟包括:當屏幕顯示用戶界面時,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ?;當人眼動作為平滑運動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域。
[0036]可選地,所述控制顯示器的方法還包括:根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度;根據(jù)觀看角度調(diào)整屏幕的深度。
[0037]可選地,根據(jù)觀看角度調(diào)整屏幕的深度的步驟包括:當觀看角度超過預定角度閾值時,深度調(diào)整單元將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于角度預定閾值。
[0038]本發(fā)明的第六方面提供一種控制顯示器的設備,包括:接收單元,從電子眼鏡接收拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息;注視點檢測單元,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點;人眼動作檢測單元,根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作;控制單元,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0039]可選地,注視點檢測單元包括:眼鏡注視點檢測單元,根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點;屏幕注視點檢測單元,根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。
[0040]可選地,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,眼鏡注視點檢測單元包括:計算單元,根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。
[0041]可選地,人眼動作檢測單元用來檢測閉眼、注視、眼跳、平滑運動中的至少一個人眼動作。
[0042]可選地,當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼;當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。
[0043]可選地,控制單元在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0044]可選地,當屏幕顯示圖像時,控制單元根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于屏幕上的人眼注視點附近的圖像進行放大并顯示;在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,將人眼所追蹤的物體展示在屏幕的中央;當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。
[0045]可選地,當屏幕顯示用戶界面時,控制單元根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ?;當人眼動作為平滑運動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域。
[0046]可選地,所述控制顯示器的設備還包括:觀看角度檢測單元,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度;深度調(diào)整單元,根據(jù)觀看角度調(diào)整屏幕的深度。
[0047]可選地,當觀看角度超過預定角度閾值時,深度調(diào)整單元將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于預定角度閾值。
[0048]本發(fā)明的第七方面提供一種利用電子眼鏡遙控顯示器的方法,包括:通過電子眼鏡拍攝人眼獲得人眼圖像;從人眼圖像中提取人眼特征信息;檢測電子眼鏡的眼鏡位置和姿態(tài)信息;根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點;根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作;將用于控制顯示器的操作的人眼動作和屏幕上的人眼注視點發(fā)送到顯示器。
[0049]可選地,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點的步驟包括:根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點;根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。
[0050]可選地,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點的步驟包括:根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。
[0051]可選地,所述人眼動作包括閉眼、注視、眼跳、平滑運動中的至少一個。
[0052]可選地,當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼;當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。
[0053]本發(fā)明的第八方面提供一種利用電子眼鏡遙控顯示器的設備,包括:人眼圖像獲取單元,通過拍攝人眼獲得人眼圖像;特征提取單元,從人眼圖像中提取人眼特征信息;位置姿態(tài)檢測單元,檢測電子眼鏡的眼鏡位置和姿態(tài)信息;注視點檢測單元,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點;人眼動作檢測單元,根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作;發(fā)送單元,將用于控制顯示器的操作的人眼動作和屏幕上的人眼注視點發(fā)送到顯示器。
[0054]可選地,注視點檢測單元包括:眼鏡注視點檢測單元,根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點;屏幕注視點檢測單元,根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。
[0055]可選地,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,眼鏡注視點檢測單元包括:計算單元,根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。
[0056]可選地,注視點檢測單元用來檢測閉眼、注視、眼跳、平滑運動中的至少一個人眼動作。[0057]可選地,當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼;當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。
[0058]本發(fā)明的第九方面提供一種控制顯示器的方法,包括:從電子眼鏡接收控制顯示器的操作的人眼動作和屏幕上的人眼注視點;根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0059]可選地,在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0060]可選地,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作的步驟包括:當屏幕顯示圖像時,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于屏幕上的人眼注視點附近的圖像進行放大并顯示;在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,將人眼所追蹤的物體展示在屏幕的中央;當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。
[0061]可選地,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作的步驟包括:當屏幕顯示用戶界面時,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ埽划斎搜蹌幼鳛槠交\動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域。
[0062]本發(fā)明的第十方面提供一種控制顯示器的設備,包括:接收單元,從電子眼鏡接收控制顯示器的操作的人眼動作和屏幕上的人眼注視點;控制單元,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0063]可選地,控制單元在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0064]可選地,當屏幕顯示圖像時,控制單元根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于屏幕上的人眼注視點附近的圖像進行放大并顯示;在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,將人眼所追蹤的物體展示在屏幕的中央;當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。
[0065]可選地,當屏幕顯示用戶界面時,控制單元根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作:當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ埽划斎搜蹌幼鳛槠交\動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域。
[0066]根據(jù)本發(fā)明的控制顯示器的方法及設備,可以根據(jù)人眼圖像控制顯示器,將用戶的雙手從遙控裝置中解放出來?!緦@綀D】
【附圖說明】
[0067]通過下面結合附圖對實施例進行的描述,本發(fā)明的這些和/或其他方面和優(yōu)點將會變得清楚和更易于理解,其中:
[0068]圖1示出根據(jù)本發(fā)明的第一示例性實施例的控制顯示器的方法的流程圖。
[0069]圖2示出根據(jù)本發(fā)明的第二示例性實施例的控制顯示器的設備的框圖。
[0070]圖3示出根據(jù)本發(fā)明的第三示例性實施例的利用電子眼鏡遙控顯示器的方法的流程圖。
[0071]圖4示出根據(jù)本發(fā)明的第四示例性實施例的利用電子眼鏡遙控顯示器的設備的框圖。
[0072]圖5示出根據(jù)本發(fā)明的第五示例性實施例的控制顯示器的方法的流程圖。
[0073]圖6示出根據(jù)本發(fā)明的第六示例性實施例的控制顯示器的設備的框圖。
[0074]圖7示出根據(jù)本發(fā)明的第七示例性實施例的利用電子眼鏡遙控顯示器的方法的流程圖。
[0075]圖8示出根據(jù)本發(fā)明的第八示例性實施例的利用電子眼鏡遙控顯示器的設備的框圖。
[0076]圖9示出根據(jù)本發(fā)明的第九示例性實施例的控制顯示器的方法的流程圖。
[0077]圖10示出根據(jù)本發(fā)明的第十示例性實施例的控制顯示器的設備的框圖。
【具體實施方式】
[0078]現(xiàn)在對本發(fā)明實施例進行詳細的描述,其示例表示在附圖中。下面通過參照附圖對實施例進行描述以解釋本發(fā)明。
[0079]圖1示出根據(jù)本發(fā)明的第一示例性實施例的控制顯示器的方法的流程圖。
[0080]在步驟101,獲得通過電子眼鏡拍攝的人眼圖像。用戶在觀看屏幕時佩戴電子眼鏡,通過電子眼鏡上的圖像拍攝裝置拍攝用戶的眼睛獲得用戶的人眼圖像。
[0081]在步驟102,從人眼圖像中提取人眼特征信息。人眼特征信息是可以表征人眼視線的信息。例如,人眼特征信息可以是瞳孔中心和角膜反射點的位置信息,根據(jù)瞳孔中心和角膜反射點的位置信息可以獲取人眼視線信息。
[0082]在步驟103,檢測電子眼鏡的眼鏡位置和姿態(tài)信息。電子眼鏡的眼鏡位置和姿態(tài)信息可使用預定的坐標系被表示。
[0083]在步驟104,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點。首先根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點。然后根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。
[0084]具體地說,可通過現(xiàn)有的視線追蹤技術實現(xiàn)根據(jù)人眼特征信息獲取電子眼鏡坐標系上的人眼視線,再根據(jù)電子眼鏡坐標系上的人眼視線獲取電子眼鏡上的人眼注視點。然后,根據(jù)電子眼鏡上的人眼注視點以及電子眼鏡的位置和姿態(tài)信息進行相應的坐標變換,得到屏幕上的人眼注視點。
[0085]在一個實施例中,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。即,使用瞳孔-角膜反射向量法分析人眼特征信息得到電子眼鏡坐標系上的人眼視線,根據(jù)電子眼鏡坐標系上的人眼視線得到電子眼鏡上的人眼注視點。
[0086]在步驟105,根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作。包括閉眼、注視、眼跳、平滑運動等人眼動作。當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼。當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。以上預定值可以預置或者由用戶進行設置。
[0087]在步驟106,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。具體地說,可通過人眼動作和屏幕上的人眼注視點的不同組合來控制顯示器的各種操作。
[0088]例如,屏幕上的人眼注視點相當于使用鼠標控制顯示器時光標所在的位置,或者使用遙控器控制顯示器時遙控器所選中的位置,人眼動作相當于點擊鼠標或者按下遙控器的按鈕。例如,閉眼動作相當于點擊鼠標左鍵或者按下遙控器的確認按鈕。
[0089]優(yōu)選地,在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0090]在觀看模式下,當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于注視點附近區(qū)域的圖像進行放大并顯示,方便用戶清楚地看到自己所關注的細微圖像。這里,所放大的注視點附近區(qū)域的大小可以預置或者由用戶進行設置。在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,從電視節(jié)目流中提取該物體的信息,對該物體進行追蹤,將所追蹤的物體展示在屏幕的中央。當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。例如:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕左邊界區(qū)域時,將圖像向右側移動,將左側未展現(xiàn)的圖像展現(xiàn)出來。
[0091]在用戶界面模式下,屏幕的圖像劃分為若干個區(qū)域,每個區(qū)域代表特定的功能。當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ堋?br>
[0092]例如:當用戶注視翻頁功能所在區(qū)域,然后閉眼時,運行翻頁功能。當人眼動作為平滑運動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域(即,從選中一區(qū)域變?yōu)檫x中另一區(qū)域)。
[0093]此外,應該理解,功能還可以是調(diào)用各種應用軟件、應用軟件的內(nèi)部功能、顯示器內(nèi)置的功能(例如,亮度調(diào)節(jié)、模式調(diào)節(jié)等)、或用戶自定義設置的功能等。
[0094]此外,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度,然后根據(jù)觀看角度調(diào)整屏幕的深度。當觀看角度超過預定角度閾值時,將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于預定角度閾值,從而起到保護眼睛的目的。
[0095]應該理解,步驟101-106可以全部由電子眼鏡(或具有電子眼鏡的遙控裝置)或顯示器來實現(xiàn);或者部分由電子眼鏡(或具有電子眼鏡的遙控裝置)實現(xiàn),其他部分由顯示器來實現(xiàn)。
[0096]圖2示出根據(jù)本發(fā)明的第二示例性實施例的控制顯示器的設備的框圖。[0097]如圖2所示,根據(jù)本發(fā)明的控制顯示器的設備200包括:人眼圖像獲取單元201、特征提取單元202、位置姿態(tài)檢測單元203、注視點檢測單元204、人眼動作檢測單元205、控制單元206。
[0098]人眼圖像獲取單元201用于通過利用電子眼鏡拍攝人眼獲得人眼圖像。電子眼鏡可具有CMOS (互補金屬氧化物半導體)傳感器、CCD (電荷耦合器件)傳感器等各種拍攝裝置。
[0099]特征提取單元202用于從獲得的人眼圖像中提取人眼特征信息。人眼特征信息是可以表征人眼視線的信息。例如,人眼特征信息可以是瞳孔中心和角膜反射點的位置信息,根據(jù)瞳孔中心和角膜反射點的位置信息可以獲取人眼視線信息。
[0100]位置姿態(tài)檢測單元203用于檢測電子眼鏡的眼鏡位置和姿態(tài)信息。位置姿態(tài)檢測單元203可以是各種位置姿態(tài)檢測裝置。
[0101]注視點檢測單元204用于根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點。
[0102]注視點檢測單元204包括眼鏡注視點檢測單元(未示出)和屏幕注視點檢測單元(未示出)。眼鏡注視點檢測單元用于根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點。具體地說,眼鏡注視點檢測單元可通過現(xiàn)有的視線追蹤技術實現(xiàn)根據(jù)人眼特征信息獲取電子眼鏡坐標系上的人眼視線,再根據(jù)電子眼鏡坐標系上的人眼視線獲取電子眼鏡上的人眼注視點。屏幕注視點檢測單元用于根據(jù)電子眼鏡上的人眼注視點以及電子眼鏡的位置和姿態(tài)信息進行相應的坐標變換,得到屏幕上的人眼注視點。
[0103]在一個實施例中,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,眼鏡注視點檢測單元還包括計算單元(未示出)。計算單元根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。即,使用瞳孔-角膜反射向量法分析人眼特征信息得到電子眼鏡坐標系上的人眼視線,根據(jù)電子眼鏡坐標系上的人眼視線得到電子眼鏡上的人眼注視點。
[0104]人眼動作檢測單元205用于根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作。包括閉眼、注視、眼跳、平滑運動等人眼動作。當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼。當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。以上預定值可以預置或者由用戶進行設置。
[0105]控制單元206用于根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。具體地說,控制單元206可通過人眼動作和屏幕上的人眼注視點的不同組合來控制顯示器的各種操作。
[0106]例如,屏幕上的人眼注視點相當于使用鼠標控制顯示器時光標所在的位置,或者使用遙控器控制顯示器時遙控器所選中的位置,人眼動作相當于點擊鼠標或者按下遙控器的按鈕。例如,閉眼動作相當于點擊鼠標左鍵或者按下遙控器的確認按鈕。
[0107]優(yōu)選地,控制單元206在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0108]在觀看模式下,當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于注視點附近區(qū)域的圖像進行放大并顯示,方便用戶清楚地看到自己所關注的細微圖像。所放大的注視點附近區(qū)域的大小可以預置或者由用戶進行設置。在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,從電視節(jié)目流中提取該物體的信息,對該物體進行追蹤,將所追蹤的物體展示在屏幕的中央。當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。例如:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕左邊界區(qū)域時,將圖像向右側移動,將左側未展現(xiàn)的圖像展現(xiàn)出來。
[0109]在用戶界面模式下,屏幕的圖像劃分為若干個區(qū)域,每個區(qū)域代表特定的功能。當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ堋?br>
[0110]例如:當用戶注視翻頁功能所在區(qū)域,然后閉眼時,運行翻頁功能。當人眼動作為平滑運動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域(即,從選中一區(qū)域變?yōu)檫x中另一區(qū)域)。
[0111]控制顯示器的設備200還包括觀看角度檢測單元(未示出)和深度調(diào)整單元(未示出)。觀看角度檢測單元根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度,深度調(diào)整單元根據(jù)觀看角度調(diào)整屏幕的深度。當觀看角度超過預定角度閾值時,將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于預定角度閾值,起到保護眼睛的目的。
[0112]應該理解,單元101-106可以全部布置在電子眼鏡(或具有電子眼鏡的遙控裝置)或顯示器中;或者部分布置在電子眼鏡(或具有電子眼鏡的遙控裝置)中,其他部分布置在顯示器中。
[0113]圖3示出根據(jù)本發(fā)明的第三示例性實施例的利用電子眼鏡遙控顯示器的方法的流程圖。
[0114]在步驟301,獲得通過電子眼鏡拍攝的人眼圖像。用戶在觀看屏幕時佩戴電子眼鏡,通過電子眼鏡上的圖像拍攝裝置拍攝用戶的眼睛獲得用戶的人眼圖像。
[0115]在步驟302,從人眼圖像中提取人眼特征信息。人眼特征信息是可以表征人眼視線的信息。例如,人眼特征信息可以是瞳孔中心和角膜反射點的位置信息,根據(jù)瞳孔中心和角膜反射點的位置信息可以獲取人眼視線信息。
[0116]在步驟303,檢測電子眼鏡的眼鏡位置和姿態(tài)信息。電子眼鏡的眼鏡位置和姿態(tài)信息可使用預定的坐標系被表示。
[0117]在步驟304,發(fā)送拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息到顯示器。
[0118]應該理解,以上步驟可由電子眼鏡或具有電子眼鏡的遙控裝置來實現(xiàn)。
[0119]圖4示出根據(jù)本發(fā)明的第四示例性實施例的利用電子眼鏡遙控顯示器的設備的框圖。
[0120]如圖4所示,根據(jù)本發(fā)明的利用電子眼鏡遙控顯示器的設備400包括:人眼圖像獲取單元401、特征提取單元402、位置姿態(tài)檢測單元403、發(fā)送單元404。
[0121]人眼圖像獲取單元401用于通過拍攝人眼獲得人眼圖像。人眼圖像獲取單元401可以是CMOS (互補金屬氧化物半導體)傳感器、CCD (電荷耦合器件)傳感器等各種拍攝裝置。
[0122]特征提取單元402用于從獲得的人眼圖像中提取人眼特征信息。人眼特征信息是可以表征人眼視線的信息。例如,人眼特征信息可以是瞳孔中心和角膜反射點的位置信息,根據(jù)瞳孔中心和角膜反射點的位置信息可以獲取人眼視線信息。
[0123]位置姿態(tài)檢測單元403用于檢測電子眼鏡的眼鏡位置和姿態(tài)信息。位置姿態(tài)檢測單元403可以是各種位置姿態(tài)檢測裝置。
[0124]發(fā)送單元404用于發(fā)送拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息到顯示器。發(fā)送單元404可以是各種無線數(shù)據(jù)傳輸裝置。
[0125]應該理解,設備400可以實現(xiàn)為電子眼鏡或具有電子眼鏡的遙控裝置。
[0126]圖5示出根據(jù)本發(fā)明的第五示例性實施例的控制顯示器的方法的流程圖。
[0127]在步驟501,從電子眼鏡接收拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息。
[0128]在步驟502,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點。首先根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點。然后根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。具體地說,可通過現(xiàn)有的視線追蹤技術實現(xiàn)根據(jù)人眼特征信息獲取電子眼鏡坐標系上的人眼視線,再根據(jù)電子眼鏡坐標系上的人眼視線獲取電子眼鏡上的人眼注視點。然后,根據(jù)電子眼鏡上的人眼注視點以及電子眼鏡的位置和姿態(tài)信息進行相應的坐標變換,得到屏幕上的人眼注視點。
[0129]在一個實施例中,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。即,使用瞳孔-角膜反射向量法分析人眼特征信息得到電子眼鏡坐標系上的人眼視線,根據(jù)電子眼鏡坐標系上的人眼視線得到電子眼鏡上的人眼注視點。
[0130]在步驟503,根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作。包括閉眼、注視、眼跳、平滑運動等人眼動作。當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼。當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。以上預定值可以預置或者由用戶進行設置。
[0131]在步驟504,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。具體地說,可通過人眼動作和屏幕上的人眼注視點的不同組合來控制顯示器的各種操作。
[0132]例如,屏幕上的人眼注視點相當于使用鼠標控制顯示器時光標所在的位置,或者使用遙控器控制顯示器時遙控器所選中的位置,人眼動作相當于點擊鼠標或者按下遙控器的按鈕。例如,閉眼動作相當于點擊鼠標左鍵或者按下遙控器的確認按鈕。
[0133]優(yōu)選地,在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0134]在觀看模式下,當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于注視點附近區(qū)域的圖像進行放大并顯示,方便用戶清楚地看到自己所關注的細微圖像。其中,所放大的注視點附近區(qū)域的大小可以預置或者由用戶進行設置。在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,從電視節(jié)目流中提取該物體的信息,對該物體進行追蹤,將所追蹤的物體展示在屏幕的中央。當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。例如:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕左邊界區(qū)域時,將圖像向右側移動,將左側未展現(xiàn)的圖像展現(xiàn)出來。
[0135]在用戶界面模式下,屏幕的圖像劃分為若干個區(qū)域,每個區(qū)域代表特定的功能。當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ堋?br>
[0136]例如:當用戶注視翻頁功能所在區(qū)域,然后閉眼時,運行翻頁功能。當人眼動作為平滑運動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域(即,從選中一區(qū)域變?yōu)檫x中另一區(qū)域)。
[0137]此外,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度,然后根據(jù)觀看角度調(diào)整屏幕的深度。當觀看角度超過預定角度閾值時,將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于預定角度閾值,從而起到保護眼睛的目的。
[0138]應該理解,以上步驟可由顯示器來實現(xiàn)。
[0139]圖6示出根據(jù)本發(fā)明的第六示例性實施例的控制顯示器的設備的框圖。
[0140]如圖6所示,根據(jù)本發(fā)明的控制顯示器的設備600包括:接收單元601、注視點檢測單元602、人眼動作檢測單元603、控制單元604。
[0141]接收單元601用于從電子眼鏡接收拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息。
[0142]注視點檢測單元602用于根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點。
[0143]注視點檢測單元602包括眼鏡注視點檢測單元(未示出)和屏幕注視點檢測單元(未示出)。眼鏡注視點檢測單元用于根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點。具體地說,眼鏡注視點檢測單元可通過現(xiàn)有的視線追蹤技術實現(xiàn)根據(jù)人眼特征信息獲取電子眼鏡坐標系上的人眼視線,再根據(jù)電子眼鏡坐標系上的人眼視線獲取電子眼鏡上的人眼注視點。屏幕注視點檢測單元用于根據(jù)電子眼鏡上的人眼注視點以及電子眼鏡的位置和姿態(tài)信息進行相應的坐標變換,得到屏幕上的人眼注視點。
[0144]在一個實施例中,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,眼鏡注視點檢測單元還包括計算單元(未示出)。計算單元根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。即,使用瞳孔-角膜反射向量法分析人眼特征信息得到電子眼鏡坐標系上的人眼視線,根據(jù)電子眼鏡坐標系上的人眼視線得到電子眼鏡上的人眼注視點。
[0145]人眼動作檢測單元603用于根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作。包括閉眼、注視、眼跳、平滑運動等人眼動作。當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼。當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。以上預定值可以預置或者由用戶進行設置。
[0146]控制單元604用于根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。具體地說,可通過人眼動作和屏幕上的人眼注視點的不同組合來控制顯示器的各種操作。
[0147]例如,屏幕上的人眼注視點相當于使用鼠標控制顯示器時光標所在的位置,或者使用遙控器控制顯示器時遙控器所選中的位置,人眼動作相當于點擊鼠標或者按下遙控器的按鈕。例如,閉眼動作相當于點擊鼠標左鍵或者按下遙控器的確認按鈕。
[0148]優(yōu)選地,控制單元604在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0149]在觀看模式下,當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于注視點附近區(qū)域的圖像進行放大并顯示,方便用戶清楚地看到自己所關注的細微圖像。其中,所放大的注視點附近區(qū)域的大小可以預置或者由用戶進行設置。在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,從電視節(jié)目流中提取該物體的信息,對該物體進行追蹤,將所追蹤的物體展示在屏幕的中央。當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。例如:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕左邊界區(qū)域時,將圖像向右側移動,將左側未展現(xiàn)的圖像展現(xiàn)出來。
[0150]在用戶界面模式下,屏幕的圖像劃分為若干個區(qū)域,每個區(qū)域代表特定的功能。當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ堋?br>
[0151]例如:當用戶注視翻頁功能所在區(qū)域,然后閉眼時,運行翻頁功能。當人眼動作為平滑運動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域(即,從選中一區(qū)域變?yōu)檫x中另一區(qū)域)。
[0152]控制顯示器的設備600還包括觀看角度檢測單元(未示出)和深度調(diào)整單元(未示出)。觀看角度檢測單元根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度,深度調(diào)整單元根據(jù)觀看角度調(diào)整屏幕的深度。當觀看角度超過預定角度閾值時,將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于預定角度閾值,起到保護眼睛的目的。
[0153]應該理解,設備600可以布置在顯示器中。
[0154]圖7示出根據(jù)本發(fā)明的第七示例性實施例的利用電子眼鏡遙控顯示器的方法的流程圖。
[0155]在步驟701,獲得通過電子眼鏡拍攝的人眼圖像。用戶在觀看屏幕時佩戴電子眼鏡,通過電子眼鏡上的圖像拍攝裝置拍攝用戶的眼睛獲得用戶的人眼圖像。
[0156]在步驟702,從人眼圖像中提取人眼特征信息。人眼特征信息是可以表征人眼視線的信息。例如,人眼特征信息可以是瞳孔中心和角膜反射點的位置信息,根據(jù)瞳孔中心和角膜反射點的位置信息可以獲取人眼視線信息。
[0157]在步驟703,檢測電子眼鏡的眼鏡位置和姿態(tài)信息。電子眼鏡的眼鏡位置和姿態(tài)信息可使用預定的坐標系被表示。
[0158]在步驟704,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點。首先根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點。然后根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。具體地說,可通過現(xiàn)有的視線追蹤技術實現(xiàn)根據(jù)人眼特征信息獲取電子眼鏡坐標系上的人眼視線,再根據(jù)電子眼鏡坐標系上的人眼視線獲取電子眼鏡上的人眼注視點。然后,根據(jù)電子眼鏡上的人眼注視點以及電子眼鏡的位置和姿態(tài)信息進行相應的坐標變換,得到屏幕上的人眼注視點。
[0159]在一個實施例中,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。即,使用瞳孔-角膜反射向量法分析人眼特征信息得到電子眼鏡坐標系上的人眼視線,根據(jù)電子眼鏡坐標系上的人眼視線得到電子眼鏡上的人眼注視點。
[0160]在步驟705,根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作。包括閉眼、注視、眼跳、平滑運動等人眼動作。當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼。當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。以上預定值可以預置或者由用戶進行設置。
[0161]在步驟706,發(fā)送拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息到顯示器。
[0162]應該理解,以上步驟可由電子眼鏡或具有電子眼鏡的遙控裝置來實現(xiàn)。
[0163]圖8示出根據(jù)本發(fā)明的第八示例性實施例的利用電子眼鏡遙控顯示器的設備的框圖。
[0164]如圖8所示,根據(jù)本發(fā)明的控制顯示器的設備800包括:人眼圖像獲取單元801、特征提取單元802、位置姿態(tài)檢測單元803、注視點檢測單元804、人眼動作檢測單元805、發(fā)送單元806。
[0165]人眼圖像獲取單元801用于通過拍攝人眼獲得人眼圖像。人眼圖像獲取單元801可以是CMOS (互補金屬氧化物半導體)傳感器、CCD (電荷耦合器件)傳感器等各種拍攝裝置。
[0166]特征提取單元802用于從獲得的人眼圖像中提取人眼特征信息。人眼特征信息是可以表征人眼視線的信息。例如,人眼特征信息可以是瞳孔中心和角膜反射點的位置信息,根據(jù)瞳孔中心和角膜反射點的位置信息可以獲取人眼視線信息。
[0167]位置姿態(tài)檢測單元803用于檢測電子眼鏡的眼鏡位置和姿態(tài)信息。位置姿態(tài)檢測單元803可以是各種位置姿態(tài)檢測裝置。
[0168]注視點檢測單元804用于根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點。
[0169]注視點檢測單元804包括眼鏡注視點檢測單元(未示出)和屏幕注視點檢測單元(未示出)。眼鏡注視點檢測單元用于根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點。具體地說,眼鏡注視點檢測單元可通過現(xiàn)有的視線追蹤技術實現(xiàn)根據(jù)人眼特征信息獲取電子眼鏡坐標系上的人眼視線,再根據(jù)電子眼鏡坐標系上的人眼視線獲取電子眼鏡上的人眼注視點。屏幕注視點檢測單元用于根據(jù)電子眼鏡上的人眼注視點以及電子眼鏡的位置和姿態(tài)信息進行相應的坐標變換,得到屏幕上的人眼注視點。[0170]在一個實施例中,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,眼鏡注視點檢測單元還包括計算單元(未示出)。計算單元根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。即,使用瞳孔-角膜反射向量法分析人眼特征信息得到電子眼鏡坐標系上的人眼視線,根據(jù)電子眼鏡坐標系上的人眼視線得到電子眼鏡上的人眼注視點。
[0171]人眼動作檢測單元805用于根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作。包括閉眼、注視、眼跳、平滑運動等人眼動作。當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼。當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視;當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳;當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。以上預定值可以預置或者由用戶進行設置。
[0172]發(fā)送單元806用于發(fā)送拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息到顯示器。發(fā)送單元806可以是各種無線數(shù)據(jù)傳輸裝置。
[0173]應該理解,設備800可以實現(xiàn)為電子眼鏡或具有電子眼鏡的遙控裝置。
[0174]圖9示出根據(jù)本發(fā)明的第九示例性實施例的控制顯示器的方法的流程圖。
[0175]在步驟901,從電子眼鏡接收拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息。
[0176]在步驟902,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。具體地說,可通過人眼動作和屏幕上的人眼注視點的不同組合來控制顯示器的各種操作。
[0177]例如,屏幕上的人眼注視點相當于使用鼠標控制顯示器時光標所在的位置,或者使用遙控器控制顯示器時遙控器所選中的位置,人眼動作相當于點擊鼠標或者按下遙控器的按鈕。例如,閉眼動作相當于點擊鼠標左鍵或者按下遙控器的確認按鈕。
[0178]優(yōu)選地,在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0179]在觀看模式下,當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于注視點附近區(qū)域的圖像進行放大并顯示,方便用戶清楚地看到自己所關注的細微圖像。其中,所放大的注視點附近區(qū)域的大小可以預置或者由用戶進行設置。在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,從電視節(jié)目流中提取該物體的信息,對該物體進行追蹤,將所追蹤的物體展示在屏幕的中央。當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。例如:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕左邊界區(qū)域時,將圖像向右側移動,將左側未展現(xiàn)的圖像展現(xiàn)出來。
[0180]在用戶界面模式下,屏幕的圖像劃分為若干個區(qū)域,每個區(qū)域代表特定的功能。當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ堋?br>
[0181]例如:當用戶注視翻頁功能所在區(qū)域,然后閉眼時,運行翻頁功能。當人眼動作為平滑運動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域(即,從選中一區(qū)域變?yōu)檫x中另一區(qū)域)。[0182]應該理解,以上步驟可由顯示器來實現(xiàn)。
[0183]圖10示出根據(jù)本發(fā)明的第十示例性實施例的控制顯示器的設備的框圖。
[0184]如圖10所示,根據(jù)本發(fā)明的控制顯示器的設備1000包括:接收單元1001、控制單元 1002。
[0185]接收單元1001用于從電子眼鏡接收拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息。
[0186]控制單元1002用于根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。具體地說,可通過人眼動作和屏幕上的人眼注視點的不同組合來控制顯示器的各種操作。
[0187]例如,屏幕上的人眼注視點相當于使用鼠標控制顯示器時光標所在的位置,或者使用遙控器控制顯示器時遙控器所選中的位置,人眼動作相當于點擊鼠標或者按下遙控器的按鈕。例如,閉眼動作相當于點擊鼠標左鍵或者按下遙控器的確認按鈕。
[0188]優(yōu)選地,控制單元1002在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
[0189]在觀看模式下,當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于注視點附近區(qū)域的圖像進行放大并顯示,方便用戶清楚地看到自己所關注的細微圖像。其中,所放大的注視點附近區(qū)域的大小可以預置或者由用戶進行設置。在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,從電視節(jié)目流中提取該物體的信息,對該物體進行追蹤,將所追蹤的物體展示在屏幕的中央。當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。例如:當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕左邊界區(qū)域時,將圖像向右側移動,將左側未展現(xiàn)的圖像展現(xiàn)出來。
[0190]在用戶界面模式下,屏幕的圖像劃分為若干個區(qū)域,每個區(qū)域代表特定的功能。當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ堋?br>
[0191]例如:當用戶注視翻頁功能所在區(qū)域,然后閉眼時,運行翻頁功能。當人眼動作為平滑運動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域(即,從選中一區(qū)域變?yōu)檫x中另一區(qū)域)。
[0192]應該理解,設備1000可布置在顯示器中。
[0193]此外,根據(jù)本發(fā)明的示例性實施例的上述方法可以被實現(xiàn)為計算機程序,從而當運行該程序時,實現(xiàn)上述方法。根據(jù)本發(fā)明的示例性實施例的控制顯示器的設備中的各個單元可被實現(xiàn)硬件組件。本領域技術人員根據(jù)限定的各個單元所執(zhí)行的處理,可以例如使用現(xiàn)場可編程門陣列(FPGA)或?qū)S眉呻娐?ASIC)來實現(xiàn)各個單元。
[0194]雖然已表示和描述了本發(fā)明的一些實施例,但本領域技術人員應該理解,在不脫離由權利要求及其等同物限定其范圍的本發(fā)明的原理和精神的情況下,可以對這些實施例進行修改。
【權利要求】
1.一種控制顯不器的方法,包括: 通過電子眼鏡拍攝人眼獲得人眼圖像; 從人眼圖像中提取人眼特征信息; 檢測電子眼鏡的眼鏡位置和姿態(tài)信息; 根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點; 根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作; 根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
2.如權利要求1所述的方法,其中,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點的步驟包括: 根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點; 根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。
3.如權利要求2所述的方法,其中,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點的步驟包括: 根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。
4.如權利要求1所述的方法,其中,所述人眼動作包括閉眼、注視、眼跳、平滑運動中的至少一個。`
5.如權利要求4所述的方法,其中, 當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼; 當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視; 當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳; 當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。
6.如權利要求1所述的方法,其中,在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
7.如權利要求1所述的方法,其中,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作的步驟包括:當屏幕顯示圖像時,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作: 當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于屏幕上的人眼注視點附近的圖像進行放大并顯示; 在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,將人眼所追蹤的物體展示在屏幕的中央; 當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。
8.如權利要求1所述的方法,其中,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作的步驟包括:當屏幕顯示用戶界面時,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作: 當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ埽划斎搜蹌幼鳛槠交\動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域。
9.如權利要求1所述的方法,還包括: 根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度; 根據(jù)觀看角度調(diào)整屏幕的深度。
10.如權利要求9所述的方法,其中,根據(jù)觀看角度調(diào)整屏幕的深度的步驟包括: 當觀看角度超過預定角度閾值時,將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于預定角度閾值。
11.一種控制顯示器的設備,包括: 人眼圖像獲取單元,通過電子眼鏡拍攝人眼獲得人眼圖像; 特征提取單元,從人眼圖像中提取人眼特征信息; 位置姿態(tài)檢測單元,檢測電子眼鏡的眼鏡位置和姿態(tài)信息; 注視點檢測單元,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視占.人眼動作檢測單元,根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作; 控制單元,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
12.如權利要求11所述的設備,其中,注視點檢測單元包括: 眼鏡注視點檢測單元,根據(jù)人眼特征信息獲得電子眼鏡上的人眼注視點; 屏幕注視點檢測單元,根據(jù)電子眼鏡上的人眼注視點、眼鏡位置和姿態(tài)信息獲得屏幕上的人眼注視點。
13.如權利要求12所述的設備,其中,所述人眼特征信息為瞳孔中心和角膜反射點的位置信息,眼鏡注視點檢測單元包括: 計算單元,根據(jù)瞳孔中心和角膜反射點的位置信息計算出人眼視線在電子眼鏡上的人眼注視點。
14.如權利要求11所述的設備,其中,人眼動作檢測單元用來檢測閉眼、注視、眼跳、平滑運動中的至少一個人眼動作。
15.如權利要求14所述的設備,其中, 當?shù)谝活A定時間內(nèi)無法從人眼特征信息中獲得角膜反射點時,人眼動作檢測為閉眼; 當屏幕上的人眼注視點在第二預定時間內(nèi)保持不變時,人眼動作檢測為注視; 當屏幕上的人眼注視點在第三預定時間內(nèi)移動范圍超過預定閾值時,人眼動作檢測為眼跳; 當屏幕上的人眼注視點以預定速度移動時,人眼動作檢測為平滑運動。
16.如權利要求11所述的設備,其中,控制單元在不同的模式下根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
17.如權利要求11所述的設備,其中,當屏幕顯示圖像時,控制單元根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作: 當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕中間區(qū)域時,對位于屏幕上的人眼注視點附近的圖像進行放大并顯示;在屏幕顯示的圖像為運動圖像的情況下,當人眼動作為平滑追蹤時,根據(jù)在平滑追蹤過程中的屏幕上的人眼注視點確定人眼所追蹤的物體,將人眼所追蹤的物體展示在屏幕的中央; 當人眼動作為注視,并且屏幕上的人眼注視點位于屏幕邊界區(qū)域時,將圖像朝向遠離該邊界的方向移動。
18.如權利要求11所述的設備,其中,當屏幕顯示用戶界面時,控制單元根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器進行如下操作: 當屏幕上的人眼注視點位于一功能區(qū)域,然后人眼動作為閉眼時,運行與該功能區(qū)域?qū)墓δ埽? 當人眼動作為平滑運動,并且屏幕上的人眼注視點從一功能區(qū)域移動到另一功能區(qū)域時,將焦點切換到該另一區(qū)域。
19.如權利要求11所述的設備,還包括: 觀看角度檢測單元,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測觀看屏幕時的觀看角度; 深度調(diào)整單元,根據(jù)觀看角度調(diào)整屏幕的深度。
20.如權利要求19所述 的設備,其中,當觀看角度超過預定角度閾值時,深度調(diào)整單元將屏幕上靠近電子眼鏡的區(qū)域的深度調(diào)小,將屏幕上遠離電子眼鏡的區(qū)域的深度調(diào)大,使得觀看角度小于等于角度預定閾值。
21.一種利用電子眼鏡遙控顯示器的方法,包括: 通過電子眼鏡拍攝人眼獲得人眼圖像; 從人眼圖像中提取人眼特征信息; 檢測電子眼鏡的眼鏡位置和姿態(tài)信息; 發(fā)送拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息到顯示器。
22.一種利用電子眼鏡遙控顯示器的設備,包括: 人眼圖像獲取單元,通過拍攝人眼獲得人眼圖像; 特征提取單元,從人眼圖像中提取人眼特征信息; 位置姿態(tài)檢測單元,檢測電子眼鏡的眼鏡位置和姿態(tài)信息; 發(fā)送單元,發(fā)送拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息到顯示器。
23.—種控制顯不器的方法,包括: 從電子眼鏡接收拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)信息; 根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點; 根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作; 根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
24.一種控制顯示器的設備,包括: 接收單元,從電子眼鏡接收拍攝的人眼圖像的特征信息以及電子眼鏡的眼鏡位置和姿態(tài)息; 注視點檢測單元,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視占.人眼動作檢測單元,根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作; 控制單元,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
25.一種利用電子眼鏡遙控顯示器的方法,包括: 通過電子眼鏡拍攝人眼獲得人眼圖像; 從人眼圖像中提取人眼特征信息; 檢測電子眼鏡的眼鏡位置和姿態(tài)信息; 根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視點; 根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作; 將用于控制顯示器的操作的人眼動作和屏幕上的人眼注視點發(fā)送到顯示器。
26.一種利用電子眼鏡遙控顯示器的設備,包括: 人眼圖像獲取單元,通過拍攝人眼獲得人眼圖像; 特征提取單元,從人眼圖像中提取人眼特征信息; 位置姿態(tài)檢測單元,檢測電子眼鏡的眼鏡位置和姿態(tài)信息; 注視點檢測單元,根據(jù)人眼特征信息、眼鏡位置和姿態(tài)信息檢測屏幕上的人眼注視`占.人眼動作檢測單元,根據(jù)人眼特征信息和/或屏幕上的人眼注視點的變化情況檢測人眼動作; 發(fā)送單元,將用于控制顯示器的操作的人眼動作和屏幕上的人眼注視點發(fā)送到顯示器。
27.—種控制顯不器的方法,包括: 從電子眼鏡接收控制顯示器的操作的人眼動作和屏幕上的人眼注視點; 根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
28.一種控制顯示器的設備,包括: 接收單元,從電子眼鏡接收控制顯示器的操作的人眼動作和屏幕上的人眼注視點; 控制單元,根據(jù)人眼動作和屏幕上的人眼注視點控制顯示器的操作。
【文檔編號】G06F3/0487GK103500061SQ201310445336
【公開日】2014年1月8日 申請日期:2013年9月26日 優(yōu)先權日:2013年9月26日
【發(fā)明者】高偉 申請人:三星電子(中國)研發(fā)中心, 三星電子株式會社