利用投影儀的注視追蹤的制作方法
【專利摘要】本發(fā)明針對用于注視追蹤的系統(tǒng)、方法和計算機程序產(chǎn)品。示例性方法包括：使用投影儀將光導(dǎo)入眼睛；使用圖像捕獲模塊檢測來自與所述眼睛相關(guān)聯(lián)的表面的反射；以及基于所檢測的反射確定與所述眼睛相關(guān)聯(lián)的視線。在一些實施例中，所述光包括紅外光。在一些實施例中，所述投影儀包括激光器。在一些實施例中，所述投影儀包括硅上液晶（LCoS）芯片。在一些實施例中，與所述反射相關(guān)聯(lián)的所述表面是角膜、虹膜或視網(wǎng)膜中的至少一個。
【專利說明】利用投影儀的注視追蹤

【背景技術(shù)】
[0001] 如圖1中所呈現(xiàn)的，人眼1〇〇的重要部件包括角膜110、虹膜120、瞳孔130、晶狀體 135、視網(wǎng)膜140和視神經(jīng)150。角膜110是在眼睛前部的清亮的外凸表面。角膜110是眼 睛的主要折射表面。虹膜120是眼睛的有色部件，其調(diào)整進入眼睛的光的量。瞳孔130是 在虹膜120的中心處的開口。虹膜120更改或調(diào)節(jié)瞳孔130的大小并且由此控制進入眼睛 的光的量。晶狀體135是虹膜120后面的、眼睛的清亮部件，其將光聚焦在視網(wǎng)膜140上。 視網(wǎng)膜140是排列在眼睛背部的光敏組織。視網(wǎng)膜140將光轉(zhuǎn)換為電信號，該電信號經(jīng)由 視神經(jīng)被傳遞到大腦。水狀體160是凝膠狀液體，其位于晶狀體135和角膜110之間的空 間中。水狀體160的功能是保持眼內(nèi)壓和使眼球膨脹。
[0002] 注視追蹤是在一段時間內(nèi)追蹤注視點（與眼睛或眼睛正在看的東西相關(guān)聯(lián)的視 線）的過程。在基礎(chǔ)水平，注視追蹤包括使用光源照射眼睛的步驟，由此引起來自眼睛的各 種邊界的可見反射。這些反射中的一些可以被稱為浦肯野（Purkinje)圖像。被追蹤的一 種類型的可見反射是微光。微光是被角膜反射的少量的光。微光也可以被稱為第一浦肯野 圖像。
[0003] 如在此所使用的，注視追蹤可以包括生成反射和追蹤反射的步驟。生成反射的步 驟可以使用離散紅外（IR)光源(例如，用于將IR光導(dǎo)入眼睛的離散IR發(fā)光二極管（LED)) 來施行。存在與使用IR光來用于注視追蹤相關(guān)聯(lián)的若干優(yōu)點。IR光能夠照射眼睛而不打 擾觀眾。此外，IR光被角膜或眼睛的其他部件(例如，瞳孔）較好地反射，并且結(jié)果，反射更 容易由IR圖像捕獲模塊(例如，IR照相機）可檢測。
[0004] 然而，存在與使用離散IR LED來將光導(dǎo)入眼睛相關(guān)聯(lián)的若干缺點。在其中從圖像 捕獲模塊到眼睛的距離非常小的系統(tǒng)中，當(dāng)反射變得更大時，反射(例如，微光）可能難以進 行具有高精度的檢測和/或追蹤。此外，IR LED能夠占據(jù)相當(dāng)大量的空間，并且由于注視 追蹤系統(tǒng)上的空間可能有限，當(dāng)需要若干個IR LED時，系統(tǒng)無法容納若干個IR LED。此外， 當(dāng)系統(tǒng)需要容納若干個IR LED時，每個LED需要分離開至少預(yù)定距離以便使得反射(例如， 微光)能夠落入角膜的球形部位。當(dāng)系統(tǒng)上的空間有限時，因為有限的空間阻礙了每個LED 從另一個LED分離開預(yù)定距離，所以系統(tǒng)無法容納若干個LED。此外，在其上注視的方向能 夠被追蹤的角度范圍較小，因為眼睛移動導(dǎo)致反射(例如，微光）落在角膜的球形部位之外， 這使反射的檢測不太可靠。
[0005] 因此，所需要的是克服這些缺點的用于注視追蹤的系統(tǒng)。


【發(fā)明內(nèi)容】

[0006] 本發(fā)明的實施例針對用于注視追蹤的系統(tǒng)、方法和計算機程序產(chǎn)品。在一些實施 例中，所述方法包括：使用投影儀將光導(dǎo)入眼睛；使用圖像捕獲模塊檢測來自與眼睛相關(guān) 聯(lián)的至少一個表面的至少一個反射；以及基于所檢測的反射確定與眼睛相關(guān)聯(lián)的視線。在 一些實施例中，所述光包括紅外光。在一些實施例中，所述投影儀包括激光器。在一些實施 例中，所述投影儀包括硅上液晶（LCoS)芯片。在一些實施例中，與所述反射相關(guān)聯(lián)的所述 至少一個表面是與眼睛相關(guān)聯(lián)的角膜、瞳孔、虹膜或視網(wǎng)膜中的至少一個。
[0007] 在一些實施例中，所述投影儀和所述圖像捕獲模塊被包括在頭戴設(shè)備內(nèi)。在一些 實施例中，所述頭戴設(shè)備包括眼鏡、護目鏡或頭盔中的至少一個。
[0008] 在一些實施例中，所述光形成圖案。如在此所使用的，圖案是指圖像。術(shù)語"圖像" 和"圖案"是等同的。在一些實施例中，所述圖案具有四邊形的形狀。在一些實施例中，所 述投影儀包括非暫態(tài)存儲器，所述存儲器存儲至少一個圖案，并且其中所述投影儀至少部 分地基于眼睛的至少一個部分與該部分基本上中心的位置的距離來選擇圖案或者為該圖 案選擇投影位置。在一些實施例中，所述存儲器可以被收納在從所述投影儀分離的設(shè)備中。 在一些實施例中，與眼睛的部分(例如，瞳孔、視網(wǎng)膜等）相關(guān)聯(lián)的基本上中心的位置是指當(dāng) 觀眾正在看或基本上筆直向前地聚焦在被遠(yuǎn)遠(yuǎn)地安置或者在無限遠(yuǎn)的距離處的對象時，眼 睛的所述部分的位置。
[0009] 在一些實施例中，所述方法還包括確定瞳孔或者瞳孔的至少一部分(例如，瞳孔的 基本上中心的部分）的位置。
[0010] 在一些實施例中，所述方法還包括更改以下各項中的至少一個：所述至少一個反 射的大小、與所述至少一個反射相關(guān)聯(lián)的形狀、與所述至少一個反射相關(guān)聯(lián)的強度或反射 的量。
[0011] 在一些實施例中，頭戴設(shè)備包括顯示器，并且所述方法還包括使用所述投影儀將 圖像投影到所述顯示器上。
[0012] 在一些實施例中，所述方法還包括至少部分地基于所述眼睛與第二眼睛之間的瞳 孔間距離來調(diào)節(jié)所述圖像。
[0013] 在一些實施例中，一種用于注視追蹤的頭戴系統(tǒng)包括：至少一個顯不器；第一投 影儀，用于將光導(dǎo)入第一眼睛并用于將第一圖像投影到所述至少一個顯示器上；以及第一 圖像捕獲模塊，用于：檢測來自與所述第一眼睛相關(guān)聯(lián)的至少一個表面的至少一個反射，并 且基于所檢測的反射確定與所述第一眼睛相關(guān)聯(lián)的視線。
[0014] 在一些實施例中，所述系統(tǒng)還包括第二投影儀，用于將光導(dǎo)入第二眼睛并用于將 第二圖像投影到所述至少一個顯示器上；以及第二圖像捕獲模塊，用于：檢測來自與所述 第二眼睛相關(guān)聯(lián)的至少一個表面的至少一個反射，并且基于所檢測的反射確定與所述第二 眼睛相關(guān)聯(lián)的視線。
[0015] 在一些實施例中，所述第一圖像捕獲模塊確定與所述第一眼睛相關(guān)聯(lián)的基本上中 心的部分，并且其中所述第二圖像捕獲模塊確定與所述第二眼睛相關(guān)聯(lián)的基本上中心的部 分。
[0016] 在一些實施例中，所述系統(tǒng)還包括處理器，其至少部分地基于所確定的與所述第 一眼睛相關(guān)聯(lián)的基本上中心的部分和所確定的與所述第二眼睛相關(guān)聯(lián)的基本上中心的部 分來確定所述第一眼睛的瞳孔與所述第二眼睛的瞳孔之間的距離。
[0017] 在一些實施例中，所述第一投影儀至少部分地基于所述第一眼睛與所述第二眼睛 之間的瞳孔間距離來調(diào)節(jié)所述第一圖像，并且其中所述第二投影儀至少部分地基于所述瞳 孔間距離來調(diào)節(jié)所述第二圖像。
[0018] 在一些實施例中，一種用于調(diào)節(jié)與頭戴系統(tǒng)相關(guān)聯(lián)的至少一個顯示器上的圖像的 方法，包括：將第一投影儀用于將第一圖像投影到所述至少一個顯示器上；將第二投影儀 用于將第二圖像投影到所述至少一個顯示器上；將第一圖像捕獲模塊用于確定與第一眼睛 相關(guān)聯(lián)的基本上中心的部分；將第二圖像捕獲模塊用于確定與第二眼睛相關(guān)聯(lián)的基本上中 心的部分；至少部分地基于所確定的與所述第一眼睛相關(guān)聯(lián)的基本上中心的部分和所確定 的與所述第二眼睛相關(guān)聯(lián)的基本上中心的部分來確定所述第一眼睛與所述第二眼睛之間 的距離；至少部分地基于所確定的所述第一眼睛與所述第二眼睛之間的距離來調(diào)節(jié)所述第 一圖像；以及至少部分地基于所確定的所述第一眼睛與所述第二眼睛之間的距離來調(diào)節(jié)所 述第二圖像。在一些實施例中，所述第一投影儀將所述第一圖像并且所述第二投影儀將所 述第二圖像投影到現(xiàn)實世界環(huán)境的基本上實況的視圖上。

【專利附圖】

【附圖說明】
[0019] 已經(jīng)概括地如此描述了本發(fā)明的實施例，現(xiàn)在將對附圖做出參照，其中： 圖1是圖示出眼睛的截面視圖； 圖2是根據(jù)本發(fā)明的一個實施例圖示出示例性系統(tǒng)的透視圖；以及 圖3是根據(jù)本發(fā)明的一個實施例圖示出用于施行注視追蹤的示例性過程流的流程圖。

【具體實施方式】
[0020] 參照附圖，現(xiàn)在可以在下文中更充分地描述本發(fā)明的實施例，在附圖中示出了本 發(fā)明的一些(但非全部)實施例。確實，本發(fā)明可以以許多不同的形式來體現(xiàn)，并且不應(yīng)當(dāng)被 解釋為限于在此闡述的實施例；相反，提供這些實施例來使得本公開可以滿足適用的法律 要求。類似的標(biāo)號自始至終指代類似的元件。
[0021] 本發(fā)明針對使用非接觸光學(xué)技術(shù)的、用于注視追蹤的系統(tǒng)、方法和計算機程序產(chǎn) 品。如在此所使用的，非接觸技術(shù)是其中注視追蹤系統(tǒng)不與眼睛物理接觸的技術(shù)。一種示 例性方法包括使用投影儀將光導(dǎo)入眼睛；使用圖像捕獲模塊檢測來自與眼睛相關(guān)聯(lián)的表面 的反射(例如，微光）；以及基于所檢測的反射確定與眼睛相關(guān)聯(lián)的視線。
[0022] 在一些實施例中，注視追蹤可以通過追蹤與微光相關(guān)聯(lián)的各種特性(例如，微光相 對于注視追蹤系統(tǒng)(例如，光源和/或圖形捕獲模塊）的距離、方向和取向）來施行。在一些 實施例中，如在此描述的取向可以包括與微光相關(guān)聯(lián)的方位角、仰角或傾斜中的至少一個。 在其他實施例中，注視追蹤可以通過追蹤微光和眼睛瞳孔或眼睛瞳孔的基本上中心的部分 的位置二者來施行。在又一些其他實施例中，注視追蹤可以通過追蹤微光和來自瞳孔的反 射(或者來自眼睛的任何其他表面或邊界的反射）來施行。在這樣的實施例中，可以將由微 光和瞳孔反射(或來自眼睛的任何其它表面或邊界的反射）之間的角度形成的矢量與其他 幾何數(shù)據(jù)相結(jié)合以確定注視方向。
[0023] 在另外的實施例(例如，雙浦肯野注視追蹤系統(tǒng)）中，注視追蹤可以通過追蹤來自 角膜前部的一個或多個反射(微光或第一浦肯野圖像）以及來自眼睛的晶狀體背部的一個 或多個反射(第四浦肯野圖像）來施行。在這樣的實施例中，與兩種反射相關(guān)聯(lián)的數(shù)據(jù)可以 被用于確定注視方向。
[0024] 在又一些另外的實施例中，注視追蹤可以通過對眼睛內(nèi)的特征(例如，視網(wǎng)膜血 管）進行追蹤和/或成像（即，生成其圖像）來施行。在一些實施例中，在此描述的圖像捕獲 模塊具有當(dāng)眼睛或眼睛的各種部件移動或轉(zhuǎn)動時繼續(xù)對這些特征進行追蹤和成像的能力。 在這樣的實施例中，圖像捕獲模塊可以追蹤或可以不追蹤來自視網(wǎng)膜的反射。在其中反射 被追蹤的實施例中，圖像捕獲模塊對來自視網(wǎng)膜(或視網(wǎng)膜血管）的反射或來自視網(wǎng)膜(或 視網(wǎng)膜血管）的反射在一段時間內(nèi)的改變進行檢測、追蹤和成像。
[0025] 本發(fā)明的實施例不限于確定注視方向的任何特定方法。此外，在其中注視追蹤系 統(tǒng)支持多個注視追蹤實施例的實施例中，注視追蹤系統(tǒng)可以允許用戶在各種模式之間切 換。當(dāng)注視追蹤系統(tǒng)在模式之間切換時，注視追蹤系統(tǒng)可以自動配置自身以使用所選擇的 模式來施行注視追蹤。舉例來說，當(dāng)注視追蹤系統(tǒng)從與追蹤來自眼睛的一個或多個部件的 反射相關(guān)聯(lián)的模式轉(zhuǎn)移到與對眼睛內(nèi)的特征(例如，視網(wǎng)膜血管）進行追蹤和成像相關(guān)聯(lián)的 模式時，圖像捕獲模塊可以被配置為自動改變其聚焦以支持所選擇的模式。在其他實施例 中，上述實施例中的一個或多個的組合可以被用于確定注視方向。
[0026] 盡管在此將注視追蹤描述為追蹤微光，但是本發(fā)明的實施例不限于追蹤微光。本 發(fā)明的實施例針對追蹤與任何表面或邊界相關(guān)聯(lián)的反射，所述表面或邊界與眼睛相關(guān)聯(lián) (例如，除角膜以外的邊界或表面)。因此，如在此所使用的，微光可以是指來自角膜的表面 或與圖1中所呈現(xiàn)的眼睛相關(guān)聯(lián)的任何其他表面或邊界的反射。
[0027] 如在此所使用的，一種用于注視追蹤的系統(tǒng)包括光源和圖像捕獲模塊兩者。在一 些實施例中，光源將IR光照耀到眼睛上；然而，本發(fā)明的實施例不限于能夠被照耀到眼睛 上的任何特定類型(或頻率）的光。在一些實施例中，光源和圖像捕獲模塊被包括在相同的 系統(tǒng)(例如，包括單個外殼的系統(tǒng))中。在替換實施例中，光源和圖像捕獲模塊被包括在分離 的系統(tǒng)或分離的外殼中。
[0028] 如在此所描述的圖像捕獲模塊可以包括照相機或能夠捕獲圖像或圖像流(視頻） 的任何組件。圖像捕獲模塊可以是數(shù)字照相機或數(shù)字?jǐn)z像機。此外，圖像捕獲模塊可以提 供對照相機設(shè)置(例如，聚焦設(shè)置)的自動和/或手動調(diào)節(jié)。在一些實施例中，圖像捕獲模塊 包括除照相機以外或替代照相機的光學(xué)傳感器。圖像捕獲模塊可以檢測來自與眼睛相關(guān)聯(lián) 的各種表面的一個或多個反射(或反射中的改變)、分析與所述一個或多個反射相關(guān)聯(lián)的數(shù) 據(jù)以及至少部分地基于所分析的數(shù)據(jù)來確定注視方向。
[0029] 在此描述的圖像捕獲模塊可以僅聚焦在單個眼睛上或者可以聚焦在兩只眼睛上， 并且當(dāng)觀眾看著刺激物時檢測和/或記錄眼睛的移動。如在此所使用的，注視追蹤系統(tǒng)的 用戶或觀眾可以是等同的。此外，圖像捕獲模塊可以使用一個或多個技術(shù)來定位或追蹤瞳 孔或瞳孔的中心(或基本上中心的部分)。舉例來說，圖像捕獲模塊可以使用紅外（IR)或近 紅外非準(zhǔn)直光來生成與角膜相關(guān)聯(lián)或者與眼睛的任何其他部件(例如，晶狀體）相關(guān)聯(lián)的反 射。在一些實施例中，圖像捕獲模塊可以生成瞳孔的中心(或基本上中心的部分）與所生成 的反射之間的矢量以便確定注視方向。
[0030] 在此描述的注視追蹤系統(tǒng)(或與注視追蹤系統(tǒng)相關(guān)聯(lián)的圖像捕獲模塊）使得能夠 實現(xiàn)亮瞳和深瞳追蹤兩者，以便確定瞳孔或瞳孔的中心的位置。亮瞳追蹤和深瞳追蹤之間 的不同是光源相對于光學(xué)路徑的位置。如果光源與光學(xué)路徑同軸，則當(dāng)光從視網(wǎng)膜反射時 眼睛充當(dāng)回射器，由此再現(xiàn)亮瞳效應(yīng)。如在此所使用的，回射器是以最小光散射將光反射回 其源的表面。如果光源從光學(xué)路徑偏移，則瞳孔看起來是深色的，因為來自視網(wǎng)膜的回射被 導(dǎo)向遠(yuǎn)離圖像捕獲模塊。因此，在此描述的圖像捕獲模塊至少部分地基于在此描述的光源 是否與光學(xué)路徑同軸或從光學(xué)路徑偏移來使得能夠?qū)崿F(xiàn)要么亮瞳追蹤要么深瞳追蹤。如在 此所使用的，光學(xué)路徑是光在遍歷注視追蹤系統(tǒng)中采用的路徑。
[0031] 現(xiàn)在參照圖2,圖2呈現(xiàn)了一種用于施行注視追蹤的示例性系統(tǒng)200。在一些實施 例中，該示例性系統(tǒng)可以是如圖2中呈現(xiàn)的護目鏡或眼鏡。在一些實施例中，光源220和圖 像捕獲模塊280可以被安放在該示例性系統(tǒng)的單側(cè)上。在其他實施例中，光源220和圖像 捕獲模塊280的對被安放在該示例性系統(tǒng)的任一側(cè)。在又一些其他實施例中，光源220可 以被安放在該示例性系統(tǒng)的一側(cè)上，而圖像捕獲模塊280被安放在該示例性系統(tǒng)的另一側(cè) 上。本發(fā)明的實施例不限于將光源220和/或圖像捕獲模塊280安放在該示例性系統(tǒng)上的 任何特定位置。
[0032] 光源220可以被用于將光照耀到或?qū)胙劬Γ纱松蓙碜耘c眼睛相關(guān)聯(lián)的至少 一個表面或邊界的反射。附加地或替換地，光源220可以被用于照明或照射眼睛的表面，或 眼睛的一個或多個部件。為了確定瞳孔或瞳孔的中心(或基本上中心的部分）的位置的目 的，照射眼睛的表面可以是有用的。附加地或替換地，為了對視網(wǎng)膜血管的放置(和/或特 性中的變化)進行檢測和成像的目的，光源可以被用于照射視網(wǎng)膜。在其中視網(wǎng)膜血管被追 蹤和/或成像以便確定注視方向的實施例中，對視網(wǎng)膜的照射可以是有用的。
[0033] 如在此描述的光源220可以是投影儀。投影儀可以是與在增強現(xiàn)實（AR)系統(tǒng)中的 移動顯示器上呈現(xiàn)疊加信息相關(guān)聯(lián)的投影儀。如在此所使用的，增強（AR)現(xiàn)實是指現(xiàn)實世 界環(huán)境的視圖(例如，實況視圖或延遲的視圖)，其中現(xiàn)實世界環(huán)境的元素被計算機生成的 輸入(諸如圖像、聲音等)所增強。因此，投影儀（以及在此描述的注視追蹤系統(tǒng))可以被包括 在頭戴顯示器（HMD)系統(tǒng)中，并且該投影儀可以被用于將圖像投影到HMD系統(tǒng)的顯示器上。 頭戴顯示器或頭盔安裝顯示器（HMD)系統(tǒng)是可以被穿戴在頭上的顯示器系統(tǒng)。HMD系統(tǒng)可 以采用眼鏡、護目鏡、面具或頭盔的形式，盡管HMD系統(tǒng)不限于這些形式。HMD系統(tǒng)可以包括 在僅一只眼睛前面的顯示單元(單目HMD)或在每只眼睛前面的顯示單元(雙目HMD)。顯示 單元可以基于陰極射線管（CRT)、液晶顯示器（IXD)、硅上液晶（LCoS)、發(fā)光二極管（LED)、 有機發(fā)光二極管（0LED)，等等。本發(fā)明的實施例不限于任何特定顯示技術(shù)。如在此描述的 HMD可以顯示計算機生成的圖像、來自現(xiàn)實世界的實況或延遲的圖像或者兩種圖像的組合。
[0034] 在一些實施例中，如在此描述的投影儀除紅綠藍（RGB)LED (其產(chǎn)生紅光226、綠光 224和藍光228)外，可以包括至少一個IR LED (其產(chǎn)生IR光222)。在其他實施例中，投影 儀可以僅包括一個或多個IR LED，而不包括RGB LED。包括在注視追蹤系統(tǒng)中的控制模塊可 以被配置為對與每個IR LED和每個RGB LED相關(guān)聯(lián)的發(fā)射進行單獨地控制。在一些實施 例中，控制模塊可以基于眼睛的移動和/或頭的移動(例如，基于從基本上中心的位置的眼 睛或瞳孔的距離)來更改與每一種類型的LED (例如，IR LED)相關(guān)聯(lián)的發(fā)射的強度。此外， 在一些實施例中，控制模塊可以基于眼睛的移動和/或頭的移動(例如，基于眼睛或瞳孔與 基本上中心的位置的距離）來調(diào)節(jié)哪些LED是活動的以及哪些LED是不活動的。
[0035] 在一些實施例中，眼睛的移動是指眼睛的一部分的移動。如在此所使用的，眼睛的 一部分也可以被稱為眼睛的部件。在一些實施例中，與眼睛的一部分或部件(例如，瞳孔、視 網(wǎng)膜、虹膜，等等）相關(guān)聯(lián)的基本上中心的位置是指當(dāng)觀眾看著或基本上筆直向前地聚焦在 被遠(yuǎn)遠(yuǎn)地安置或在無限遠(yuǎn)的距離處的對象時，眼睛的該部分或部件的位置。
[0036] 如在此所使用的，投影儀是將光(例如，定義一個或多個IR圖案的IR光)投影到眼 睛250上的光學(xué)系統(tǒng)。本發(fā)明的實施例不限于與任何特定形狀相關(guān)聯(lián)的圖案。此外，圖案 可以由注視追蹤系統(tǒng)的用戶更改。每個圖案可以產(chǎn)生與特定形狀相關(guān)聯(lián)的反射(或多個反 射)。因此，投影儀將光投影到眼睛上，使得來自眼睛的各種表面的光的反射能夠具有許多 形狀中的任一個。本發(fā)明的實施例不限于與任何特定形狀相關(guān)聯(lián)的反射。舉例來說，投影儀 將光照耀到眼睛導(dǎo)致四邊形構(gòu)造中的四個反射(例如，四個微光)。與引起一個或兩個反射 的生成的光源相比，該四邊形反射構(gòu)造產(chǎn)生對于眼睛（或與眼睛相關(guān)聯(lián)的瞳孔）如何移動的 更可靠的確定。圖2中呈現(xiàn)了四邊形反射圖案232、234、236和238的圖示說明。在其他實 施例中，反射可以采用其他形狀的形式，例如橢圓形的、圓形的、三角形的、多邊形的，等等。 此外，投影儀能夠控制當(dāng)投影儀的光被導(dǎo)入眼睛時產(chǎn)生的不同反射(例如，如圖2中的四個 反射）的數(shù)目。本發(fā)明的實施例不限于使用在此描述的注視追蹤系統(tǒng)所能夠生成的反射的 最小或最大數(shù)目（或數(shù)量)。
[0037] 此外，與投影儀相關(guān)聯(lián)的存儲器可以被用于存儲至少一個圖案。投影儀可以被自 動地配置為至少部分地基于從基本上中心的位置的眼睛(或諸如瞳孔之類的眼睛的部件） 的距離來使用不同的圖案。因此，投影儀(或注視追蹤系統(tǒng)中諸如圖像捕獲模塊或處理器之 類的一些其他組件）具有測量眼睛(或諸如瞳孔之類的眼睛的部件）與它基本上中心的位置 的距離，并且將所測量的距離與一個或多個預(yù)定閾值進行比較的能力。響應(yīng)于確定所測量 的距離大于第一閾值，投影儀可以將第一類型的圖案投影到眼睛上。響應(yīng)于確定所測量的 距離不大于第一閾值，投影儀可以將第二類型的圖案投影到眼睛上。每種類型的圖案導(dǎo)致 針對與眼睛的表面相關(guān)聯(lián)的反射的不同形狀。在一些實施例中，圖像捕獲模塊測量眼睛(或 諸如瞳孔之類的眼睛的部件）與它基本上中心的位置的距離，并且將該信息傳送到處理器 或者直接傳送到投影儀。接著，處理器或投影儀基于所測量的距離來選擇圖案的類型。
[0038] 此外，投影儀可以基于瞳孔相對于固定位置的位置來自動地更改圖案在眼睛上的 放置(或更改圖案在眼睛上的投影位置)。圖案在眼睛上的放置的更改引起高質(zhì)量反射的生 成，該高質(zhì)量反射(例如，微光)由在此描述的圖像捕獲模塊容易地可檢測。因此，投影儀(或 注視追蹤系統(tǒng)中諸如圖像捕獲模塊或處理器之類的一些其他組件）具有測量瞳孔相對于固 定位置(例如與瞳孔相關(guān)聯(lián)的基本上中心的其余位置）的距離，并且將所測量的距離與一個 或多個預(yù)定閾值進行比較的能力。響應(yīng)于確定所測量的距離大于第一閾值，投影儀可以將 第一所選圖案投影到眼睛的第一部分上。響應(yīng)于確定所測量的距離不大于第一閾值，投影 儀可以將第二所選圖案投影到眼睛的第二部分上，其中該第二部分不同于該第一部分。此 夕卜，該第一所選圖案可以與或可以不與該第二所選圖案不同。
[0039] 在在此描述的實施例中，投影儀還可以具有同時將分離的圖案投影到眼睛的不同 部件上的能力。這使得能夠?qū)崿F(xiàn)多個不同反射的生成，每個反射與被導(dǎo)入眼睛的分離的圖 案相關(guān)聯(lián)。這些多個反射在作出注視方向的更精確的確定中可以是有用的。此外，在一些實 施例中，投影儀可以具有將圖案導(dǎo)入眼睛的能力，其中圖案的一個或多個特性(例如，大小、 放置、強度、形狀、數(shù)量，等等）在一段時間內(nèi)改變。因此，這使得能夠生成反射，該反射在一 段時間內(nèi)改變特性并且因此更容易被在此描述的圖像捕獲模塊可檢測。
[0040] 此外，投影到眼睛上的圖案的類型(和與圖案相關(guān)聯(lián)的其它特性，諸如大小、放置、 強度、形狀、數(shù)量等）可以至少部分地基于用戶的頭是否基本上靜止或者用戶的頭是否在運 動中而變化。因此，在此描述的投影儀可以確定用戶的頭是否基本上靜止或者用戶的頭是 否在運動中，并且可以基于該確定而選擇要被投影到眼睛上的圖案的類型(和與圖案相關(guān) 聯(lián)的其他特性，諸如大小、放置、強度、形狀、數(shù)量，等等)。因此，在此描述的注視追蹤系統(tǒng)使 得能夠?qū)崿F(xiàn)注視方向的確定而無論用戶的頭是否不動或在移動。
[0041] 投影儀不僅使得能夠?qū)崿F(xiàn)反射的形狀的控制，而且使得能夠?qū)崿F(xiàn)反射的大小的控 制。如在此描述的投影儀使用一個或多個微顯示芯片（例如，LCoS芯片、IXD芯片、DLP芯 片，等等)。這些芯片中的每一個具有固定的像素陣列。如在此所使用的，像素是投影儀上 最小的可尋址元件。投影儀能夠控制與每個像素相關(guān)聯(lián)的光強度并且能夠控制被配置為具 有特定光強度的像素的數(shù)目。通過控制與每個像素相關(guān)聯(lián)的光強度和/或被配置為具有特 定光強度的像素的數(shù)目，投影儀使得能夠?qū)崿F(xiàn)反射的大小的控制。舉例來說，當(dāng)較大數(shù)目的 像素具有較高的強度和/或當(dāng)較少數(shù)目的像素具有較低的強度時，反射的大小較大，而當(dāng) 較大數(shù)目的像素具有較低的強度和/或當(dāng)較少數(shù)目的像素具有較高的強度時，反射的大小 較小。
[0042] 此外，投影儀還使得能夠?qū)崿F(xiàn)反射的強度的控制。在一些實施例中，投影儀使得 用戶能夠通過改變與投影儀相關(guān)聯(lián)的設(shè)置來手動地控制反射的強度，而在其他實施例中， 投影儀被配置為自動地控制反射的強度以便準(zhǔn)許圖像捕獲模塊進行反射的最優(yōu)檢測或可 視化。在一些實施例中，投影儀被配置為至少部分地基于一個或多個環(huán)境因素(例如，其中 正在使用注視追蹤系統(tǒng)的環(huán)境中的外部光的亮度或量）而自動地控制反射的強度（或?qū)Ρ?度)。此外，在一些實施例中，投影儀將低強度的光照耀在眼睛的實質(zhì)部分上，因此使得能夠 實現(xiàn)圖像捕獲模塊對反射的更容易的檢測或可視化。
[0043] 在一些實施例中，在此描述的投影儀可以基于激光技術(shù)。激光器通過基于光子的 激勵發(fā)射的光學(xué)放大過程而發(fā)射光。激光具有高度的空間和時間一致性。因此，包括激光 器的投影儀可以能夠以更高的精度將光照耀到眼睛的特定部件上(例如，角膜的特定部件 上)。因此，具有激光器的投影儀可以能夠?qū)⒐庹找窖劬Φ奶囟ú考弦援a(chǎn)生由圖像捕獲 模塊最優(yōu)地可檢測(例如，更容易檢測）的反射。
[0044] 在其他實施例中，在此描述的投影儀可以基于硅上液晶（LCoS)技術(shù)。LCoS是使用 被施加到反射鏡襯底的液晶的反射技術(shù)。隨著液晶打開和關(guān)閉，光被反射鏡襯底反射。由 于液晶打開和關(guān)閉而對光的調(diào)制創(chuàng)建了圖像。因此，投影儀可以包括LCoS芯片。包括LCoS 芯片的投影儀可以被用于將非常高分辨率的圖案導(dǎo)入眼睛。這個高分辨率圖案導(dǎo)致由圖 像捕獲模塊最優(yōu)地可檢測(例如，更容易檢測）的反射的生成。如在此所使用的，術(shù)語"分辨 率"是指由要么被投影到眼睛上的圖案或者要么來自與眼睛相關(guān)聯(lián)的表面的反射所承載的 細(xì)節(jié)的量。本發(fā)明的實施例不限于任何特定類型的投影儀技術(shù)。
[0045] 本發(fā)明的實施例準(zhǔn)許從投影儀到圖像捕獲模塊的圖像(例如，圖案）的傳輸。在一 些實施例中，圖像捕獲模塊可以將圖案(例如，投影儀照耀到眼睛中的圖案）與所檢測的反 射進行比較以便確定注視方向。本發(fā)明的實施例不限于用于將圖像從投影儀傳輸?shù)綀D像捕 獲模塊的任何特定機制(例如，有線機制或諸如近場通信（NFC)之類的無線機制)。此外，圖 像捕獲模塊還可以經(jīng)由一個或多個有線或無線機制將信息傳遞到投影儀。
[0046] 如先前所指示的，注視捕獲系統(tǒng)可以被包括在HMD系統(tǒng)(例如，單目或雙目HMD系 統(tǒng))中。本發(fā)明的實施例還針對基于確定眼睛的中心或基本上中心的部分來調(diào)節(jié)呈現(xiàn)在HMD 系統(tǒng)的顯示器上的圖像。在一些實施例中，呈現(xiàn)在HMD系統(tǒng)上的圖像是由在此描述的投影 儀所投影的圖像。在一些實施例中，眼睛的中心(或基本上中心的部分）可以是指瞳孔的位 置或瞳孔的中心(或基本上中心的部分)。
[0047] 在HMD系統(tǒng)中，在此描述的調(diào)節(jié)是有用的，該HMD系統(tǒng)包括被定位在每只眼睛前面 的圖像捕獲模塊(例如，照相機)。此外，每個圖像捕獲模塊可以與相應(yīng)的投影儀相關(guān)聯(lián)。與 HMD系統(tǒng)相關(guān)聯(lián)的每個圖像捕獲模塊可以是先前描述的圖像捕獲模塊，其檢測來自眼睛的 一個或多個反射并確定注視方向。此外，圖像捕獲模塊不限于任何特定類型的圖像捕獲模 塊。舉例來說，圖像捕獲模塊可以是IR攝像機、RGB攝像機或能夠檢測眼睛的中心或基本 上中心的部分的任何其他類型的照相機。
[0048] 不同人具有不同的眼睛放置并因而他們的眼睛之間具有不同的距離。如果在生成 HMD系統(tǒng)上的圖像中不考慮眼睛放置中的差異，則可能出現(xiàn)許多問題。舉例來說，當(dāng)人正在 觀看HMD系統(tǒng)上的三維（3-D)內(nèi)容時，如果呈現(xiàn)在HMD系統(tǒng)上的兩個圖像之間的距離沒有顧 及眼睛間或瞳孔間的距離，那么可能存在與生成立體效果相關(guān)聯(lián)的差錯。此外，與生成立體 效果相關(guān)聯(lián)的這些差錯還可以引起HMD系統(tǒng)的用戶遭受眼睛疲勞之苦。如在此所使用的， 立體效果是指通過將兩個偏移圖像分離地呈現(xiàn)給觀眾的左眼和右眼而引起的用戶對于3-D 深度的感知。
[0049] 在本發(fā)明的一些實施例中，與HMD系統(tǒng)相關(guān)聯(lián)的圖像捕獲模塊(例如，照相機河以 被安放在每只眼睛前面。每個圖像捕獲模塊可以被配置為當(dāng)觀眾正直視前方并聚焦在遠(yuǎn)處 或無限遠(yuǎn)的距離處的場景、對象或刺激物上時，確定眼睛的中心(或基本上中心的部分）的 放置。每個圖像捕獲模塊可以被配置為將關(guān)于眼睛的中心(或基本上中心的部分)的位置信 息傳遞到與圖像捕獲模塊相關(guān)聯(lián)的投影儀。如先前所描述的，本發(fā)明不限于圖像捕獲模塊 與投影儀之間的任何特定傳遞機制。可替換地，每個圖像捕獲模塊可以被配置為將關(guān)于眼 睛的中心(或基本上中心的部分)的位置信息傳遞到與HMD系統(tǒng)相關(guān)聯(lián)的處理器。處理器可 以計算要對每個圖像做出的調(diào)節(jié)的量和/或類型，并將該調(diào)節(jié)信息傳遞到每個投影儀。
[0050] 通過使用與眼睛的中心(或基本上中心的部分）相關(guān)聯(lián)的位置信息，每個投影儀調(diào) 節(jié)它投影到顯示器上的圖像。調(diào)節(jié)圖像可以包括調(diào)節(jié)右圖像相對于左圖像的位置以便減少 或消除立體效果差錯，或者調(diào)節(jié)右圖像與左圖像的混合以便減少或消除立體效果差錯。調(diào) 節(jié)一個圖像相對于另一個圖像的位置可以包括沿X軸、y軸或z軸中的至少一個僅調(diào)節(jié)一 個圖像或調(diào)節(jié)兩個圖像的位置。附加地或替換地，調(diào)節(jié)圖像還可以包括調(diào)節(jié)圖像的大小、調(diào) 節(jié)圖像的亮度、調(diào)節(jié)圖像的色彩或?qū)Ρ榷?，等等?br> [0051] 因此，投影到顯示器上的圖像被配置為適合用戶的眼睛間或瞳孔間的距離。因而， 本發(fā)明的實施例使得能夠?qū)崿F(xiàn)自動地調(diào)節(jié)由投影儀產(chǎn)生在HMD系統(tǒng)上的圖像。本發(fā)明消除 了對機械地調(diào)節(jié)投影儀或HMD以便調(diào)節(jié)投影圖像的需要。因此，HMD系統(tǒng)可以根據(jù)本發(fā)明來 構(gòu)建，其不準(zhǔn)許為了調(diào)節(jié)由投影儀產(chǎn)生的投影圖像而對HMD系統(tǒng)的機械調(diào)節(jié)。當(dāng)與被構(gòu)建 為使得能夠?qū)崿F(xiàn)對由投影儀產(chǎn)生的投影圖像的機械調(diào)節(jié)的HMD系統(tǒng)相比時，這樣的HMD系 統(tǒng)將不太復(fù)雜、不太笨重，并且在美學(xué)上更賞心悅目。
[0052] 現(xiàn)在參照圖3,圖3呈現(xiàn)了用于注視追蹤的過程流300。圖3中呈現(xiàn)的各種過程塊 可以以與圖3中所呈現(xiàn)的不同的順序來執(zhí)行。在塊310處，該示例性方法包括使用投影儀 將光(例如，IR光）導(dǎo)入眼睛。在塊320處，該方法包括使用圖像捕獲模塊(例如，諸如數(shù)字 攝像機之類的照相機）來檢測或識別來自與眼睛相關(guān)聯(lián)的表面(例如，角膜）的至少一個反 射。在塊330處，該方法包括基于所檢測的反射來確定與眼睛相關(guān)聯(lián)的視線(例如，相對于 法線的角度)。如在此所使用的，視線可以是指與用戶的注視相關(guān)聯(lián)的角方向。角方向可以 是相對于法線或平面的角度。
[0053] 在一些實施例中，在此描述的各種系統(tǒng)可以包括至少一個處理器、至少一個存儲 器，以及存儲在存儲器中的至少一個模塊，該模塊可執(zhí)行以施行或使一個或多個其他模塊 施行在此描述的各種過程。
[0054] 根據(jù)本發(fā)明的實施例，相對于系統(tǒng)(或設(shè)備）的術(shù)語"模塊"可以是指系統(tǒng)的硬件組 件、系統(tǒng)的軟件組件，或系統(tǒng)的包括硬件和軟件兩者的組件。如在此所使用的，模塊可以包 括一個或多個模塊，其中每個模塊可以駐留在硬件或軟件的分離的部塊中。
[0055] 在一些實施例中，用于注視追蹤或調(diào)節(jié)頭戴系統(tǒng)的顯示器上的圖像中的至少一個 的示例性計算機程序產(chǎn)品包括非暫態(tài)計算機可讀介質(zhì)，該非暫態(tài)計算機可讀介質(zhì)包括被配 置為施行在此描述的一個或多個過程的代碼。
[0056] 如在此所使用的，術(shù)語"自動"是指在沒有用戶的干預(yù)下發(fā)生事件或狀況時由計算 機軟件執(zhí)行的功能、過程、方法或其任何部分。如在此所使用的，短語"大于"意指"大于或 等于"。
[0057] 盡管上文剛剛描述了本發(fā)明的許多實施例，但是本發(fā)明可以以許多不同的形式體 現(xiàn)并且不應(yīng)當(dāng)被解釋為限于在此闡述的實施例；相反，提供這些實施例來使得本公開將滿 足適用的法律要求。同樣，將要理解，在可能的情況下，在此描述和/或設(shè)想的本發(fā)明的實 施例中的任何一個的優(yōu)點、特征、功能、設(shè)備，和/或操作方面中的任何一個可以被包括于 在此描述和/或設(shè)想的本發(fā)明的其他實施例中的任何一個中，和/或反之亦然。此外，在可 能的情況下，除非另行明確地陳述，否則在此以單數(shù)形式表述的任何術(shù)語意在還包括復(fù)數(shù) 形式和/或反之亦然。如在此所使用的，"至少一個"應(yīng)當(dāng)意味著"一個或多個"，并且這些 短語旨在是可互換的。因此，術(shù)語"一"和/或"一個"應(yīng)當(dāng)意味著"至少一個"或"一個或 多個"，即使在此也使用短語"一個或多個"或"至少一個"。類似的標(biāo)號自始至終指代類似 的元件。
[0058] 如本領(lǐng)域普通技術(shù)人員鑒于本公開將領(lǐng)會的，本發(fā)明可以包括和/或體現(xiàn)為裝置 (包括例如，系統(tǒng)、機器、設(shè)備、計算機程序產(chǎn)品和/或類似物)、方法(包括例如，商業(yè)方法、計 算機實現(xiàn)的過程和/或類似物)，或者前面各項的任何組合。因此，本發(fā)明的實施例可以采用 以下形式：完全為商業(yè)方法的實施例、完全為軟件的實施例(包括固件、駐留軟件、微代碼、 在數(shù)據(jù)庫中存儲的過程，等等)、完全為硬件的實施例，或者將商業(yè)方法、軟件和硬件方面相 結(jié)合的實施例，其一般來說在此可以被稱為"系統(tǒng)"。另外，本發(fā)明的實施例可以采用計算機 程序產(chǎn)品的形式，該計算機程序產(chǎn)品包括其中存儲有一個或多個計算機可執(zhí)行程序代碼部 分的計算機可讀存儲介質(zhì)。如在此所使用的，處理器(其可以包括一個或多個處理器）可以 被"配置為"以多種方式施行某個功能，包括例如，通過使一個或多個通用電路執(zhí)行體現(xiàn)在 計算機可讀介質(zhì)中的一個或多個計算機可執(zhí)行程序代碼部分來施行功能，和/或通過使一 個或多個專用電路施行功能。
[0059] 將理解，可以利用任何合適的計算機可讀介質(zhì)。計算機可讀介質(zhì)可以包括但不限 于非暫態(tài)計算機可讀介質(zhì)，諸如有形的電子的、磁的、光學(xué)的、電磁的、紅外的和/或半導(dǎo)體 系統(tǒng)、設(shè)備和/或其他裝置。舉例來說，在一些實施例中，非暫態(tài)計算機可讀介質(zhì)包括有形 介質(zhì)，諸如便攜式計算機磁盤、硬盤、隨機存取存儲器（RAM)、只讀存儲器（ROM)、可擦除可 編程只讀存儲器（EPROM或閃存)、緊致盤只讀存儲器（⑶-ROM)和/或一些其他有形的光學(xué) 的和/或磁的存儲設(shè)備。然而，在本發(fā)明的其他實施例中，計算機可讀介質(zhì)可以是暫態(tài)的， 諸如，例如包括其中體現(xiàn)的計算機可執(zhí)行程序代碼部分的傳播信號。
[0060] 用于實行本發(fā)明的操作的一個或多個計算機可執(zhí)行程序代碼部分可以包括面向 對象的、腳本的和/或非腳本的編程語言，諸如，例如Java、Perl、Smalltalk、C++、SAS、SQL、 Python、Objective C、JavaScript和/或類似物。在一些實施例中，用于實行本發(fā)明的實 施例的操作的一個或多個計算機可執(zhí)行程序代碼部分用常規(guī)的程序性編程語言(諸如"C" 編程語言和/或類似的編程語言）來編寫。計算機程序代碼可以替換地或附加地用一個或 多個多范式編程語言(諸如，例如F#)來編寫。
[0061] 在此參照裝置和/或方法的流程圖圖示和/或框圖來描述本發(fā)明的一些實施例。 將理解，包括在流程圖圖示和/或框圖中的每個塊，和/或包括在流程圖圖示和/或框圖中 的塊的組合，可以由一個或多個計算機可執(zhí)行程序代碼部分來實現(xiàn)。這些一個或多個計算 機可執(zhí)行程序代碼部分可以被提供給通用計算機、專用計算機和/或一些其他可編程數(shù)據(jù) 處理裝置的處理器以便產(chǎn)生特定的機器，使得一個或多個計算機可執(zhí)行程序代碼部分(其 經(jīng)由計算機和/或其他可編程數(shù)據(jù)處理裝置的處理器進行執(zhí)行）創(chuàng)建用于實現(xiàn)由（多個）流 程圖和/或框圖的(多個）塊所表示的步驟和/或功能。
[0062] -個或多個計算機可執(zhí)行程序代碼部分可以存儲在暫態(tài)和/或非暫態(tài)計算機可 讀介質(zhì)(例如，存儲器，等等)中，該暫態(tài)和/或非暫態(tài)計算機可讀介質(zhì)能夠引導(dǎo)、指令和/或 使計算機和/或其他可編程數(shù)據(jù)處理裝置以特定的方式運行，使得存儲在該計算機可讀介 質(zhì)中的計算機可執(zhí)行程序代碼部分產(chǎn)生包括指令機制的制造品，該指令機制實現(xiàn)(多個）流 程圖和/或框圖的(多個）塊中指定的步驟和/或功能。
[0063] 一個或多個計算機可執(zhí)行程序代碼部分還可以被裝載到計算機和/或其他可編 程數(shù)據(jù)處理裝置上以使得一系列操作步驟在該計算機和/或其他可編程裝置上被施行。在 一些實施例中，這產(chǎn)生了計算機實現(xiàn)的過程，使得在該計算機和/或其他可編程裝置上執(zhí) 行的一個或多個計算機可執(zhí)行程序代碼部分提供了操作步驟以實現(xiàn)(多個）流程圖中指定 的步驟和/或框圖的（多個）塊中指定的功能。可替換地，計算機實現(xiàn)的步驟可以與操作者 和/或人實現(xiàn)的步驟相結(jié)合，和/或由其取代，以便實行本發(fā)明的實施例。
[〇〇64] 雖然已經(jīng)描述了某些示例性實施例并將其示出在附圖中，但是要理解，這樣的實 施例對于本寬泛的發(fā)明僅是說明性的而非限制性的，并且本發(fā)明不限于所示出和描述的特 定構(gòu)造和布置，因為除在以上段落中闡述的那些之外，各種其他改變、組合、省略、更改和置 換是可能的。本領(lǐng)域技術(shù)人員將領(lǐng)會的是，可以配置剛剛描述的實施例的各種適配、更改和 組合而不脫離于本發(fā)明的范圍和精神。因此，要理解，在所附權(quán)利要求書的范圍內(nèi)，可以以 除了在此特別描述的之外的方式來實踐本發(fā)明。
【權(quán)利要求】
1. 一種用于注視追蹤的方法，所述方法包括： 使用投影儀將光導(dǎo)入眼睛，所述光形成圖案； 使用圖像捕獲模塊檢測來自與所述眼睛相關(guān)聯(lián)的至少一個表面的至少一個反射；以及 基于所檢測的反射確定與所述眼睛相關(guān)聯(lián)的視線。
2. 權(quán)利要求1的方法，其中所述光包括紅外光。
3. 權(quán)利要求1的方法，其中所述投影儀包括激光器或硅上液晶（LCoS)芯片中的至少 一個。
4. 權(quán)利要求1的方法，其中所述圖像捕獲模塊包括照相機或光學(xué)傳感器中的至少一 個。
5. 權(quán)利要求1的方法，其中所述至少一個表面包括與所述眼睛相關(guān)聯(lián)的角膜、視網(wǎng) 膜、虹膜或晶狀體中的至少一個。
6. 權(quán)利要求1的方法，其中所述投影儀和所述圖像捕獲模塊被包括在頭戴設(shè)備內(nèi)。
7. 權(quán)利要求6的方法，其中所述頭戴設(shè)備包括眼鏡、護目鏡或頭盔中的至少一個。
8. 權(quán)利要求6的方法，其中所述頭戴設(shè)備包括顯示器，并且其中所述方法還包括使用 所述投影儀將圖像投影到所述顯示器上。
9. 權(quán)利要求8的方法，還包括至少部分地基于所述眼睛與第二眼睛之間的瞳孔間距 離來調(diào)節(jié)所述圖像。
10. 權(quán)利要求1的方法，還包括確定瞳孔的至少一個部分的位置。
11. 權(quán)利要求1的方法，其中所述圖案具有四邊形的形狀。
12. 權(quán)利要求1的方法，其中所述投影儀包括非暫態(tài)存儲器，所述存儲器存儲至少一 個圖案，并且其中所述投影儀至少部分地基于所述眼睛的至少一個部分與該部分基本上中 心的位置的距離來選擇圖案或者為所述圖案選擇投影位置。
13. 權(quán)利要求1的方法，還包括： 更改以下各項中的至少一個：所述至少一個反射的大小、與所述至少一個反射相關(guān)聯(lián) 的形狀、與所述至少一個反射相關(guān)聯(lián)的強度或反射的量。
14. 一種用于注視追蹤的頭戴系統(tǒng)，所述系統(tǒng)包括： 至少一個顯示器； 第一投影儀，用于將光導(dǎo)入第一眼睛并用于將第一圖像投影到所述至少一個顯示器 上；以及 第一圖像捕獲模塊，用于檢測來自與所述第一眼睛相關(guān)聯(lián)的至少一個表面的至少一個 反射，并且基于所檢測的反射確定與所述第一眼睛相關(guān)聯(lián)的視線。
15. 權(quán)利要求14的系統(tǒng)，還包括： 第二投影儀，用于將光導(dǎo)入第二眼睛并用于將第二圖像投影到所述至少一個顯示器 上；以及 第二圖像捕獲模塊，用于檢測來自與所述第二眼睛相關(guān)聯(lián)的至少一個表面的至少一個 反射，并且基于所檢測的反射確定與所述第二眼睛相關(guān)聯(lián)的視線。
16. 權(quán)利要求15的系統(tǒng)，其中所述第一圖像捕獲模塊確定與所述第一眼睛相關(guān)聯(lián)的 基本上中心的部分，并且其中所述第二圖像捕獲模塊確定與所述第二眼睛相關(guān)聯(lián)的基本上 中心的部分。
17. 權(quán)利要求16的系統(tǒng)，還包括處理器，其至少部分地基于所確定的與所述第一眼睛 相關(guān)聯(lián)的基本上中心的部分和所確定的與所述第二眼睛相關(guān)聯(lián)的基本上中心的部分來確 定所述第一眼睛的瞳孔與所述第二眼睛的瞳孔之間的距離。
18. 權(quán)利要求17的系統(tǒng)，其中所述第一投影儀至少部分地基于所述第一眼睛與所述 第二眼睛之間的瞳孔間距離來調(diào)節(jié)所述第一圖像，并且其中所述第二投影儀至少部分地基 于所述瞳孔間距離來調(diào)節(jié)所述第二圖像。
19. 一種用于調(diào)節(jié)與頭戴系統(tǒng)相關(guān)聯(lián)的至少一個顯示器上的圖像的方法，所述方法包 括： 將第一投影儀用于將第一圖像投影到所述至少一個顯示器上； 將第二投影儀用于將第二圖像投影到所述至少一個顯示器上； 將第一圖像捕獲模塊用于確定與第一眼睛相關(guān)聯(lián)的基本上中心的部分； 將第二圖像捕獲模塊用于確定與第二眼睛相關(guān)聯(lián)的基本上中心的部分； 至少部分地基于所確定的與所述第一眼睛相關(guān)聯(lián)的基本上中心的部分和所確定的與 所述第二眼睛相關(guān)聯(lián)的基本上中心的部分來確定所述第一眼睛與所述第二眼睛之間的距 離； 至少部分地基于所確定的所述第一眼睛與所述第二眼睛之間的距離來調(diào)節(jié)所述第一 圖像；以及 至少部分地基于所確定的所述第一眼睛與所述第二眼睛之間的距離來調(diào)節(jié)所述第二 圖像。
20. 權(quán)利要求19的方法，其中所述第一投影儀將所述第一圖像、并且所述第二投影儀 將所述第二圖像投影到現(xiàn)實世界環(huán)境的基本上實況的視圖上。
【文檔編號】G06F3/01GK104094197SQ201380008249
【公開日】2014年10月8日 申請日期:2013年1月3日 優(yōu)先權(quán)日:2012年2月6日
【發(fā)明者】P-A.阿倫松 申請人:索尼愛立信移動通訊股份有限公司