[0019]此外，本實用新型的上述具有3D攝像組件的電子設備的實時性強，能夠適合即時 交互需求的場合。
[0020] 通過以下結(jié)合附圖對本實用新型的最佳實施例的詳細說明，本實用新型的這些以 及其他優(yōu)點將更加明顯。
【附圖說明】
[0021] 本實用新型可以通過參考下文中結(jié)合附圖所給出的描述而得到更好的理解，其中 在所有附圖中使用了相同或相似的附圖標記來表示相同或者相似的部件。所述附圖連同下 面的詳細說明一起包含在本說明書中并且形成本說明書的一部分，而且用來進一步舉例說 明本實用新型的優(yōu)選實施例和解釋本實用新型的原理和優(yōu)點。在附圖中：
[0022] 圖1是示出本實用新型的具有3D攝像組件的電子設備的一個示例的結(jié)構(gòu)示意圖；
[0023]圖2是示出圖1中的特征點序列確定單元130的一個示例的結(jié)構(gòu)示意圖；
[0024]圖3是示出圖2中的模板匹配子單元220的一個示例的結(jié)構(gòu)示意圖；
[0025] 圖4是示出圖1中的動作識別單元140的一個示例的結(jié)構(gòu)示意圖；
[0026] 圖5是示出圖1中的手勢確定單元150的一個示例的結(jié)構(gòu)示意圖；
[0027]圖6是示出本實用新型的具有3D攝像組件的電子設備的另一個示例的結(jié)構(gòu)示意 圖。
[0028]本領域技術人員應當理解，附圖中的元件僅僅是為了簡單和清楚起見而示出的， 而且不一定是按比例繪制的。例如，附圖中某些元件的尺寸可能相對于其他元件放大了，以 便有助于提高對本實用新型實施例的理解。
【具體實施方式】
[0029] 在下文中將結(jié)合附圖對本實用新型的示范性實施例進行描述。為了清楚和簡明起 見，在說明書中并未描述實際實施方式的所有特征。然而，應該了解，在開發(fā)任何這種實際 實施例的過程中必須做出很多特定于實施方式的決定，以便實現(xiàn)開發(fā)人員的具體目標，例 如，符合與系統(tǒng)及業(yè)務相關的那些限制條件，并且這些限制條件可能會隨著實施方式的不 同而有所改變。此外，還應該了解，雖然開發(fā)工作有可能是非常復雜和費時的，但對得益于 本公開內(nèi)容的本領域技術人員來說，這種開發(fā)工作僅僅是例行的任務。
[0030] 在此，還需要說明的一點是，為了避免因不必要的細節(jié)而模糊了本實用新型，在附 圖中僅僅示出了與根據(jù)本實用新型的方案密切相關的裝置結(jié)構(gòu)和/或處理步驟，而省略了 與本實用新型關系不大的其他細節(jié)。
[0031]本實用新型的實施例提供了一種具有3D攝像組件的電子設備，該電子設備包括： 3D攝像單元、輪廓檢測單元、特征點序列確定單元、動作識別單元、手勢識別單元、指令確定 單元和執(zhí)行單元，所述3D攝像單元連接所述輪廓檢測單元，所述輪廓檢測單元連接所述特 征點序列確定單元，所述特征點序列確定單元連接所述動作識別單元，所述動作識別單元 連接所述手勢識別單元，所述手勢識別單元連接所述指令確定單元，所述指令確定單元連 接所述執(zhí)行單元;其中，所述3D攝像單元捕獲含有深度信息的使用者手部的待測圖像序列； 所述輪廓檢測單元根據(jù)圖像深度信息和圖像顏色信息，在所述待測圖像序列的每幀圖像中 檢測出所述使用者的手部輪廓;所述特征點序列確定單元針對所述使用者的每只手，利用 預設的手部結(jié)構(gòu)模板，在所述待測圖像序列的每幀圖像中確定該只手的待測特征點序列； 所述動作識別單元針對所述使用者的每只手，在多個預設特征點序列中確定該只手的待測 特征點序列的匹配序列，以根據(jù)所述匹配序列確定該只手的動作名稱和位置;所述手勢識 別單元在預設手勢表中選擇與所述使用者雙手的動作名稱和位置相匹配的手勢，作為已識 別手勢;所述指令確定單元根據(jù)預設操作指令表，確定與所述已識別手勢對應的操作指令； 所述執(zhí)行單元對與確定的操作指令相關的設備進行與該操作指令對應的操作。上述具有3D 攝像組件的電子設備例如可以是以下設備中的任一種:手機、多媒體播放設備、臺式機、筆 記本電腦以及平板電腦。
[0032]圖1示出了本實用新型的具有3D攝像組件的電子設備的一個示例的結(jié)構(gòu)示意圖。 如圖1所示，具有3D攝像組件的電子設備100包括3D攝像單元110、輪廓檢測單元120、特征點 序列確定單元130、動作識別單元140、手勢識別單元150、指令確定單元160以及執(zhí)行單元 170〇
[0033] 3D攝像單元110用于獲取含有深度信息的使用者手部的待測圖像序列。其中，3D攝 像單元110例如可以包括兩個3D攝像頭。3D攝像頭為包括可見光圖像傳感器和紅外圖像傳 感器的深度攝像頭，可見光圖像傳感器用于獲得可見光圖像序列丨丨，而紅外圖像傳 感器的深度攝像頭則用于獲得紅外圖像序列。
[0034] 輪廓檢測單元120用于根據(jù)圖像深度信息和圖像顏色信息，在待測圖像序列的每 幀圖像中檢測出使用者的手部輪廓。其中，檢測出的手部輪廓可能是雙手輪廓，也可能是單 手輪廊。
[0035]特征點序列確定單元130用于針對使用者的每只手，利用預設的手部結(jié)構(gòu)模板，在 待測圖像序列的每幀圖像中確定該只手的待測特征點序列
[0036]動作識別單元140用于針對使用者的每只手，在多個預設特征點序列中確定該只 手的待測特征點序列的匹配序列，以根據(jù)匹配序列確定該只手的動作名稱和位置。
[0037] 手勢確定單元150用于在預設手勢表中選擇與使用者雙手的動作名稱和位置相匹 配的手勢，作為已識別手勢。
[0038] 指令確定單元160用于根據(jù)預設操作指令表，確定與已識別手勢對應的操作指令。 [0039]執(zhí)行單元170用于對與確定的操作指令相關的設備進行與該操作指令對應的操 作。由此，將確定的操作指令發(fā)送到相關設備，能夠?qū)崿F(xiàn)對諸如移動計算設備的相關設備的 擬人化、自然化、非接觸的操作與控制。
[0040] 根據(jù)一種實現(xiàn)方式，3D攝像單元110可以用于:通過捕獲預定成像區(qū)域內(nèi)的使用者 手部的圖像，（例如可以利用深度攝像頭上的可見光圖像傳感器和紅外圖像傳感器)獲得可 見光圖像序列丨和紅外圖像序列(/丨(u)}，卩為可見光圖像序列第i幀圖像 坐標(X，y)處的像素值，而#(美為紅外圖像序列第i幀圖像坐標(X，y)處的像素值，根據(jù)如 下公式可以得到抽取使用者雙手信息的圖像序列：
[0041]
[0042] 其中，α、β、λ為預設參數(shù)閾值，這些預設參數(shù)閾值可以根據(jù)經(jīng)驗值來設定，也可以 通過試驗的方法來確定(例如通過實際使用特定型號的深度攝像頭采集到的樣本圖像訓練 得到），這里不再贅述。丨丨為獲取的含有深度信息的使用者雙手的圖像序列，作為上 述待測圖像序列。此外，i= 1，2，…，Μ，Μ為待測圖像序列中所包括的圖像幀數(shù)。
[0043] 需要說明的是，根據(jù)使用者手勢所使用的手數(shù)量的不同（單只或雙只），在預定成 像區(qū)域內(nèi)所捕獲的圖像可能是包含使用者雙手的圖像，也可能是僅包含使用者單只手的圖 像。另外，獲取的待測圖像序列可以是在一個時間段內(nèi)獲得的，該時間段可以預先根據(jù)經(jīng)驗 值設置，例如可為1 〇秒。
[0044] 根據(jù)一種實現(xiàn)方式，輪廓檢測單元120可以用于:針對待測圖像序列丨/丨(λ·,_)，)丨中的 每幀圖像4:以，力，結(jié)合顏色信息刪除該幀圖像4〇,/)中的噪聲點及非膚色區(qū)域，利用邊緣 檢測算子Ε(·)對刪除噪聲點和非膚色區(qū)域后所得到的圖像進行邊緣檢測，從而得 到邊緣圖像4(W):
[0045] /[, (.v，.v)二[(0，.!，)）
[0046] 邊緣圖像/^(Χ,.ν)即為僅包含使用者手部輪廓的圖像。
[0047]其中，在"結(jié)合顏色信息刪除該幀圖像中的噪聲點及非膚色區(qū)域"的處理過程中， 可以利用現(xiàn)有的去噪方法來刪除圖像中的噪聲點，并可以通過計算圖像療的均值來得到膚 色區(qū)域，則膚色區(qū)域之外的區(qū)域即為非膚色區(qū)域，即可實現(xiàn)對非膚色區(qū)域的刪除。例如，得 到圖像4的均值之后，在該均值上下浮動一個范圍，得到包含該均值的一個顏色范圍，當圖 像中某點的顏色值落在這個顏色范圍之內(nèi)，則將該點確定是膚色點，否則認為不是膚色點； 所有膚色點構(gòu)成膚色區(qū)域，其余為非膚色區(qū)域。
[0048] 由此，通過輪廓檢測單元120的處理，能夠快速檢測出使用者的手部