本技術(shù)屬于智能穿戴設(shè)備，特別是涉及一種輔助交通駕駛的智能眼鏡、交通駕駛輔助系統(tǒng)及方法。

背景技術(shù)：

1、先天性色覺障礙通常稱為色盲，它不能分辨自然光譜中的各種顏色或某種顏色；而對顏色的辨別能力差的則稱色弱，色弱者，雖然能看到正常人所看到的顏色，但辨認(rèn)顏色的能力遲緩或很差，在光線較暗時，有的幾乎和色盲差不多，或表現(xiàn)為色覺疲勞，它與色盲的界限一般不易嚴(yán)格區(qū)分。色盲與色弱以先天性因素為多見。男性患者遠(yuǎn)多于女性患者。色盲和色弱者在生活中會有諸多不便，如不能很好的閱讀有紅色綠色標(biāo)志的地圖，建筑標(biāo)志，各種包裝產(chǎn)品。色盲色弱群體在交通活動中也面臨著諸多困難，如駕駛看不清紅綠色、交通考試顏色分辨困難等。

2、為了提高色盲色弱人的生活質(zhì)量和社會參與度，開發(fā)適合色盲色弱人使用的輔助器具成為了迫切的需求。

技術(shù)實(shí)現(xiàn)思路

1、本技術(shù)提供一種輔助交通駕駛的智能眼鏡、交通駕駛輔助系統(tǒng)及方法，用于輔助色盲色弱用戶活動。

2、第一方面，本技術(shù)實(shí)施例提供一種輔助交通駕駛的智能眼鏡，包括：鏡架主體，檢測模塊，控制模塊以及語音引導(dǎo)模塊；其中：所述鏡架主體包括鏡框和連接于所述鏡框兩側(cè)的第一鏡腿和第二鏡腿；所述檢測模塊包括設(shè)置于所述鏡框中間的音視頻傳感器和磁力計傳感器；所述控制模塊包括分別裝設(shè)于所述第一鏡腿和所述第二鏡腿的內(nèi)部的第一控制板、第二控制板以及裝設(shè)于所述第一鏡腿和所述第二鏡腿的外表面的至少一個功能按鍵；其中，所述音視頻傳感器和所述磁力計傳感器通過柔性電路板與所述第一控制板和/或所述第二控制板相連；所述控制模塊基于接收到的語音啟動指令控制所述音視頻傳感器啟動圖像采集，將從所述音視頻傳感器接收的視頻圖像數(shù)據(jù)和從所述磁力計傳感器接收到的地磁方向數(shù)據(jù)傳輸至用戶終端，并從所述用戶終端接收基于所述視頻圖像數(shù)據(jù)和所述地磁方向數(shù)據(jù)生成的語音導(dǎo)航數(shù)據(jù)和色盲色弱適配圖像；其中，所述用戶終端基于預(yù)先訓(xùn)練的圖像識別模型識別所述視頻圖像數(shù)據(jù)中的信號燈、前方車輛尾燈和/或高架信息，并基于所述視頻圖像數(shù)據(jù)中的信號燈、前方車輛尾燈和/或高架信息以及從磁力計傳感器獲取的地磁方向數(shù)據(jù)生成所述語音導(dǎo)航數(shù)據(jù)；所述用戶終端將所述視頻圖像數(shù)據(jù)由rgb色彩空間轉(zhuǎn)換為hsv色彩空間，并將h通道顏色范圍調(diào)整至(0，180)范圍，生成所述色盲色弱適配圖像；所述語音引導(dǎo)模塊與所述控制模塊相連，從所述控制模塊接收并播放所述語音導(dǎo)航數(shù)據(jù)，且于所述鏡框的鏡片上顯示所述色盲色弱適配圖像，以輔助色盲色弱用戶進(jìn)行交通駕駛。

3、在所述第一方面的一種實(shí)現(xiàn)方式中，所述控制模塊還從所述用戶終端接收顏色圖形識別語音數(shù)據(jù)和/或顏色圖形識別圖像，所述語音引導(dǎo)模塊播放所述顏色圖形識別語音數(shù)據(jù)，和/或于所述鏡框的鏡片上顯示所述顏色圖形識別圖像，以輔助色盲色弱用戶識別色盲色弱顏色識別測試考試；其中，所述用戶終端在檢測到所述視頻圖像數(shù)據(jù)中包含顏色測試圖片時，通過ocr識別方式識別所述顏色測試圖片中的顏色圖形，并在識別失敗時通過所述圖像識別模型以顏色識別方式識別所述顏色測試圖片中的顏色圖形，基于識別的所述顏色圖形生成顏色圖形識別語音數(shù)據(jù)和/或顏色圖形識別圖像，并將所述顏色圖形識別語音數(shù)據(jù)和/或顏色圖形識別圖像反饋至所述輔助交通駕駛的智能眼鏡。

4、在所述第一方面的一種實(shí)現(xiàn)方式中，所述第一鏡腿內(nèi)部的前端設(shè)置有第一控制板，后端設(shè)置有與所述第一控制板相連的第一電池模塊；所述第二鏡腿內(nèi)部的前端設(shè)置有第二控制板，后端設(shè)置有與所述第二控制板相連的第二電池模塊；其中，所述第一鏡腿位于所述第一控制板對應(yīng)的位置或者所述第二鏡腿位于所述第二控制板對應(yīng)的位置設(shè)置有為所述第一電池模塊和所述第二電池模塊充電的磁吸式充電接口。

5、在所述第一方面的一種實(shí)現(xiàn)方式中，所述語音引導(dǎo)模塊包括與所述第二控制板相連的耳機(jī)；所述第二鏡腿設(shè)置有供所述耳機(jī)的耳機(jī)線穿過的耳機(jī)孔，所述第二鏡腿外表面的底部設(shè)置有磁鐵，吸附所述耳機(jī)的耳塞部。

6、在所述第一方面的一種實(shí)現(xiàn)方式中，所述鏡框內(nèi)設(shè)置有容納所述柔性電路板的鏡框信號槽，所述第一鏡腿內(nèi)部設(shè)置有容納所述柔性電路板的第一鏡腿信號槽，所述第二鏡腿內(nèi)部設(shè)置有容納所述柔性電路板的第二鏡腿信號槽；所述鏡框信號槽、所述第一鏡腿信號槽以及所述第二鏡腿信號槽相連通。

7、在所述第一方面的一種實(shí)現(xiàn)方式中，所述鏡框的中間設(shè)有至少一個傳聲孔，所述傳聲孔上貼裝有透聲膜。

8、在所述第一方面的一種實(shí)現(xiàn)方式中，還包括：gps定位模塊；所述控制模塊從所述gps定位模塊接收gps數(shù)據(jù)，并將所述gps數(shù)據(jù)傳輸至所述用戶終端，以供所述用戶終端結(jié)合所述gps數(shù)據(jù)生成所述語音導(dǎo)航數(shù)據(jù)。

9、第二方面，本技術(shù)實(shí)施例提供一種交通駕駛輔助系統(tǒng)，包括：如上所述的輔助交通駕駛的智能眼鏡和與所述輔助交通駕駛的智能眼鏡無線通信的用戶終端；所述用戶終端用于：基于預(yù)先訓(xùn)練的圖像識別模型識別所述視頻圖像數(shù)據(jù)中的信號燈、前方車輛尾燈和/或高架信息，并基于所述視頻圖像數(shù)據(jù)中的信號燈、前方車輛尾燈和/或高架信息以及從磁力計傳感器獲取的地磁方向數(shù)據(jù)生成所述語音導(dǎo)航數(shù)據(jù)，并反饋給所述輔助交通駕駛的智能眼鏡；將所述視頻圖像數(shù)據(jù)由rgb色彩空間轉(zhuǎn)換為hsv色彩空間，并將h通道顏色范圍調(diào)整至(0，180)范圍，生成所述色盲色弱適配圖像，并反饋給所述輔助交通駕駛的智能眼鏡；基于從所述輔助交通駕駛的智能眼鏡接收到的所述視頻圖像數(shù)據(jù)、所述地磁方向數(shù)據(jù)以及gps數(shù)據(jù)生成導(dǎo)航數(shù)據(jù)，并反饋給所述輔助交通駕駛的智能眼鏡；檢測所述視頻圖像數(shù)據(jù)中是否包含顏色測試圖片，并在檢測到所述視頻圖像數(shù)據(jù)中包含顏色測試圖片時，通過ocr識別方式識別所述顏色測試圖片中的顏色圖形，在識別失敗時通過所述圖像識別模型以顏色識別方式識別所述顏色測試圖片中的顏色圖形，基于識別的所述顏色圖形生成顏色圖形識別語音數(shù)據(jù)和/或顏色圖形識別圖像，并將所述顏色圖形識別語音數(shù)據(jù)和/或顏色圖形識別圖像反饋至所述輔助交通駕駛的智能眼鏡。

10、第三方面，本技術(shù)實(shí)施例提供一種交通駕駛輔助方法，應(yīng)用于如上所述的交通駕駛輔助系統(tǒng)，包括：響應(yīng)于接收到語音啟動指令，開機(jī)啟動所述輔助交通駕駛的智能眼鏡，并啟動所述輔助交通駕駛的智能眼鏡中的音視頻傳感器，并將所述音視頻傳感器采集的視頻圖像數(shù)據(jù)、磁力計傳感器獲取的地磁方向數(shù)據(jù)以及gps數(shù)據(jù)傳輸至用戶終端；從所述用戶終端接收由所述用戶終端基于所述視頻圖像數(shù)據(jù)和所述地磁方向數(shù)據(jù)生成的語音導(dǎo)航數(shù)據(jù)和色盲色弱適配圖像；其中，所述用戶終端基于預(yù)先訓(xùn)練的圖像識別模型識別所述視頻圖像數(shù)據(jù)中的信號燈、前方車輛尾燈和/或高架信息，并基于所述視頻圖像數(shù)據(jù)中的信號燈、前方車輛尾燈和/或高架信息以及從磁力計傳感器獲取的地磁方向數(shù)據(jù)生成所述語音導(dǎo)航數(shù)據(jù)；所述用戶終端將所述視頻圖像數(shù)據(jù)由rgb色彩空間轉(zhuǎn)換為hsv色彩空間，并將h通道顏色范圍調(diào)整至(0，180)范圍，生成所述色盲色弱適配圖像；所述輔助交通駕駛的智能眼鏡播放所述語音導(dǎo)航數(shù)據(jù)，且于輔助交通駕駛的智能眼鏡上顯示所述色盲色弱適配圖像，以輔助色盲色弱用戶進(jìn)行交通駕駛。

11、在所述第三方面的一種實(shí)現(xiàn)方式中，在所述第一方面的一種實(shí)現(xiàn)方式中，還包括：訓(xùn)練所述圖像識別模型，包括：獲取色盲色弱測試圖片集和基于隨機(jī)算法自動生成的色卡圖片集，并基于所述色盲色弱測試圖片集和所述色卡圖片集構(gòu)建顏色數(shù)據(jù)訓(xùn)練集：使用所述顏色數(shù)據(jù)訓(xùn)練集對卷積神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練，生成所述圖像識別模型：將所述圖像識別模型每次的識別結(jié)果與實(shí)際圖片進(jìn)行對比，并基于對比結(jié)果更新所述圖像識別模型。

12、本技術(shù)實(shí)施例提供的輔助交通駕駛的智能眼鏡、交通駕駛輔助系統(tǒng)及方法，具有以下有益效果：

13、本技術(shù)中色盲色弱用戶通過語音控制智能眼鏡使用，智能眼鏡通過語音方式對色盲色弱人前方的紅綠燈和前方車輛進(jìn)行播報提示，且于智能眼鏡上顯示色盲色弱適配的前方圖像，有效輔助色盲色弱用戶進(jìn)行交通駕駛；同時本技術(shù)還可以對顏色測試圖片中的顏色圖形進(jìn)行識別，以輔助色盲色弱用戶識別色盲色弱顏色識別測試考試，并且可遠(yuǎn)程為色盲色弱人提供服務(wù)。本技術(shù)的輔助交通駕駛的智能眼鏡結(jié)構(gòu)新穎，使用簡單，可以有效引導(dǎo)色盲色弱人員進(jìn)行交通駕駛及考試，有效提高色盲色弱用戶的用戶體驗(yàn)。