或者句子等。
[0068]3)根據(jù)所述POI地址進(jìn)行檢索，得到檢索結(jié)果;可選擇地對(duì)POI地址進(jìn)行調(diào)用，
[0069]比如，語(yǔ)音為“王府井”，則POI地址則為名稱；又比如語(yǔ)音為“商場(chǎng)步行街”，則POI地址則為類別。再比如語(yǔ)音為“北瑋39.9，東經(jīng)116.4”，則POI地址則為經(jīng)度瑋度，再比如語(yǔ)音為“去附近的肯德基”，則POI地址則為附近商業(yè)信息。
[0070]4)將所述檢索結(jié)果進(jìn)行反饋，等待用戶下一次語(yǔ)音信號(hào);所述反饋的檢索結(jié)果可能包括多個(gè)檢索結(jié)果，需要等待用戶下一次語(yǔ)音信號(hào)進(jìn)行再次的選擇；
[0071]比如，第一輪的語(yǔ)音信號(hào)為“上午和王小姐見(jiàn)面的肯德基餐廳”，得到的結(jié)果為反饋的檢索結(jié)果，可能包括:
[0072]“中關(guān)村肯德基餐廳”
[0073]“海淀黃莊肯德基餐廳”
[0074]“人民大學(xué)肯德基餐廳”
[0075]等待用戶下一次語(yǔ)音信號(hào)，用戶可以選擇比如“查看日程安排表”對(duì)查詢結(jié)果與日程安排表中的信息進(jìn)行交叉檢索后再反饋結(jié)果，比如在日程安排表中記錄有與王小姐在中關(guān)村見(jiàn)面，則會(huì)將查詢結(jié)果反饋至用戶。
[0076]5)根據(jù)所述下一次語(yǔ)音信號(hào)，在所述反饋的結(jié)果中選擇定位出目的地，完成導(dǎo)航。下一次語(yǔ)音信號(hào)用以確定最后的目的地，在下一次語(yǔ)音信號(hào)中包括但不限于:指令直接結(jié)束對(duì)話的結(jié)束指令，再次進(jìn)行選擇的選擇指令。
[0077]具體地，所述自然語(yǔ)音信息的喚醒包括如下步驟:
[0078]對(duì)駕駛者進(jìn)行語(yǔ)音消息監(jiān)聽(tīng)，根據(jù)所述語(yǔ)音消息識(shí)別出喚醒語(yǔ)音信息，可以按照如下的方式進(jìn)行操作:通過(guò)自定義消息建立語(yǔ)音激活庫(kù)，所述自定義消息包括，單音節(jié)詞或多音節(jié)詞，若監(jiān)聽(tīng)到匹配的自定義消息，且滿足設(shè)定的喚醒語(yǔ)音信息條件，則直接進(jìn)行喚醒后等待。更進(jìn)一步，作為本實(shí)施例中的優(yōu)選，在不向用戶提出詢問(wèn)的情況下將語(yǔ)音輸入傳輸給自動(dòng)的語(yǔ)音識(shí)別系統(tǒng)中的語(yǔ)音激活庫(kù)，用以生成語(yǔ)言文本(即語(yǔ)音的對(duì)應(yīng)文字翻譯)。獲取語(yǔ)音輸入可以根據(jù)車輛內(nèi)部的檢測(cè)裝置，例如帶有聯(lián)接在下游的信號(hào)處理裝置的收音麥克風(fēng)，接收用戶的語(yǔ)音輸入。通過(guò)將駕駛員發(fā)出的語(yǔ)音轉(zhuǎn)換為第一數(shù)字信息后，將第一數(shù)字信息發(fā)送到預(yù)先存儲(chǔ)有語(yǔ)音資料數(shù)據(jù)庫(kù)的儲(chǔ)存單元中，通過(guò)服務(wù)器中設(shè)置的語(yǔ)音資料數(shù)據(jù)庫(kù)對(duì)得到的語(yǔ)音進(jìn)行識(shí)別，將語(yǔ)音資料數(shù)據(jù)庫(kù)設(shè)置在專門的中，所以語(yǔ)音資料數(shù)據(jù)庫(kù)的存儲(chǔ)容量不再受車載存儲(chǔ)器的限制，而且儲(chǔ)存單元的存儲(chǔ)容量可以擴(kuò)展，且避免了車載存儲(chǔ)器中由于存儲(chǔ)了多媒體數(shù)據(jù)和車載導(dǎo)航系統(tǒng)的導(dǎo)航地圖對(duì)存儲(chǔ)器存儲(chǔ)空間的占用而導(dǎo)致存儲(chǔ)語(yǔ)音資料數(shù)據(jù)庫(kù)的存儲(chǔ)空間進(jìn)一步不足的缺陷，使得語(yǔ)音資料數(shù)據(jù)庫(kù)中可以盡可能多的存儲(chǔ)不同口音的駕駛員的語(yǔ)音資料，所以增加了對(duì)不同口音駕駛員發(fā)出語(yǔ)音的識(shí)別可能性，提高了車載語(yǔ)音識(shí)別交互系統(tǒng)的實(shí)用性。hud中配置有ARM^Scpu，內(nèi)存ig ram，能夠保證對(duì)上述語(yǔ)音資料識(shí)別的處理速度。另外，HUD配置的8G ROM，并且能夠支持Micro SD(TF)儲(chǔ)存卡，最大支持32、64、128G，對(duì)語(yǔ)音資料數(shù)據(jù)庫(kù)的儲(chǔ)存提供保證。作為本實(shí)施例中的優(yōu)選，自然語(yǔ)音交互組件105還包括，降噪模塊1053。具體地，所述降噪模塊1053包括雙麥克風(fēng)降噪，樓氏高信噪比硅麥，通過(guò)將ADC(模數(shù)轉(zhuǎn)換器)集成到麥克風(fēng)中，使麥克風(fēng)自身能夠提供數(shù)字輸出，以減小噪聲干擾。
[0079]所屬領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解:以上，所述僅為本發(fā)明的具體實(shí)施例而已，并不用于限制本發(fā)明，凡在本發(fā)明的精神和原則之內(nèi)，所做的任何修改、等同替換、改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
【主權(quán)項(xiàng)】
1.一種智能抬頭顯示系統(tǒng)，其特征在于，包括，顯示組件，圖像采集組件，自然語(yǔ)音交互組件，傳感器組件以及處理器組件， 所述顯示組件包括，投影模塊、成像裝置和反射裝置，所述投影模塊，用以發(fā)射光線;所述成像裝置，用以接收所述投影模塊的發(fā)射光線，并通過(guò)兩次反射后將畫(huà)面進(jìn)行成像，并發(fā)射到投影模塊;所述反射裝置，用以將所述畫(huà)面成像放大后再成像； 所述圖像采集組件包括，第一攝像裝置，第二攝像裝置，駕駛員狀態(tài)監(jiān)測(cè)系統(tǒng)，駕駛環(huán)境監(jiān)測(cè)系統(tǒng)，所述第一攝像裝置，用以獲取駕駛員行車狀態(tài)信息，所述第二攝像裝置，用以獲取車輛周圍的狀態(tài)信息，所述駕駛員狀態(tài)監(jiān)測(cè)系統(tǒng)，用以根據(jù)第一攝像裝置獲取的信息進(jìn)行駕駛員狀態(tài)監(jiān)控;所述駕駛環(huán)境監(jiān)測(cè)系統(tǒng)，用以根據(jù)第二攝像裝置獲取的車輛周圍狀態(tài)進(jìn)行駕駛環(huán)境監(jiān)測(cè)； 所述自然語(yǔ)音交互組件包括，麥克風(fēng)和語(yǔ)音處理模塊，所述麥克風(fēng)用以傳遞駕駛員的自然語(yǔ)音信息至所述語(yǔ)音處理模塊，所述語(yǔ)音處理模塊用以進(jìn)行自然語(yǔ)音信息的識(shí)別、合成以及邏輯對(duì)話，以及自然語(yǔ)音信息的喚醒； 所述傳感器組件，包括，光照感應(yīng)裝置，用于獲取駕駛環(huán)境中的光照值； 所述處理器組件，包括，處理裝置，用于根據(jù)獲取駕駛員行車狀態(tài)信息，形成圖像數(shù)據(jù)，如果所述圖像數(shù)據(jù)不滿足預(yù)定的手勢(shì)圖像標(biāo)準(zhǔn)，則不對(duì)所述的圖像數(shù)據(jù)進(jìn)行儲(chǔ)存;若滿足，則對(duì)所述圖像數(shù)據(jù)進(jìn)行儲(chǔ)存后輸出手勢(shì)指令，以及用于根據(jù)所述光照值，判斷是否開(kāi)啟補(bǔ)償光照;若是，則開(kāi)啟補(bǔ)償光照射并再次獲取駕駛環(huán)境中的圖像數(shù)據(jù)； 所述顯示組件與所述圖像采集組件連接，所述傳感器組件與所述處理器組件連接，所述圖像采集組件與所述處理器組件連接。2.根據(jù)權(quán)利要求1所述的智能抬頭顯示系統(tǒng)，其特征在于，還包括地圖接入模塊，用以根據(jù)語(yǔ)音信息交互生成行車導(dǎo)航指令，根據(jù)所述行車導(dǎo)航指令建立起始位置和目的地的導(dǎo)航路線，將所述導(dǎo)航路線采用精簡(jiǎn)方式進(jìn)行顯示，所述導(dǎo)航路線包括行車路線查詢和行車路線規(guī)劃；當(dāng)從所述起始位置開(kāi)始行駛時(shí)至目的地時(shí)，采用自動(dòng)縮放方式進(jìn)行顯示;根據(jù)所述行車導(dǎo)航指令將導(dǎo)航線路按照線路分級(jí)的方式進(jìn)行顯示。3.根據(jù)權(quán)利要求1所述的智能抬頭顯示系統(tǒng)，其特征在于，還包括基于視覺(jué)和語(yǔ)音的智能性別、情緒識(shí)別檢測(cè)系統(tǒng)，個(gè)性化智能語(yǔ)音交互系統(tǒng)，根據(jù)人臉圖像進(jìn)行車內(nèi)人員的情緒識(shí)別，以及根據(jù)人臉進(jìn)行車內(nèi)人員的性別識(shí)別;根據(jù)人的語(yǔ)音進(jìn)行車內(nèi)人員的情緒識(shí)別，以及根據(jù)語(yǔ)音進(jìn)行車內(nèi)人員的性別識(shí)別；用以將所述性別識(shí)別的結(jié)果進(jìn)行匹配并發(fā)送到個(gè)性化智能語(yǔ)音交互系統(tǒng)，以及用以將所述情緒識(shí)別的結(jié)果進(jìn)行融合并發(fā)送到個(gè)性化智能語(yǔ)音交互系統(tǒng);根據(jù)接收到的匹配結(jié)果和融合結(jié)果進(jìn)行語(yǔ)音交互。4.根據(jù)權(quán)利要求1所述的智能抬頭顯示系統(tǒng)，其特征在于，所述傳感器組件還包括，采集單元，用以檢測(cè)車內(nèi)光照亮度，用戶偏好單元，用以設(shè)置用戶偏好，自調(diào)節(jié)單元，用以根據(jù)上述的光照亮度采集得到光線強(qiáng)度信號(hào)進(jìn)行自調(diào)節(jié)以及用以根據(jù)上述的用戶偏好設(shè)置亮度偏好進(jìn)行自調(diào)節(jié);顯示單元，用于顯示自調(diào)節(jié)亮度。5.根據(jù)權(quán)利要求1所述的智能抬頭顯示系統(tǒng)，其特征在于，所述傳感器組件還包括，手勢(shì)監(jiān)測(cè)識(shí)別模塊，用以對(duì)駕駛者進(jìn)行手勢(shì)檢測(cè)，根據(jù)所述手勢(shì)識(shí)別出觸發(fā)動(dòng)作信息，語(yǔ)音監(jiān)聽(tīng)識(shí)別模塊，用以對(duì)駕駛者進(jìn)行語(yǔ)音消息監(jiān)聽(tīng)，根據(jù)所述語(yǔ)音消息識(shí)別出喚醒語(yǔ)音信息，按鍵監(jiān)測(cè)模塊，用以對(duì)關(guān)聯(lián)的按鍵進(jìn)行監(jiān)控，若監(jiān)控到按鍵觸發(fā)信息，則進(jìn)行匹配，喚醒模塊，用以對(duì)所述觸發(fā)動(dòng)作信息或者喚醒語(yǔ)音信息進(jìn)行匹配，若任意信息匹配成功，則進(jìn)行喚醒。6.根據(jù)權(quán)利要求1所述的智能抬頭顯示系統(tǒng)，其特征在于，所述傳感器組件還包括，語(yǔ)音識(shí)別模塊，用以接收用戶發(fā)送的語(yǔ)音信號(hào);查詢模塊，用以根據(jù)所述語(yǔ)音信號(hào)得到用戶輸入的POI地址；顯示輸出模塊，用以根據(jù)所述POI地址進(jìn)行檢索，得到檢索結(jié)果;語(yǔ)音交互模塊，用以將所述檢索結(jié)果進(jìn)行反饋，等待用戶下一次語(yǔ)音信號(hào);根據(jù)所述下一次語(yǔ)音信號(hào)，在所述反饋的結(jié)果中選擇定位出目地，完成導(dǎo)航。7.根據(jù)權(quán)利要求1所述的智能抬頭顯示系統(tǒng)，其特征在于，所述處理器組件還包括，喚醒指令處理模塊、導(dǎo)航指令處理模塊，電話指令處理模塊，音樂(lè)指令處理模塊，微信指令處理模塊，包括用語(yǔ)音指令選擇目的地指令、判斷是否躲避擁堵路線指令、導(dǎo)航來(lái)源指令、行車路況指令、電子狗指令;喚醒指令處理模塊，用以喚醒休眠的抬頭顯示器;電話指令，可發(fā)出電話指令進(jìn)行語(yǔ)音控制接聽(tīng)、撥出電話，當(dāng)被呼叫方存號(hào)多于一個(gè)的時(shí)候，可以語(yǔ)音選擇;音樂(lè)指令，根據(jù)語(yǔ)音操作，可以播放SD卡的音樂(lè)，或者播放電臺(tái)內(nèi)容;微信指令，可提前通過(guò)掃碼登陸微信，收到微信時(shí)會(huì)有語(yǔ)音提示是否播報(bào)，回復(fù)時(shí)通過(guò)語(yǔ)音輸入、識(shí)別轉(zhuǎn)換成文字。8.根據(jù)權(quán)利要求1所述的智能抬頭顯示系統(tǒng)系統(tǒng)，其特征在于，還包括通過(guò)無(wú)線連接或者有線連接的外接設(shè)備，所述外接設(shè)備包括智能移動(dòng)終端，行車記錄儀，汽車OBD設(shè)備。9.根據(jù)權(quán)利要求1所述的智能抬頭顯示系統(tǒng)，其特征在于，所述傳感器組件，還包括，方向傳感器、加速度傳感器、GPS、溫度傳感器以及地磁傳感器，所述溫度傳感器用以感應(yīng)車內(nèi)的溫度并進(jìn)行散熱，所述地磁傳感器用以檢測(cè)方向，所述方向傳感器用以判斷車輛前進(jìn)或倒退的方向以及測(cè)試汽車行駛距離，所述加速度傳感器用以車輛的制動(dòng)、啟動(dòng)檢測(cè)，所述GPS用以定位車輛位置以及地圖接入。10.根據(jù)權(quán)利要求1所述的智能抬頭顯示系統(tǒng)，其特征在于，所述顯示組件包括包括底座，反射屏，LCD顯示裝置和反射鏡，在所述底座的上側(cè)設(shè)置有LCD顯示裝置，用以顯示車輛的信息圖像，并將信息圖像投射至所述反射鏡，所述反射鏡相對(duì)于所述LCD顯示裝置在水平方向上呈傾斜設(shè)置，用以接收所述信息圖像后進(jìn)行反射，在所述底座的左側(cè)設(shè)置有反射屏，用以放大并顯示信息圖像。
【專利摘要】本發(fā)明公開(kāi)了一種智能抬頭顯示系統(tǒng)，包括，顯示組件，圖像采集組件，自然語(yǔ)音交互組件，傳感器組件以及處理器組件，所述顯示組件與所述圖像采集組件連接，所述傳感器組件與所述處理器組件連接，所述圖像采集組件與所述處理器組件連接。相比現(xiàn)在的抬頭顯示系統(tǒng)，本發(fā)明能夠支持更多的交互控制，交互采用語(yǔ)音方案。同時(shí)能夠安裝各類第三方應(yīng)用，擴(kuò)展豐富功能。更進(jìn)一步，本發(fā)明的智能抬頭顯示系統(tǒng)搭載豐富的傳感器，能夠連接外部設(shè)備。另外，本發(fā)明具備朝向車內(nèi)的攝像頭模塊，能夠識(shí)別駕駛員行為和狀態(tài)，可以實(shí)現(xiàn)安全駕駛提示功能和交互控制功能。
【IPC分類】G02B27/01, G06F3/01
【公開(kāi)號(hào)】CN105527710
【申請(qǐng)?zhí)枴緾N201610012601
【發(fā)明人】王艷龍, 馬斌斌, 苗順平
【申請(qǐng)人】北京樂(lè)駕科技有限公司
【公開(kāi)日】2016年4月27日
【申請(qǐng)日】2016年1月8日