基于聲波探測(cè)輔助的智能眼鏡全方位車輛零部件完整性檢測(cè)方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明屬于零部件檢測(cè)領(lǐng)域，尤其涉及一種車輛零部件完整性檢測(cè)方法。
【背景技術(shù)】
[0002] 1、智能眼鏡是指像智能手機(jī)一樣，具有獨(dú)立的操作系統(tǒng)，可以由用戶安裝軟件、游 戲等軟件服務(wù)商提供的程序，可通過語音或動(dòng)作操作完成添加日程、地圖導(dǎo)航、與好友互 動(dòng)、拍照和視頻、與朋友展開視頻通話等功能，并可以通過移動(dòng)通訊網(wǎng)絡(luò)來實(shí)現(xiàn)無線網(wǎng)絡(luò)接 入的這樣一類眼鏡的總稱。
[0003] 寶馬公司日前推出了一款智能眼鏡產(chǎn)品，可以詳細(xì)"指導(dǎo)"人們維修車輛，只要用 戶看著故障發(fā)動(dòng)機(jī)，"智能眼鏡"就能向用戶顯示修理發(fā)動(dòng)機(jī)的步驟。
[0004]據(jù)悉，這款增強(qiáng)現(xiàn)實(shí)眼鏡是寶馬公司"增強(qiáng)現(xiàn)實(shí):現(xiàn)實(shí)的延伸"項(xiàng)目的一部分，其程 序中內(nèi)置了寶馬的所有車型，并且將不斷更新數(shù)據(jù)。用戶在佩戴這款眼鏡時(shí)，可以看到發(fā)動(dòng) 機(jī)的各個(gè)區(qū)域，操作指南位于眼鏡屏幕的左上角，而左下方會(huì)顯示工作中需要用到的工具， 每一個(gè)工具都標(biāo)有號(hào)碼，便于用戶查找。此外，這款眼鏡還配有耳機(jī)，并能讀取操作信息，維 修過程中，用戶可以根據(jù)眼前出現(xiàn)的3D動(dòng)畫拆卸相關(guān)零部件。
[0005] 寶馬公司表示，"借助增強(qiáng)現(xiàn)實(shí)技術(shù)，用戶可以直觀地看到其正在維修的發(fā)動(dòng)機(jī)的 相關(guān)信息和三維動(dòng)畫，幫助他判斷和消除故障。通過內(nèi)置耳機(jī)，維修者還可以聽到每一個(gè)操 作步驟的語音指示。"據(jù)了解，寶馬的這款智能眼鏡目前僅面向該公司的維修工程師推出。
[0006] 此前，增強(qiáng)現(xiàn)實(shí)公司Metaio曾為谷歌眼鏡的用戶帶來一款功能類似的應(yīng)用，其可 以通過內(nèi)置目鏡顯示操作指示，并利用電腦模型識(shí)別和覆蓋3D內(nèi)容。Metaio公司的技術(shù)人 員稱，"我們正在開發(fā)應(yīng)用于其他可穿戴設(shè)備上應(yīng)用軟件，當(dāng)你在駕駛途中，如果有一個(gè)信 號(hào)燈亮了，那么你就可以在應(yīng)用上基于不同信號(hào)來選擇應(yīng)對(duì)方案。
[0007] 2、智能眼鏡相比于其他的可穿戴設(shè)備，與人的視覺直接相聯(lián)系，以最直接，最快速 的方式作用于人的視覺感官，在視覺成像的同時(shí)提供輔助信息，寶馬公司的智能眼鏡針對(duì) 汽車維修服務(wù)以智能眼鏡為基礎(chǔ)提供專業(yè)教程，指導(dǎo)新手或者培訓(xùn)技師。
[0008] 由于智能眼鏡的特點(diǎn)，對(duì)于視覺圖像的分析已經(jīng)由于模式識(shí)別的發(fā)展功能上得到 了最大化的強(qiáng)化，對(duì)于技師的在車輛維修的同時(shí)提供全方位全視角的輔助。但是對(duì)于一些 零部件深層的故障或隱患除了憑借技師的經(jīng)驗(yàn)，單純的依靠智能眼鏡是無法檢查提前發(fā)現(xiàn) 進(jìn)行排查的，

【發(fā)明內(nèi)容】

[0009] 為了解決現(xiàn)有技術(shù)中智能眼鏡檢測(cè)零部件完整性存在局限性的問題，本發(fā)明提供 了一種基于聲波探測(cè)輔助的智能眼鏡全方位車輛零部件完整性檢測(cè)方法，可以對(duì)于零部件 的完整性進(jìn)行全面檢測(cè)。
[0010] 為了實(shí)現(xiàn)上述目的，本發(fā)明的技術(shù)方案是:基于聲波探測(cè)輔助的智能眼鏡全方位 車輛零部件完整性檢測(cè)方法，包括：
[0011] S1.智能眼鏡采集零部件的圖像，通過智能眼鏡所攜帶的無線傳輸模塊，將圖像數(shù) 據(jù)傳輸?shù)皆品?wù)器；
[0012] S2.智能眼鏡采集零部件的聲波，通過智能眼鏡所攜帶的無線傳輸數(shù)模塊，將聲波 數(shù)據(jù)傳輸?shù)皆品?wù)器；
[0013] S3.在云服務(wù)器上對(duì)智能眼鏡采集到的圖像進(jìn)行預(yù)處理；
[0014] S4.在云服務(wù)器上對(duì)智能眼鏡采集到的聲波數(shù)據(jù)進(jìn)行預(yù)處理，并采用小波變換確 定異常點(diǎn)的空間位置以及分布情況；
[0015] S5.預(yù)處理后的圖像，由技師在智能眼鏡上選定圖像區(qū)域，并將該區(qū)域的圖像與云 服務(wù)器的數(shù)據(jù)庫中的標(biāo)準(zhǔn)的零部件模型的圖像進(jìn)行輪廓匹配；
[0016] S6.在云服務(wù)器上將預(yù)處理過的聲波數(shù)據(jù)與數(shù)據(jù)庫中標(biāo)準(zhǔn)的零部件的聲波數(shù)據(jù)進(jìn) 行聲波匹配。
[0017] 進(jìn)一步的，所述方法還包括：
[0018] S7.云服務(wù)器對(duì)零部件進(jìn)行圖像和聲波的綜合診斷，分別提取圖像上的輪廓屬性、 顏色屬性、破損情況作為圖像屬性信息，提取聲波的振幅、頻率作為聲波屬性信息，所述圖 像屬性信息和聲波屬相信息作為診斷模型輸入?yún)?shù);對(duì)零部件的目前的狀態(tài)進(jìn)行診斷，得 到零部件為正常和異常的狀態(tài)信息。
[0019] 進(jìn)一步的，所述診斷模型為BP神經(jīng)網(wǎng)絡(luò)模型，正常和異常狀態(tài)信息是BP神經(jīng)網(wǎng)絡(luò) 對(duì)各種標(biāo)準(zhǔn)零部件和故障零部件訓(xùn)練得到。
[0020] 進(jìn)一步的，所述方法還包括：
[0021] S8.對(duì)零部件的未來狀態(tài)進(jìn)行預(yù)測(cè)，預(yù)測(cè)模型為神經(jīng)網(wǎng)絡(luò)，神經(jīng)網(wǎng)絡(luò)模型前期進(jìn)行 了海量樣本訓(xùn)練，所述樣本訓(xùn)練包括零部件的使用壽命、可能的異常情況，經(jīng)過樣本訓(xùn)練， 模型的輸入為圖像屬性信息和聲波屬相信息，神經(jīng)網(wǎng)絡(luò)算法自動(dòng)匹配到最相近的訓(xùn)練樣 本，得出零部件未來的預(yù)測(cè)信息。
[0022] 進(jìn)一步的，所述預(yù)處理包括降噪處理和奇異性檢測(cè)。
[0023]進(jìn)一步的，所述方法還包括：
[0024] S9.將云服務(wù)器的分析結(jié)果反映到智能眼鏡上的自帶屏幕上，并提供分析圖像和 聲波的分析的過程屬性數(shù)據(jù)以及分析過程，供技師選擇進(jìn)行相關(guān)內(nèi)容查看。
[0025]進(jìn)一步的，步驟S5中，智能眼鏡會(huì)提示感興趣區(qū)域供技師進(jìn)行選擇，或由技師指定 感興趣的區(qū)域，由智能眼鏡去定位，獲取感興趣區(qū)域的信息，基于圖像的匹配主要由canny 算法提取邊緣，對(duì)比零部件的邊緣完整性即可。
[0026] 有益效果：
[0027] 本發(fā)明為了技師適用智能眼鏡進(jìn)行車輛維修的同時(shí)以聲波輔助探測(cè)車輛內(nèi)部，對(duì) 于收到的聲波進(jìn)行分析，檢測(cè)車輛的零部件狀態(tài)，并與智能眼鏡檢測(cè)到的車輛零部件進(jìn)行 對(duì)比，輔助智能眼鏡的結(jié)果，對(duì)車輛零部件進(jìn)行完整的狀態(tài)評(píng)估。
[0028] 在智能眼鏡對(duì)車輛零部件進(jìn)行檢測(cè)的同時(shí)對(duì)車輛零部件進(jìn)行聲波分析，將圖像分 析的結(jié)果與聲音分析的結(jié)果相結(jié)合，以聲波的分析結(jié)果輔助圖像的分析結(jié)果，對(duì)車輛零部 件當(dāng)前狀態(tài)進(jìn)行評(píng)估，并對(duì)零部件的未來使用狀態(tài)進(jìn)行預(yù)測(cè)，從而在車輛零部件損壞之前 進(jìn)行拆卸更換，保障用戶的駕駛安全系數(shù)。
[0029] 常規(guī)的智能眼鏡檢測(cè)車輛零部件，對(duì)圖像進(jìn)行預(yù)處理，對(duì)于獲取的圖像進(jìn)行分析， 與正常狀態(tài)的零部件進(jìn)行對(duì)比，發(fā)現(xiàn)零件外部是否有變形；同時(shí)對(duì)零部件進(jìn)行聲波探測(cè)，探 測(cè)其內(nèi)部是否有異常，根據(jù)聲波與圖像的雙重分析結(jié)果對(duì)車輛零部件現(xiàn)狀進(jìn)行評(píng)估，并對(duì) 零部件的未來使用狀況進(jìn)行預(yù)測(cè)。
【附圖說明】
[0030] 圖1是實(shí)施例中所述方法實(shí)現(xiàn)的流程圖；
[0031] 圖2是非極大值抑制原理圖。
【具體實(shí)施方式】
[0032] 實(shí)施例1:基于聲波探測(cè)輔助的智能眼鏡全方位車輛零部件完整性檢測(cè)方法，其特 征在于，包括：
[0033] S1.智能眼鏡采集零部件的圖像，通過智能眼鏡所攜帶的無線傳輸模塊，將圖像數(shù) 據(jù)傳輸?shù)皆品?wù)器。
[0034] S2.智能眼鏡采集零部件的聲波，通過智能眼鏡所攜帶的無線傳輸數(shù)模塊，將聲波 數(shù)據(jù)傳輸?shù)皆品?wù)器。
[0035] S3.在云服務(wù)器上對(duì)智能眼鏡采集到的圖像進(jìn)行預(yù)處理。所述預(yù)處理包括降噪處 理和奇異性檢測(cè)，包括消除噪聲信息，去除奇異點(diǎn)，直方圖均衡化，均值濾波常規(guī)的圖像預(yù) 處理方法可以大幅度的降低圖像的噪聲點(diǎn)的影響。
[0036] S4.在云服務(wù)器上對(duì)智能眼鏡采集到的聲波數(shù)據(jù)進(jìn)行預(yù)處理，并采用小波變換進(jìn) 行處理，小波變換具有空間局部化性質(zhì)，可以確定異常點(diǎn)的空間位置以及分布情況。
[0037] S5.預(yù)處理后的圖像，由技師在智能眼鏡上選定圖像區(qū)域，并將該區(qū)域的圖像與云 服務(wù)器的數(shù)據(jù)庫中的標(biāo)準(zhǔn)的零部件模型的圖像進(jìn)行輪廓匹配;匹配后從圖像上檢測(cè)匹配是 否有缺失，從而確定該零部件的外部完整性。匹配是從圖像的角度出發(fā)，對(duì)零部件進(jìn)行 sobel邊緣檢測(cè)，匹配是將選定的零部件圖像與標(biāo)準(zhǔn)的零件輪廓(需要提前在庫中建立完成 零件的輪廓)進(jìn)行對(duì)比，將兩個(gè)邊緣模型重合在同一個(gè)三維空間上顯示，不同的邊緣可以明 顯顯示出來，匹配后可從圖像上看出不同，技師則可以采取相應(yīng)措施，sobel邊緣檢測(cè)由下 面兩個(gè)模版組成，分別對(duì)圖像中的每一個(gè)點(diǎn)用該模