本發(fā)明涉及圖像處理，具體涉及一種基于ai圖像處理方法和ar眼鏡的穿戴式夜視系統(tǒng)。

背景技術(shù)：

1、ar眼鏡是一種將虛擬圖像疊加在現(xiàn)實(shí)場景中的設(shè)備，用戶可以通過眼鏡看到虛擬現(xiàn)實(shí)與現(xiàn)實(shí)世界的混合，ar眼鏡中如攝像頭、陀螺儀、加速度計(jì)等，用于實(shí)時(shí)感知用戶的頭部姿態(tài)、位置和運(yùn)動(dòng)狀態(tài)，進(jìn)而配合ar眼鏡采集夜視圖像，在ar眼鏡的使用中ai圖像處理是配合使用的一個(gè)重要技術(shù)手段，特別是在ar眼鏡的夜視操作中，ai圖像處理能夠智能理解夜視全彩色圖像中的圖像內(nèi)容，然而目前ar眼鏡在夜視過程中需要對(duì)采集的夜視圖像進(jìn)行處理，但是由于ar眼鏡的位置通常是變動(dòng)的，因此在圖像處理上難以保證成像的效率以及質(zhì)量。

技術(shù)實(shí)現(xiàn)思路

1、本發(fā)明的目的是提供一種基于ai圖像處理方法和ar眼鏡的穿戴式夜視系統(tǒng)，以解決背景技術(shù)中不足。

2、為了實(shí)現(xiàn)上述目的，本發(fā)明提供如下技術(shù)方案：一種基于ai圖像處理方法，包括以下步驟：

3、獲取夜視圖像，基于夜視圖像提取空間特征，其中，空間特征包括夜視圖像中的特征信息，基于空間特征構(gòu)建環(huán)境模型；

4、獲取ar眼鏡的實(shí)時(shí)位置，根據(jù)實(shí)時(shí)位置對(duì)應(yīng)環(huán)境模型進(jìn)行圖像理解得到圖像信息，將圖像信息對(duì)環(huán)境模型進(jìn)行組合得到圖像模型；

5、將圖像模型對(duì)應(yīng)ar眼鏡的視角進(jìn)行對(duì)應(yīng)得到夜視影像。

6、在一個(gè)優(yōu)選的實(shí)施方式中，所述獲取夜視圖像的步驟，包括：

7、構(gòu)建空間模型，在空間模型上設(shè)置空間坐標(biāo)系；

8、基于ar眼鏡采集的圖像通過ai-isp技術(shù)將暗光圖像還原成全彩色圖像，提取全彩色圖像中的多個(gè)特征對(duì)應(yīng)空間坐標(biāo)系標(biāo)記在空間模型中；

9、將多個(gè)特征處在空間模型中的狀態(tài)作為夜視圖像。

10、在一個(gè)優(yōu)選的實(shí)施方式中，所述基于空間特征構(gòu)建環(huán)境模型的步驟，包括：

11、對(duì)夜視圖像中的特征進(jìn)行提取構(gòu)建夜視圖像中的特征信息作為空間特征，其中，特征信息為夜視圖像中特征的空間模型以及空間位置；

12、將夜視圖像中的特征通過對(duì)應(yīng)的空間特征進(jìn)行代替置于空間模型中，得到環(huán)境模型。

13、在一個(gè)優(yōu)選的實(shí)施方式中，所述將圖像信息對(duì)環(huán)境模型進(jìn)行組合得到圖像模型的步驟，包括：

14、實(shí)時(shí)獲取ar眼鏡所處的實(shí)時(shí)位置，根據(jù)ar眼鏡所處的實(shí)時(shí)位置配置新的空間模型，將新的空間模型與環(huán)境模型結(jié)合之后的模型作為組合模型；

15、基于環(huán)境模型中的空間坐標(biāo)系對(duì)組合模型進(jìn)行覆蓋；

16、對(duì)組合模型進(jìn)行空間特征的補(bǔ)充，對(duì)空間特征進(jìn)行空間定位；

17、根據(jù)ar眼鏡所處的實(shí)時(shí)位置以及ar眼鏡采集的全彩色圖像實(shí)時(shí)更新組合模型中的ar眼鏡和空間特征之間的采集關(guān)系；

18、將建立好ar眼鏡和空間特征之間采集關(guān)系的組合模型作為圖像模型。

19、在一個(gè)優(yōu)選的實(shí)施方式中，所述實(shí)時(shí)獲取ar眼鏡所處的實(shí)時(shí)位置，根據(jù)ar眼鏡所處的實(shí)時(shí)位置配置新的空間模型，將新的空間模型與環(huán)境模型結(jié)合之后的模型作為組合模型的步驟，包括：

20、實(shí)時(shí)獲取ar眼鏡所處的實(shí)時(shí)位置與上一個(gè)環(huán)境模型中心點(diǎn)之間的水平位移，將水平位移超出預(yù)設(shè)位移時(shí)匹配置新的空間模型；

21、將新的空間模型與環(huán)境模型的重合部分進(jìn)行合并，將新的空間模型與環(huán)境模型的不重合部分進(jìn)行重新構(gòu)建組合得到組合模型。

22、在一個(gè)優(yōu)選的實(shí)施方式中，所述對(duì)組合模型進(jìn)行空間特征的補(bǔ)充，對(duì)空間特征進(jìn)行空間定位的步驟，包括：

23、獲取新的空間模型與環(huán)境模型不重合部分的全彩色圖像，提取全彩色圖像中的多個(gè)特征對(duì)應(yīng)空間坐標(biāo)系標(biāo)記在組合模型中；

24、將組合模型中添加的多個(gè)特征進(jìn)行空間構(gòu)建得到組合模型中添加的空間特征，將組合模型中添加的空間特征代替對(duì)應(yīng)的特征置于空間模型中；

25、獲取組合模型中的多個(gè)空間模型的中心點(diǎn)，分別將多個(gè)空間模型的中心點(diǎn)向下進(jìn)行映射得到根點(diǎn)，建立根點(diǎn)與對(duì)應(yīng)的空間特征之間的空間定位。

26、在一個(gè)優(yōu)選的實(shí)施方式中，根據(jù)ar眼鏡所處的實(shí)時(shí)位置以及ar眼鏡采集的全彩色圖像實(shí)時(shí)更新組合模型中的ar眼鏡和空間特征之間的采集關(guān)系的步驟，包括：

27、將根點(diǎn)配置對(duì)應(yīng)的感應(yīng)點(diǎn)，基于感應(yīng)點(diǎn)將根點(diǎn)與ar眼鏡之間進(jìn)行連線；

28、根據(jù)ar眼鏡的實(shí)時(shí)位置對(duì)應(yīng)更新ar眼鏡與空間特征感應(yīng)點(diǎn)之間的連線得到ar眼鏡和空間特征之間的采集關(guān)系。

29、本發(fā)明還提供一種ar眼鏡的穿戴式夜視系統(tǒng)，包括：

30、獲取模塊，用于獲取夜視圖像，基于夜視圖像提取空間特征，其中，空間特征包括夜視圖像中的特征信息，基于空間特征構(gòu)建環(huán)境模型；

31、構(gòu)建模塊，與獲取模塊連接，用于獲取ar眼鏡的實(shí)時(shí)位置，根據(jù)實(shí)時(shí)位置對(duì)應(yīng)環(huán)境模型進(jìn)行圖像理解得到圖像信息，將圖像信息對(duì)環(huán)境模型進(jìn)行組合得到圖像模型；

32、成像模塊，與構(gòu)建模塊連接，用于將圖像模型對(duì)應(yīng)ar眼鏡的視角進(jìn)行對(duì)應(yīng)得到夜視影像。

33、在一個(gè)優(yōu)選的實(shí)施方式中，所述獲取模塊包括：

34、構(gòu)建單元，用于構(gòu)建空間模型，在空間模型上設(shè)置空間坐標(biāo)系；

35、標(biāo)記單元，用于基于ar眼鏡采集的圖像通過ai-isp技術(shù)將暗光圖像還原成全彩色圖像，提取全彩色圖像中的多個(gè)特征對(duì)應(yīng)空間坐標(biāo)系標(biāo)記在空間模型中；

36、管理單元，用于將多個(gè)特征處在空間模型中的狀態(tài)作為夜視圖像。

37、在一個(gè)優(yōu)選的實(shí)施方式中，所述獲取模塊還包括：

38、提取單元，用于對(duì)夜視圖像中的特征進(jìn)行提取構(gòu)建夜視圖像中的特征信息作為空間特征，其中，特征信息為夜視圖像中特征的空間模型以及空間位置；

39、設(shè)置單元，用于將夜視圖像中的特征通過對(duì)應(yīng)的空間特征進(jìn)行代替置于空間模型中，得到環(huán)境模型。

40、在上述技術(shù)方案中，本發(fā)明提供的技術(shù)效果和優(yōu)點(diǎn)：

41、本發(fā)明在采用環(huán)境模型的構(gòu)建手段對(duì)ar眼鏡在空間模型的范圍內(nèi)采集的全彩色圖像對(duì)組合模型進(jìn)行更新構(gòu)建，之后建立更新之后的組合模型中的ar眼鏡與空間特征之間的采集關(guān)系，將建立好ar眼鏡和空間特征之間采集關(guān)系的組合模型作為圖像模型，能夠得到ar眼鏡在夜視圖像展示效果，使得圖像能夠更加清晰的展示；

42、ar眼鏡變動(dòng)的過程中，ar眼鏡和感應(yīng)點(diǎn)之間的連線也會(huì)變化，由于提前構(gòu)建好了圖像模型，因此通過連線與ar眼鏡的角度關(guān)系，能夠便于后續(xù)根據(jù)ar眼鏡的視角快速且準(zhǔn)確的給出ar眼鏡采集的圖像模型中的圖像，能夠提高ar眼鏡的成像處理效率。

技術(shù)特征：

1.一種基于ai圖像處理方法，其特征在于，包括以下步驟：

2.根據(jù)權(quán)利要求1所述的一種基于ai圖像處理方法，其特征在于：所述獲取夜視圖像的步驟，包括：

3.根據(jù)權(quán)利要求1所述的一種基于ai圖像處理方法，其特征在于：所述基于空間特征構(gòu)建環(huán)境模型的步驟，包括：

4.根據(jù)權(quán)利要求1所述的一種基于ai圖像處理方法，其特征在于：所述將圖像信息對(duì)環(huán)境模型進(jìn)行組合得到圖像模型的步驟，包括：

5.根據(jù)權(quán)利要求4所述的一種基于ai圖像處理方法，其特征在于：所述實(shí)時(shí)獲取ar眼鏡所處的實(shí)時(shí)位置，根據(jù)ar眼鏡所處的實(shí)時(shí)位置配置新的空間模型，將新的空間模型與環(huán)境模型結(jié)合之后的模型作為組合模型的步驟，包括：

6.根據(jù)權(quán)利要求4所述的一種基于ai圖像處理方法，其特征在于：所述對(duì)組合模型進(jìn)行空間特征的補(bǔ)充，對(duì)空間特征進(jìn)行空間定位的步驟，包括：

7.根據(jù)權(quán)利要求4所述的一種基于ai圖像處理方法，其特征在于：根據(jù)ar眼鏡所處的實(shí)時(shí)位置以及ar眼鏡采集的全彩色圖像實(shí)時(shí)更新組合模型中的ar眼鏡和空間特征之間的采集關(guān)系的步驟，包括：

8.一種ar眼鏡的穿戴式夜視系統(tǒng)，用于實(shí)現(xiàn)權(quán)利要求1-7任一項(xiàng)所述的一種基于ai圖像處理方法，其特征在于，包括：

9.根據(jù)權(quán)利要求8所述的一種ar眼鏡的穿戴式夜視系統(tǒng)，其特征在于：所述獲取模塊包括：

10.根據(jù)權(quán)利要求8所述的一種ar眼鏡的穿戴式夜視系統(tǒng)，其特征在于：所述獲取模塊還包括：

技術(shù)總結(jié)
本發(fā)明公開了一種基于AI圖像處理方法和AR眼鏡的穿戴式夜視系統(tǒng)，涉及圖像處理技術(shù)領(lǐng)域，通過AI?ISP技術(shù)獲取夜視圖像，基于夜視圖像提取空間特征，其中，空間特征包括夜視圖像中的特征信息，基于空間特征構(gòu)建環(huán)境模型；獲取AR眼鏡的實(shí)時(shí)位置，根據(jù)實(shí)時(shí)位置對(duì)應(yīng)環(huán)境模型進(jìn)行圖像理解得到圖像信息，將圖像信息對(duì)環(huán)境模型進(jìn)行組合得到圖像模型；將圖像模型對(duì)應(yīng)AR眼鏡的視角進(jìn)行對(duì)應(yīng)得到夜視影像。本發(fā)明在AR眼鏡變動(dòng)的過程中，AR眼鏡和感應(yīng)點(diǎn)之間的連線也會(huì)變化，由于提前構(gòu)建好了圖像模型，因此通過連線與AR眼鏡的角度關(guān)系，能夠便于后續(xù)根據(jù)AR眼鏡的視角快速且準(zhǔn)確的給出AR眼鏡采集的圖像模型中的圖像，能夠提高AR眼鏡的成像處理效率以及成像質(zhì)量。

技術(shù)研發(fā)人員：王海平,趙國吉,呂明桀,嚴(yán)雁峰,吳建明,周光彬,呂猛,陳禮濱,韓彩麗
受保護(hù)的技術(shù)使用者：杭州平祥數(shù)字技術(shù)有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/19