所屬的技術人員能夠理解,本公開的各個方面可以實現(xiàn)為系統(tǒng)、方法或程序產品。因此,本公開的各個方面可以具體實現(xiàn)為以下形式,即:完全的硬件實施方式、完全的軟件實施方式(包括固件、微代碼等),或硬件和軟件方面結合的實施方式,這里可以統(tǒng)稱為“電路”、“模塊”或“系統(tǒng)”。下面參照圖8來描述根據本公開的這種實施方式的電子設備800。圖8顯示的電子設備800僅僅是一個示例,不應對本公開實施例的功能和使用范圍帶來任何限制。如圖8所示,電子設備800以通用計算設備的形式表現(xiàn)。電子設備800的組件可以包括但不限于:上述至少一個處理單元810、上述至少一個存儲單元820、連接不同系統(tǒng)組件(包括存儲單元820和處理單元810)的總線830。其中,所述存儲單元存儲有程序代碼,所述程序代碼可以被所述處理單元810執(zhí)行,使得所述處理單元810執(zhí)行本說明書上述“具體實施方式”部分中描述的根據本公開各種示例性實施方式的步驟。存儲單元820可以包括易失性存儲單元形式的可讀介質,例如隨機存取存儲單元(ram)8201和/或高速緩存存儲單元8202,還可以進一步包括只讀存儲單元(rom)8203。存儲單元820還可以包括具有一組(至少一個)程序模塊8205的程序/實用工具8204,這樣的程序模塊8205包括但不限于:操作系統(tǒng)、一個或者多個應用程序、其它程序模塊以及程序數據,這些示例中的每一個或某種組合中可能包括網絡環(huán)境的實現(xiàn)??偩€830可以為表示幾類總線結構中的一種或多種,包括存儲單元總線或者存儲單元控制器、外圍總線、圖形加速端口、處理單元或者使用多種總線結構中的任意總線結構的局域總線。電子設備800也可以與一個或多個外部設備840(例如鍵盤、指向設備、藍牙設備等)通信,還可與一個或者多個使得用戶能與該電子設備800交互的設備通信,和/或與使得該電子設備800能與一個或多個其它計算設備進行通信的任何設備(例如路由器、調制解調器等等)通信。這種通信可以通過輸入/輸出(i/o)接口850進行。并且,電子設備800還可以通過網絡適配器860與一個或者多個網絡(例如局域網(lan),廣域網(wan)和/或公共網絡,例如因特網)通信。如圖8所示,網絡適配器860通過總線830與電子設備800的其它模塊通信。應當明白,盡管圖中未示出,可以結合電子設備800使用其它硬件和/或軟件模塊,包括但不限于:微代碼、設備驅動器、冗余處理單元、外部磁盤驅動陣列、raid系統(tǒng)、磁帶驅動器以及數據備份存儲系統(tǒng)等。通過以上的實施方式的描述,本領域的技術人員易于理解,這里描述的示例實施方式可以通過軟件實現(xiàn),也可以通過軟件結合必要的硬件的方式來實現(xiàn)。因此,根據本公開實施方式的技術方案可以以軟件產品的形式體現(xiàn)出來,該軟件產品可以存儲在一個非易失性存儲介質(可以是cd-rom,u盤,移動硬盤等)中或網絡上,包括若干指令以使得一臺計算設備(可以是個人計算機、服務器、終端裝置、或者網絡設備等)執(zhí)行根據本公開實施方式的方法。在本公開的示例性實施例中,還提供了一種計算機可讀存儲介質,該計算機可讀存儲介質可以是可讀信號介質或者可讀存儲介質。其上存儲有能夠實現(xiàn)本公開上述方法的程序產品。在一些可能的實施方式中,本公開的各個方面還可以實現(xiàn)為一種程序產品的形式,其包括程序代碼,當所述程序產品在終端設備上運行時,所述程序代碼用于使所述終端設備執(zhí)行本說明書上述“具體實施方式”部分中描述的根據本公開各種示例性實施方式的步驟。本公開中的計算機可讀存儲介質的更具體的例子可以包括但不限于:具有一個或多個導線的電連接、便攜式計算機磁盤、硬盤、隨機訪問存儲器(ram)、只讀存儲器(rom)、可擦式可編程只讀存儲器(eprom或閃存)、光纖、便攜式緊湊磁盤只讀存儲器(cd-rom)、光存儲器件、磁存儲器件、或者上述的任意合適的組合。在本公開中,計算機可讀存儲介質可以包括在基帶中或者作為載波一部分傳播的數據信號,其中承載了可讀程序代碼。這種傳播的數據信號可以采用多種形式,包括但不限于電磁信號、光信號或上述的任意合適的組合??勺x信號介質還可以是可讀存儲介質以外的任何可讀介質,該可讀介質可以發(fā)送、傳播或者傳輸用于由指令執(zhí)行系統(tǒng)、裝置或者器件使用或者與其結合使用的程序。可選地,計算機可讀存儲介質上包含的程序代碼可以用任何適當的介質傳輸,包括但不限于無線、有線、光纜、rf等等,或者上述的任意合適的組合。在具體實施時,可以以一種或多種程序設計語言的任意組合來編寫用于執(zhí)行本公開操作的程序代碼,所述程序設計語言包括面向對象的程序設計語言—諸如java、c++等,還包括常規(guī)的過程式程序設計語言—諸如“c”語言或類似的程序設計語言。程序代碼可以完全地在用戶計算設備上執(zhí)行、部分地在用戶設備上執(zhí)行、作為一個獨立的軟件包執(zhí)行、部分在用戶計算設備上部分在遠程計算設備上執(zhí)行、或者完全在遠程計算設備或服務器上執(zhí)行。在涉及遠程計算設備的情形中,遠程計算設備可以通過任意種類的網絡,包括局域網(lan)或廣域網(wan),連接到用戶計算設備,或者,可以連接到外部計算設備(例如利用因特網服務提供商來通過因特網連接)。在本公開的示例性實施例中,還提供了一種計算機程序產品,計算機程序產品包括計算機程序或計算機指令,計算機程序或計算機指令由處理器加載并執(zhí)行,以使計算機實現(xiàn)本說明書上述“具體實施方式”部分中描述的根據本公開各種示例性實施方式的步驟。應當注意,盡管在上文詳細描述中提及了用于動作執(zhí)行的設備的若干模塊或者單元,但是這種劃分并非強制性的。實際上,根據本公開的實施方式,上文描述的兩個或更多模塊或者單元的特征和功能可以在一個模塊或者單元中具體化。反之,上文描述的一個模塊或者單元的特征和功能可以進一步劃分為由多個模塊或者單元來具體化。此外,盡管在附圖中以特定順序描述了本公開中方法的各個步驟,但是,這并非要求或者暗示必須按照該特定順序來執(zhí)行這些步驟,或是必須執(zhí)行全部所示的步驟才能實現(xiàn)期望的結果。附加的或備選的,可以省略某些步驟,將多個步驟合并為一個步驟執(zhí)行,以及/或者將一個步驟分解為多個步驟執(zhí)行等。通過以上實施方式的描述,本領域的技術人員易于理解,這里描述的示例實施方式可以通過軟件實現(xiàn),也可以通過軟件結合必要的硬件的方式來實現(xiàn)。因此,根據本公開實施方式的技術方案可以以軟件產品的形式體現(xiàn)出來,該軟件產品可以存儲在一個非易失性存儲介質(可以是cd-rom,u盤,移動硬盤等)中或網絡上,包括若干指令以使得一臺計算設備(可以是個人計算機、服務器、移動終端、或者網絡設備等)執(zhí)行根據本公開實施方式的方法。本領域技術人員在考慮說明書及實踐這里公開的發(fā)明后,將容易想到本公開的其它實施方案。本公開旨在涵蓋本公開的任何變型、用途或者適應性變化,這些變型、用途或者適應性變化遵循本公開的一般性原理并包括本公開未公開的本中的公知常識或慣用技術手段。說明書和實施例僅被視為示例性的,本公開的真正范圍由所附的權利要求指出。
背景技術:
1、在無線通信技術領域中,如何收集、感知、存儲和使用等數據處理過程是核心網的主要研究方向之一。
2、相關技術中,數據消費者設備向數據服務網元發(fā)送數據訂閱請求,該數據訂閱請求包括多個數據類型,之后由數據服務網元根據該對各數據類型進行數據的收集及存儲,以便于數據消費者設備從存儲數據的網元中獲取數據。
3、然而,簡單的對收集、存儲數據存在適應性差及數據處理效率低的問題。
4、需要說明的是,在上述背景技術部分公開的信息僅用于加強對本公開的背景的理解,因此可以包括不構成對本領域普通技術人員已知的現(xiàn)有技術的信息。
技術實現(xiàn)思路
1、本公開提供一種數據處理方法、裝置、電子設備及計算機可讀存儲介質,至少在一定程度上克服了相關技術中適應性差及數據處理效率低的問題。
2、本公開的其他特性和優(yōu)點將通過下面的詳細描述變得顯然,或部分地通過本公開的實踐而習得。
3、根據本公開的一個方面,提供一種數據處理方法,應用于第一數據服務網元,包括:接收第一數據訂閱請求,所述第一數據訂閱請求包括訂閱內容和數據處理輔助信息,所述訂閱內容包括多個數據類型,所述數據處理輔助信息用于標注所述多個數據類型中至少一個數據類型的屬性信息;根據所述數據處理輔助信息,生成所述多個數據類型中每一數據類型對應的第一數據規(guī)則,所述第一數據規(guī)則用于指示數據的處理方式;根據所述第一數據規(guī)則和所述訂閱內容,進行數據收集、處理及存儲。
4、在本公開的一個實施例中,所述根據所述第一數據規(guī)則和所述訂閱內容,進行數據收集、處理及存儲,包括:向第一數據感知設備發(fā)送所述訂閱內容和所述第一數據規(guī)則,以便于所述第一數據感知設備根據所述第一數據規(guī)則收集所述訂閱內容進行數據收集、處理及存儲;或者,向第二數據服務網元發(fā)送所述訂閱內容和所述第一數據規(guī)則,由所述第二數據服務網元對所述第一數據規(guī)則進行篩選,并將篩選出的第二數據規(guī)則及所述訂閱內容發(fā)往第二數據感知設備,以便于所述第二數據感知設備根據所述第二數據規(guī)則及所述訂閱內容進行數據收集及處理,并將處理后的第一處理數據發(fā)往所述第二數據服務網元,再由所述第二數據服務網元根據第三數據規(guī)則對所述第一處理數據進行處理,并對處理得到的第二處理數據進行存儲;其中,第三數據規(guī)則是第一數據規(guī)則中除所述第二數據規(guī)則外的數據規(guī)則。
5、在本公開的一個實施例中,所述接收第一數據訂閱請求,包括:接收第一數據消費者設備發(fā)送的第二數據訂閱請求,將所述第二數據訂閱請求作為所述第一數據訂閱請求;或者,接收第一人工智能/機器學習ai/ml分析網元發(fā)送的第三數據訂閱請求,將所述第三數據訂閱請求作為所述第一數據訂閱請求;其中,所述第三數據訂閱請求包括的數據處理輔助信息,由第一ai/ml分析網元對數據分析請求包括的數據處理輔助信息進行補充和/或修改得到,所述數據分析請求由第二數據消費者設備發(fā)往所述第一ai/ml分析網元。
6、在本公開的一個實施例中,所述第二數據訂閱請求包括的數據處理輔助信息對應的屬性信息包括:數據重要性等級、數據隔離等級、數據使用位置、數據存儲時長、數據可靠性等級、數據隱私等級、實時性等級中的一個或多個;所述第三數據訂閱請求包括的數據處理輔助信息對應的屬性信息包括:數據重要性等級、數據隔離等級、數據使用位置、數據存儲時長、數據常用性等級、數據可靠性等級、數據隱私等級、實時性等級中的一個或多個。
7、在本公開的一個實施例中,所述第一數據服務網元存儲有歷史規(guī)則分析信息;所述根據所述數據處理輔助信息,生成所述多個數據類型中每一數據類型對應的第一數據規(guī)則,所述第一數據規(guī)則用于指示數據的處理方式,包括:從第二ai/ml分析網元處獲取規(guī)則分析信息;根據分析信息對所述數據處理輔助信息進行更新,得到更新后的數據處理輔助信息,所述分析信息包括所述規(guī)則分析信息,或者,所述分析信息包括所述規(guī)則分析信息和所述歷史規(guī)則分析信息;根據規(guī)則生成消息,生成所述第一數據規(guī)則,所述規(guī)則生成消息包括所述更新后的數據處理輔助信息,或者,所述規(guī)則生成消息包括所述更新后的數據處理輔助信息和所述分析信息。
8、在本公開的一個實施例中,所述第一數據規(guī)則包括所述多個數據類型中每一數據類型的數據感知規(guī)則、數據處理規(guī)則和數據存儲規(guī)則中的至少一種;所述第一數據感知設備根據所述第一數據規(guī)則收集所述訂閱內容進行數據收集、處理及存儲,包括:所述第一數據感知設備根據所述數據感知規(guī)則收集所述訂閱內容對應的數據,以及根據所述數據處理規(guī)則對收集到的數據進行處理,并向數據存儲網元發(fā)送處理后的第三處理數據及所述數據存儲規(guī)則,以便于所述數據存儲網元基于所述數據存儲規(guī)則對所述第三處理數據進行存儲。
9、在本公開的一個實施例中,所述向第一數據感知設備發(fā)送所述訂閱內容和所述第一數據規(guī)則之前,還包括:根據所述數據處理輔助信息,確定所述數據存儲網元的網元標識id和/或網元地址;所述向第一數據感知設備發(fā)送所述訂閱內容和所述第一數據規(guī)則,包括:向第一數據感知設備發(fā)送包括所述訂閱內容、所述第一數據規(guī)則和所述網元id和/或網元地址;所述向數據存儲網元發(fā)送處理后的第三處理數據及所述數據存儲規(guī)則,包括:所述第一數據感知設備根據所述網元id和/或網元地址,向所述數據存儲網元發(fā)送所述第三處理數據及所述數據存儲規(guī)則。
10、在本公開的一個實施例中,還包括:向發(fā)出所述第一數據訂閱請求的設備發(fā)送所述網元id和/或網元地址,以便于發(fā)出所述第一數據訂閱請求的設備根據網元id和/或網元地址,從所述數據存儲網元獲取所述第三處理數據。
11、在本公開的一個實施例中,所述向數據存儲網元發(fā)送處理后的第三處理數據及所述數據存儲規(guī)則,包括:所述第一數據感知設備根據所述數據存儲規(guī)則,確定所述數據存儲網元的網元id和/或網元地址;所述第一數據感知設備根據網元id和/或網元地址,向所述數據存儲網元發(fā)送所述第三處理數據及所述數據存儲規(guī)則。
12、在本公開的一個實施例中,所述第一數據感知設備根據所述數據存儲規(guī)則,確定所述數據存儲網元的網元id和/或網元地址之后,還包括:所述第一數據感知設備向所述第一數據服務網元發(fā)送所述網元id和/或網元地址,由所述第一數據服務網元向發(fā)出所述第一數據訂閱請求的設備發(fā)送所述網元id和/或網元地址,以便于發(fā)出所述第一數據訂閱請求的設備根據網元id和/或網元地址,從所述數據存儲網元獲取所述第三處理數據。
13、在本公開的一個實施例中,所述數據感知規(guī)則包括感知內容、感知時間和感知頻率中的至少一種;所述數據處理規(guī)則包括處理優(yōu)先級、脫敏處理和加密處理中的至少一種;所述數據存儲規(guī)則包括存儲時段、存儲位置、存儲處理要求、數據刪除優(yōu)先級和異常處理指示中的至少一種。
14、在本公開的一個實施例中,還包括:向第三數據服務網元發(fā)送攜帶所述數據處理輔助信息和/或第一數據規(guī)則的數據上下文,以便于所述第三數據服務網元協(xié)助所述第一數據服務網元進行數據收集,或者,由所述第三數據服務網元為所述第一數據訂閱請求對應的設備服務。
15、根據本公開的另一個方面,提供一種數據處理方法,應用于第一數據服務網元,包括:接收模塊,用于接收第一數據訂閱請求,所述第一數據訂閱請求包括訂閱內容和數據處理輔助信息,所述訂閱內容包括多個數據類型,所述數據處理輔助信息用于標注所述多個數據類型中至少一個數據類型的屬性信息;生成模塊,用于根據所述數據處理輔助信息,生成所述多個數據類型中每一數據類型對應的第一數據規(guī)則,所述第一數據規(guī)則用于指示數據的處理方式;處理模塊,用于根據所述第一數據規(guī)則和所述訂閱內容,進行數據收集、處理及存儲。
16、在本公開的一個實施例中,所述處理模塊,用于向第一數據感知設備發(fā)送所述訂閱內容和所述第一數據規(guī)則,以便于所述第一數據感知設備根據所述第一數據規(guī)則收集所述訂閱內容進行數據收集、處理及存儲;或者,向第二數據服務網元發(fā)送所述訂閱內容和所述第一數據規(guī)則,由所述第二數據服務網元對所述第一數據規(guī)則進行篩選,并將篩選出的第二數據規(guī)則及所述訂閱內容發(fā)往第二數據感知設備,以便于所述第二數據感知設備根據所述第二數據規(guī)則及所述訂閱內容進行數據收集及處理,并將處理后的第一處理數據發(fā)往所述第二數據服務網元,再由所述第二數據服務網元根據第三數據規(guī)則對所述第一處理數據進行處理,并對處理得到的第二處理數據進行存儲;其中,第三數據規(guī)則是第一數據規(guī)則中除所述第二數據規(guī)則外的數據規(guī)則。
17、在本公開的一個實施例中,所述接收模塊,用于接收第一數據消費者設備發(fā)送的第二數據訂閱請求,將所述第二數據訂閱請求作為所述第一數據訂閱請求;或者,接收第一人工智能/機器學習ai/ml分析網元發(fā)送的第三數據訂閱請求,將所述第三數據訂閱請求作為所述第一數據訂閱請求;其中,所述第三數據訂閱請求包括的數據處理輔助信息,由第一ai/ml分析網元對數據分析請求包括的數據處理輔助信息進行補充和/或修改得到,所述數據分析請求由第二數據消費者設備發(fā)往所述第一ai/ml分析網元。
18、在本公開的一個實施例中,所述第二數據訂閱請求包括的數據處理輔助信息對應的屬性信息包括:數據重要性等級、數據隔離等級、數據使用位置、數據存儲時長、數據可靠性等級、數據隱私等級、實時性等級中的一個或多個;所述第三數據訂閱請求包括的數據處理輔助信息對應的屬性信息包括:數據重要性等級、數據隔離等級、數據使用位置、數據存儲時長、數據常用性等級、數據可靠性等級、數據隱私等級、實時性等級中的一個或多個。
19、在本公開的一個實施例中,所述第一數據服務網元存儲有歷史規(guī)則分析信息;所述生成模塊,用于從第二ai/ml分析網元處獲取規(guī)則分析信息;根據分析信息對所述數據處理輔助信息進行更新,得到更新后的數據處理輔助信息,所述分析信息包括所述規(guī)則分析信息,或者,所述分析信息包括所述規(guī)則分析信息和所述歷史規(guī)則分析信息;根據規(guī)則生成消息,生成所述第一數據規(guī)則,所述規(guī)則生成消息包括所述更新后的數據處理輔助信息,或者,所述規(guī)則生成消息包括所述更新后的數據處理輔助信息和所述分析信息。
20、在本公開的一個實施例中,所述第一數據規(guī)則包括所述多個數據類型中每一數據類型的數據感知規(guī)則、數據處理規(guī)則和數據存儲規(guī)則中的至少一種;所述第一數據感知設備根據所述第一數據規(guī)則收集所述訂閱內容進行數據收集、處理及存儲,包括:所述第一數據感知設備根據所述數據感知規(guī)則收集所述訂閱內容對應的數據,以及根據所述數據處理規(guī)則對收集到的數據進行處理,并向數據存儲網元發(fā)送處理后的第三處理數據及所述數據存儲規(guī)則,以便于所述數據存儲網元基于所述數據存儲規(guī)則對所述第三處理數據進行存儲。
21、在本公開的一個實施例中,所述裝置還包括:確定模塊,用于根據所述數據處理輔助信息,確定所述數據存儲網元的網元標識id和/或網元地址;所述處理模塊,用于向第一數據感知設備發(fā)送包括所述訂閱內容、所述第一數據規(guī)則和所述網元id和/或網元地址;所述向數據存儲網元發(fā)送處理后的第三處理數據及所述數據存儲規(guī)則,包括:所述第一數據感知設備根據所述網元id和/或網元地址,向所述數據存儲網元發(fā)送所述第三處理數據及所述數據存儲規(guī)則。
22、在本公開的一個實施例中,所述裝置還包括:第一發(fā)送模塊,用于向發(fā)出所述第一數據訂閱請求的設備發(fā)送所述網元id和/或網元地址,以便于發(fā)出所述第一數據訂閱請求的設備根據網元id和/或網元地址,從所述數據存儲網元獲取所述第三處理數據。
23、在本公開的一個實施例中,所述向數據存儲網元發(fā)送處理后的第三處理數據及所述數據存儲規(guī)則,包括:所述第一數據感知設備根據所述數據存儲規(guī)則,確定所述數據存儲網元的網元id和/或網元地址;所述第一數據感知設備根據網元id和/或網元地址,向所述數據存儲網元發(fā)送所述第三處理數據及所述數據存儲規(guī)則。
24、在本公開的一個實施例中,所述第一數據感知設備根據所述數據存儲規(guī)則,確定所述數據存儲網元的網元id和/或網元地址之后,還包括:所述第一數據感知設備向所述第一數據服務網元發(fā)送所述網元id和/或網元地址,由所述第一數據服務網元向發(fā)出所述第一數據訂閱請求的設備發(fā)送所述網元id和/或網元地址,以便于發(fā)出所述第一數據訂閱請求的設備根據網元id和/或網元地址,從所述數據存儲網元獲取所述第三處理數據。
25、在本公開的一個實施例中,所述數據感知規(guī)則包括感知內容、感知時間和感知頻率中的至少一種;所述數據處理規(guī)則包括處理優(yōu)先級、脫敏處理和加密處理中的至少一種;所述數據存儲規(guī)則包括存儲時段、存儲位置、存儲處理要求、數據刪除優(yōu)先級和異常處理指示中的至少一種。
26、在本公開的一個實施例中,所述裝置還包括:第二發(fā)送模塊,用于向第三數據服務網元發(fā)送攜帶所述數據處理輔助信息和/或第一數據規(guī)則的數據上下文,以便于所述第三數據服務網元協(xié)助所述第一數據服務網元進行數據收集,或者,由所述第三數據服務網元為所述第一數據訂閱請求對應的設備服務。
27、根據本公開的再一個方面,提供一種電子設備,包括:處理器;以及存儲器,用于存儲所述處理器的可執(zhí)行指令;其中,所述處理器配置為經由執(zhí)行所述可執(zhí)行指令來執(zhí)行上述任一所述的數據處理方法。
28、根據本公開的又一個方面,提供一種計算機可讀存儲介質,其上存儲有計算機程序,所述計算機程序被處理器執(zhí)行時實現(xiàn)上述任一所述的數據處理方法。
29、根據本公開的又一個方面,提供一種計算機程序產品,所述計算機程序產品包括計算機程序或計算機指令,所述計算機程序或所述計算機指令由處理器加載并執(zhí)行,以使計算機實現(xiàn)上述任一所述的數據處理方法。
30、本公開的實施例所提供的技術方案至少包括以下有益效果:
31、本公開的實施例所提供的技術方案,通過在第一數據訂閱請求中攜帶用于標注數據類型的屬性信息的數據處理輔助信息,可以使第一數據服務網元根據該數據處理輔助信息生成用于指導數據處理方式的數據規(guī)則。得到數據規(guī)則后,第一數據服務網元可以根據該數據規(guī)則及訂閱內容進行數據收集、處理及存儲,相較于簡單的利用訂閱內容對數據進行收集及存儲,利用數據規(guī)則調整下的數據的收集、處理及存儲可以更加靈活地實現(xiàn),以適應不同數據的收集、處理及存儲要求。另外,根據與數據對應的數據處理輔助信息生成的數據規(guī)則,可以更好地指導對數據的處理,從而提高數據收集、處理及存儲的效率。
32、應當理解的是,以上的一般描述和后文的細節(jié)描述僅是示例性和解釋性的,并不能限制本公開。