一種分布數(shù)據(jù)異動判斷定位方法及系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及分布數(shù)據(jù)異動相關(guān)技術(shù)領(lǐng)域，特別是一種分布數(shù)據(jù)異動判斷定位系統(tǒng)。
【背景技術(shù)】
[0002]在互聯(lián)網(wǎng)行業(yè)，尤其在電子商務(wù)網(wǎng)站業(yè)務(wù)中，每時每刻都在產(chǎn)生海量的數(shù)據(jù)，通常這些數(shù)據(jù)里包括各種指標(biāo)，且每個指標(biāo)有不同的維度視角。指標(biāo)如訂單量、訂單金額等，維度如省份、訂單類型、支付方式等等。當(dāng)一個指標(biāo)發(fā)生波動時，每個維度相應(yīng)數(shù)據(jù)也會隨之波動。舉例來說，當(dāng)在線支付系統(tǒng)出現(xiàn)故障時，訂單量、訂單金額等指標(biāo)總體上會受到影響，相應(yīng)地，各種支付方式對應(yīng)的訂單量和訂單金額會有波動，此外在其他維度如省份、訂單類型上的數(shù)據(jù)也同樣受影響。此時，如何從數(shù)據(jù)中找出是支付系統(tǒng)出問題導(dǎo)致的異常呢？
[0003]在市場環(huán)境多變、業(yè)務(wù)的優(yōu)化升級、促銷的此起彼伏等因素疊加，也會造成這些數(shù)據(jù)跌宕起伏。數(shù)據(jù)發(fā)生波動時，能否判定為異動(異常波動)；異動情況下，如何在眾多數(shù)據(jù)中準(zhǔn)確、快速地定位，即甄別出異動指標(biāo)主要源于哪些維度，是數(shù)據(jù)異動挖掘的核心問題。
[0004]對于異動數(shù)據(jù)定位，現(xiàn)有的技術(shù)大致采用基于閾值比較波動幅度的方法。具體來說，該方法對近期(如最近一周、最近一月)數(shù)據(jù)(具體維度上的相應(yīng)數(shù)據(jù))做加權(quán)平均計算出歷史基準(zhǔn)值，比較最新數(shù)據(jù)和歷史基準(zhǔn)值這兩組數(shù)據(jù)，考察每個數(shù)據(jù)波動幅度，如果波動幅度超出某個閾值(閾值一般是憑經(jīng)驗人為設(shè)定)時，則判定數(shù)據(jù)發(fā)生了異動，并選其中波動幅度最大的作為造成數(shù)據(jù)異動的主因。
[0005]現(xiàn)有數(shù)據(jù)異動定位技術(shù)方案的主要缺點:總體來說，現(xiàn)有人工異動監(jiān)測與定位主觀性強(qiáng)，從懷疑異動到逐層分解定位到具體明細(xì)的異動維度所涉及的環(huán)節(jié)多、流程長、過程繁雜低效。具體來說，首先是閾值的人為主觀設(shè)定，不夠科學(xué)客觀；其次是某些場景下(如節(jié)假日數(shù)據(jù)的慣性走低)，基于閾值比較的方法容易導(dǎo)致誤判；最后是當(dāng)多組數(shù)據(jù)同時超出相應(yīng)閾值時，通常很難定位數(shù)據(jù)異動的主因。

【發(fā)明內(nèi)容】

[0006]基于此，有必要針對現(xiàn)有技術(shù)對數(shù)據(jù)異動難以準(zhǔn)確判斷的技術(shù)問題，提供一種分布數(shù)據(jù)異動判斷定位方法及系統(tǒng)。
[0007]一種分布數(shù)據(jù)異動判斷定位方法，包括:
[0008]分布數(shù)據(jù)準(zhǔn)備步驟，包括:獲取多維度分布數(shù)據(jù)，以及多維度基準(zhǔn)值分布數(shù)據(jù)，所述多維度基準(zhǔn)值分布數(shù)據(jù)為所述多維度分布數(shù)據(jù)的每個數(shù)據(jù)對應(yīng)的歷史基準(zhǔn)值，由多個維度交叉組合得到多個維度組合，根據(jù)所述多維度分布數(shù)據(jù)分別生成多個關(guān)于一級維度的當(dāng)前一級維度分布數(shù)據(jù)，以及多個關(guān)于維度組合的當(dāng)前維度組合分布數(shù)據(jù)，根據(jù)所述多維度基準(zhǔn)值分布數(shù)據(jù)分別生成多個關(guān)于一級維度的歷史一級維度基準(zhǔn)值分布數(shù)據(jù)，以及多個關(guān)于維度組合的歷史維度組合基準(zhǔn)值分布數(shù)據(jù)；
[0009]異動判定步驟，包括:將所述當(dāng)前一級維度分布數(shù)據(jù)與對應(yīng)的歷史一級維度基準(zhǔn)值分布數(shù)據(jù)進(jìn)行比較得到每個當(dāng)前一級維度分布數(shù)據(jù)相對于對應(yīng)的歷史一級維度基準(zhǔn)值分布數(shù)據(jù)的結(jié)構(gòu)異動，結(jié)構(gòu)異動超過異動閾值的當(dāng)前一級維度分布數(shù)據(jù)為異動一級維度分布數(shù)據(jù)，將所述當(dāng)前維度組合分布數(shù)據(jù)與歷史維度組合基準(zhǔn)值分布數(shù)據(jù)進(jìn)行比較得到每個當(dāng)前維度組合分布數(shù)據(jù)相對于對應(yīng)的歷史維度組合基準(zhǔn)值分布數(shù)據(jù)的結(jié)構(gòu)異動，結(jié)構(gòu)異動超過異動閾值的當(dāng)前維度組合分布數(shù)據(jù)為異動維度組合分布數(shù)據(jù)，如果有異動一級維度分布數(shù)據(jù)或異動維度組合分布數(shù)據(jù)則進(jìn)行告警。
[0010]一種分布數(shù)據(jù)異動判斷定位系統(tǒng)，包括:
[0011]分布數(shù)據(jù)準(zhǔn)備模塊，用于:獲取多維度分布數(shù)據(jù)，以及多維度基準(zhǔn)值分布數(shù)據(jù)，所述多維度基準(zhǔn)值分布數(shù)據(jù)為所述多維度分布數(shù)據(jù)的每個數(shù)據(jù)對應(yīng)的歷史基準(zhǔn)值，由多個維度交叉組合得到多個維度組合，根據(jù)所述多維度分布數(shù)據(jù)分別生成多個關(guān)于一級維度的當(dāng)前一級維度分布數(shù)據(jù)，以及多個關(guān)于維度組合的當(dāng)前維度組合分布數(shù)據(jù)，根據(jù)所述多維度基準(zhǔn)值分布數(shù)據(jù)分別生成多個關(guān)于一級維度的歷史一級維度基準(zhǔn)值分布數(shù)據(jù)，以及多個關(guān)于維度組合的歷史維度組合基準(zhǔn)值分布數(shù)據(jù)；
[0012]異動判定模塊，用于:將所述當(dāng)前一級維度分布數(shù)據(jù)與對應(yīng)的歷史一級維度基準(zhǔn)值分布數(shù)據(jù)進(jìn)行比較得到每個當(dāng)前一級維度分布數(shù)據(jù)相對于對應(yīng)的歷史一級維度基準(zhǔn)值分布數(shù)據(jù)的結(jié)構(gòu)異動，結(jié)構(gòu)異動超過異動閾值的當(dāng)前一級維度分布數(shù)據(jù)為異動一級維度分布數(shù)據(jù)，將所述當(dāng)前維度組合分布數(shù)據(jù)與歷史維度組合基準(zhǔn)值分布數(shù)據(jù)進(jìn)行比較得到每個當(dāng)前維度組合分布數(shù)據(jù)相對于對應(yīng)的歷史維度組合基準(zhǔn)值分布數(shù)據(jù)的結(jié)構(gòu)異動，結(jié)構(gòu)異動超過異動閾值的當(dāng)前維度組合分布數(shù)據(jù)為異動維度組合分布數(shù)據(jù)，如果有異動一級維度分布數(shù)據(jù)或異動維度組合分布數(shù)據(jù)則進(jìn)行告警。
[0013]本發(fā)明對多維度分布數(shù)據(jù)分別在一級維度及維度組合上進(jìn)行檢驗，克服了現(xiàn)有異動判定與異動定位方法的各種不足，使得異動判斷更為迅速準(zhǔn)確。
【附圖說明】
[0014]圖1為本發(fā)明一種分布數(shù)據(jù)異動判斷定位方法的工作流程圖；
[0015]圖2為本發(fā)明一種分布數(shù)據(jù)異動判斷定位系統(tǒng)的結(jié)構(gòu)模塊圖；
[0016]圖3為本發(fā)明最佳實施例的模塊示意圖。
【具體實施方式】
[0017]下面結(jié)合附圖和具體實施例對本發(fā)明做進(jìn)一步詳細(xì)的說明。
[0018]如圖1所示為本發(fā)明一種分布數(shù)據(jù)異動判斷定位方法的工作流程圖，包括:
[0019]步驟S101，包括:獲取多維度分布數(shù)據(jù)，以及多維度基準(zhǔn)值分布數(shù)據(jù)，所述多維度基準(zhǔn)值分布數(shù)據(jù)為所述多維度分布數(shù)據(jù)的每個數(shù)據(jù)對應(yīng)的歷史基準(zhǔn)值，由多個維度交叉組合得到多個維度組合，根據(jù)所述多維度分布數(shù)據(jù)分別生成多個關(guān)于一級維度的當(dāng)前一級維度分布數(shù)據(jù)，以及多個關(guān)于維度組合的當(dāng)前維度組合分布數(shù)據(jù)，根據(jù)所述多維度基準(zhǔn)值分布數(shù)據(jù)分別生成多個關(guān)于一級維度的歷史一級維度基準(zhǔn)值分布數(shù)據(jù)，以及多個關(guān)于維度組合的歷史維度組合基準(zhǔn)值分布數(shù)據(jù)；
[0020]步驟S102，包括:將所述當(dāng)前一級維度分布數(shù)據(jù)與對應(yīng)的歷史一級維度基準(zhǔn)值分布數(shù)據(jù)進(jìn)行比較得到每個當(dāng)前一級維度分布數(shù)據(jù)相對于對應(yīng)的歷史一級維度基準(zhǔn)值分布數(shù)據(jù)的結(jié)構(gòu)異動，結(jié)構(gòu)異動超過異動閾值的當(dāng)前一級維度分布數(shù)據(jù)為異動一級維度分布數(shù)據(jù)，將所述當(dāng)前維度組合分布數(shù)據(jù)與歷史維度組合基準(zhǔn)值分布數(shù)據(jù)進(jìn)行比較得到每個當(dāng)前維度組合分布數(shù)據(jù)相對于對應(yīng)的歷史維度組合基準(zhǔn)值分布數(shù)據(jù)的結(jié)構(gòu)異動，結(jié)構(gòu)異動超過異動閾值的當(dāng)前維度組合分布數(shù)據(jù)為異動維度組合分布數(shù)據(jù)，如果有異動一級維度分布數(shù)據(jù)或異動維度組合分布數(shù)據(jù)則進(jìn)行告警。
[0021]步驟SlOl中，將多維度分布數(shù)據(jù)分解為關(guān)于一級維度的當(dāng)前一級維度分布數(shù)據(jù)，以及多個關(guān)于維度組合的當(dāng)前維度組合分布數(shù)據(jù)。每一個維度下包括多個數(shù)據(jù)。以訂單量指標(biāo)作為維度的在線支付系統(tǒng)的分布數(shù)據(jù)為例，省份、訂單類型、支付方式等維度為一級維度，“省份_訂單類型”、“省份_支付方式”、“訂單類型_支付方式”、“省份_訂單類型_支付方式”則為維度組合。每一維包括多個數(shù)據(jù)，例如省份維中可以包括:省份A的數(shù)據(jù)、省份B的數(shù)據(jù)、省份C的數(shù)據(jù)，而訂單類型維中可以包括:訂單類型D的數(shù)據(jù)、訂單類型E的數(shù)據(jù)、訂單類型F的數(shù)據(jù)，支付方式維可以包括:支付方式G的數(shù)據(jù)、支付方式H的數(shù)據(jù)、支付方式I的數(shù)據(jù)。則“省份_訂單類型”包括:省份A且訂單類型D的數(shù)據(jù)、省份A且訂單類型E的數(shù)據(jù)、省份A且訂單類型F的數(shù)據(jù)、省份B且訂單類型D的數(shù)據(jù)、省份B且訂單類型E的數(shù)據(jù)、省份B且訂單類型F的數(shù)據(jù)、省份C且訂單類型D的數(shù)據(jù)、省份C且訂單類型E的數(shù)據(jù)、省份C且訂單類型F的數(shù)據(jù)?！笆》輄支付方式”、“訂單類型_支付方式”、“省