本發(fā)明涉及計(jì)算機(jī)領(lǐng)域,尤其涉及一種時(shí)間序列異常檢測(cè)標(biāo)注方法及系統(tǒng)。
背景技術(shù):
:時(shí)間序列預(yù)測(cè)分析技術(shù)是基于與時(shí)間順序相關(guān)聯(lián)的有序觀測(cè)數(shù)據(jù)集,利用隨機(jī)過(guò)程理論和數(shù)理統(tǒng)計(jì)學(xué)方法,研究所述數(shù)據(jù)集所遵從的統(tǒng)計(jì)規(guī)律,從而推測(cè)數(shù)據(jù)發(fā)展趨勢(shì)指導(dǎo)解決實(shí)際問(wèn)題。科學(xué)正確地對(duì)各種實(shí)際時(shí)間序列進(jìn)行預(yù)測(cè)分析可產(chǎn)生巨大的經(jīng)濟(jì)效益和與社會(huì)效益,時(shí)間序列預(yù)測(cè)分析技術(shù)已廣泛應(yīng)用到工業(yè)、地址、生態(tài)、經(jīng)濟(jì)、氣象、醫(yī)學(xué)等領(lǐng)域。現(xiàn)有的時(shí)間序列異常檢測(cè)中,往往是根據(jù)時(shí)間序列值偏離“正?!?假設(shè)為正常)序列的程度,再利用后驗(yàn)的效果評(píng)估,確定一個(gè)異常閾值實(shí)現(xiàn)異常檢測(cè)。然而,異常閾值的設(shè)定僅僅是從數(shù)值上反應(yīng)時(shí)間序列偏離某種趨勢(shì),很難與業(yè)務(wù)關(guān)聯(lián)。實(shí)際上,時(shí)間序列的異常檢測(cè)的目的是需要反應(yīng)業(yè)務(wù)的非正常的時(shí)間點(diǎn),用于對(duì)出現(xiàn)的異常進(jìn)行確認(rèn)和處理。如何實(shí)現(xiàn)能準(zhǔn)確反應(yīng)業(yè)務(wù)的非正常時(shí)間點(diǎn)的異常檢測(cè),是當(dāng)前人們研究的重點(diǎn)問(wèn)題。技術(shù)實(shí)現(xiàn)要素:本發(fā)明實(shí)施例所要解決的技術(shù)問(wèn)題在于,提供一種時(shí)間序列異常檢測(cè)標(biāo)注方法及系統(tǒng),實(shí)現(xiàn)能反應(yīng)業(yè)務(wù)的非正常時(shí)間點(diǎn)的異常檢測(cè),并且提高了標(biāo)注異常系統(tǒng)的準(zhǔn)確度。為了解決上述技術(shù)問(wèn)題,本發(fā)明實(shí)施例第一方面公開(kāi)了一種時(shí)間序列異常檢測(cè)標(biāo)注方法,包括獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息;根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息,所述異常結(jié)果信息用于指示被標(biāo)注的各個(gè)時(shí)間序列異常點(diǎn)是否為異常;根據(jù)所述異常結(jié)果信息調(diào)整所述各個(gè)標(biāo)注方的標(biāo)注權(quán)重后,返回執(zhí)行所述 根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息的步驟,直到最近的兩個(gè)異常結(jié)果信息一致時(shí),輸出最近的所述異常結(jié)果信息。結(jié)合第一方面,在第一種可能的實(shí)現(xiàn)方式中,所述根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息包括:針對(duì)一個(gè)被標(biāo)注的時(shí)間序列異常點(diǎn),根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率和非異常的概率;當(dāng)所述異常的概率大于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常;當(dāng)所述異常的概率小于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常。結(jié)合第一方面的第一種可能的實(shí)現(xiàn)方式,在第二種可能的實(shí)現(xiàn)方式中,所述根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率和非異常的概率包括:根據(jù)所述標(biāo)注信息,將標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率;將沒(méi)有標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常的概率。結(jié)合第一方面,在第三種可能的實(shí)現(xiàn)方式中,所述根據(jù)所述異常結(jié)果信息調(diào)整所述各個(gè)標(biāo)注方的標(biāo)注權(quán)重包括:將根據(jù)標(biāo)注結(jié)果信息累計(jì)標(biāo)注方標(biāo)注正確的異常點(diǎn)的數(shù)量,除以所述標(biāo)注方標(biāo)注過(guò)的所有異常點(diǎn)的數(shù)量以及當(dāng)前各個(gè)標(biāo)識(shí)方的權(quán)重之和,得到調(diào)整后的標(biāo)注方的標(biāo)注權(quán)重。結(jié)合第一方面,在第四種可能的實(shí)現(xiàn)方式中,當(dāng)本次獲取的標(biāo)注方輸入的標(biāo)注信息中,新增的標(biāo)注方數(shù)量為n,歷史的標(biāo)注方數(shù)量為m時(shí),其中n和m為整數(shù);所述新增的標(biāo)注方的標(biāo)注權(quán)重為1/(n+m);所述歷史的標(biāo)注方的標(biāo)注權(quán)重為1/(n+m)乘以所述歷史的標(biāo)注方當(dāng)前對(duì)應(yīng)的標(biāo)注權(quán)重。結(jié)合第一方面,或者第一方面的第一種可能的實(shí)現(xiàn)方式,或者第一方面的第二種可能的實(shí)現(xiàn)方式,或者第一方面的第三種可能的實(shí)現(xiàn)方式,或者第一方面的第四種可能的實(shí)現(xiàn)方式,在第五種可能的實(shí)現(xiàn)方式中,所述獲取多個(gè)不同 標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息之后,所述根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息之前,還包括:根據(jù)所述標(biāo)注信息判斷所述標(biāo)注方標(biāo)注的異常點(diǎn)個(gè)數(shù)與當(dāng)前所有標(biāo)注方標(biāo)注的所有異常點(diǎn)個(gè)數(shù)的比值是否達(dá)到預(yù)設(shè)閾值;當(dāng)判斷結(jié)果為是時(shí),則將所述標(biāo)注方列入標(biāo)注權(quán)重范圍,否則,不將所述標(biāo)注方列入標(biāo)注權(quán)重范圍;所述根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息包括:根據(jù)列入標(biāo)注權(quán)重范圍的各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息。本發(fā)明實(shí)施例第二方面公開(kāi)了一種時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng),包括:標(biāo)注信息獲取模塊,用于獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息;異常結(jié)果計(jì)算模塊,用于根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息,所述異常結(jié)果信息用于指示被標(biāo)注的各個(gè)時(shí)間序列異常點(diǎn)是否為異常;標(biāo)注權(quán)重調(diào)整模塊,用于根據(jù)所述異常結(jié)果信息調(diào)整所述各個(gè)標(biāo)注方的標(biāo)注權(quán)重后,觸發(fā)所述異常結(jié)果計(jì)算模塊重新執(zhí)行操作,直到最近的兩個(gè)異常結(jié)果信息一致時(shí),輸出最近的所述異常結(jié)果信息。結(jié)合第二方面,在第一種可能的實(shí)現(xiàn)方式中,所述異常結(jié)果計(jì)算模塊包括:概率計(jì)算單元,用于針對(duì)一個(gè)被標(biāo)注的時(shí)間序列異常點(diǎn),根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率和非異常的概率;異常結(jié)果判斷單元,用于當(dāng)所述異常的概率大于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常;當(dāng)所述異常的概率小于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常。結(jié)合第二方面的第一種可能的實(shí)現(xiàn)方式,在第二種可能的實(shí)現(xiàn)方式中,所述概率計(jì)算單元包括:第一相加單元,用于根據(jù)所述標(biāo)注信息,將標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率;第二相加單元,用于根據(jù)所述標(biāo)注信息,將沒(méi)有標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常的概率。結(jié)合第二方面,在第三種可能的實(shí)現(xiàn)方式中,所述標(biāo)注權(quán)重調(diào)整模塊包括:調(diào)整權(quán)重單元,用于將根據(jù)標(biāo)注結(jié)果信息累計(jì)標(biāo)注方標(biāo)注正確的異常點(diǎn)的數(shù)量,除以所述標(biāo)注方標(biāo)注過(guò)的所有異常點(diǎn)的數(shù)量以及當(dāng)前各個(gè)標(biāo)識(shí)方的權(quán)重之和,得到調(diào)整后的標(biāo)注方的標(biāo)注權(quán)重;觸發(fā)輸出單元,用于當(dāng)所述調(diào)整權(quán)重單元對(duì)各個(gè)標(biāo)注方的標(biāo)注權(quán)重調(diào)整之后,觸發(fā)所述異常結(jié)果計(jì)算模塊重新執(zhí)行操作,將根據(jù)標(biāo)注結(jié)果信息累計(jì)標(biāo)注方標(biāo)注正確的異常點(diǎn)的數(shù)量,除以所述標(biāo)注方標(biāo)注過(guò)的所有異常點(diǎn)的數(shù)量以及當(dāng)前各個(gè)標(biāo)識(shí)方的權(quán)重之和,得到調(diào)整后的標(biāo)注方的標(biāo)注權(quán)重。結(jié)合第二方面,在第四種可能的實(shí)現(xiàn)方式中,當(dāng)本次獲取的標(biāo)注方輸入的標(biāo)注信息中,新增的標(biāo)注方數(shù)量為n,歷史的標(biāo)注方數(shù)量為m時(shí),其中n和m為整數(shù);所述新增的標(biāo)注方的標(biāo)注權(quán)重為1/(n+m);所述歷史的標(biāo)注方的標(biāo)注權(quán)重為1/(n+m)乘以所述歷史的標(biāo)注方當(dāng)前對(duì)應(yīng)的標(biāo)注權(quán)重。結(jié)合第二方面,或者第二方面的第一種可能的實(shí)現(xiàn)方式,或者第二方面的第二種可能的實(shí)現(xiàn)方式,或者第二方面的第三種可能的實(shí)現(xiàn)方式,或者第二方面的第四種可能的實(shí)現(xiàn)方式,在第五種可能的實(shí)現(xiàn)方式中,還包括:閾值判斷模塊,用于在所述標(biāo)注信息獲取模塊獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息之后,所述異常結(jié)果計(jì)算模塊根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息之前,根據(jù)所述標(biāo)注信息判斷所述標(biāo)注方標(biāo)注的異常點(diǎn)個(gè)數(shù)與當(dāng)前所有標(biāo)注方標(biāo)注的所有異常點(diǎn)個(gè)數(shù)的比值是否達(dá)到預(yù)設(shè)閾值;權(quán)重范圍列入模塊,用于當(dāng)所述閾值判斷模塊的判斷結(jié)果為是時(shí),則將所述標(biāo)注方列入標(biāo)注權(quán)重范圍,否則,不將所述標(biāo)注方列入標(biāo)注權(quán)重范圍;所述異常結(jié)果計(jì)算模塊具體用于根據(jù)所述權(quán)重范圍列入模塊列入標(biāo)注權(quán)重范圍的各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息。本發(fā)明實(shí)施例第三方面公開(kāi)了一種計(jì)算機(jī)存儲(chǔ)介質(zhì),所述計(jì)算機(jī)存儲(chǔ)介質(zhì)存儲(chǔ)有程序,所述程序執(zhí)行時(shí)包括本發(fā)明實(shí)施例第一方面、或者第一方面的第一種可能的實(shí)現(xiàn)方式,或者第一方面的第二種可能的實(shí)現(xiàn)方式,或者第一方面的第三種可能的實(shí)現(xiàn)方式,或者第一方面的第四種可能的實(shí)現(xiàn)方式,或者第一 方面的第五種可能的實(shí)現(xiàn)方式中的時(shí)間序列異常檢測(cè)標(biāo)注方法的全部步驟。實(shí)施本發(fā)明實(shí)施例,通過(guò)獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息,從而可以利用與業(yè)務(wù)相關(guān)的多個(gè)不同用戶對(duì)同一事物的認(rèn)定來(lái)進(jìn)行時(shí)間序列異常點(diǎn)的標(biāo)注,實(shí)現(xiàn)了通過(guò)人計(jì)算的方式來(lái)完成計(jì)算機(jī)無(wú)法實(shí)現(xiàn)或很難實(shí)現(xiàn)的事情,能反應(yīng)業(yè)務(wù)的非正常時(shí)間點(diǎn)的異常檢測(cè),解決了現(xiàn)有技術(shù)中僅僅是從數(shù)值上反應(yīng)時(shí)間序列偏離某種趨勢(shì),很難與業(yè)務(wù)關(guān)聯(lián)的技術(shù)問(wèn)題;并且通過(guò)可信計(jì)算(truthmining)的方式調(diào)整標(biāo)注權(quán)重,從而對(duì)標(biāo)注異常點(diǎn)進(jìn)行確定,使得標(biāo)注異常系統(tǒng)的異常算法不斷學(xué)習(xí)和迭代,從而提高標(biāo)注異常系統(tǒng)的準(zhǔn)確性。附圖說(shuō)明為了更清楚地說(shuō)明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案,下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡(jiǎn)單地介紹,顯而易見(jiàn)地,下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例,對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講,在不付出創(chuàng)造性勞動(dòng)的前提下,還可以根據(jù)這些附圖獲得其他的附圖。圖1是本發(fā)明實(shí)施例提供的時(shí)間序列異常檢測(cè)標(biāo)注方法的流程示意圖;圖2是本發(fā)明提供的時(shí)間序列異常檢測(cè)標(biāo)注方法的另一實(shí)施例的流程示意圖;圖3是本發(fā)明實(shí)施例提供的時(shí)間序列的示意圖;圖4是本發(fā)明提供的時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)的結(jié)構(gòu)示意圖;圖5是本發(fā)明實(shí)施例提供的異常結(jié)果計(jì)算模塊的結(jié)構(gòu)示意圖;圖6是本發(fā)明實(shí)施例提供的概率計(jì)算單元的結(jié)構(gòu)示意圖;圖7是本發(fā)明實(shí)施例提供的標(biāo)注權(quán)重調(diào)整模塊的結(jié)構(gòu)示意圖;圖8是本發(fā)明提供的時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)的另一實(shí)施例的結(jié)構(gòu)示意圖;圖9是本發(fā)明提供的時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)的另一實(shí)施例的結(jié)構(gòu)示意圖。具體實(shí)施方式下面將結(jié)合本發(fā)明實(shí)施例中的附圖,對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清 楚、完整地描述,顯然,所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例,而不是全部的實(shí)施例?;诒景l(fā)明中的實(shí)施例,本領(lǐng)域普通技術(shù)人員在沒(méi)有作出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例,都屬于本發(fā)明保護(hù)的范圍。參見(jiàn)圖1,是本發(fā)明實(shí)施例提供的時(shí)間序列異常檢測(cè)標(biāo)注方法的流程示意圖,該方法包括:步驟S100:獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息;具體地,本發(fā)明實(shí)施例中的多個(gè)不同標(biāo)注方可以為與業(yè)務(wù)相關(guān)的用戶或者使用時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)的用戶,不同的標(biāo)注方可以根據(jù)時(shí)間業(yè)務(wù)經(jīng)驗(yàn)或者業(yè)務(wù)特征,針對(duì)輸出的時(shí)間序列標(biāo)注自己認(rèn)為是異常的時(shí)間點(diǎn),那么該時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)即可獲取到這些標(biāo)注信息。可理解的是,本發(fā)明不同于傳統(tǒng)意義上的專家系統(tǒng),時(shí)間序列異常檢測(cè)標(biāo)注用戶不需要具備很強(qiáng)的專業(yè)知識(shí),任何相關(guān)用戶甚至任何用戶均可參與標(biāo)注;對(duì)于時(shí)間序列,異常點(diǎn)常??赡芘c業(yè)務(wù)活動(dòng)相關(guān),或者突發(fā)事物相關(guān)。例如:在第三方交易的時(shí)間序列中的支付筆數(shù)的時(shí)間序列,突然的序列值突然增大的異??赡苁怯捎谀承I(yíng)銷活動(dòng)引起的,而突然下降的異??赡苁腔顒?dòng)結(jié)束或者系統(tǒng)出現(xiàn)異常。當(dāng)活動(dòng)范圍較小或者活動(dòng)效果不是非常顯著,或者系統(tǒng)異常導(dǎo)致的影響范圍不是很大時(shí),現(xiàn)有技術(shù)中使用一般的異常檢測(cè)算法并不能很好的解決問(wèn)題,但是系統(tǒng)運(yùn)維人員或者營(yíng)銷人員,或者對(duì)該業(yè)務(wù)比較了解的人員能快速確定時(shí)間序列的異常點(diǎn)。因此,本發(fā)明實(shí)施例通過(guò)人計(jì)算(humancomputation)的方式獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息,利用大部分用戶對(duì)同一事物的評(píng)價(jià)來(lái)幫助系統(tǒng)決策,使用用戶的‘計(jì)算’能力比使用計(jì)算機(jī)的計(jì)算能力更有效,完成了計(jì)算機(jī)無(wú)法實(shí)現(xiàn)或很難實(shí)現(xiàn)的事情,能反應(yīng)業(yè)務(wù)的非正常時(shí)間點(diǎn)的異常檢測(cè)。步驟S102:根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息,所述異常結(jié)果信息用于指示被標(biāo)注的各個(gè)時(shí)間序列異常點(diǎn)是否為異常;具體地,本發(fā)明實(shí)施例中的各個(gè)標(biāo)注方都對(duì)應(yīng)有各自的標(biāo)注權(quán)重,本發(fā)明實(shí)施例中的標(biāo)注權(quán)重包括但不限于為0到1,本發(fā)明各個(gè)實(shí)施例以0到1為例進(jìn)行說(shuō)明;在第一次對(duì)某時(shí)間序列進(jìn)行異常點(diǎn)標(biāo)注時(shí),可以設(shè)置各個(gè)標(biāo)注方對(duì)應(yīng)各自的標(biāo)注權(quán)重為1,并可以進(jìn)行標(biāo)注權(quán)重的歸一化,即調(diào)整各個(gè)標(biāo)注方的標(biāo)注 權(quán)重進(jìn)行修改,如可以根據(jù)該次進(jìn)行異常點(diǎn)標(biāo)注的標(biāo)注方的數(shù)量N,將每個(gè)標(biāo)注方的標(biāo)注權(quán)重平均分,修改為1/N;當(dāng)然可以修改為其它數(shù)值,只要所有標(biāo)注方的標(biāo)注權(quán)重相加為1即可。根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及標(biāo)注信息,可以計(jì)算出各個(gè)被標(biāo)注的時(shí)間序列異常點(diǎn)的異常比重或者異常概率,例如本次進(jìn)行異常點(diǎn)標(biāo)注的標(biāo)注方的數(shù)量3,每個(gè)標(biāo)注方的標(biāo)注權(quán)重為1/3,那么針對(duì)被標(biāo)注的時(shí)間序列xk,若被標(biāo)注為異常點(diǎn)的個(gè)數(shù)為2個(gè),那么異常比重或者異常概率為2/3,即非異常比重或者非異常概率為1/3,那么可以通過(guò)預(yù)先設(shè)定計(jì)算規(guī)則,當(dāng)異常比重或異常概率達(dá)到某閾值,或者異常比重或異常概率大于費(fèi)異常比重或非異常概率,等等,那么異常結(jié)果信息指示該被標(biāo)注的時(shí)間序列異常點(diǎn)為異常,否則異常結(jié)果信息指示該被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常。需要說(shuō)明的是,可以針對(duì)每個(gè)被標(biāo)注的時(shí)間序列異常點(diǎn)依次進(jìn)行計(jì)算或同時(shí)并行計(jì)算多個(gè)別標(biāo)注的時(shí)間序列異常點(diǎn),直到所有被標(biāo)注的時(shí)間序列異常點(diǎn)都計(jì)算完畢,即可生成異常結(jié)果信息。步驟S104:根據(jù)所述異常結(jié)果信息調(diào)整所述各個(gè)標(biāo)注方的標(biāo)注權(quán)重后,返回執(zhí)行所述根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息的步驟,直到最近的兩個(gè)異常結(jié)果信息一致時(shí),輸出最近的所述異常結(jié)果信息。具體地,可以根據(jù)本次的異常結(jié)果信息評(píng)估本次標(biāo)注時(shí)標(biāo)注方的標(biāo)注正確率,將標(biāo)注正確率高的標(biāo)注權(quán)重調(diào)整為大于標(biāo)注正確率低的標(biāo)注權(quán)重,可以按標(biāo)注正確率的比例進(jìn)行標(biāo)注權(quán)重的調(diào)整,或者按照預(yù)設(shè)的增加或減少的幅度進(jìn)行標(biāo)注權(quán)重的調(diào)整,并在調(diào)整后返回步驟S102進(jìn)行重新計(jì)算,可理解的是,該重新計(jì)算是根據(jù)調(diào)整后的各個(gè)標(biāo)注方的標(biāo)注權(quán)重來(lái)進(jìn)行計(jì)算,從而得出最近的異常結(jié)果信息,并將最近的異常結(jié)果信息與上一次的結(jié)果異常信息進(jìn)行比較(即將最近的兩個(gè)異常結(jié)果信息進(jìn)行比較),若比較一致,那么輸出最近的異常結(jié)果信息,否則繼續(xù)根據(jù)最近的異常結(jié)果信息調(diào)整各個(gè)標(biāo)注方的標(biāo)注權(quán)重,然后再返回步驟S102進(jìn)行重新計(jì)算,直到最近的兩個(gè)異常結(jié)果信息一致時(shí),輸出最近的異常結(jié)果信息。進(jìn)一步地,可以將根據(jù)標(biāo)注結(jié)果信息累計(jì)標(biāo)注方標(biāo)注正確的異常點(diǎn)的數(shù)量,除以該標(biāo)注方標(biāo)注過(guò)的所有異常點(diǎn)的數(shù)量以及當(dāng)前各個(gè)標(biāo)識(shí)方的權(quán)重之和,得 到調(diào)整后的該標(biāo)注方的標(biāo)注權(quán)重。具體地,需要調(diào)整每個(gè)標(biāo)注方對(duì)應(yīng)的標(biāo)注權(quán)重,其中針對(duì)一個(gè)標(biāo)注方,可以根據(jù)標(biāo)注結(jié)果信息累計(jì)該標(biāo)注方標(biāo)注正確的異常點(diǎn)的數(shù)量,假如為10,該標(biāo)注方標(biāo)注過(guò)的所有異常點(diǎn)的數(shù)量為15,當(dāng)前各個(gè)標(biāo)注方的權(quán)重之和為1,那么調(diào)整后的該標(biāo)注方的標(biāo)注權(quán)重為2/3。實(shí)施本發(fā)明實(shí)施例,通過(guò)獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息,從而可以利用與業(yè)務(wù)相關(guān)的多個(gè)不同用戶對(duì)同一事物的認(rèn)定來(lái)進(jìn)行時(shí)間序列異常點(diǎn)的標(biāo)注,實(shí)現(xiàn)了通過(guò)人計(jì)算的方式來(lái)完成計(jì)算機(jī)無(wú)法實(shí)現(xiàn)或很難實(shí)現(xiàn)的事情,能反應(yīng)業(yè)務(wù)的非正常時(shí)間點(diǎn)的異常檢測(cè),解決了現(xiàn)有技術(shù)中僅僅是從數(shù)值上反應(yīng)時(shí)間序列偏離某種趨勢(shì),很難與業(yè)務(wù)關(guān)聯(lián)的技術(shù)問(wèn)題;并且通過(guò)可信計(jì)算(truthmining)的方式調(diào)整標(biāo)注權(quán)重,從而對(duì)標(biāo)注異常點(diǎn)進(jìn)行確定,使得標(biāo)注異常系統(tǒng)的異常算法不斷學(xué)習(xí)和迭代,從而提高標(biāo)注異常系統(tǒng)的準(zhǔn)確性。進(jìn)一步地,上述步驟S102中,具體可以針對(duì)一個(gè)被標(biāo)注的時(shí)間序列異常點(diǎn),根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率和非異常的概率;當(dāng)所述異常的概率大于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常;當(dāng)所述異常的概率小于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常。下面結(jié)合圖2示出的本發(fā)明提供的時(shí)間序列異常檢測(cè)標(biāo)注方法的另一實(shí)施例的流程示意圖,進(jìn)一步說(shuō)明本發(fā)明的時(shí)間序列異常檢測(cè)標(biāo)注的方法,該方法包括:步驟S200:獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息;具體地,可以參考上述圖1實(shí)施例中的步驟S100,這里不再贅述。步驟S202:根據(jù)所述標(biāo)注信息判斷所述標(biāo)注方標(biāo)注的異常點(diǎn)個(gè)數(shù)與當(dāng)前所有標(biāo)注方標(biāo)注的所有異常點(diǎn)個(gè)數(shù)的比值是否達(dá)到預(yù)設(shè)閾值;具體地,本發(fā)明實(shí)施例還可以考慮每次每個(gè)標(biāo)注方標(biāo)注的異常點(diǎn)個(gè)數(shù)或數(shù)量,可以設(shè)定當(dāng)該次標(biāo)注中標(biāo)注方標(biāo)注的異常點(diǎn)個(gè)數(shù)與當(dāng)前所有標(biāo)注方標(biāo)注的所有異常點(diǎn)個(gè)數(shù)的比值達(dá)到預(yù)設(shè)閾值,比如預(yù)設(shè)閾值為0.3或0.25等,在本次標(biāo)注中才將該標(biāo)注方列入標(biāo)注權(quán)重范圍,即將該標(biāo)注點(diǎn)的標(biāo)注信息納入異常結(jié)果的計(jì)算范圍,否則,不將該標(biāo)注方列入標(biāo)注權(quán)重范圍。步驟S204:檢測(cè)是否所有標(biāo)注方都判斷完畢;具體地,當(dāng)檢測(cè)結(jié)果為是時(shí),則執(zhí)行步驟S206,否則繼續(xù)執(zhí)行步驟S202。步驟S206:根據(jù)列入標(biāo)注權(quán)重范圍的各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息;具體地,針對(duì)列入標(biāo)注權(quán)重范圍的一個(gè)被標(biāo)注的時(shí)間序列異常點(diǎn),根據(jù)列入標(biāo)注權(quán)重范圍的各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及標(biāo)注信息,計(jì)算得出該被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率和非異常的概率;當(dāng)該異常的概率大于該非異常的概率時(shí),判斷出該被標(biāo)注的時(shí)間序列異常點(diǎn)為異常;當(dāng)該異常的概率小于該非異常的概率時(shí),判斷出該被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常。例如本次列入標(biāo)注權(quán)重范圍的進(jìn)行異常點(diǎn)標(biāo)注的標(biāo)注方的數(shù)量3,這3個(gè)標(biāo)注方的標(biāo)注權(quán)重分別為0.2、0.3和0.5,那么針對(duì)被標(biāo)注的時(shí)間序列異常點(diǎn)xk,若標(biāo)注權(quán)重為0.2和0.5的標(biāo)注方標(biāo)注其異常,標(biāo)注權(quán)重為0.3的標(biāo)注方標(biāo)注其非異常,那么計(jì)算得出該被標(biāo)注的時(shí)間序列異常點(diǎn)xk的異常概率0.7,即非異常概率為0.3,判斷出該被標(biāo)注的時(shí)間序列異常點(diǎn)xk為異常。需要說(shuō)明的是,可以根據(jù)標(biāo)注信息,將標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出該被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率;將沒(méi)有標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常的概率。本發(fā)明實(shí)施例中的列入標(biāo)注權(quán)重范圍的所有標(biāo)注方的權(quán)重之和可以小于、大于或等于1,本發(fā)明不作限定;或者還可以對(duì)列入標(biāo)注權(quán)重范圍的所有標(biāo)注方的權(quán)重進(jìn)行歸一化,使權(quán)重之和等于1。步驟S208:檢測(cè)是否列入標(biāo)注權(quán)重范圍的所有標(biāo)注方都計(jì)算完畢;具體地,當(dāng)檢測(cè)結(jié)果為是時(shí),則執(zhí)行步驟S210,否則繼續(xù)執(zhí)行步驟S206。步驟S210:判斷最近的異常結(jié)果信息是否與上一次的異常結(jié)果信息一致;具體地,當(dāng)判斷結(jié)果為是時(shí),則執(zhí)行步驟S214,否則執(zhí)行步驟S212;步驟S212:根據(jù)最近的異常結(jié)果信息調(diào)整所述各個(gè)標(biāo)注方的標(biāo)注權(quán)重;具體地,可以參考上述圖1實(shí)施例中的步驟S104,這里不再贅述;步驟S214:輸出最近的所述異常結(jié)果信息。再進(jìn)一步地,在步驟S206中,當(dāng)本次獲取的標(biāo)注方輸入的標(biāo)注信息中,新增的標(biāo)注方數(shù)量為n,歷史的標(biāo)注方數(shù)量為m時(shí),其中n和m為整數(shù);且該n個(gè)標(biāo)注方和m個(gè)標(biāo)注方都被列入標(biāo)注權(quán)重范圍,那么新增的標(biāo)注方的標(biāo)注權(quán)重可以設(shè)為1/(n+m);歷史的標(biāo)注方的標(biāo)注權(quán)重為1/(n+m)乘以該歷史的標(biāo)注 方當(dāng)前對(duì)應(yīng)的標(biāo)注權(quán)重??衫斫獾氖?,n為本次標(biāo)注時(shí)被列入標(biāo)注權(quán)重范圍的標(biāo)注方個(gè)數(shù)減去本次沒(méi)有被列入標(biāo)注權(quán)重范圍的標(biāo)注方個(gè)數(shù)的值,本發(fā)明實(shí)施例中的n可以為正整數(shù)或負(fù)整數(shù),當(dāng)n為正整數(shù)時(shí),表明本次標(biāo)注時(shí)被列入標(biāo)注權(quán)重范圍的標(biāo)注方個(gè)數(shù)大于本次沒(méi)有被列入標(biāo)注權(quán)重范圍的標(biāo)注方個(gè)數(shù);而當(dāng)n為負(fù)整數(shù)時(shí),表明本次標(biāo)注時(shí)被列入標(biāo)注權(quán)重范圍的標(biāo)注方個(gè)數(shù)小于本次沒(méi)有被列入標(biāo)注權(quán)重范圍的標(biāo)注方個(gè)數(shù)。需要說(shuō)明的是,本次沒(méi)有被列入標(biāo)注權(quán)重范圍的標(biāo)注方個(gè)數(shù)為從歷史被列入標(biāo)注權(quán)重范圍的標(biāo)注方中移出的標(biāo)注方個(gè)數(shù)。下面將通過(guò)一個(gè)實(shí)例來(lái)詳細(xì)說(shuō)明本發(fā)明的時(shí)間序列異常檢測(cè)標(biāo)注方法,如圖3示出的本發(fā)明實(shí)施例提供的時(shí)間序列的示意圖,有時(shí)間序列Xt={x1,x2,x3,x4,x5,…x14},假設(shè)本次異常點(diǎn)標(biāo)注有三個(gè)不同的標(biāo)注方,分別為U1、U2和U3,他們輸入的標(biāo)注信息分別為:標(biāo)注方U1標(biāo)注{x3,x6,x7,x10}為異常,標(biāo)注方U2標(biāo)注{x6,x10}為異常,以及標(biāo)注方U3標(biāo)注{x6,x10,x12}為異常,那么系統(tǒng)可以通過(guò)下表來(lái)記錄或存儲(chǔ)每個(gè)標(biāo)注方的標(biāo)注信息:標(biāo)注方序列異常點(diǎn)異常值U1Xtx31U1Xtx61U1Xtx71U1Xtx101U2Xtx61U2Xtx101U3Xtx61U3Xtx101U3Xtx121通過(guò)公式1:k=niN≥δ]]>公式1可以分別計(jì)算各個(gè)標(biāo)注方標(biāo)注的異常點(diǎn)個(gè)數(shù)與當(dāng)前所有標(biāo)注方標(biāo)注的所有異常點(diǎn)個(gè)數(shù)的比值是否達(dá)到預(yù)設(shè)閾值;其中,ni為標(biāo)注方i標(biāo)注的異常點(diǎn)個(gè)數(shù),N為當(dāng)前所有標(biāo)注方標(biāo)注的所有異常點(diǎn)個(gè)數(shù),δ為預(yù)設(shè)閾值,假設(shè)δ為0.3;從 上表中可以看出當(dāng)前所有標(biāo)注方標(biāo)注的所有異常點(diǎn)個(gè)數(shù)N為5,標(biāo)注方U1的比值為4/5,標(biāo)注方U2的比值為2/5,標(biāo)注方U1的比值為3/5,均達(dá)到預(yù)設(shè)閾值0.3那么,標(biāo)注方U1、U2和U3都列入標(biāo)注權(quán)重范圍。通過(guò)公式2:x~i←argmaxx∈X~Σuj∈Uλjdis(x~i,xi)]]>公式2可以根據(jù)列入標(biāo)注權(quán)重范圍的各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息;其中,xi為時(shí)間序列被標(biāo)注為異常點(diǎn)的第i個(gè)點(diǎn),j為標(biāo)注方j(luò)的標(biāo)注,為時(shí)間序列的第i個(gè)點(diǎn)為異常的概率,λj為標(biāo)注方j(luò)的標(biāo)注權(quán)重,表示到xi的距離;初始時(shí),即假設(shè)本次標(biāo)注為對(duì)該時(shí)間序列的第一次標(biāo)注,那么標(biāo)注方的初始標(biāo)注權(quán)重可以設(shè)為λ1=λ2=λ3=1,且可以通過(guò)公式3:r(λj)=Σ{1λj}=1]]>公式3進(jìn)行歸一化處理,使得所有標(biāo)注方的權(quán)重之和為1,那么歸一化后的標(biāo)注方的權(quán)重為λ1′=λ2′=λ3′=13;]]>那么公式2表示為使得Σuj∈Uλjdis(x~i,xi)]]>最大時(shí)的取值,即,對(duì)于被標(biāo)注異常的時(shí)間序列的第i個(gè)點(diǎn),所有標(biāo)注方標(biāo)注的使得該異常點(diǎn)與‘真實(shí)的異?!?jì)算的概率最大。公式2的求解即為最優(yōu)化問(wèn)題,可分別通過(guò)如下的公式4到公式5求解得出:minΣxΣjλj·dis(xij,xi)]]>公式4公式4可通過(guò)以下方法求解:對(duì)所有的異常點(diǎn)按照標(biāo)注方的標(biāo)準(zhǔn)確定是否為異常,即:x~i←argminx∈X~Σuj∈Uλjdis(xij,xi)]]>公式5即根據(jù)所有的標(biāo)注方的標(biāo)注異常,計(jì)算異常點(diǎn)的異常概率,使得異常點(diǎn)偏離真實(shí)‘異常最小’。也就是說(shuō),選擇大多數(shù)標(biāo)注方認(rèn)為是異常的異常點(diǎn)。從而計(jì)算得到如下表的異常結(jié)果信息:假設(shè)1表示該序列點(diǎn)被標(biāo)注為異常點(diǎn),0表示該序列點(diǎn)沒(méi)有被標(biāo)注為異常點(diǎn);那么可理解的是,公式1中0到0以及1到1的距離可以設(shè)定為1,0到1或1到0的距離可以設(shè)定為0。計(jì)算得出異常結(jié)果信息為只有序列點(diǎn)x6和x10為異常。根據(jù)確定的異常更新用戶的標(biāo)注權(quán)重,即:x~i←argminλΣxΣjλjdis(xij,xi)]]>公式6使用根據(jù)異常點(diǎn)的判斷,更新用戶的標(biāo)注權(quán)重,使用戶的異常的誤差最小。求解的更新標(biāo)注權(quán)重方法為:λj′=Σdis(xij,xi)Σλi·Σxij]]>公式7其中,表示標(biāo)注方j(luò)標(biāo)注正確的點(diǎn),表示標(biāo)注方標(biāo)注過(guò)的點(diǎn),∑λi表示當(dāng)前標(biāo)注權(quán)重之和。那么,計(jì)算這三個(gè)標(biāo)注方的一次更新權(quán)重為:λ1=21·4=12,λ2=21·2=1,λ3=21·3=23]]>可以進(jìn)行歸一化處理后,得出:λ1′=313,λ2′=613,λ3′=413]]>根據(jù)調(diào)整后的各個(gè)標(biāo)注方的標(biāo)注權(quán)重,重新計(jì)算異常結(jié)果信息如下:判斷最近的異常結(jié)果信息與上一次的異常結(jié)果信息一致,那么輸出最近的異常結(jié)果信息。例如,對(duì)上述例子中的異常點(diǎn),如果標(biāo)注方U4標(biāo)注了x10為異常,預(yù)設(shè)閾值設(shè)定為0.3,則標(biāo)注方U4標(biāo)注k=0.2<0.3,則標(biāo)注方U4不列入標(biāo)注權(quán)重范圍,即不計(jì)入異常標(biāo)注的權(quán)重標(biāo)注方中。又如,在下一次計(jì)算{x15,x16,……,x30}的標(biāo)注中,新增標(biāo)注方U5和U6,歷史標(biāo)注方中U1、U2和U3也全部參與標(biāo)注,則可以按照公式8和公式9:λj=nn+mλj]]>公式8λj=1n+m]]>公式9其中,n為新增的標(biāo)注方數(shù)量,m為歷史的標(biāo)注方數(shù)量,對(duì)于歷史標(biāo)注方的標(biāo)注權(quán)重可以通過(guò)公式8進(jìn)行計(jì)算,對(duì)于新增標(biāo)注方的標(biāo)注權(quán)重可以通過(guò)公式9進(jìn)行計(jì)算,例如:λ1=33+2·613=1865,λ5=13+2=1365]]>可理解的是,通過(guò)本發(fā)明實(shí)施例中的可信計(jì)算,標(biāo)注方標(biāo)注的次數(shù)越多,準(zhǔn)確率越大,則可信度越高,以后的標(biāo)注可能為準(zhǔn)確的標(biāo)注的可能性越大;反之則可信度越低,以后的標(biāo)注為準(zhǔn)確的標(biāo)注的可能性越小。即標(biāo)注方標(biāo)注越準(zhǔn)確,其計(jì)算越‘可信’,否則,越‘不可信’。為了便于更好地實(shí)施本發(fā)明實(shí)施例的上述方案,本發(fā)明還對(duì)應(yīng)提供了一種時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng),如圖4示出的本發(fā)明提供的時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)的結(jié)構(gòu)示意圖,時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)40包括:標(biāo)注信息獲取模塊400、異常結(jié)果計(jì)算模塊402和標(biāo)注權(quán)重調(diào)整模塊404,其中標(biāo)注信息獲取模塊400用于獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息;異常結(jié)果計(jì)算模塊402用于根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息,所述異常結(jié)果信息用于指示被標(biāo)注的各個(gè)時(shí)間序列異常點(diǎn)是否為異常;標(biāo)注權(quán)重調(diào)整模塊404用于根據(jù)所述異常結(jié)果信息調(diào)整所述各個(gè)標(biāo)注方的標(biāo)注權(quán)重后,觸發(fā)異常結(jié)果計(jì)算模塊402重新執(zhí)行操作,直到最近的兩個(gè)異常結(jié)果信息一致時(shí),輸出最近的所述異常結(jié)果信息。具體地,如圖5示出的本發(fā)明實(shí)施例提供的異常結(jié)果計(jì)算模塊的結(jié)構(gòu)示意圖,異常結(jié)果計(jì)算模塊402可以包括:概率計(jì)算單元4020和異常結(jié)果判斷單元4022,其中概率計(jì)算單元4020用于針對(duì)一個(gè)被標(biāo)注的時(shí)間序列異常點(diǎn),根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率和非異常的概率;異常結(jié)果判斷單元4022用于當(dāng)所述異常的概率大于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常;當(dāng)所述異常的概率小于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常。進(jìn)一步地,如圖6示出的本發(fā)明實(shí)施例提供的概率計(jì)算單元的結(jié)構(gòu)示意圖,概率計(jì)算單元4020可以包括:第一相加單元40200和第二相加單元40202,其中第一相加單元40200用于根據(jù)所述標(biāo)注信息,將標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率;第二相加單元40202用于根據(jù)所述標(biāo)注信息,將沒(méi)有標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常的概率。再進(jìn)一步地,如圖7示出的本發(fā)明實(shí)施例提供的標(biāo)注權(quán)重調(diào)整模塊的結(jié)構(gòu)示意圖,標(biāo)注權(quán)重調(diào)整模塊404可以包括:調(diào)整權(quán)重單元4040和觸發(fā)輸出單元4042,其中調(diào)整權(quán)重單元4040用于將根據(jù)標(biāo)注結(jié)果信息累計(jì)標(biāo)注方標(biāo)注正確的異常點(diǎn)的數(shù)量,除以所述標(biāo)注方標(biāo)注過(guò)的所有異常點(diǎn)的數(shù)量以及當(dāng)前各個(gè)標(biāo)識(shí)方的權(quán)重之和,得到調(diào)整后的標(biāo)注方的標(biāo)注權(quán)重;觸發(fā)輸出單元4042用于當(dāng)調(diào)整權(quán)重單元4040對(duì)各個(gè)標(biāo)注方的標(biāo)注權(quán)重調(diào)整之后,觸發(fā)異常結(jié)果計(jì)算模塊402重新執(zhí)行操作,將根據(jù)標(biāo)注結(jié)果信息累計(jì)標(biāo)注方標(biāo)注正確的異常點(diǎn)的數(shù)量,除以所述標(biāo)注方標(biāo)注過(guò)的所有異常點(diǎn)的數(shù)量以及當(dāng)前各個(gè)標(biāo)識(shí)方的權(quán)重之和,得到調(diào)整后的標(biāo)注方的標(biāo)注權(quán)重。再進(jìn)一步地,當(dāng)本次獲取的標(biāo)注方輸入的標(biāo)注信息中,新增的標(biāo)注方數(shù)量 為n,歷史的標(biāo)注方數(shù)量為m時(shí),其中n和m為大于1的正整數(shù);所述新增的標(biāo)注方的標(biāo)注權(quán)重為1/(n+m);所述歷史的標(biāo)注方的標(biāo)注權(quán)重為1/(n+m)乘以所述歷史的標(biāo)注方當(dāng)前對(duì)應(yīng)的標(biāo)注權(quán)重。再進(jìn)一步地,如圖8示出的本發(fā)明提供的時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)的另一實(shí)施例的結(jié)構(gòu)示意圖,時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)40包括標(biāo)注信息獲取模塊400、異常結(jié)果計(jì)算模塊402和標(biāo)注權(quán)重調(diào)整模塊404外,還可以包括:閾值判斷模塊406和權(quán)重范圍列入模塊408,其中閾值判斷模塊406用于在標(biāo)注信息獲取模塊400獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息之后,異常結(jié)果計(jì)算模塊402根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息之前,根據(jù)所述標(biāo)注信息判斷所述標(biāo)注方標(biāo)注的異常點(diǎn)個(gè)數(shù)與當(dāng)前所有標(biāo)注方標(biāo)注的所有異常點(diǎn)個(gè)數(shù)的比值是否達(dá)到預(yù)設(shè)閾值;權(quán)重范圍列入模塊408用于當(dāng)閾值判斷模塊406的判斷結(jié)果為是時(shí),則將所述標(biāo)注方列入標(biāo)注權(quán)重范圍,否則,不將所述標(biāo)注方列入標(biāo)注權(quán)重范圍;異常結(jié)果計(jì)算模塊402具體用于根據(jù)所述權(quán)重范圍列入模塊列入標(biāo)注權(quán)重范圍的各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息。請(qǐng)參閱圖9,圖9是本發(fā)明提供的時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)的另一實(shí)施例的結(jié)構(gòu)示意圖。其中,如圖9所示,時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)90可以包括:至少一個(gè)處理器901,例如CPU,至少一個(gè)網(wǎng)絡(luò)接口904,用戶接口903,存儲(chǔ)器905,至少一個(gè)通信總線902以及顯示屏906。其中,通信總線902用于實(shí)現(xiàn)這些組件之間的連接通信。其中,用戶接口903,可選用戶接口903還可以包括標(biāo)準(zhǔn)的有線接口、無(wú)線接口。網(wǎng)絡(luò)接口904可選的可以包括標(biāo)準(zhǔn)的有線接口、無(wú)線接口(如WI-FI接口)。存儲(chǔ)器905可以是高速RAM存儲(chǔ)器,也可以是非不穩(wěn)定的存儲(chǔ)器(non-volatilememory),例如至少一個(gè)磁盤(pán)存儲(chǔ)器。存儲(chǔ)器905可選的還可以是至少一個(gè)位于遠(yuǎn)離前述處理器901的存儲(chǔ)系統(tǒng)。如圖9所示,作為一種計(jì)算機(jī)存儲(chǔ)介質(zhì)的存儲(chǔ)器905中可以包括操作系統(tǒng)、網(wǎng)絡(luò)通信模塊、用戶接口模塊以及時(shí)間序列異常檢測(cè)標(biāo)注程序。在圖9所示的時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)900中處理器901可以用于調(diào)用存儲(chǔ)器905中存儲(chǔ)的時(shí)間序列異常檢測(cè)標(biāo)注程序,并執(zhí)行以下操作:獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息;根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息,所述異常結(jié)果信息用于指示被標(biāo)注的各個(gè)時(shí)間序列異常點(diǎn)是否為異常;根據(jù)所述異常結(jié)果信息調(diào)整所述各個(gè)標(biāo)注方的標(biāo)注權(quán)重后,返回執(zhí)行所述根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息的步驟,直到最近的兩個(gè)異常結(jié)果信息一致時(shí),輸出最近的所述異常結(jié)果信息。具體地,處理器901根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息可以包括:針對(duì)一個(gè)被標(biāo)注的時(shí)間序列異常點(diǎn),根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率和非異常的概率;當(dāng)所述異常的概率大于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常;當(dāng)所述異常的概率小于所述非異常的概率時(shí),判斷出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常。進(jìn)一步地,處理器901根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率和非異常的概率可以包括:根據(jù)所述標(biāo)注信息,將標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為異常的概率;將沒(méi)有標(biāo)注為異常的所有標(biāo)注方對(duì)應(yīng)的權(quán)重相加,得出所述被標(biāo)注的時(shí)間序列異常點(diǎn)為非異常的概率。進(jìn)一步地,處理器901根據(jù)所述異常結(jié)果信息調(diào)整所述各個(gè)標(biāo)注方的標(biāo)注權(quán)重可以包括:將根據(jù)標(biāo)注結(jié)果信息累計(jì)標(biāo)注方標(biāo)注正確的異常點(diǎn)的數(shù)量,除以所述標(biāo)注方標(biāo)注過(guò)的所有異常點(diǎn)的數(shù)量以及當(dāng)前各個(gè)標(biāo)識(shí)方的權(quán)重之和,得到調(diào)整后的標(biāo)注方的標(biāo)注權(quán)重。進(jìn)一步地,當(dāng)本次獲取的標(biāo)注方輸入的標(biāo)注信息中,新增的標(biāo)注方數(shù)量為n,歷史的標(biāo)注方數(shù)量為m時(shí),其中n和m為整數(shù);所述新增的標(biāo)注方的標(biāo)注權(quán)重為1/(n+m);所述歷史的標(biāo)注方的標(biāo)注權(quán)重為1/(n+m)乘以所述歷史的標(biāo)注方當(dāng)前對(duì)應(yīng)的標(biāo)注權(quán)重。進(jìn)一步地,處理器901獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的 標(biāo)注信息之后,所述根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息之前,還可以執(zhí)行:根據(jù)所述標(biāo)注信息判斷所述標(biāo)注方標(biāo)注的異常點(diǎn)個(gè)數(shù)與當(dāng)前所有標(biāo)注方標(biāo)注的所有異常點(diǎn)個(gè)數(shù)的比值是否達(dá)到預(yù)設(shè)閾值;當(dāng)判斷結(jié)果為是時(shí),則將所述標(biāo)注方列入標(biāo)注權(quán)重范圍,否則,不將所述標(biāo)注方列入標(biāo)注權(quán)重范圍;所述根據(jù)各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息包括:根據(jù)列入標(biāo)注權(quán)重范圍的各個(gè)標(biāo)注方的標(biāo)注權(quán)重以及所述標(biāo)注信息,計(jì)算得出異常結(jié)果信息。需要說(shuō)明的是,本發(fā)明實(shí)施例中的時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)40或時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)90可以為個(gè)人計(jì)算機(jī)或移動(dòng)智能終端、平板電腦等電子終端;時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)40或時(shí)間序列異常檢測(cè)標(biāo)注系統(tǒng)90中各功能模塊的功能可根據(jù)上述方法實(shí)施例中的方法具體實(shí)現(xiàn),這里不再贅述。綜上所述,實(shí)施本發(fā)明實(shí)施例,通過(guò)獲取多個(gè)不同標(biāo)注方輸入的標(biāo)注時(shí)間序列異常點(diǎn)的標(biāo)注信息,從而可以利用與業(yè)務(wù)相關(guān)的多個(gè)不同用戶對(duì)同一事物的認(rèn)定來(lái)進(jìn)行時(shí)間序列異常點(diǎn)的標(biāo)注,實(shí)現(xiàn)了通過(guò)人計(jì)算的方式來(lái)完成計(jì)算機(jī)無(wú)法實(shí)現(xiàn)或很難實(shí)現(xiàn)的事情,能反應(yīng)業(yè)務(wù)的非正常時(shí)間點(diǎn)的異常檢測(cè),解決了現(xiàn)有技術(shù)中僅僅是從數(shù)值上反應(yīng)時(shí)間序列偏離某種趨勢(shì),很難與業(yè)務(wù)關(guān)聯(lián)的技術(shù)問(wèn)題;并且通過(guò)可信計(jì)算(truthmining)的方式調(diào)整標(biāo)注權(quán)重,從而對(duì)標(biāo)注異常點(diǎn)進(jìn)行確定,使得標(biāo)注異常系統(tǒng)的異常算法不斷學(xué)習(xí)和迭代,從而提高標(biāo)注異常系統(tǒng)的準(zhǔn)確性。本領(lǐng)域普通技術(shù)人員可以理解實(shí)現(xiàn)上述實(shí)施例方法中的全部或部分流程,是可以通過(guò)計(jì)算機(jī)程序來(lái)指令相關(guān)的硬件來(lái)完成,所述的程序可存儲(chǔ)于一計(jì)算機(jī)可讀取存儲(chǔ)介質(zhì)中,該程序在執(zhí)行時(shí),可包括如上述各方法的實(shí)施例的流程。其中,所述的存儲(chǔ)介質(zhì)可為磁碟、光盤(pán)、只讀存儲(chǔ)記憶體(Read-OnlyMemory,ROM)或隨機(jī)存儲(chǔ)記憶體(RandomAccessMemory,RAM)等。以上所揭露的僅為本發(fā)明較佳實(shí)施例而已,當(dāng)然不能以此來(lái)限定本發(fā)明之權(quán)利范圍,因此依本發(fā)明權(quán)利要求所作的等同變化,仍屬本發(fā)明所涵蓋的范圍。當(dāng)前第1頁(yè)1 2 3