国产精品1024永久观看,大尺度欧美暖暖视频在线观看,亚洲宅男精品一区在线观看,欧美日韩一区二区三区视频,2021中文字幕在线观看

  • <option id="fbvk0"></option>
    1. <rt id="fbvk0"><tr id="fbvk0"></tr></rt>
      <center id="fbvk0"><optgroup id="fbvk0"></optgroup></center>
      <center id="fbvk0"></center>

      <li id="fbvk0"><abbr id="fbvk0"><dl id="fbvk0"></dl></abbr></li>

      互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策方法及系統(tǒng)與流程

      文檔序號(hào):11156924閱讀:641來(lái)源:國(guó)知局
      互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策方法及系統(tǒng)與制造工藝

      本發(fā)明涉及互聯(lián)網(wǎng)領(lǐng)域,尤其涉及一種互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策系統(tǒng)。



      背景技術(shù):

      隨著互聯(lián)網(wǎng)業(yè)務(wù)的迅猛發(fā)展,激增的網(wǎng)絡(luò)用戶(hù)、信息數(shù)量和網(wǎng)絡(luò)資源刺激著網(wǎng)絡(luò)的不斷升級(jí)與開(kāi)拓。呈指數(shù)級(jí)增長(zhǎng)的廣大用戶(hù)、信息與資源數(shù)量要求運(yùn)營(yíng)商提供不斷升級(jí)的高品質(zhì)服務(wù),網(wǎng)絡(luò)帶寬與速度升級(jí)都迫在眉睫。從整體來(lái)看,以上這些目標(biāo)的實(shí)現(xiàn)依賴(lài)于基礎(chǔ)設(shè)施建設(shè)的升級(jí),從戰(zhàn)略上來(lái)看,通過(guò)對(duì)互聯(lián)網(wǎng)流量流向決策分析及合理調(diào)度,也可達(dá)到高效利用當(dāng)前基礎(chǔ)設(shè)施實(shí)現(xiàn)升級(jí)的目標(biāo),更好的保障服務(wù)的實(shí)現(xiàn)與品質(zhì)提升。

      目前,龐大的用戶(hù)數(shù)量以及隨之而來(lái)龐大的網(wǎng)絡(luò)應(yīng)用需求推動(dòng)著互聯(lián)網(wǎng)硬件設(shè)施和軟件設(shè)備的升級(jí),網(wǎng)絡(luò)流量十分龐大。采用海量的硬件投入來(lái)達(dá)成基礎(chǔ)設(shè)施升級(jí)明顯是不可取的;龐大的網(wǎng)絡(luò)流量也需要分析和控制。因此,通過(guò)探索一條合理控制網(wǎng)絡(luò)流量流向達(dá)到高效利用當(dāng)前基礎(chǔ)設(shè)施實(shí)現(xiàn)升級(jí)的目標(biāo),更好的保障服務(wù)的實(shí)現(xiàn)與品質(zhì)升級(jí),顯得必要且具有重大意義。



      技術(shù)實(shí)現(xiàn)要素:

      有鑒于此,本發(fā)明提供一種互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策方法及系統(tǒng),以解決上述技術(shù)問(wèn)題。

      本發(fā)明提供的互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策,包括:

      采集互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù),并對(duì)所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)進(jìn)行分析,根據(jù)用戶(hù)請(qǐng)求特定的域名,對(duì)引入偏差的域名進(jìn)行遞歸處理,并對(duì)遞歸處理的結(jié)果進(jìn)行篩選,將特定域名的目的IP重定向。

      進(jìn)一步,還包括對(duì)互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)進(jìn)行預(yù)處理,所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)包括DNS日志數(shù)據(jù)、基礎(chǔ)資料爬蟲(chóng)數(shù)據(jù)和IP段歸屬基礎(chǔ)庫(kù)數(shù)據(jù),所述預(yù)處理包括對(duì)DNS解析失敗和域名不合格的DNS日志數(shù)據(jù)進(jìn)行篩選和合并。

      進(jìn)一步,所述遞歸處理包括在固定周期內(nèi)連續(xù)對(duì)遞歸列表發(fā)起請(qǐng)求,對(duì)連續(xù)請(qǐng)求結(jié)果的IP地址進(jìn)行篩選:

      如果沒(méi)有符合優(yōu)先應(yīng)答的結(jié)果,則放棄對(duì)該域名的后續(xù)操作,直到下一個(gè)周期重新執(zhí)行;

      如果有符合優(yōu)先應(yīng)答的結(jié)果,則將該域名的對(duì)應(yīng)優(yōu)先應(yīng)答地址進(jìn)行引流,所述遞歸列表為偏差域名的詳細(xì)列表。

      進(jìn)一步,通過(guò)IP段劃分,判斷DNS日志中用戶(hù)的上網(wǎng)方式和用戶(hù)訪問(wèn)的最終服務(wù)器地址,所述IP段劃分包括將運(yùn)營(yíng)商網(wǎng)內(nèi)IP段按用戶(hù)端分為手機(jī)用戶(hù)IP端和互聯(lián)網(wǎng)用戶(hù)IP段;按服務(wù)端分為緩存服務(wù)器IP段、內(nèi)容分發(fā)網(wǎng)絡(luò)引入IP地址段和直連引入IP地址段。

      進(jìn)一步,當(dāng)流量調(diào)度發(fā)生異常時(shí),針對(duì)不同業(yè)務(wù)類(lèi)型、不同維度和不同指標(biāo)的異常數(shù)據(jù),進(jìn)行告警。

      進(jìn)一步,根據(jù)預(yù)設(shè)條件在海量DNS日志中過(guò)濾出符合預(yù)設(shè)條件的日志并導(dǎo)出,所述預(yù)設(shè)條件包括用戶(hù)請(qǐng)求時(shí)間、請(qǐng)求的IP地址和請(qǐng)求的域名。

      本發(fā)明還提供一種互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策系統(tǒng),包括:

      服務(wù)器,用于生成DNS日志數(shù)據(jù);

      數(shù)據(jù)采集模塊,用于采集互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù),所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)包括DNS日志數(shù)據(jù);

      數(shù)據(jù)存儲(chǔ)模塊,用于存儲(chǔ)互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù);

      數(shù)據(jù)處理模塊,用于對(duì)所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)進(jìn)行分析,根據(jù)用戶(hù)請(qǐng)求特定的域名,對(duì)引入偏差的域名進(jìn)行遞歸處理,并對(duì)遞歸的結(jié)果進(jìn)行篩選,將特定域名的目的IP重定向。

      進(jìn)一步,還包括預(yù)處理模塊,用于對(duì)互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)進(jìn)行預(yù)處理,所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)還包括基礎(chǔ)資料爬蟲(chóng)數(shù)據(jù)和IP段歸屬基礎(chǔ)庫(kù)數(shù)據(jù),所述預(yù)處理包括對(duì)DNS解析失敗和域名不合格的DNS日志數(shù)據(jù)進(jìn)行篩選、合并處理。

      進(jìn)一步,還包括用于當(dāng)流量調(diào)度發(fā)生異常時(shí)進(jìn)行告警的告警模塊和根據(jù)用戶(hù)請(qǐng)求時(shí)間、請(qǐng)求的IP地址和請(qǐng)求的域名,在海量DNS日志中過(guò)濾出符合預(yù)設(shè)條件的日志并導(dǎo)出的日志過(guò)濾模塊。

      進(jìn)一步,所述數(shù)據(jù)處理模塊包括:

      遞歸模塊,用于在固定周期內(nèi)對(duì)連續(xù)請(qǐng)求結(jié)果的IP地址進(jìn)行篩選并將域名對(duì)應(yīng)的優(yōu)先應(yīng)答地址傳遞給流量引導(dǎo)模塊,

      流量引流模塊,用于保存優(yōu)先應(yīng)答地址對(duì)應(yīng)的該域名的優(yōu)化調(diào)度策略,遞歸模塊傳遞的域名進(jìn)行引流。

      本發(fā)明的有益效果:本發(fā)明中的互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策方法及系統(tǒng),通過(guò)對(duì)DNS系統(tǒng)解析日志進(jìn)行采集并存儲(chǔ),可以定期分析互聯(lián)網(wǎng)熱點(diǎn)資源,并依據(jù)分析結(jié)果,進(jìn)行調(diào)度優(yōu)化,使用戶(hù)的訪問(wèn)請(qǐng)求盡可能多的命中網(wǎng)內(nèi)資源,從而提升用戶(hù)感知,并達(dá)到提升流量本網(wǎng)率和降低運(yùn)營(yíng)成本的效果,本發(fā)明能夠合理控制網(wǎng)絡(luò)流量流向,達(dá)到高效利用當(dāng)前基礎(chǔ)設(shè)施實(shí)現(xiàn)升級(jí)的目標(biāo),更好的保障服務(wù)的實(shí)現(xiàn)與品質(zhì)升級(jí)。

      附圖說(shuō)明

      下面結(jié)合附圖和實(shí)施例對(duì)本發(fā)明作進(jìn)一步描述:

      圖1是本發(fā)明的實(shí)施例中的互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策方法原理示意圖。

      圖2是本發(fā)明實(shí)施例中的互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策方法流程示意圖。

      圖3是本發(fā)明實(shí)施例中的互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策系統(tǒng)的結(jié)構(gòu)示意圖。

      具體實(shí)施方式

      下面結(jié)合附圖和實(shí)施例對(duì)本發(fā)明作進(jìn)一步描述:圖1是本發(fā)明的原理示意圖。

      如圖1、所示,本實(shí)施例中的互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策方法,包括:

      采集互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù),并對(duì)所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)進(jìn)行分析,根據(jù)用戶(hù)請(qǐng)求特定的域名,對(duì)引入偏差的域名進(jìn)行遞歸處理,并對(duì)遞歸處理的結(jié)果進(jìn)行篩選,將特定域名的目的IP重定向。

      在本實(shí)施例中,首先獲取需要優(yōu)化的域名列表,通過(guò)DNS日志掃描出應(yīng)答結(jié)果存在不是最優(yōu)結(jié)果的域名。將掃描出來(lái)的域名可以通過(guò)FTP或其它方式傳遞給遞歸模塊,遞歸模塊通過(guò)多次遞歸處理,獲得完整應(yīng)答IP地址信息,遞歸模塊對(duì)獲得IP地址信息進(jìn)行過(guò)濾,獲取最優(yōu)結(jié)果,將最優(yōu)結(jié)果作為重定向后的結(jié)果,反饋給用戶(hù)。從而使用戶(hù)的訪問(wèn)請(qǐng)求盡可能多的命中網(wǎng)內(nèi)資源,進(jìn)而提升用戶(hù)感知,并達(dá)到提升流量本網(wǎng)率和降低運(yùn)營(yíng)成本的效果。

      優(yōu)選地,本實(shí)施例中,將最優(yōu)結(jié)果寫(xiě)入流量引流模塊。流量引流模塊保存對(duì)該域名的優(yōu)化調(diào)度策略。當(dāng)用戶(hù)發(fā)起請(qǐng)求時(shí),向緩存模塊請(qǐng)求DNS,系統(tǒng)判斷是否有緩存:如果有緩存,就將結(jié)果返回給用戶(hù),直接給A記錄;如果沒(méi)有緩存,遞歸解析所需內(nèi)容,同時(shí)將DNS請(qǐng)求發(fā)送給流量分析優(yōu)化系統(tǒng)。如果流量引流模塊對(duì)該域名有優(yōu)化調(diào)度策略,則按照優(yōu)先應(yīng)答策略相應(yīng)報(bào)文。同時(shí),遞歸過(guò)程中的授權(quán)DNS也會(huì)相應(yīng)設(shè)有經(jīng)過(guò)優(yōu)化的應(yīng)答報(bào)文,由于授權(quán)DNS通常和本地DNS服務(wù)器距離較遠(yuǎn),本地DNS服務(wù)器會(huì)優(yōu)先收到流量分析優(yōu)化系統(tǒng)的報(bào)文,并將該結(jié)果寫(xiě)入緩存。本地DNS服務(wù)器將結(jié)果返回給用戶(hù)。

      在本實(shí)施例中,互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)包括DNS日志數(shù)據(jù)、基礎(chǔ)資料爬蟲(chóng)數(shù)據(jù)和IP段歸屬基礎(chǔ)庫(kù)數(shù)據(jù),采用網(wǎng)絡(luò)爬蟲(chóng),實(shí)現(xiàn)對(duì)關(guān)鍵域和域名、公司、備案號(hào)、TCP、UDP、網(wǎng)站名、服務(wù)類(lèi)型等資料的爬蟲(chóng),用作詳細(xì)內(nèi)容匹配。通過(guò)對(duì)同一個(gè)域名進(jìn)行多次遞歸找到符合要求的應(yīng)答結(jié)果,并將結(jié)果通過(guò)一定方式放入本地DNS服務(wù)器的緩存中;對(duì)本地DNS服務(wù)器中某組域名的TTL(Time To Live,生存時(shí)間)進(jìn)行優(yōu)化,優(yōu)化策略包括強(qiáng)制定義TTL,對(duì)TTL數(shù)值進(jìn)行加減乘除的運(yùn)算,支持對(duì)同一個(gè)域名進(jìn)行多次遞歸找到符合要求的應(yīng)答結(jié)果,并將結(jié)果放入本地DNS服務(wù)器的緩存中。本實(shí)施例中的DNS日志通過(guò)FTP方式上傳到分析系統(tǒng),調(diào)度系統(tǒng)需求獲取到遞歸DNS出網(wǎng)遞歸的請(qǐng)求,通過(guò)分光/鏡像,將請(qǐng)求數(shù)據(jù)引入到調(diào)度系統(tǒng)內(nèi)。

      如圖2所示,在本實(shí)施例中,還包括對(duì)互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)進(jìn)行預(yù)處理,所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)包括DNS日志數(shù)據(jù)、基礎(chǔ)資料爬蟲(chóng)數(shù)據(jù)和IP段歸屬基礎(chǔ)庫(kù)數(shù)據(jù),所述預(yù)處理包括對(duì)DNS解析失敗和域名不合格的DNS日志數(shù)據(jù)進(jìn)行篩選和合并。由DNS獲取模塊獲取到的原始的DNS解析日志數(shù)量龐大,并且存在很多解析失敗、域名不合格的情況,優(yōu)選地,本實(shí)施例通過(guò)對(duì)原始的DNS解析日志進(jìn)行篩選,合并等處理,最終形成一個(gè).out文件,傳送給預(yù)處理模塊。下面詳細(xì)介紹DNS日志處理模塊對(duì)DNS日志的處理內(nèi)容:在Local DNS日志中,用戶(hù)IP的信息對(duì)于本系統(tǒng)的流量流向分析也是不重要的,因?yàn)榱髁苛飨蚍治鲋饕^察的是流量的“去向”,而非流量的“來(lái)源”。本實(shí)施例對(duì)這一部分的信息進(jìn)行了篩除,分為移動(dòng)用戶(hù)、互聯(lián)網(wǎng)用戶(hù),全網(wǎng)用戶(hù)為移動(dòng)用戶(hù)、互聯(lián)網(wǎng)用戶(hù)的合集。DNS規(guī)定,域名中的標(biāo)號(hào)都有英文字母和數(shù)字組成,每一個(gè)標(biāo)號(hào)不超過(guò)63個(gè)字符,也不區(qū)分大小寫(xiě)字母。標(biāo)號(hào)中除連字符展覽開(kāi)幕(-)外不能使用其他的標(biāo)點(diǎn)符號(hào)。級(jí)別最低的域名寫(xiě)在最左邊,而級(jí)別最高的域名寫(xiě)在最右邊。由多個(gè)標(biāo)號(hào)組成的完整域名總共不超過(guò)255個(gè)字符。所以,凡不符合上述規(guī)范的請(qǐng)求域名被認(rèn)為是不合格的域名,對(duì)這部分的日志進(jìn)行了篩除。另外,對(duì)用戶(hù)請(qǐng)求的相同的域名進(jìn)行合并,統(tǒng)計(jì)每個(gè)相同域名的合并次數(shù),即為該域名的請(qǐng)求次數(shù),并記錄該值。相同域名的解析結(jié)果IP可能不同,合并相同的結(jié)果IP并記錄次數(shù),存入該域名列表。本領(lǐng)域技術(shù)人員可以知曉,上述預(yù)處理過(guò)程通過(guò)現(xiàn)有技術(shù)中的處理模塊均可實(shí)現(xiàn),在此不再贅述。

      如圖2所示,在本實(shí)施例中,所述遞歸處理包括在固定周期內(nèi)連續(xù)對(duì)遞歸列表發(fā)起請(qǐng)求,對(duì)連續(xù)請(qǐng)求結(jié)果的IP地址進(jìn)行篩選:

      如果沒(méi)有符合優(yōu)先應(yīng)答的結(jié)果,則放棄對(duì)該域名的后續(xù)操作,直到下一個(gè)周期重新執(zhí)行;

      如果有符合優(yōu)先應(yīng)答的結(jié)果,則將該域名的對(duì)應(yīng)優(yōu)先應(yīng)答地址進(jìn)行引流,所述遞歸列表為偏差域名的詳細(xì)列表。

      在本實(shí)施例中,通過(guò)IP段劃分,判斷DNS日志中用戶(hù)的上網(wǎng)方式和用戶(hù)訪問(wèn)的最終服務(wù)器地址,所述IP段劃分包括將運(yùn)營(yíng)商網(wǎng)內(nèi)IP段按用戶(hù)端分為手機(jī)用戶(hù)IP端和互聯(lián)網(wǎng)用戶(hù)IP段;按服務(wù)端分為緩存服務(wù)器IP段、內(nèi)容分發(fā)網(wǎng)絡(luò)引入IP地址段和直連引入IP地址段。內(nèi)容分發(fā)網(wǎng)絡(luò)(Content Delivery Network,簡(jiǎn)稱(chēng)CDN),IP地址庫(kù)為運(yùn)營(yíng)商網(wǎng)內(nèi)IP段和國(guó)內(nèi)IP段,根據(jù)DNS流量流向分析系統(tǒng)的具體需求,將運(yùn)營(yíng)商網(wǎng)內(nèi)IP段按用戶(hù)端分為手機(jī)用戶(hù)IP端和互聯(lián)網(wǎng)用戶(hù)IP段,通過(guò)對(duì)不同IP段的劃分,能準(zhǔn)確的判斷DNS日志中用戶(hù)的上網(wǎng)方式和用戶(hù)訪問(wèn)的最終服務(wù)器地址。

      在本實(shí)施例中,當(dāng)流量調(diào)度發(fā)生異常時(shí),針對(duì)不同業(yè)務(wù)類(lèi)型、不同維度和/或不同指標(biāo)的異常數(shù)據(jù),進(jìn)行告警。包括全部資源告警,本省資源告警,通過(guò)各類(lèi)閾值來(lái)判斷指標(biāo)是否達(dá)到告警,便于及時(shí)查找流量異常的原因。本實(shí)施例提供針對(duì)不同業(yè)務(wù)類(lèi)型的告警數(shù)據(jù)展示功能,包含并不限于:集客、WLAN、手機(jī)3G、手機(jī)4G。提供針對(duì)不同維度的告警,包含公司流量異常,域流量異常,域名流量異常三個(gè)部分。提供針對(duì)不同指標(biāo)的告警,包含公司點(diǎn)擊率異常(變大或變小),出網(wǎng)率異常(變大或變小),出網(wǎng)次數(shù)異常(變大或變小)。

      在本實(shí)施例中,根據(jù)預(yù)設(shè)條件在海量DNS日志中過(guò)濾出符合預(yù)設(shè)條件的日志并導(dǎo)出,所述預(yù)設(shè)條件包括用戶(hù)請(qǐng)求時(shí)間、請(qǐng)求的IP地址和請(qǐng)求的域名。通過(guò)日志過(guò)濾,可根據(jù)時(shí)間,請(qǐng)求的IP和請(qǐng)求的域名,在原始海量日志中過(guò)濾出符合條件的日志,并以表格形式導(dǎo)出,便于分析排查。

      如圖3所示,相應(yīng)地,本發(fā)明還提供一種互聯(lián)網(wǎng)流量流向大數(shù)據(jù)智能分析決策系統(tǒng),包括:

      日志服務(wù)器,用于生成DNS日志數(shù)據(jù);

      數(shù)據(jù)采集模塊,用于采集互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù),所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)包括DNS日志數(shù)據(jù);

      數(shù)據(jù)存儲(chǔ)模塊,用于存儲(chǔ)互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù);

      數(shù)據(jù)處理模塊,用于對(duì)所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)進(jìn)行分析,根據(jù)用戶(hù)請(qǐng)求特定的域名,對(duì)引入偏差的域名進(jìn)行遞歸處理,并對(duì)遞歸的結(jié)果進(jìn)行篩選,將特定域名的目的IP重定向。

      預(yù)處理模塊,用于對(duì)互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)進(jìn)行預(yù)處理,所述互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)還包括基礎(chǔ)資料爬蟲(chóng)數(shù)據(jù)和IP段歸屬基礎(chǔ)庫(kù)數(shù)據(jù),所述預(yù)處理包括對(duì)DNS解析失敗和域名不合格的DNS日志數(shù)據(jù)進(jìn)行篩選、合并處理。

      日志過(guò)濾模塊,用于當(dāng)流量調(diào)度發(fā)生異常時(shí)進(jìn)行告警的告警模塊和根據(jù)用戶(hù)請(qǐng)求時(shí)間、請(qǐng)求的IP地址和請(qǐng)求的域名,在海量DNS日志中過(guò)濾出符合預(yù)設(shè)條件的日志并導(dǎo)出。

      數(shù)據(jù)處理模塊包括:

      遞歸模塊,用于在固定周期內(nèi)對(duì)連續(xù)請(qǐng)求結(jié)果的IP地址進(jìn)行篩選并將域名對(duì)應(yīng)的優(yōu)先應(yīng)答地址傳遞給流量引導(dǎo)模塊,

      流量引流模塊,用于保存優(yōu)先應(yīng)答地址對(duì)應(yīng)的該域名的優(yōu)化調(diào)度策略,遞歸模塊傳遞的域名進(jìn)行引流。

      在本實(shí)施例中,從本地DNS服務(wù)器中收集數(shù)據(jù)包,預(yù)處理模塊對(duì)數(shù)據(jù)包進(jìn)行處理,通過(guò)對(duì)數(shù)據(jù)包的處理后生成一個(gè)五元組數(shù)據(jù),即請(qǐng)求時(shí)間、用戶(hù)IP、請(qǐng)求域名、解析結(jié)果IP、解析是否正確。按照預(yù)先設(shè)計(jì)的命名規(guī)則、日志格式、文件大小、時(shí)間間隔,生成需要上傳的日志文件。日志服務(wù)器每五分鐘上傳一次日志文件,多少臺(tái)服務(wù)器就多少個(gè)文件,每個(gè)文件壓縮后大概在300M左右定時(shí)提供文件上發(fā)信息報(bào)告,包括上發(fā)時(shí)間、文件名稱(chēng)、文件大小、是否成功等信息。定期對(duì)上發(fā)成功的文件進(jìn)行刪除。優(yōu)選地,日志文件在本地存儲(chǔ)24小時(shí)后刪除。將生成的日志文件和傳輸完整性判斷文件上發(fā)到數(shù)據(jù)處理模塊。在約定的時(shí)間內(nèi)把壓縮后的日志文件上傳到數(shù)據(jù)處理模塊進(jìn)行處理。

      在本實(shí)施例中,通過(guò)獲取有偏差域名的詳細(xì)列表,將列表發(fā)布給遞歸模塊,遞歸模塊在固定周期內(nèi)連續(xù)遞歸請(qǐng)求N次,對(duì)N次結(jié)果的IP地址進(jìn)行篩選。如果有網(wǎng)內(nèi)地址則將網(wǎng)內(nèi)地址解析給LDNS,如果沒(méi)有網(wǎng)內(nèi)地址則不做任何策略。該部分的技術(shù)難點(diǎn)在于如何界定一個(gè)域名級(jí)的資源調(diào)度有偏差,通過(guò)日志分析獲得前一天的日志中解析將結(jié)果中即包含了網(wǎng)內(nèi)地址也包含了網(wǎng)外地址的認(rèn)定為有偏差,如果直接將有偏差的域名進(jìn)行強(qiáng)制應(yīng)答一個(gè)固定的結(jié)果解析給用戶(hù)有潛在的風(fēng)險(xiǎn),因?yàn)椴荒艽_定這些網(wǎng)內(nèi)地址在一定時(shí)間周期后是否可用,所以本實(shí)施例將這些偏差域名列出來(lái),具體響應(yīng)用戶(hù)什么結(jié)果,由實(shí)時(shí)的多次遞歸結(jié)果來(lái)判斷,同時(shí)嚴(yán)格按照域名請(qǐng)求的TTL對(duì)返回結(jié)果的有效性進(jìn)行控制,確保資源有效,即在網(wǎng)內(nèi)的解析地址過(guò)期前進(jìn)行多次遞歸,確定下一個(gè)TTL周期內(nèi)給用戶(hù)返回的最佳地址。

      最后說(shuō)明的是,以上實(shí)施例僅用以說(shuō)明本發(fā)明的技術(shù)方案而非限制,盡管參照較佳實(shí)施例對(duì)本發(fā)明進(jìn)行了詳細(xì)說(shuō)明,本領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解,可以對(duì)本發(fā)明的技術(shù)方案進(jìn)行修改或者等同替換,而不脫離本發(fā)明技術(shù)方案的宗旨和范圍,其均應(yīng)涵蓋在本發(fā)明的權(quán)利要求范圍當(dāng)中。

      當(dāng)前第1頁(yè)1 2 3 
      網(wǎng)友詢(xún)問(wèn)留言 已有0條留言
      • 還沒(méi)有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
      1