一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法
【專利說明】一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法
[0001]
技術(shù)領(lǐng)域
[0002]本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域,具體涉及一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法。
[0003]
【背景技術(shù)】
[0004]現(xiàn)在電子商務(wù)發(fā)展的日趨成熟與完善,且業(yè)已成為了現(xiàn)代人的主要購物方式。但是,電子商戶內(nèi)所蘊含的大量數(shù)據(jù),統(tǒng)稱為云數(shù)據(jù),但是云數(shù)據(jù)量大而且紛繁復(fù)雜,如何從數(shù)量龐大、有用與無用數(shù)據(jù)交雜的眾多數(shù)據(jù)中進行匯總整理,以方便決策,是現(xiàn)在的研究熱點。
[0005]
【發(fā)明內(nèi)容】
[0006]本發(fā)明的目的在于克服上述問題,提供一種方便用戶查詢與追蹤、對網(wǎng)上商戶的所有數(shù)據(jù)進行有效整合的適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法。
[0007]為了實現(xiàn)上述目的,本發(fā)明所采用的技術(shù)方案為:一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,包括如下步驟:
(1)通過數(shù)據(jù)采集服務(wù)器采集電子商戶平臺上的各種數(shù)據(jù),將各數(shù)據(jù)按照關(guān)鍵字、生成時間分類并排序;
(2)將按照關(guān)鍵字、生成時間分類并排序的數(shù)據(jù)寫入存儲模塊,當(dāng)待寫入的數(shù)據(jù)與存儲模塊中已有的數(shù)據(jù)重復(fù)時,存儲模塊拒絕此數(shù)據(jù)的寫入;
(3)通過讀取模塊讀取存儲模塊內(nèi)的數(shù)據(jù)并輸出至數(shù)據(jù)處理模塊,所述的數(shù)據(jù)處理模塊提取數(shù)據(jù)的生成時間、關(guān)鍵字以生成分類排序列表,分類排序列表便于用戶查詢與系統(tǒng)追蹤;所述的數(shù)據(jù)處理模塊還計算數(shù)據(jù)的總量并生成相應(yīng)總量列表;
(4)將經(jīng)過數(shù)據(jù)處理模塊處理的分類排序列表與總量列表通過通訊模塊連接以太網(wǎng)。
[0008]前述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,在步驟(I)中,所述的電子商戶平臺包括但不限于阿里巴巴、京東、唯品會、亞馬遜。
[0009]前述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,在步驟(2)中,所述的生成時間為數(shù)據(jù)的生成時間,所述的關(guān)鍵字信息包含在數(shù)據(jù)中。
[0010]前述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,在步驟(3)中,所述的數(shù)據(jù)的總量為產(chǎn)品的月銷售額、訂單量、月客戶群數(shù)量、庫存量、各個客戶的地域、單月購買數(shù)量、單月購買數(shù)額。
[0011]前述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,所述的分類排序列表與總量列表定時更新。
[0012]前述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,所述的存儲模塊中數(shù)據(jù)定時更新。
[0013]與現(xiàn)有技術(shù)相比,本發(fā)明的有益效果是:設(shè)立定時更新的分類排序列表與總量列表,方便用戶查詢與追蹤,而且對總量進行計算,將網(wǎng)上商戶的所有數(shù)據(jù)進行有效整合,以方便決策。
[0014]
【具體實施方式】
[0015]下面結(jié)合具體實施例對本發(fā)明作進一步說明。
[0016]—種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,包括如下步驟:
(1)通過數(shù)據(jù)采集服務(wù)器采集電子商戶平臺上的各種數(shù)據(jù),將各數(shù)據(jù)按照關(guān)鍵字、生成時間分類并排序;
(2)將按照關(guān)鍵字、生成時間分類并排序的數(shù)據(jù)寫入存儲模塊,當(dāng)待寫入的數(shù)據(jù)與存儲模塊中已有的數(shù)據(jù)重復(fù)時,存儲模塊拒絕此數(shù)據(jù)的寫入;
(3)通過讀取模塊讀取存儲模塊內(nèi)的數(shù)據(jù)并輸出至數(shù)據(jù)處理模塊,所述的數(shù)據(jù)處理模塊提取數(shù)據(jù)的生成時間、關(guān)鍵字以生成分類排序列表,分類排序列表便于用戶查詢與系統(tǒng)追蹤;所述的數(shù)據(jù)處理模塊還計算數(shù)據(jù)的總量并生成相應(yīng)總量列表;
(4)將經(jīng)過數(shù)據(jù)處理模塊處理的分類排序列表與總量列表通過通訊模塊連接以太網(wǎng)。
[0017]在步驟(I)中,所述的電子商戶平臺包括但不限于阿里巴巴、京東、唯品會、亞馬遜。
[0018]在步驟(2)中,所述的生成時間為數(shù)據(jù)的生成時間,所述的關(guān)鍵字信息包含在數(shù)據(jù)中。
[0019]在步驟(3)中,所述的數(shù)據(jù)的總量為產(chǎn)品的月銷售額、訂單量、月客戶群數(shù)量、庫存量、各個客戶的地域、單月購買數(shù)量、單月購買數(shù)額。
[0020]所述的分類排序列表與總量列表定時更新。所述的存儲模塊中數(shù)據(jù)定時更新。
[0021]上述實施例不以任何形式限制本發(fā)明,凡采用等同替換或等效變換的方式所獲得的技術(shù)方案,均落在本發(fā)明的保護范圍。
【主權(quán)項】
1.一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,包括如下步驟: (1)通過數(shù)據(jù)采集服務(wù)器采集電子商戶平臺上的各種數(shù)據(jù),將各數(shù)據(jù)按照關(guān)鍵字、生成時間分類并排序; (2)將按照關(guān)鍵字、生成時間分類并排序的數(shù)據(jù)寫入存儲模塊,當(dāng)待寫入的數(shù)據(jù)與存儲模塊中已有的數(shù)據(jù)重復(fù)時,存儲模塊拒絕此數(shù)據(jù)的寫入; (3)通過讀取模塊讀取存儲模塊內(nèi)的數(shù)據(jù)并輸出至數(shù)據(jù)處理模塊,所述的數(shù)據(jù)處理模塊提取數(shù)據(jù)的生成時間、關(guān)鍵字以生成分類排序列表,分類排序列表便于用戶查詢與系統(tǒng)追蹤;所述的數(shù)據(jù)處理模塊還計算數(shù)據(jù)的總量并生成相應(yīng)總量列表; (4)將經(jīng)過數(shù)據(jù)處理模塊處理的分類排序列表與總量列表通過通訊模塊連接以太網(wǎng)。2.根據(jù)權(quán)利要求1所述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,其特征在于,在步驟(1)中,所述的電子商戶平臺包括但不限于阿里巴巴、京東、唯品會、亞馬遜。3.根據(jù)權(quán)利要求1所述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,其特征在于,在步驟(2)中,所述的生成時間為數(shù)據(jù)的生成時間,所述的關(guān)鍵字信息包含在數(shù)據(jù)中。4.根據(jù)權(quán)利要求1所述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,其特征在于,在步驟(3)中,所述的數(shù)據(jù)的總量為產(chǎn)品的月銷售額、訂單量、月客戶群數(shù)量、庫存量、各個客戶的地域、單月購買數(shù)量、單月購買數(shù)額。5.根據(jù)權(quán)利要求1所述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,其特征在于,所述的分類排序列表與總量列表定時更新。6.根據(jù)權(quán)利要求1所述的一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,其特征在于,所述的存儲模塊中數(shù)據(jù)定時更新。
【專利摘要】本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域,具體涉及一種適用于大數(shù)據(jù)分析的數(shù)據(jù)處理方法,包括如下步驟:通過數(shù)據(jù)采集服務(wù)器采集電子商戶平臺上的各種數(shù)據(jù),將各數(shù)據(jù)按照關(guān)鍵字、生成時間分類并排序;將按照關(guān)鍵字、生成時間分類并排序的數(shù)據(jù)寫入存儲模塊;通過讀取模塊讀取存儲模塊內(nèi)的數(shù)據(jù)并輸出至數(shù)據(jù)處理模塊,所述的數(shù)據(jù)處理模塊提取數(shù)據(jù)的生成時間、關(guān)鍵字以生成分類排序列表,分類排序列表便于用戶查詢與系統(tǒng)追蹤;所述的數(shù)據(jù)處理模塊還計算數(shù)據(jù)的總量并生成相應(yīng)總量列表;將經(jīng)過數(shù)據(jù)處理模塊處理的分類排序列表與總量列表通過通訊模塊連接以太網(wǎng)。與現(xiàn)有技術(shù)相比,本發(fā)明設(shè)立定時更新的分類排序列表與總量列表,方便用戶查詢與追蹤,而且方便決策。
【IPC分類】G06Q30/02
【公開號】CN105447719
【申請?zhí)枴緾N201510858892
【發(fā)明人】夏鋼, 方芳, 燕青, 陳斌, 丁令
【申請人】蘇州銘冠軟件科技有限公司
【公開日】2016年3月30日
【申請日】2015年12月1日