一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及大數(shù)據(jù)技術(shù)領(lǐng)域,具體涉及一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式。
【背景技術(shù)】
[0002]隨著科學(xué)技術(shù)的快速發(fā)展,借助互聯(lián)網(wǎng)的廣泛應(yīng)用,各種信息數(shù)據(jù)已經(jīng)散落到社會(huì)的各個(gè)角落,一方面給我們的生活帶來了知識(shí)、便捷,但一方面,面對(duì)這些海量的數(shù)據(jù),如何從中獲取我們需要的數(shù)據(jù)也成為了煩惱,特別是在大型行業(yè)軟件開發(fā)過程中,對(duì)于海量數(shù)據(jù)的篩選、處理,常用的大型關(guān)系型數(shù)據(jù)庫(kù)管理軟件,例如Oracle、SyBase總是遇到性能問題,無(wú)法快速的識(shí)別出有效數(shù)據(jù)。
【發(fā)明內(nèi)容】
[0003]本發(fā)明所要解決的技術(shù)問題是提供一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式。
[0004]為解決上述技術(shù)問題,本發(fā)明提供以下技術(shù)方案:一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式,建設(shè)大數(shù)據(jù)應(yīng)用平臺(tái),通過此平臺(tái)對(duì)外開放各個(gè)數(shù)據(jù)應(yīng)用服務(wù),支持各種協(xié)議接口,通過建立各個(gè)應(yīng)用子系統(tǒng)與大數(shù)據(jù)應(yīng)用平臺(tái)的數(shù)據(jù)交互,獲取應(yīng)用產(chǎn)生的海量數(shù)據(jù),并在此平臺(tái)上,提供支持各種協(xié)議、高性能的數(shù)據(jù)應(yīng)用服務(wù)接口。
[0005]在上述方案基礎(chǔ)上優(yōu)選,所述協(xié)議接口包括Web Service、Http、Socket、FTP、消息等多種形式。
[0006]在上述方案基礎(chǔ)上優(yōu)選,軟件都是采用ORACLE等主流關(guān)系型數(shù)據(jù)庫(kù),建立對(duì)應(yīng)的應(yīng)用系統(tǒng)及關(guān)系型數(shù)據(jù)庫(kù)。
[0007]在上述方案基礎(chǔ)上優(yōu)選,通過數(shù)據(jù)采集或消息中間件的方式,實(shí)時(shí)或準(zhǔn)實(shí)時(shí)采集數(shù)據(jù),并同時(shí)寫入基于Hadoop技術(shù)的的Hbase分布式數(shù)據(jù)庫(kù)或HDFS分布式文件系統(tǒng)。
[0008]在上述方案基礎(chǔ)上優(yōu)選,基于Hbase分布式數(shù)據(jù)庫(kù)和HDFS分布式文件系統(tǒng),進(jìn)行數(shù)據(jù)分析和封裝,采用的技術(shù)主要是消息緩存、流處理、分布式計(jì)算,提供各種數(shù)據(jù)服務(wù),包括數(shù)據(jù)查詢、抽取、剔重、排序、過濾、轉(zhuǎn)換等基礎(chǔ)服務(wù)。
[0009]在上述方案基礎(chǔ)上優(yōu)選,在大數(shù)據(jù)應(yīng)用平臺(tái)提供的基礎(chǔ)服務(wù)上,可進(jìn)行能力的封裝、整合,進(jìn)一步提供各種數(shù)據(jù)應(yīng)用服務(wù)接口,且可適配包括Web Service、Http、Socket、FTP等各種協(xié)議。
[0010]本發(fā)明與現(xiàn)有技術(shù)相比具有的有益效果是:解決了海量數(shù)據(jù)的分析和梳理功能,并在此基礎(chǔ)上,提供各項(xiàng)可定制的數(shù)據(jù)服務(wù)接口,對(duì)外屏蔽了復(fù)雜的數(shù)據(jù)處理過程,使得企業(yè)可以提供更加高效的信息服務(wù)。
【具體實(shí)施方式】
[0011]—種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式,建設(shè)大數(shù)據(jù)應(yīng)用平臺(tái),通過此平臺(tái)對(duì)外開放各個(gè)數(shù)據(jù)應(yīng)用服務(wù),支持各種協(xié)議接口,包括Web Service、Http、Socket、FTP、消息等多種形式,通過建立各個(gè)應(yīng)用子系統(tǒng)與大數(shù)據(jù)應(yīng)用平臺(tái)的數(shù)據(jù)交互,獲取應(yīng)用產(chǎn)生的海量數(shù)據(jù),并在此平臺(tái)上,提供支持各種協(xié)議、高性能的數(shù)據(jù)應(yīng)用服務(wù)接口,軟件都是采用ORACLE等主流關(guān)系型數(shù)據(jù)庫(kù),建立對(duì)應(yīng)的應(yīng)用系統(tǒng)及關(guān)系型數(shù)據(jù)庫(kù),通過數(shù)據(jù)采集或消息中間件的方式,實(shí)時(shí)或準(zhǔn)實(shí)時(shí)采集數(shù)據(jù),并同時(shí)寫入基于Hadoop技術(shù)的的Hbase分布式數(shù)據(jù)庫(kù)或HDFS分布式文件系統(tǒng),基于Hbase分布式數(shù)據(jù)庫(kù)和HDFS分布式文件系統(tǒng),進(jìn)行數(shù)據(jù)分析和封裝,采用的技術(shù)主要是消息緩存、流處理、分布式計(jì)算,提供各種數(shù)據(jù)服務(wù),包括數(shù)據(jù)查詢、抽取、剔重、排序、過濾、轉(zhuǎn)換等基礎(chǔ)服務(wù),在大數(shù)據(jù)應(yīng)用平臺(tái)提供的基礎(chǔ)服務(wù)上,可進(jìn)行能力的封裝、整合,進(jìn)一步提供各種數(shù)據(jù)應(yīng)用服務(wù)接口,且可適配包括Web Service,Http、Socket、FTP 等各種協(xié)議。
[0012]以上所述僅為本發(fā)明的較佳實(shí)施例而已,并不用以限制本發(fā)明,凡在本發(fā)明的精神和原則之內(nèi)所作的任何修改、等同替換和改進(jìn)等,均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
【主權(quán)項(xiàng)】
1.一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式,其特征在于,建設(shè)大數(shù)據(jù)應(yīng)用平臺(tái),通過此平臺(tái)對(duì)外開放各個(gè)數(shù)據(jù)應(yīng)用服務(wù),支持各種協(xié)議接口,通過建立各個(gè)應(yīng)用子系統(tǒng)與大數(shù)據(jù)應(yīng)用平臺(tái)的數(shù)據(jù)交互,獲取應(yīng)用產(chǎn)生的海量數(shù)據(jù),并在此平臺(tái)上,提供支持各種協(xié)議、高性能的數(shù)據(jù)應(yīng)用服務(wù)接口。2.根據(jù)權(quán)利要求1所述的一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式,其特征在于:所述協(xié)議接口包括Web Service、Http、Socket、FTP、消息等多種形式。3.根據(jù)權(quán)利要求1所述的一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式,其特征在于:軟件都是采用ORACLE等主流關(guān)系型數(shù)據(jù)庫(kù),建立對(duì)應(yīng)的應(yīng)用系統(tǒng)及關(guān)系型數(shù)據(jù)庫(kù)。4.根據(jù)權(quán)利要求1所述的一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式,其特征在于:通過數(shù)據(jù)采集或消息中間件的方式,實(shí)時(shí)或準(zhǔn)實(shí)時(shí)采集數(shù)據(jù),并同時(shí)寫入基于Hadoop技術(shù)的的Hbase分布式數(shù)據(jù)庫(kù)或HDFS分布式文件系統(tǒng)。5.根據(jù)權(quán)利要求1所述的一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式,其特征在于:基于Hbase分布式數(shù)據(jù)庫(kù)和HDFS分布式文件系統(tǒng),進(jìn)行數(shù)據(jù)分析和封裝,采用的技術(shù)主要是消息緩存、流處理、分布式計(jì)算,提供各種數(shù)據(jù)服務(wù),包括數(shù)據(jù)查詢、抽取、剔重、排序、過濾、轉(zhuǎn)換等基礎(chǔ)服務(wù)。6.根據(jù)權(quán)利要求1所述的一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式,其特征在于,在大數(shù)據(jù)應(yīng)用平臺(tái)提供的基礎(chǔ)服務(wù)上,可進(jìn)行能力的封裝、整合,進(jìn)一步提供各種數(shù)據(jù)應(yīng)用服務(wù)接口,且可適配包括Web Service、Http、Socket、FTP等各種協(xié)議。
【專利摘要】本發(fā)明涉及大數(shù)據(jù)技術(shù)領(lǐng)域,具體涉及一種行業(yè)應(yīng)用中基于大數(shù)據(jù)的一種應(yīng)用方式,建設(shè)大數(shù)據(jù)應(yīng)用平臺(tái),通過此平臺(tái)對(duì)外開放各個(gè)數(shù)據(jù)應(yīng)用服務(wù),支持各種協(xié)議接口,通過建立各個(gè)應(yīng)用子系統(tǒng)與大數(shù)據(jù)應(yīng)用平臺(tái)的數(shù)據(jù)交互,獲取應(yīng)用產(chǎn)生的海量數(shù)據(jù),并在此平臺(tái)上,提供支持各種協(xié)議、高性能的數(shù)據(jù)應(yīng)用服務(wù)接口,解決了海量數(shù)據(jù)的分析和梳理功能,并在此基礎(chǔ)上,提供各項(xiàng)可定制的數(shù)據(jù)服務(wù)接口,對(duì)外屏蔽了復(fù)雜的數(shù)據(jù)處理過程,使得企業(yè)可以提供更加高效的信息服務(wù)。
【IPC分類】G06F17/30
【公開號(hào)】CN105117393
【申請(qǐng)?zhí)枴緾N201410610861
【發(fā)明人】馬愛琳, 方賢軍
【申請(qǐng)人】合肥軒明信息科技有限公司
【公開日】2015年12月2日
【申請(qǐng)日】2014年11月4日