內(nèi)存計算在DSP中的應用分析
1 內(nèi)存計算:對海量數(shù)據(jù)進行實時處理
今天,許多企業(yè)已經(jīng)面臨越來越多的數(shù)據(jù)要處理,而且對這些數(shù)據(jù)需要進行實時的分析。為此,SAP一直在重新構(gòu)想數(shù)據(jù)倉庫的運行模式,并提出了內(nèi)存計算的理念。那么什么是內(nèi)存計算呢,我們不妨從兩個角度來理解。
首先,從計算存儲技術(shù)的角度看,由于服務器在處理數(shù)據(jù)時,CPU首先會從其緩存中找數(shù)據(jù),緩存中找不到,再從內(nèi)存中找,內(nèi)存里沒有,再從硬盤上讀取。在傳統(tǒng)數(shù)據(jù)庫查詢中,磁盤訪問時間是一個主要的瓶頸。研究發(fā)現(xiàn),如果讓查詢在讀寫速度快很多倍的內(nèi)存中進行,而不用訪問物理磁盤,將會大大提升處理性能。試想一下,對于商業(yè)智能應用而言,由于數(shù)據(jù)庫一般都較大,少則幾個GB,多則成百上千個GB,如果把整個數(shù)據(jù)庫都搬到內(nèi)存中去運行,又會怎樣呢?
因此,所謂“內(nèi)存計算”,實質(zhì)上就是CPU直接從內(nèi)存而不是硬盤上讀取數(shù)據(jù),進行計算、分析,是對傳統(tǒng)數(shù)據(jù)處理方式的一種加速。內(nèi)存計算非常適合處理海量的數(shù)據(jù),以及需要實時獲得結(jié)果的數(shù)據(jù),比如可以將一個企業(yè)近十年幾乎所有的財務、營銷、市場等各方面的數(shù)據(jù)一次性地保存在內(nèi)存里,并在此基礎(chǔ)上進行數(shù)據(jù)的分析。當企業(yè)需要做快速的賬務分析,或要對市場進行分析時,內(nèi)存計算就能夠快速的按照需求完成。
其次,從應用的角度來看,在商業(yè)智能方案中,在線交易處理(OLTP)和在線分析處理(OLAP)是兩種不同的應用,其中OLTP系統(tǒng)需要對發(fā)生的業(yè)務進行實時記錄,因此要處理的是大量簡單、小規(guī)模、同時發(fā)生的交易;而OLAP系統(tǒng)是對OLTP提供的數(shù)據(jù)進行分析,以支持業(yè)務決策,因此處理的交易數(shù)量相對較少,但更為復雜。使用內(nèi)存計算的SAP HANA的交易型和分析型引擎能夠同時應對這兩種應用,內(nèi)存計算技術(shù)實際上是把現(xiàn)在交易型的數(shù)據(jù)庫和分析型的數(shù)據(jù)庫合并為一個內(nèi)存數(shù)據(jù)庫,其結(jié)構(gòu)如下圖所示:
談到SAP HANA的具體應用場景,SAP中國區(qū)首席技術(shù)官張俠曾對媒體舉過這樣一個例子:航空公司。航空公司的主要特點就是信息量大,且有很多實時信息,一般會有這樣兩個系統(tǒng):一是客戶相關(guān)的系統(tǒng),里面有各種客戶的信息,如誰是金卡會員,誰希望坐在靠窗或者靠走道的座位,商務旅客與私人休閑旅客的不同偏好等等;另一個是定票系統(tǒng),定票系統(tǒng)會把每個航班對應的飛機型號、座位數(shù)量、飛機維修、天氣等等信息綜合在一起。高速的內(nèi)存計算技術(shù)能夠綜合所有以上這些情況,根據(jù)不同場景進行更好的匹配。比如,利用高速分析的能力對航班晚點的情況進行調(diào)配,通過分析發(fā)現(xiàn)某些型號的飛機可以在某個飛機轉(zhuǎn)場。這樣就能把天氣等各種影響降至最低,使客戶盡可能坐在他喜歡坐的位置上,并設(shè)計好定價策略做到既能滿足客戶的需求,又能為航空公司帶來更好效益。
據(jù)了解,SAP BusinessObjects戰(zhàn)略性人力規(guī)劃是HANA中的第一款新產(chǎn)品,使企業(yè)管理者可以實時模擬相關(guān)業(yè)務場景,快速分析復雜數(shù)據(jù)關(guān)系并審視被建議的組織結(jié)構(gòu)調(diào)整對企業(yè)業(yè)務產(chǎn)生的影響。企業(yè)管理者和人力資源高管可以使用預測性建模功能模擬企業(yè)人員總數(shù)需怎樣增長、人員配置應如何變化等,這使他們能就人員配置或調(diào)整做出基于數(shù)據(jù)的明智決策,尤其是在企業(yè)一項收購行為完成以后或者是當企業(yè)要進入一個新市場領(lǐng)域的時期。
2 X86服務器如何滿足內(nèi)存計算需求
通過上面的分析,我們知道,為優(yōu)化海量數(shù)據(jù)實時處理的內(nèi)存計算模式對于底層服務器提出了更高的要求:CPU夠不夠快?內(nèi)存夠不夠大?系統(tǒng)夠不夠穩(wěn)定可靠?實際上,英特爾與SAP早在10多年前就已經(jīng)開始合作,不斷共同推動IA架構(gòu)服務器上SAP應用的性能。下面我們就來看看最新的英特爾至強E7又是如何針對SAP HANA進行優(yōu)化的。
評論