石油是現(xiàn)代工業(yè)文明的動(dòng)力之源。對(duì)于中國(guó)這樣一個(gè)高速發(fā)展的經(jīng)濟(jì)體,每年消耗的石油超過(guò)5億噸。這些石油從哪來(lái)?如何煉化成工業(yè)所使用的不同標(biāo)號(hào)的汽油、柴油和煤油?它們又是怎樣銷售的?在這個(gè)復(fù)雜的體系中,中國(guó)石化集團(tuán)在其中的作用不言而喻。
中石化在全國(guó)擁有超過(guò)3萬(wàn)個(gè)加油站,年?duì)I收超過(guò)2萬(wàn)億人民幣,每年向市場(chǎng)銷售上億噸各類油品,同時(shí)每年也會(huì)生產(chǎn)上千萬(wàn)噸乙烯及合成樹脂等化工原料。與此同時(shí),中石化還涉及石油勘探、開(kāi)采等大量其他業(yè)務(wù)。可以說(shuō)中石化是一家名副其實(shí)的超級(jí)企業(yè)。
而對(duì)于這樣一家上市企業(yè),每月、每季、每年的財(cái)務(wù)、銷售情況都需要進(jìn)行詳細(xì)的統(tǒng)計(jì)以便發(fā)布財(cái)報(bào)和審計(jì)之用,這家超級(jí)企業(yè)是如何完成這一看似不可能的任務(wù)的?
中石化:數(shù)據(jù)分析壓力拷問(wèn)IT基礎(chǔ)架構(gòu)
對(duì)于中石化這樣體量的企業(yè)來(lái)說(shuō),想要用人工完成銷售額的統(tǒng)計(jì)和匯總工作依然不可能,信息化是唯一的出路。而另一方面,隨著公司經(jīng)營(yíng)理念的發(fā)展,企業(yè)管理層在經(jīng)營(yíng)決策時(shí)也更加依賴業(yè)務(wù)數(shù)據(jù)報(bào)表以及相關(guān)的預(yù)測(cè)數(shù)據(jù),讓任何決策都能夠有理有據(jù),保證國(guó)有資產(chǎn)及能夠造福人民、保障國(guó)計(jì)民生又能夠在經(jīng)營(yíng)過(guò)程中實(shí)現(xiàn)保值增值。由此產(chǎn)生的數(shù)據(jù)分析需求更是對(duì)IT系統(tǒng)造成了難以想象的壓力。
其實(shí)早在2005年,中石化就開(kāi)始基于SAP的Business Warehouse工具構(gòu)建自己的數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)。而經(jīng)過(guò)幾年的運(yùn)行之后,這一數(shù)據(jù)倉(cāng)庫(kù)已經(jīng)積累了超過(guò)60TB的業(yè)務(wù)數(shù)據(jù)。這些數(shù)據(jù)主要服務(wù)于油氣勘探和開(kāi)采、煉油業(yè)務(wù)、石化產(chǎn)品、成品油分銷、財(cái)務(wù)部、物裝部等各個(gè)部門,整套系統(tǒng)的總用戶數(shù)超過(guò)19000個(gè)。就如同中石化本身一樣,這套SAP的BW數(shù)據(jù)倉(cāng)庫(kù)同樣也是個(gè)超級(jí)工程。
中石化積累的這60TB數(shù)據(jù)既是生產(chǎn)銷售過(guò)程的忠實(shí)記錄,同時(shí)也是企業(yè)最寶貴的財(cái)富,任何關(guān)于企業(yè)業(yè)務(wù)的深層次洞察皆來(lái)自于對(duì)這些數(shù)據(jù)的分析。因此,如何更快獲得銷售數(shù)據(jù)統(tǒng)計(jì)以及根據(jù)所作出的分析報(bào)告就成為了中石化積極應(yīng)對(duì)市場(chǎng)變化,提高企業(yè)管理經(jīng)營(yíng)效率的關(guān)鍵所在。
新需求帶來(lái)的IT轉(zhuǎn)型
2014年之前,中石化采用的是2008年采購(gòu)的IBM P595,這幾乎是當(dāng)時(shí)中國(guó)能夠買到的最高端的小型機(jī)系統(tǒng),其穩(wěn)定性和單機(jī)性能在當(dāng)時(shí)都處于頂尖水平。
在實(shí)際的業(yè)務(wù)運(yùn)行過(guò)程中,中石化的數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)需要在白天收集全國(guó)各個(gè)部門匯總來(lái)的實(shí)時(shí)供銷數(shù)據(jù),然后利用晚上的時(shí)間對(duì)這些數(shù)據(jù)進(jìn)行匯總和分析,以便管理層能夠在第二天一早得到第一手報(bào)告。
但隨著中石化業(yè)務(wù)線的擴(kuò)展以及數(shù)據(jù)總量的增加,IBM高端小型機(jī)系統(tǒng)已經(jīng)無(wú)法處理海量的數(shù)據(jù),其結(jié)果就是數(shù)據(jù)報(bào)表的推遲和業(yè)務(wù)決策的滯后,本應(yīng)在第二天一早拿到的報(bào)表被拖延到了第二天下午三點(diǎn)。而在月底結(jié)算期間,系統(tǒng)壓力更大,進(jìn)程更加拖延。
于是,中石化開(kāi)始嘗試應(yīng)用SAP HANA內(nèi)存數(shù)據(jù)庫(kù)來(lái)提升數(shù)據(jù)分析的效率。通過(guò)將所有數(shù)據(jù)放在系統(tǒng)內(nèi)存中進(jìn)行計(jì)算和分析,整個(gè)系統(tǒng)的運(yùn)行效率將獲得極大的提升,徹底消除瓶頸。運(yùn)行這一系統(tǒng)的最佳平臺(tái)已不再是過(guò)去的小型機(jī),而是擁有海量?jī)?nèi)存和先進(jìn)RAS特性的新一代x86系統(tǒng)。
為此,石化盈科(中石化與電訊盈科合資成立的IT服務(wù)企業(yè),主要承接中石化的信息化工程)、SAP(軟件提供商)、華為(設(shè)備提供商)和英特爾需要合力為中石化的數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)來(lái)一次RISC to IA的大升級(jí)。而升級(jí)之后,中石化也將擺脫過(guò)去的系統(tǒng)性能瓶頸,并獲得新的數(shù)據(jù)分析能力。這次升級(jí)必須成功。
借力數(shù)據(jù)分析一體機(jī)重塑IT底層架構(gòu)
在這場(chǎng)不能失敗的系統(tǒng)升級(jí)中,基于x86架構(gòu)的華為Fusion Cube大數(shù)據(jù)融合一體機(jī)大顯身手。而在這套融合基礎(chǔ)架構(gòu)中擔(dān)任核心位置的便是華為FusionServer RH5885H服務(wù)器。
通過(guò)采用新一代英特爾至強(qiáng)E7處理器,F(xiàn)usionServer RH5885H服務(wù)器不僅具有更強(qiáng)的計(jì)算能力,更獲得了海量的內(nèi)存支持和強(qiáng)大的橫向擴(kuò)展能力。這些特性使得IT系統(tǒng)可以通過(guò)簡(jiǎn)單的橫向擴(kuò)展來(lái)應(yīng)對(duì)更大的業(yè)務(wù)需求。
在實(shí)際部署過(guò)程中,為了完成對(duì)中石化龐大數(shù)據(jù)庫(kù)的加載,每臺(tái)FusionServer RH5885H服務(wù)器配備了2TB內(nèi)存,而SAP也對(duì)這一超級(jí)系統(tǒng)做了現(xiàn)場(chǎng)認(rèn)證工作。這是SAP HANA軟件首次運(yùn)行在單節(jié)點(diǎn)2TB內(nèi)存的系統(tǒng)之上。整套系統(tǒng)包含9個(gè)2TB節(jié)點(diǎn),采用8+1的冗余配置。除此之外,中石化還采用同樣配置部署了一套3+1的開(kāi)發(fā)測(cè)試環(huán)境。所有系統(tǒng)均采用計(jì)算和存儲(chǔ)集群物理分離的方式部署,降低了部署難度,提高了靈活性。
同時(shí),由于采用了英特爾至強(qiáng)E7處理器和華為開(kāi)發(fā)的RAS2.0分析引擎,在FusionServer RH5885H服務(wù)器中實(shí)現(xiàn)了53項(xiàng)RAS特性,內(nèi)存失效率降低了97%,CPU失效率降低了94%。
經(jīng)過(guò)一系列升級(jí)改造,中石化的新系統(tǒng)大大提升了運(yùn)行效率,整體性能提升達(dá)到了3-5倍。
過(guò)去,所有數(shù)據(jù)分析工作中只有20%能夠在1分鐘之內(nèi)完成,而現(xiàn)在,這一比例提升到了90%以上。同時(shí),在所有分析工作中僅有1%的任務(wù)需耗時(shí)3分鐘以上,而過(guò)去,這一比例是25%。
借助新系統(tǒng),中石化管理團(tuán)隊(duì)可以更快的獲得銷售數(shù)據(jù)匯總并以更高的速度產(chǎn)生基于數(shù)據(jù)的洞察,使企業(yè)管理和策略調(diào)整更接近實(shí)時(shí),提升企業(yè)競(jìng)爭(zhēng)力。而這種競(jìng)爭(zhēng)力的提升更多的是源自英特爾至強(qiáng)E7處理器的強(qiáng)大能力。