開放x86架構為中石化掘金數據分析提速
2023-07-05 01:07:26 3
石油是現代工業文明的動力之源。對於中國這樣一個高速發展的經濟體，每年消耗的石油超過5億噸。這些石油從哪來?如何煉化成工業所使用的不同標號的汽油、柴油和煤油?它們又是怎樣銷售的?在這個複雜的體系中，中國石化集團在其中的作用不言而喻。
中石化在全國擁有超過3萬個加油站，年營收超過2萬億人民幣，每年向市場銷售上億噸各類油品，同時每年也會生產上千萬噸乙烯及合成樹脂等化工原料。與此同時，中石化還涉及石油勘探、開採等大量其他業務。可以說中石化是一家名副其實的超級企業。
而對於這樣一家上市企業，每月、每季、每年的財務、銷售情況都需要進行詳細的統計以便發布財報和審計之用，這家超級企業是如何完成這一看似不可能的任務的?
中石化：數據分析壓力拷問IT基礎架構
對於中石化這樣體量的企業來說，想要用人工完成銷售額的統計和匯總工作依然不可能，信息化是唯一的出路。而另一方面，隨著公司經營理念的發展，企業管理層在經營決策時也更加依賴業務數據報表以及相關的預測數據，讓任何決策都能夠有理有據，保證國有資產及能夠造福人民、保障國計民生又能夠在經營過程中實現保值增值。由此產生的數據分析需求更是對IT系統造成了難以想像的壓力。
其實早在2005年，中石化就開始基於SAP的Business Warehouse工具構建自己的數據倉庫系統。而經過幾年的運行之後，這一數據倉庫已經積累了超過60TB的業務數據。這些數據主要服務於油氣勘探和開採、煉油業務、石化產品、成品油分銷、財務部、物裝部等各個部門，整套系統的總用戶數超過19000個。就如同中石化本身一樣，這套SAP的BW數據倉庫同樣也是個超級工程。
中石化積累的這60TB數據既是生產銷售過程的忠實記錄，同時也是企業最寶貴的財富，任何關於企業業務的深層次洞察皆來自於對這些數據的分析。因此，如何更快獲得銷售數據統計以及根據所作出的分析報告就成為了中石化積極應對市場變化，提高企業管理經營效率的關鍵所在。
新需求帶來的IT轉型
2014年之前，中石化採用的是2008年採購的IBM P595，這幾乎是當時中國能夠買到的最高端的小型機系統，其穩定性和單機性能在當時都處於頂尖水平。
在實際的業務運行過程中，中石化的數據倉庫系統需要在白天收集全國各個部門匯總來的實時供銷數據，然後利用晚上的時間對這些數據進行匯總和分析，以便管理層能夠在第二天一早得到第一手報告。
但隨著中石化業務線的擴展以及數據總量的增加，IBM高端小型機系統已經無法處理海量的數據，其結果就是數據報表的推遲和業務決策的滯後，本應在第二天一早拿到的報表被拖延到了第二天下午三點。而在月底結算期間，系統壓力更大，進程更加拖延。
於是，中石化開始嘗試應用SAP HANA內存資料庫來提升數據分析的效率。通過將所有數據放在系統內存中進行計算和分析，整個系統的運行效率將獲得極大的提升，徹底消除瓶頸。運行這一系統的非常好的平臺已不再是過去的小型機，而是擁有海量內存和先進RAS特性的新一代x86系統。
為此，石化盈科(中石化與電訊盈科合資成立的IT服務企業，主要承接中石化的信息化工程)、SAP(軟體提供商)、華為(設備提供商)和英特爾需要合力為中石化的數據倉庫系統來一次RISC to IA的大升級。而升級之後，中石化也將擺脫過去的系統性能瓶頸，並獲得新的數據分析能力。這次升級必須成功。
借力數據分析一體機重塑IT底層架構
在這場不能失敗的系統升級中，基於x86架構的華為Fusion Cube大數據融合一體機大顯身手。而在這套融合基礎架構中擔任核心位置的便是華為FusionServer RH5885H伺服器。
通過採用新一代英特爾至強E7處理器，FusionServer RH5885H伺服器不僅具有更強的計算能力，更獲得了海量的內存支持和強大的橫向擴展能力。這些特性使得IT系統可以通過簡單的橫向擴展來應對更大的業務需求。
在實際部署過程中，為了完成對中石化龐大資料庫的加載，每臺FusionServer RH5885H伺服器配備了2TB內存，而SAP也對這一超級系統做了現場認證工作。這是SAP HANA軟體首次運行在單節點2TB內存的系統之上。整套系統包含9個2TB節點，採用8+1的冗餘配置。除此之外，中石化還採用同樣配置部署了一套3+1的開發測試環境。所有系統均採用計算和存儲集群物理分離的方式部署，降低了部署難度，提高了靈活性。
同時，由於採用了英特爾至強E7處理器和華為開發的RAS2.0分析引擎，在FusionServer RH5885H伺服器中實現了53項RAS特性，內存失效率降低了97%，CPU失效率降低了94%。
經過一系列升級改造，中石化的新系統大大提升了運行效率，整體性能提升達到了3-5倍。
過去，所有數據分析工作中只有20%能夠在1分鐘之內完成，而現在，這一比例提升到了90%以上。同時，在所有分析工作中僅有1%的任務需耗時3分鐘以上，而過去，這一比例是25%。
藉助新系統，中石化管理團隊可以更快的獲得銷售數據匯總並以更高的速度產生基於數據的洞察，使企業管理和策略調整更接近實時，提升企業競爭力。而這種競爭力的提升更多的是源自英特爾至強E7處理器的強大能力。
