關注我們牛年牛氣沖天

北京時間6月17日9時22分，神舟十二號載人飛船發射成功！這是時隔5年之後，中國再一次把航天員送入太空。這一次的與衆不同之處還在於，三名航天員將成爲中國空間站天和核心艙的首批入駐人員，在軌駐留3個月。

從“天問一號”首次進行火星探測，到此次航天員首次駐留空間站，我國在宇宙探測方面不斷實現驚人的突破。而在這背後，從宇宙探索到深空探祕，意味着海量數據的產生、存儲和分析，高性能計算（HPC）與存儲就成了不可或缺的工具。

HPC與數據分析的深度結合，推動了HPDA（High Performance Data Analytics，高性能數據分析）的興起和快速發展。作爲HPC領域最具潛力的一個分支，HPDA正在航天遙感、天氣與氣候建模、個性化醫療、金融欺詐檢測、電子商務等多個領域得到越來越廣泛且深入的應用。

HPDA熱起來

HPDA其實並不是一個新概念。早在2014年，市場研究機構IDC就已經指出，各大行業頭部企業正在積極利用HPC技術向大數據分析類工作負載發起挑戰，而HPDA存儲作爲高端存儲市場的一股清流，將迎來迅速發展的機遇期。最新的市場調研發現，67%的HPC用戶都在使用HPDA，而非傳統的HPC。HPDA快速增長的最主要動力就是HPC最擅長的數據密集型應用。

在人工智能、大數據時代，企業對於數據有了更深刻的認知——數據已成爲企業的戰略資產。全球知名市場研究機構ESG的調查數據顯示，23%的企業認爲，數據就是他們的業務，另有26%的企業認爲，數據既是其業務，也用於支持其業務。數據驅動業務不再是一句空話，而數據以及數據存儲對於推動企業業務的創新與發展至關重要。

若想充分挖掘數據的潛能和價值，首先要有海量的數據，其次還要有強大的算力和AI能力，支撐對於數據的分析。一句話，讓數據轉變成具有意義的洞察，就需要藉助HPC這樣的技術進行實時的分析、預測。從以計算爲中心到以數據中心心，HPC正在發生具有轉折性意義的演進，這是數據密集型應用需求的驅動，也是大數據、AI等技術發展使然。

ESG的調查數據顯示，63%的受訪者表示，2021年在人工智能和機器學習方面的支出比上一年有所增加，這將導致數據量的進一步增長。你可能想象不到，L4自動駕駛數據集已經增長到EB級，單個現代基因組測序儀每天能夠生成6TB的數據……海量數據的處理爲HPDA創造了巨大的商機，商業智能、數據發現與挖掘、搜索分析、行爲分析、交互式查詢等都成了最好的用武之地。

真金不怕火煉

但是任何事物的發展都具有兩面性，數據密集型業務的快速發展，讓存儲系統的壓力與日俱增。隨着數據量激增，尤其是非結構化數據的爆炸性增長，數據分析效率、數據管理、安全存儲等成爲亟待突破的瓶頸。

誰能化解數據密集型HPC帶來的存儲挑戰？HPDA存儲唯有“輕裝上陣”——更經濟、更可靠，同時還能有效處理各種負載，即使面對HPC業務流程細分和多種應用場景集成產生的複雜混合負載，也能遊刃有餘，既能從容應對大文件、高帶寬的需求，也能在小文件、高IOPS的環境中大顯身手。

那麼，在一衆HPDA存儲中，誰又能堪當大任呢？只用實際測試和驗證效果說話的ESG給出了它的解析。

在存儲領域有很多調研和評測機構，它們會從不同的維度對存儲系統給出評價，有的以IOPS性能測試見長，有的以用戶的實際評價作爲評判標準，ESG則獨樹一幟，通常會搭建嚴格的接近於真實的應用環境，對產品進行全面測試後纔會得出最終結論。經過這樣一番洗禮，這回華爲OceanStor Pacific下一代HPDA存儲真的要“出圈”了。

ESG從性能、可靠性、數據管理以及整體擁有成本（TCO）等多個維度對華爲 OceanStor Pacific進行了一次全面“體檢”，還專門測試了OceanStor Pacific爲數據密集型應用提供不同協議訪問的性能，並對五年TCO進行了深入分析。

ESG測試環境

真金不怕火煉，OceanStor Pacific經受住了考驗。在不影響存儲性能的情況下，OceanStor Pacific可以有效滿足用戶對於海量非結構化數據在數據保護、數據遷移、硬件成本和快速增長等方面的核心需求。在模擬真實應用環境的測試中，單套OceanStor Pacific存儲系統能夠爲多種業務提供高性能、低時延，並在多協議間提供一致的語義。ESG對於OceanStor Pacific在面對多種文件/對象協議時均能提供一致的性能，且所有協議都幾乎性能無損這一點印象十分深刻。

以前，企業用戶在處理海量非結構化數據時，都習慣採用橫向擴展NAS系統。但是隨着工作負載越來越複雜，數據量持續增加，用戶對於存儲性能的一致性、靈活擴展能力、成本效益以及可用性等提出了更高的要求。

比如在汽車、飛機的設計和製造方面，越來越多的企業希望用HPC技術支撐複雜的設計、分析，進一步提高產品的設計質量；在商業領域，企業傾向於藉助大數據、深度學習等技術，對客戶行爲進行畫像，或者進行更加細粒度和精確的搜索等。這些都是最典型的HPDA存儲的應用場景。ESG建議用戶，採用專爲HPDA設計的下一代存儲系統，在提升可用性的同時可以減少工作量，提高容量和性能的同時還能有效降低存儲TCO。而華爲OceanStor Pacific正是HPDA業務的理想之選。

魚與熊掌可兼得

俗話說，光說不練假把式。華爲OceanStor Pacific在ESG的測試中到底表現如何？

OceanStor Pacific存儲系統的獨特之處在於，能夠提供各種數據密集型場景所需的高性能和靈活訪問能力，包括HPC、AI/ML、大數據分析、大規模虛擬化、內容存儲、地震分析、生命科學、金融，以及任何需要存儲海量數據並提供高性能、多協議訪問的應用。特別需要指出的是，OceanStor Pacific的企業級可用性功能在軟件中實施，從而提供一個平臺以極低的延遲對業務關鍵型及任務關鍵型負載與海量數據集進行整合。

ESG的實際測試有力地驗證了上述OceanStor Pacific的定位和特色，OceanStor Pacific確實可以爲超大數據集提供持續的高性能，並充分支持以數據爲中心的實際應用。

先看對多協議的支持。在自動駕駛、精密醫療、智能製造等典型的企業HPDA應用場景中，數據流程的不同階段通常會使用到文件、對象和大數據（HDFS）等服務。

像OceanStor Pacific這樣具有多協議互通能力的存儲系統，能夠無縫支持NFS、CIFS、HDFS和S3等協議，並允許應用通過多個協議共享一份數據，從而達到提高分析效率的目的，在無數據遷移的情況下，可以通過多個協議進行讀取，同時保證語義無損和高穩定的性能。ESG的測試表明，OceanStor Pacific在單個高性能高可用平臺上具有整合異構數據密集型負載的超強能力，能夠同時處理多種負載，並且保證使用多種協議訪問的穩定的數據性能。

再看對混合負載的支持。通常情況下，HPC負載具有多樣性的特點，比如地震數據處理需要高帶寬，而對已處理數據的解釋則需要高IOPS。帶寬瓶頸可能是由網絡、磁盤或內存不足造成的，而IOPS瓶頸則可能是因CPU算力不足或調用堆棧深度等軟件問題引起的。解決不同的性能瓶頸，這對華爲OceanStor Pacific來說並不是一件難事。ESG的測試顯示，OceanStor Pacific文件系統採用元數據分佈、大小I/O分流、磁盤索引等技術，可以同時滿足高帶寬和高IOPS的需求，可謂魚與熊掌兼得。

最後驗證高密度設計和TCO。爲了有效應對海量數據的增長，存儲的高密度設計幾乎成了標配。華爲OceanStor Pacific採用了下一代高密度硬件架構：華爲自研的half-palm NVMe盤，將橫截面減少65%；領先的散熱材料、創新的風扇佈局和全新的結構設計，可以將整個存儲系統的冷卻效率提高30%；採用EC和端到端數據完整性字段（DIF），將磁盤利用率提升至91.6%……

根據不同的業務場景，OceanStor Pacific提供兩種高密度硬件架構配置：一個是高密性能型的OceanStor Pacific 9950，每機箱可提供高達160GB/s帶寬和200萬IOPS的極速數據訪問；另一個是高密容量型的OceanStor Pacific 9550，在5U空間內可提供超過1.6PB的裸容量。

在實際測試中，ESG將華爲OceanStor Pacific 9550的預估存儲成本與傳統的橫向擴展NAS系統進行了建模和比較。模型只考慮五年內會發生的成本，而容量/性能增長需求以及IT運營成本則不在考慮之列。結果顯示，華爲OceanStor Pacific的五年TCO比橫向擴展NAS系統低61%，其中最大的節省來自託管成本（64%），其他如資本支出（CapEx）節省62%，供電和冷卻節省32%。

“存力”也要強大

IDC的統計數據顯示，30%的HPC是用於數據分析，傳統HPC走向HPDA已是大勢所趨。大數據、人工智能、深度學習等的興起，加速了這一演進的速度。從金融、電子商務到科學計算、衛星遙感，各類數據密集型HPC應用對存儲提出了新的挑戰。僅有超強的HPC算力還不夠，必須要有同樣強大的“存力”與之相匹配。穩定的高性能、多協議融合訪問、支持混合負載訪問、靈活的可擴展性，以及更低的TCO等，這正是HPDA存儲所擅長的，也是華爲OceanStor Pacific脫穎而出的關鍵所在。