近日，曙光副總裁邵宗有在接受媒體采訪時表示：“高性能計算完美契合了大數(shù)據(jù)在運算能力、高性能存儲等方面需求，而大數(shù)據(jù)則給高性能計算提供了新型商業(yè)市場，有助于推動高性能計算拓展新的市場藍海，兩者在產業(yè)生態(tài)鏈上的緊密銜接可以很好的推進信息資源組織模式的深入變革與發(fā)展?！?/P>
高性能計算化解大數(shù)據(jù)應用挑戰(zhàn)
雖然大數(shù)據(jù)技術與大數(shù)據(jù)應用得到了快速的擴展，但是仍舊存在著很多問題，其中比較突出的是“4V”挑戰(zhàn)(容量、類型、速度、價值)。目前，大數(shù)據(jù)的容量可達到PB級，這些大容量數(shù)據(jù)的存儲、處理會對用戶的計算系統(tǒng)產生極大負擔，建立在普通計算能力基礎上的系統(tǒng)往往無法滿足大數(shù)據(jù)的需求，更無法為用戶獲取價值以實現(xiàn)領先于他人的優(yōu)勢。
邵宗有表示：“在應對大數(shù)據(jù)挑戰(zhàn)的過程中，高性能計算可以起到重要作用。從數(shù)據(jù)的存儲與處理的角度來說，采用高性能計算系統(tǒng)不僅可以大幅降低大容量存儲的成本，而且其處理數(shù)據(jù)、傳輸數(shù)據(jù)、恢復數(shù)據(jù)的速度會遠遠超過普通的計算系統(tǒng)。在過去完整恢復一塊硬盤的速度可能需要48個小時，
但融合了曙光高性能計算技術的存儲產品，能將時間控制在十幾分鐘，顯著降低了大規(guī)模集群存儲系統(tǒng)中用戶運維的壓力，提高了系統(tǒng)效率?！?/P>
此外，高性能計算還可以為大數(shù)據(jù)應用中的數(shù)據(jù)同化問題提供解決思路。在大數(shù)據(jù)采集系統(tǒng)中，可能各個采集設備采集的數(shù)據(jù)在格式與類型上都是不一樣的，將這些不同的數(shù)據(jù)進行統(tǒng)一會消耗大量的計算資源。而高性能計算在數(shù)據(jù)同化方面已經取得重要進展，其同化的速度和精確性已經能保持在一個很高的水平，其發(fā)展成果“嫁接”到大數(shù)據(jù)中會產生巨大的價值，并推動實現(xiàn)數(shù)據(jù)的組織和管理，基礎架構，決策支持和自動化界面和分析。
高性能計算和大數(shù)據(jù)將深入融合 推動實際應用
對于任何一種技術概念，應用都是其體現(xiàn)最終價值的落腳點。目前，大數(shù)據(jù)正在處于從概念到應用的過渡時期，大數(shù)據(jù)應用在產業(yè)成熟度、用戶接受度、系統(tǒng)易用性等方面都存在著很多障礙。大數(shù)據(jù)應用怎樣部署？大數(shù)據(jù)存儲的數(shù)據(jù)怎樣產生價值？如何將大數(shù)據(jù)分析后產生的結論應用到企業(yè)運營的決策之中？由于缺乏大規(guī)模應用的成熟案例與產業(yè)集群，金融用戶等行業(yè)用戶遲遲無法下定部署大數(shù)據(jù)的決心。
邵宗有指出：“相對于大數(shù)據(jù)來說，高性能計算在很多行業(yè)用戶中都得到了較早的部署與應用，其部署可以在軟硬件一體化平臺、數(shù)據(jù)存儲等方面為大數(shù)據(jù)應用打下良好的基礎。特別是高性能計算和大數(shù)據(jù)在內在邏輯上是相通的，在平臺擴展、應用落地等方面具有互補優(yōu)勢，這就滿足了高性能計算和大數(shù)據(jù)進行融合的充分性條件。”
為了推進高性能計算與大數(shù)據(jù)的融合發(fā)展，改善大數(shù)據(jù)應用環(huán)境，目前曙光已經發(fā)布“平臺一體，智匯應用”的行業(yè)大數(shù)據(jù)戰(zhàn)略，并通過軟硬件結合的一體化平臺作為支撐。其中，硬件XData大數(shù)據(jù)一體機采用成熟的高性能計算機和高性能存儲系統(tǒng)作為基礎，在軟件上則整合了高性能操作系統(tǒng)與Hadoop軟件。解決方案全面集合曙光在高性能計算、高性能存儲等方面的資源優(yōu)勢，可為行業(yè)企業(yè)構建有競爭力的大數(shù)據(jù)整體解決方案和服務，達到平臺能力及應用的靈活擴充和增長，提供真正的統(tǒng)一數(shù)據(jù)分析能力。