面對如此海量的數(shù)據(jù),如何高效地處理、運營這些數(shù)據(jù),是首先需要解決的問題,自然必須借助高效的工具。云海 Insight的三個子產(chǎn)品,即可以分別對應(yīng)不同的大數(shù)據(jù)應(yīng)用場景也可以組合解決復(fù)雜的大數(shù)據(jù)應(yīng)用場景,真正幫助用戶以數(shù)據(jù)事實為依據(jù),以數(shù)據(jù)分析為導(dǎo) 向,讓整個行業(yè)轉(zhuǎn)向數(shù)據(jù)化運營的高速軌道上來。
三劍客各司其職,適合的就是對的!
據(jù)統(tǒng)計顯示,全球數(shù)據(jù)量從2010年到2020年將增長50倍,達到前所未有的40ZB。40ZB是什么概念? 相當于全世界沙粒數(shù)量的40倍。中國數(shù)據(jù)量的增速遠遠高于全球總體水平,2012年的數(shù)據(jù)量為364EB,占全球總數(shù)的13%,2020年將達到 8600EB,所占比例將達21%。不過我國大數(shù)據(jù)中有價值的信息只能占到33%,真正能夠發(fā)揮價值的數(shù)據(jù)只占5‰左右。
面對龐大的數(shù)據(jù)量,用戶將面臨存儲系統(tǒng)成本高、存不起,傳統(tǒng)可擴展性差、擴不了,大量非結(jié)構(gòu)化、半結(jié)構(gòu)化的數(shù)據(jù) 用傳統(tǒng)計算方式算不出等問題和挑戰(zhàn)!隨著業(yè)務(wù)的復(fù)雜性、多樣性及數(shù)據(jù)量的急劇增長,加上各種業(yè)務(wù)數(shù)據(jù)處理時間要求不一致,僅靠單一的產(chǎn)品無法滿足所有業(yè)務(wù) 需求,浪潮云海Insight大數(shù)據(jù)處理平臺上的三劍客云海Insight HD、云海Insight MPP、云海Insight MemDB各司其職,分別使用不同的場景,對于要求苛刻的您來說,選擇適合自己的就是對的。
分布式計算引擎HD通常面向海量數(shù)據(jù)存儲、分析的應(yīng)用建設(shè),目前已廣泛用于公安(科信-警務(wù)云/技偵-4G數(shù)據(jù)匯集/交管-六合一 平臺)、稅務(wù)(金三二階段)、網(wǎng)安(網(wǎng)綜及應(yīng)用)、通信(數(shù)據(jù)管理中心)、交通(高速-車輛軌跡)等行業(yè)的大數(shù)據(jù)應(yīng)用建設(shè)中。此外,年度季度數(shù)據(jù)統(tǒng)計分析 等海量非實時的業(yè)務(wù)處理場景,也很適用。
分布式數(shù)據(jù)倉庫MPP則廣泛應(yīng)用于公安(指揮決策)、稅務(wù)(大屏/電子稅務(wù)局)、能源(經(jīng)營分析)等行業(yè)的數(shù)據(jù)集市、指揮決策、統(tǒng)計分析類系統(tǒng)中。它適用于中等規(guī)模數(shù)量級別的大數(shù)據(jù)處理,可在BI領(lǐng)域代替?zhèn)鹘y(tǒng)架構(gòu)。
內(nèi)存數(shù)據(jù)庫MemDB主要適用于數(shù)據(jù)計算、數(shù)據(jù)寫入、數(shù)據(jù)同步類場景,適配快速實時性數(shù)據(jù)處理,數(shù)據(jù)量級稍小,類似于網(wǎng)上訂票、余票查詢這種高實時性要求的業(yè)務(wù)。
整體來看,云海Insight可提供數(shù)據(jù)采集預(yù)處理、數(shù)據(jù)緩沖沉淀、分析數(shù)據(jù)集市、實時數(shù)據(jù)分析和數(shù)據(jù)可視化展現(xiàn)的多種業(yè) 務(wù)處理能力,提供了SQL、API、命令行、可視化界面多種操作方式,可輕松實現(xiàn)多類型訪問接口。云海Insight支持標準化的x86平臺,支持融合架 構(gòu)的大數(shù)據(jù)一體機,也可以以內(nèi)置服務(wù)的形式無縫集成進云海IOP-PaaS平臺。
DT時代的大數(shù)據(jù)生態(tài)
近年來,浪潮堅持尋求突破,在智慧城市、公安、煙草、交通、醫(yī)療、旅游等多個行業(yè)成功積累了云和大數(shù)據(jù)落地經(jīng)驗。全域公共免費WIFI城市、云上集聚的大數(shù)據(jù)公共平臺、政府數(shù)據(jù)開放示范城市、大數(shù)據(jù)交易所……這些都是浪潮對大數(shù)據(jù)的生動詮釋。
在大數(shù)據(jù)應(yīng)用的基礎(chǔ)設(shè)施層面,浪潮云海Insight大數(shù)據(jù)產(chǎn)品套件與云海IOP平臺、云海大數(shù)據(jù)一體機一起,共同為行業(yè)用戶提供底層平臺支撐。致力于進行大數(shù)據(jù)應(yīng)用開發(fā)的合作伙伴,可以專注利用云海Insight開發(fā)出自己的應(yīng)用,而無須關(guān)注底層實現(xiàn)。
可以看到,從IT走向DT時代并不復(fù)雜,只要找到合適的工具,分分鐘進入DT時代。當然未來也不再是孤膽英雄、單打獨斗的時代,生態(tài)系統(tǒng)比任何時候都重要,浪潮期待與更多合作伙伴共同攜手,提供更加豐富的大數(shù)據(jù)應(yīng)用。