多源、實時和海量,是大部分大數(shù)據(jù)應用中的普遍性要求,特別是在智慧城市等具有跨行業(yè)、跨系統(tǒng)、跨職能整合需要的信息化項目中,科學高效的數(shù)據(jù)融合方案至關重要。前不久,在"2017大數(shù)據(jù)產(chǎn)業(yè)峰會"上,湖北省升級政務云"楚天云"項目就憑借其創(chuàng)新的數(shù)據(jù)融合模式榮膺"2017年度政務大數(shù)據(jù)優(yōu)先應用案例獎".作為"智慧湖北"建設的核心工程,"楚天云"是目前國內(nèi)安全等級最高、規(guī)模最大、技術領先的省級政務云之一,承載了湖北省的52個省直部門的330個應用系統(tǒng)的各類海量政府核心數(shù)據(jù)。
在"楚天云"建設之初面對數(shù)量龐大的多個系統(tǒng),數(shù)據(jù)的流通和融合面臨巨大的難題。在經(jīng)過充分的調(diào)研和技術對比后,"楚天云"選擇了數(shù)據(jù)交換樞紐平臺的思路,采用目前國內(nèi)領先的大數(shù)據(jù)技術廠商-翱旗科技的R7系列產(chǎn)品技術,把數(shù)據(jù)交換平臺架設于楚天云自身的IaaS云平臺之上,通過數(shù)據(jù)集成交互技術和數(shù)據(jù)資產(chǎn)管理技術,消除不同操作平臺、不同類型數(shù)據(jù)庫、不同結構數(shù)據(jù)之間的堡壘邊界,真正做到數(shù)據(jù)層面的互通、整合、聯(lián)動,實現(xiàn)了數(shù)據(jù)間的無障礙互通。同時,通過非侵入式、無代碼圖形化集中管控,為管理者和使用者提供了高度易用性和低成本的管理運維模式。在"楚天云"的后續(xù)應用中,將通過建設這一數(shù)據(jù)交換樞紐平臺,在省級范圍內(nèi)建立起一種數(shù)據(jù)大平臺與碎片化應用結合的數(shù)據(jù)生態(tài)系統(tǒng),構建起從數(shù)據(jù)產(chǎn)生到數(shù)據(jù)應用的整套機制,提高數(shù)據(jù)的活躍度和利用率,讓數(shù)據(jù)價值得以真正呈現(xiàn)。目前,建成后的"楚天云"數(shù)據(jù)交換樞紐平臺能夠達到秒級傳輸幾百G的數(shù)據(jù)量,業(yè)務端和數(shù)據(jù)平臺端數(shù)據(jù)幾乎同步,完全能夠滿足管理決策者對于海量數(shù)據(jù)實時交互的需求,使具體業(yè)務場景下的效率提升,縮短決策時間,讓大數(shù)據(jù)價值得以體現(xiàn)。從數(shù)據(jù)融合角度看,"楚天云"案例,在"智慧政務"領域為其他智慧城市項目提供了可參考借鑒的成功實踐。
作為"楚天云"數(shù)據(jù)交換樞紐平臺的建設者之一,翱旗科技定位于數(shù)據(jù)基礎科學研究,并擁有領先自主核心技術,所研發(fā)的產(chǎn)品以通用化為基礎、自動化為實現(xiàn)方式、智能化為目標,在"數(shù)據(jù)采集與融合、數(shù)據(jù)管理、存儲、挖掘與分析、可視化"整個數(shù)據(jù)生命周期中形成了獨有的產(chǎn)業(yè)閉環(huán)。在"楚天云"項目中,翱旗以數(shù)據(jù)融合為核心思路,基于數(shù)據(jù)底層技術,針對任何數(shù)據(jù)類型,通過對數(shù)據(jù)的實時感知、處理和管理等賦能過程,將繁瑣、復雜、高難度、高風險的數(shù)據(jù)需求標準化和組件化,能夠完成對省級多源海量數(shù)據(jù)的融合管理,為"智慧湖北"提供數(shù)據(jù)層面的完全支撐。除了應用于智慧城市項目中,翱旗科技還進一步把數(shù)據(jù)融合技術進行了產(chǎn)品化。據(jù)悉,2017年4月13日,翱旗科技將正式發(fā)布針對大數(shù)據(jù)領域的系列通用化產(chǎn)品,包括數(shù)據(jù)集成交互產(chǎn)品和分布式數(shù)據(jù)庫產(chǎn)品等,能夠把大數(shù)據(jù)領域的系列技術和服務轉化成標準化、通用化的產(chǎn)品,這在國內(nèi)尚屬首次。
最近幾年,像翱旗這樣的國內(nèi)外大數(shù)據(jù)技術公司開始紛紛將數(shù)據(jù)處理整合過程中相關技術集合、組合,提升后開發(fā)出專門用于數(shù)據(jù)融合的新工具。應用這些直觀、可視、高效的軟件工具,數(shù)據(jù)準備過程的工效大大提高,在一定程度上解決了數(shù)據(jù)融合的技術瓶頸。2016年Gartner公司數(shù)據(jù)管理和分析軟件工具的評估報告顯示,數(shù)據(jù)融合處理類自我服務式數(shù)據(jù)準備軟件(Self-service Data Preparation)已成為發(fā)展最快的工具之一。伴隨著大數(shù)據(jù)應用需求的日益深入和普及,面向解決數(shù)據(jù)融合問題的通用化技術產(chǎn)品無疑將迎來更多的發(fā)展機會。