美國政府機關(guān)收集著龐大的信息數(shù)據(jù)。但是,對于很多政府機關(guān)而言,不僅大數(shù)據(jù)分析在改善預(yù)測和決策方面成效不盡人意,就連大量數(shù)據(jù)的保存也成為大傷腦筋的問題。
大數(shù)據(jù)中,蘊藏著變革政府機關(guān)業(yè)務(wù)的可能性。通過大數(shù)據(jù)分析可以實現(xiàn):提升預(yù)測和決策的效率,大幅度改善其速度和精確度。但是,盡管大數(shù)據(jù)有以上諸多的優(yōu)勢,但是,大多數(shù)美國政府機關(guān)在大數(shù)據(jù)的應(yīng)用上步履艱難。
美國政府機關(guān)信息科技(IT)網(wǎng)絡(luò)MeriTalk近日公布了調(diào)查報告The Big Data Gap。報告中提出,聯(lián)邦政府機關(guān)缺乏在大數(shù)據(jù)應(yīng)用中不可欠缺的諸如數(shù)據(jù)保存和訪問管理的技術(shù)、電腦程序制作能力以及人才。
此調(diào)查報告的贊助商.NetApp(美國網(wǎng)域存儲技術(shù)有限公司)公共部門總裁Mark Webber說,政府手中正掌握著龐大的大數(shù)據(jù)這個金礦。需要他們做的事情不過是,從數(shù)據(jù)中找到有助于提高效率和改善決策的情報而已。各政府機關(guān)需要引進大數(shù)據(jù)的解決方案,以提高數(shù)據(jù)處理和分析、管理以及訪問的效率。
政府機關(guān)收集的數(shù)據(jù)多種多樣。根據(jù)MeriTalk的報告,87%政府機關(guān)所屬的IT專業(yè)人士回答說自己保管的數(shù)據(jù)的數(shù)量過去2年間有增加,而96%回答估計今后2年會增加(平均增加64%)。而且,政府機關(guān)持有的數(shù)據(jù)中,非構(gòu)造化數(shù)據(jù)所占的比例為31%,這個比例也在增加。
現(xiàn)在,各政府機關(guān)持有的數(shù)據(jù)量平均在1·61PB左右。這個規(guī)模,在今后2年內(nèi)預(yù)計會膨脹到2·63PB。數(shù)據(jù)的內(nèi)容包括其它各級政府機關(guān)提出的報告、現(xiàn)場報告、處理業(yè)務(wù)的數(shù)據(jù)、科學(xué)調(diào)查數(shù)據(jù)、圖像和視頻、網(wǎng)絡(luò)關(guān)聯(lián)數(shù)據(jù)以及非政府機關(guān)提出的報告等。
報告說,超過半數(shù)的(64%)IT專業(yè)人士回答說自己所屬的機關(guān)的數(shù)據(jù)管理系統(tǒng)可以根據(jù)數(shù)據(jù)數(shù)量的增加實現(xiàn)擴展或提升,但是,中短期的容量倍增預(yù)計平均需要10個月。
MeriTalk的報告分析,盡管各政府機關(guān)收集著龐大的數(shù)據(jù),但回答說這些數(shù)據(jù)由所屬的相關(guān)機關(guān)分析的IT專業(yè)人士只占60%,并且,回答說數(shù)據(jù)利用在戰(zhàn)略決策的不足40%。而且,在大數(shù)據(jù)的應(yīng)用方面,即使像美國國防部和各種情報機關(guān)這樣的地方,也遠遠落后于民間。在民間超過60%的組織回答說在積極探索利用大數(shù)據(jù)以改善業(yè)務(wù)效率,而國防部和情報機關(guān)這一比例僅為42%。
Mark Webber指出,阻礙大數(shù)據(jù)應(yīng)用的因素很多,而且有多種原因。首先,阻礙的因素是數(shù)據(jù)的歸屬問題。這個問題在民間往往很清晰。在多數(shù)的企業(yè)中,IT部門的數(shù)據(jù)分析師通常配備在業(yè)務(wù)部門。雖然在有些企業(yè)中,將龐大的數(shù)據(jù)存入存儲器的工作由IT部門負責,但是最終成為數(shù)據(jù)的所有者并決定使用方法的絕大部分是業(yè)務(wù)部門。但是,這種模式在政府機關(guān)則行不通。
根據(jù)MeriTalk的報告,42%回答者說數(shù)據(jù)的所有者應(yīng)該是收集數(shù)據(jù)機關(guān)的IT部門,28%說應(yīng)由數(shù)據(jù)收集部門,21%說應(yīng)由C- level的管理人員所有。
在政府機關(guān),往往缺乏對“數(shù)據(jù)的所有者”這概念的正確認識。有些人認為由誰所有并不是什么問題,這是非常錯誤的想法。比如,分析數(shù)據(jù)的工作多數(shù)需要在多個部門共同參與下完成。這時就需要有人發(fā)出指令,這一點非常重要,只有在這種情況下工作才能順利進行下去。
此外,政府機關(guān)還面臨著技術(shù)和人才不足的問題。大數(shù)據(jù)的應(yīng)用,基礎(chǔ)環(huán)境建設(shè)是非常重要的。目前的準備狀況是,數(shù)據(jù)保存和訪問方面49%、電腦程序制作能力為46%、人才方面為44%。并且,有57%的回答者說,現(xiàn)有的管理工具和基礎(chǔ)設(shè)施無法處理的數(shù)據(jù)集合有1個以上。
美國的奧巴馬政府,為了促進在政府機關(guān)應(yīng)用大數(shù)據(jù),今年3月末公布了“大數(shù)據(jù)研究開發(fā)(R&D)提案”,承諾將2億美元以上投資于大數(shù)據(jù)的研究和開發(fā)上。(金順英/譯)by Thor Olavsrud