回顧大數(shù)據(jù)應(yīng)用領(lǐng)先國家的大數(shù)據(jù)項目情況,有三個顯著特點:首先,現(xiàn)有的大多數(shù)大數(shù)據(jù)項目充其量只是數(shù)據(jù)量較大的應(yīng)用。這些國家的政府大數(shù)據(jù)應(yīng)用項目,大部分是基于共享存儲的結(jié)構(gòu)化數(shù)據(jù)庫,并不使用實時、動態(tài)和非結(jié)構(gòu)化或半結(jié)構(gòu)化的數(shù)據(jù)。第二,公共部門致力于規(guī)范大型而復(fù)雜的數(shù)據(jù)集,政府期望大數(shù)據(jù)應(yīng)用來提升政府服務(wù)民眾的能力,以及解決國家面臨的重大挑戰(zhàn)問題,包括經(jīng)濟、醫(yī)療、就業(yè)、自然災(zāi)害和恐怖襲擊等。然而,大部分大數(shù)據(jù)應(yīng)用于居民(參與到公共事務(wù))和商業(yè)部門,而不是政府部門。第三,政府設(shè)立的大部分大數(shù)據(jù)項目剛剛開始或計劃未來實施,美國國家科學(xué)基金會和國家衛(wèi)生機構(gòu)的大數(shù)據(jù)計劃就是如此。這意味著,大數(shù)據(jù)在政府部門的應(yīng)用仍然處于發(fā)展的初級階段,只有少數(shù)項目在運營(比如美國的RRP、新加坡的 RAHS和英國的 HSC)。
結(jié)論
對不同來源和不同格式(結(jié)構(gòu)化/存儲的,半結(jié)構(gòu)化的/滯后的,非結(jié)構(gòu)化的/即時更新的)的數(shù)據(jù)進(jìn)行分析和管理并創(chuàng)造價值,是一種新的差異競爭形式。大部分政府運行或計劃的大數(shù)據(jù)項目需要循序漸進(jìn),設(shè)定正確的目標(biāo)。項目的成功,取決于他們整合和分析信息的能力(譬如利用Hadoop),開發(fā)支持系統(tǒng)(如大數(shù)據(jù)控制系統(tǒng))和分析支持決策制定的能力。
本文討論了政府在大數(shù)據(jù)應(yīng)用中面臨的挑戰(zhàn)和機遇,將為其他國家政府開發(fā)和利用大數(shù)據(jù)提供幫助。通過仔細(xì)分析先行國家已有項目的經(jīng)驗和教訓(xùn),特別是利用移動服務(wù)、移動互聯(lián)等,將有利于這些國家的政府更好地利用大數(shù)據(jù)。
未應(yīng)用大數(shù)據(jù)的政府,應(yīng)重視和認(rèn)識公共部門應(yīng)用大數(shù)據(jù)的幾個問題:
一是國家優(yōu)先發(fā)展戰(zhàn)略。大數(shù)據(jù)應(yīng)用領(lǐng)先國家的所有大數(shù)據(jù)項目,都具有國家優(yōu)先發(fā)展的相關(guān)目標(biāo)(比如數(shù)據(jù)的開放和已獲得,公民更好參與公共事務(wù))。對大數(shù)據(jù)應(yīng)用的主要關(guān)注點集中于安全、速度、交互性、分析能力,和缺少勝任的專業(yè)人員。然而,每個國家的政府基于其獨有的環(huán)境,有自身的優(yōu)勢、機會和威脅。
二是分析機構(gòu)。對于跨部門的數(shù)據(jù),管理和綜合數(shù)據(jù)需要一個自上而下的統(tǒng)籌。政府應(yīng)建立一個大數(shù)據(jù)控制中心以綜合各部門既有數(shù)據(jù)的數(shù)據(jù)庫,包括結(jié)構(gòu)化和非結(jié)構(gòu)化的。此外,政府還需要建立一個先進(jìn)的分析機構(gòu)負(fù)責(zé)開發(fā)戰(zhàn)略,處理大數(shù)據(jù)如何通過新技術(shù)平臺進(jìn)行管理和分析,如何招募到熟練的從業(yè)人員。
三是實時分析。政府需要管理即時更新的大數(shù)據(jù),并進(jìn)行實時分析,同時保護個人信息安全,還需要探索的新技術(shù)平臺(比如云計算,先進(jìn)分析和安全技術(shù))。相當(dāng)多的政府?dāng)?shù)據(jù)在性質(zhì)上是全球化的,而且能夠被用于預(yù)防和解決全球事務(wù),因此必須開展全球合作。
四是國際化。各國政府間努力集成和共享地球觀測數(shù)據(jù)。全球地球觀測系統(tǒng),是一個全球性的公共基礎(chǔ)設(shè)施,產(chǎn)生了綜合的、接近實時性的環(huán)境數(shù)據(jù),目的是為全球使用者和決策制定者提供信息以供分析。政府也需要共享與安全威脅、詐騙和非法活動相關(guān)的數(shù)據(jù)。這種大數(shù)據(jù)需求不僅需要轉(zhuǎn)換技術(shù),還需要國際化的協(xié)作去共享和綜合數(shù)據(jù)。
五是ICT專業(yè)公司。政府應(yīng)該與ICT專業(yè)公司合作。例如,亞馬遜AWS關(guān)聯(lián)很多公共數(shù)據(jù)集,包括日本、美國人口調(diào)查數(shù)據(jù)和許多基因組及醫(yī)療數(shù)據(jù)庫。
編譯:工業(yè)和信息化部國際經(jīng)濟技術(shù)合作中心 高常水 江道輝 蔣欽云