中國IDC圈2月22日報(bào)道：華盛頓——美國航空航天局（NASA）及其幾十個使命項(xiàng)目每天傳回的數(shù)據(jù)猶如奔涌的河流。航天器監(jiān)測從我們的地球家園到遙遠(yuǎn)星系的一切，將圖像和信息傳回地球。所有這些數(shù)碼記錄都需要儲存、索引和處理，以便世界各地的工程師、科學(xué)家和其他人員可以使用這些數(shù)據(jù)來理解地球及其以外的宇宙。

使命項(xiàng)目策劃者和軟件工程師正在尋找管理如此龐大復(fù)雜而且不斷增大的數(shù)據(jù)流的新策略，這樣的數(shù)據(jù)流在信息技術(shù)行業(yè)中被稱為“大數(shù)據(jù)” （Big Data）。

“大數(shù)據(jù)”有多大？美國航空航天局的各項(xiàng)使命每小時收集數(shù)百TB數(shù)據(jù)。僅1TB就相當(dāng)于在50,000棵樹制成的紙張上打印的信息。

位于加利福尼亞州帕薩迪納（Pasadena）的美國航空航天局噴氣推進(jìn)實(shí)驗(yàn)室（Jet Propulsion Laboratory）的美國航空航天局太陽系可視化項(xiàng)目（Solar System Visualization project）的負(fù)責(zé)人埃里克·德容（Eric De Jong）說：“科學(xué)家們將大數(shù)據(jù)用于各種目的，從預(yù)測地球的天氣到監(jiān)測火星上的冰蓋再到搜索遙遠(yuǎn)的星系。我們是數(shù)據(jù)的保存者，而數(shù)據(jù)使用者則是需要圖像、拼圖、地圖和影片來尋找模式并驗(yàn)證理論的天文學(xué)家和科學(xué)家。”太陽系可視化項(xiàng)目可將美國航空航天局使命項(xiàng)目的科學(xué)成果轉(zhuǎn)化為研究人員可以使用的可視化產(chǎn)品。

德容解釋說，應(yīng)對來自太空使命的數(shù)據(jù)涉及三個方面：儲存、處理和訪問。第一項(xiàng)任務(wù)——儲存或存檔數(shù)據(jù)，對于更大量的數(shù)據(jù)來說自然更具挑戰(zhàn)性。平方千米陣（Square Kilometer Array）是計(jì)劃部署在南非和澳大利亞的由數(shù)千個望遠(yuǎn)鏡組成的陣列，預(yù)計(jì)每天產(chǎn)生700TB圖像數(shù)據(jù)，相當(dāng)于因特網(wǎng)每兩天的所有數(shù)據(jù)流量。工程師們正忙于開發(fā)更好地儲存信息的創(chuàng)新軟件工具，而不是創(chuàng)造更多硬件。

美國航空航天局“大數(shù)據(jù)”計(jì)劃的一位項(xiàng)目負(fù)責(zé)人克里斯·馬特曼恩（Chris Mattmann）說：“我們不必做無謂的重復(fù)勞動。”美國航空航天局一直在加大對開源軟件（Open-source Software）的整合，為太空使命提供經(jīng)改進(jìn)的數(shù)據(jù)處理工具。而后，美國航空航天局的這些工具可供世界其他人用于不同的應(yīng)用領(lǐng)域。

德容和他的團(tuán)隊(duì)正在開發(fā)信息可視化的新方式。例如，美國航空航天局火星勘測軌道飛行器（Mars Reconnaissance Orbiter）上一個攝像機(jī)拍攝的每個圖像含有120兆像素。除了制作電腦圖像和動畫使科學(xué)家和公眾能夠近距離了解這顆紅色星球，他的團(tuán)隊(duì)還用這類數(shù)據(jù)來制作影片。

德容說：“數(shù)據(jù)不只是越來越大，而且越來越復(fù)雜。我們在不斷努力尋找使創(chuàng)建可視化產(chǎn)品過程自動化的方式，以便于科學(xué)家和工程師使用這些數(shù)據(jù)。”

“大數(shù)據(jù)”領(lǐng)域另一項(xiàng)重要的工作是使用戶容易從數(shù)據(jù)存檔中獲取所需信息。

美國航空航天局紅外處理和分析中心（Infrared Processing and Analysis Center）負(fù)責(zé)人史蒂夫·格魯姆（Steve Groom）說：“如果你有一個巨型書架，你仍必須知道如何找到需要的書籍。”有時候用戶希望一次訪問所有數(shù)據(jù)，以尋找全局模式，這是“大數(shù)據(jù)”存檔的一個好處。格魯姆說：“天文學(xué)家還可以同時瀏覽我們庫存的所有‘書籍’，這在他們自己的電腦上是無法做到的。”

美國航空航天局說，最終，“大數(shù)據(jù)”潮流將繼續(xù)猛增，美國航空航天局將開發(fā)出新的策略來管理數(shù)據(jù)流以惠及全球。原文發(fā)表于13.10.21