2012年10月24日，實時運營信息軟件供應(yīng)商Splunk宣布Splunk Hadoop Connect和Splunk App for HadoopOps現(xiàn)已全面上市。Splunk Hadoop Connect可提供雙向集成，輕松可靠地完成在Splunk與Hadoop之間遷移數(shù)據(jù)。Splunk App for HadoopOps可對端到端Hadoop環(huán)境的健康和性能進行實時監(jiān)控和分析。Splunk Hadoop Connect和 Splunk App for HadoopOps即日起可供下載。
Apache Hadoop項目管理委員會主席Arun Murthy表示：“Splunk Hadoop Connect讓Hadoop用戶更輕松地利用Splunk將大數(shù)據(jù)帶入企業(yè)。它讓Splunk和Hadoop更緊密地聯(lián)系在一起，為用戶開啟了無限可能。Hadoop未來發(fā)展的關(guān)鍵技術(shù)因素是利用Hadoop從數(shù)據(jù)中獲得情報的軟件。”
Edmunds.com生產(chǎn)工程高級總監(jiān)John Martin表示：“我們不斷將數(shù)據(jù)傳輸至Splunk，以支持我們的運營、應(yīng)用、安全團隊和高管人員并為他們提供情報。我們還部署Hadoop進行多批處理。Splunk和Hadoop的集成讓我們可以充分利用這兩個技術(shù)，并保證我們的Hadoop集群平穩(wěn)運行。”
Splunk Hadoop Connect讓企業(yè)能夠充分享受兩家企業(yè)的技術(shù)?？焖俨渴餝plunk進行實時采集、檢索、分析和可視化，然后可靠地將事件轉(zhuǎn)發(fā)至Hadoop，進行長期歸檔和更多批量分析。企業(yè)機構(gòu)可通過導(dǎo)入存儲在Hadoop中的數(shù)據(jù)進一步充分利用Splunk，從而在幾天內(nèi)就輕松搭建起可靠、安全的企業(yè)級大數(shù)據(jù)項目。Splunk Hadoop Connect與Apache Hadoop兼容，并已經(jīng)過Cloudera CDH和Hortonworks HDP發(fā)布的測試和認證。
Splunk App for HadoopOps為Hadoop提供實時端到端監(jiān)控、分析和故障排除，所有這些都是在一個界面上完成的?，F(xiàn)有Hadoop監(jiān)控工具只關(guān)注Hadoop層。Splunk App for HadoopOps則通過涵蓋基礎(chǔ)設(shè)施，包括Hadoop、網(wǎng)絡(luò)、交換機、機架、操作系統(tǒng)和數(shù)據(jù)庫在內(nèi)的所有層，從而實現(xiàn)超越。
Splunk產(chǎn)品營銷副總裁Sanjay Mehta表示：“通過將大數(shù)據(jù)轉(zhuǎn)化為實時情報，Splunk客戶每天都為我們帶來驚喜。我們希望讓Hadoop用戶更輕松地獲得這種價值。Splunk可通過輕松、迅速、彈性的方式來收集、分析用戶所有機器生成的數(shù)據(jù)并確保其安全，無論是在物理、虛擬還是云環(huán)境中。Splunk Hadoop Connect和Splunk App for HadoopOps有一個共同的開發(fā)目的，即：幫助Hadoop用戶從數(shù)據(jù)中獲得更多，同時更輕松地管理并監(jiān)控其系統(tǒng)。”
451 Research數(shù)據(jù)管理與分析研究經(jīng)理Matt Aslett表示：“Splunk采用一種方法論方式來定義其與Hadoop的共存關(guān)系。Splunk Hadoop Connect不僅能夠與Hadoop相集成，并且能夠與其進行互動，再加上利用Splunk App for HadoopOps來監(jiān)控超越Hadoop本身的集群資源，意味著它能夠在‘提供管理和分析Splunk和Hadoop中數(shù)據(jù)的單一平臺’方面發(fā)揮更大作用。”
Splunk Hadoop Connect功能包括：
- 將事件從Splunk Enterprise™可靠導(dǎo)出至Hadoop，以便進行歸檔、進一步處理或進行更多批量處理。原始數(shù)據(jù)和處理前的數(shù)據(jù)都可發(fā)送。
- 利用Splunk Hadoop Connect用戶界面來探索Hadoop目錄，檢查文件并決定將導(dǎo)入Splunk的數(shù)據(jù)。
- 將Hadoop數(shù)據(jù)導(dǎo)入Splunk，并進行檢索，使其用于搜索、報告、分析和可視化，并通過基于角色的訪問控制而對其進行保護。
Splunk App for HadoopOps功能包括：