創(chuàng)建Druid的最初意圖主要是為了解決查詢延遲問題,當時試圖使用Hadoop來實現(xiàn)交互式查詢分析,但是很難滿足實時分析的需要。而Druid提供了以交互方式訪問數(shù)據(jù)的能力,并權衡了查詢的靈活性和性能而采取了特殊的存儲格式。
該技術還提供了其他實用功能,例如實時節(jié)點、歷史節(jié)點、Broker節(jié)點、Coordinator節(jié)點、使用基于JSON查詢語言的索引服務。了解詳情
Apache NiFi:Apache NiFi是一套強大可靠的數(shù)據(jù)處理和分發(fā)系統(tǒng),可用于對數(shù)據(jù)的流轉(zhuǎn)和轉(zhuǎn)換創(chuàng)建有向圖。借助該系統(tǒng)可以用圖形界面創(chuàng)建、監(jiān)視、控制數(shù)據(jù)流,有豐富的配置選項可供使用,可在運行時修改數(shù)據(jù)流,動態(tài)創(chuàng)建數(shù)據(jù)分區(qū)。此外還可以對數(shù)據(jù)在整個系統(tǒng)內(nèi)的流動進行數(shù)據(jù)起源跟蹤。通過開發(fā)自定義組件,還可輕松對其進行擴展。
Apache NiFi的運轉(zhuǎn)離不開諸如FlowFile、Processor,以及Connection等概念。了解詳情
LinkedIn WhereHows:WhereHows提供帶元數(shù)據(jù)搜索的企業(yè)編錄(Enterprise catalog),可以讓您了解數(shù)據(jù)存儲在哪里,是如何保存到那里的。該工具可提供協(xié)作、數(shù)據(jù)血統(tǒng)分析等功能,并可連接至多種數(shù)據(jù)源和提取、加載和轉(zhuǎn)換(ETL)工具。
該工具為數(shù)據(jù)發(fā)現(xiàn)提供了Web界面,支持API的后端服務器負責控制元數(shù)據(jù)的爬網(wǎng)(Crawling)以及與其他系統(tǒng)的集成。了解詳情
Microsoft Cognitive Services:該技術源自Project Oxford和Bing,提供了22種認知計算API,主要分類包括:視覺、語音、語言、知識,以及搜索。該技術已集成于Cortana Intelligence Suite。
這是一種開源技術,提供了22種不同的認知計算REST API,并為開發(fā)者提供了適用于Windows、IOS、Android以及Python的SDK。了解詳情
感謝杜小芳對本文的審校。