中國IDC圈4月27日報(bào)道，互聯(lián)網(wǎng)的發(fā)展使得大數(shù)據(jù)引起人們廣泛關(guān)注。現(xiàn)如今大數(shù)據(jù)技術(shù)早已滲透到金融、通訊等行業(yè)以及生物學(xué)、物理學(xué)等領(lǐng)域。大數(shù)據(jù)在容量、多樣性和高增速方面的爆炸式增長全面考驗(yàn)著現(xiàn)代企業(yè)的數(shù)據(jù)處理和分析能力，與此同時(shí)也為各個(gè)行業(yè)帶來了準(zhǔn)確洞察市場行為的機(jī)會(huì)。迄今為止大數(shù)據(jù)技術(shù)與產(chǎn)品有哪些創(chuàng)新，工業(yè)大數(shù)據(jù)應(yīng)用面臨哪些挑戰(zhàn)，金融行業(yè)大數(shù)據(jù)應(yīng)用現(xiàn)狀如何等。圍繞這一系列問題，4月27日至28日，由工業(yè)和信息化部指導(dǎo)、中國信息通信研究院主辦的"2016大數(shù)據(jù)產(chǎn)業(yè)峰會(huì)"在北京國際會(huì)議中心盛大召開。
在27日下午的“大數(shù)據(jù)技術(shù)與產(chǎn)品創(chuàng)新”論壇中，北京明略軟件系統(tǒng)有限公司聯(lián)合創(chuàng)始人兼CTO馮是聰博士分享了明略大數(shù)據(jù)安全平臺核心技術(shù)。
明略數(shù)據(jù)聯(lián)合創(chuàng)始人兼CTO 馮是聰
以下是馮是聰博士演講實(shí)錄：
馮是聰：
首先感謝數(shù)據(jù)中心聯(lián)盟給我們提供這個(gè)機(jī)會(huì)，讓我們分享我們的大數(shù)據(jù)平臺。我們與數(shù)據(jù)中心聯(lián)盟合作可以說是十分密切，就在今日上午我們在數(shù)據(jù)中心聯(lián)盟也通過了評測并一同簽署了數(shù)據(jù)聲明。
作為明略數(shù)據(jù)CTO我分享的內(nèi)容更偏技術(shù)一些，首先向各位嘉賓介紹一下明略：我們公司是一家專注于關(guān)系挖掘的大數(shù)據(jù)解決方案提供商。其中有兩個(gè)關(guān)鍵詞，一個(gè)是關(guān)系挖掘。大家知道，自然界的關(guān)系都是由點(diǎn)和邊組成的，在座的每一個(gè)人都是一個(gè)點(diǎn)，人與人之間的關(guān)系就是一個(gè)邊，在任何領(lǐng)域都有關(guān)系挖掘。另外，我們提供解決方案，我們不僅提供產(chǎn)品，我們還會(huì)根據(jù)客戶業(yè)務(wù)問題，有針對性的提供解決方案，在這過程中，明略也會(huì)派我們的駐場數(shù)據(jù)科學(xué)家為客戶現(xiàn)場答疑解惑，我們在提供解決方案的同時(shí)，也提供駐場數(shù)據(jù)科學(xué)家服務(wù)，這也是我們跟很多廠商最大的區(qū)別。
明略成立于2014年初，在這兩年的發(fā)展中，我們不斷的積累大數(shù)據(jù)方面的經(jīng)驗(yàn)，并先后自主研發(fā)了4款產(chǎn)品，分別是大數(shù)據(jù)安全平臺MDP，圍繞數(shù)據(jù)關(guān)聯(lián)關(guān)系挖掘產(chǎn)品SCOPA和分布式數(shù)據(jù)挖掘系統(tǒng)DataInsight，以及面向大數(shù)據(jù)的BI產(chǎn)品Discovery.很多客戶找到我們，我們會(huì)根據(jù)客戶的業(yè)務(wù)特點(diǎn)，給他定制化地提供一個(gè)解決方案。這個(gè)解決方案可能會(huì)涉及到我們這4款產(chǎn)品，我們這里跟很多廠商最大的區(qū)別是，我們是深入業(yè)務(wù)，幫助客戶解決實(shí)際業(yè)務(wù)問題，而不僅僅是把產(chǎn)品售賣給客戶。
因時(shí)間關(guān)系，我就先簡單介紹一下我們大數(shù)據(jù)安全平臺MDP最核心的五個(gè)特性。
首先是關(guān)于MDP平臺架構(gòu)的概述，MDP平臺架構(gòu)共分為四層，淺藍(lán)色的是開源社區(qū)的部分。深顏色的是我們自己開發(fā)的，在自己開發(fā)的過程當(dāng)中可以看到我們有幾個(gè)特點(diǎn)，我們這里有一個(gè)可視化運(yùn)維。如果您有機(jī)群是幾萬臺或者是幾百臺機(jī)器搭成的，假如沒有一個(gè)很強(qiáng)的運(yùn)維平臺，那么您將會(huì)面臨很大問題，嚴(yán)重的話很有可能導(dǎo)致無法繼續(xù)運(yùn)營。其次，MDP做到了很好的安全性，我們這幾年服務(wù)的客戶基本上都是中大型客戶，每一個(gè)大型的客戶數(shù)據(jù)安全是非常重要的，我后面會(huì)詳細(xì)介紹。我們做了全員控制，還有數(shù)據(jù)運(yùn)維，這里面有各種各樣的特點(diǎn)，因?yàn)闀r(shí)間的關(guān)系我就不一一介紹了。
明略MDP特性之安全性
我們認(rèn)為做大數(shù)據(jù)首先一定要解決安全問題，因?yàn)榇髷?shù)據(jù)不像別的數(shù)據(jù)，它最大的一個(gè)特點(diǎn)是把分散在各個(gè)信息孤島的數(shù)據(jù)聚集起來，統(tǒng)一管理。在過去數(shù)據(jù)丟失的時(shí)候，可能僅會(huì)影響公司的一個(gè)部門，但是當(dāng)我們把數(shù)據(jù)全部集成在一起時(shí)，一旦丟失，所有的數(shù)據(jù)都可能丟失。尤其是公安等特殊領(lǐng)域，對數(shù)據(jù)的安全性要求是第一位的，如果安全性不過關(guān)，肯定是不能用的，我們這邊毫不謙虛的說，我們達(dá)到了軍工級的要求。我們的MDP產(chǎn)品有一個(gè)完整的安全架構(gòu)體系，比如身份認(rèn)證，加密解密，數(shù)據(jù)訪問和審計(jì)，等等。這個(gè)體系有很多的特點(diǎn)，因?yàn)闀r(shí)間的關(guān)系我只介紹三個(gè)特點(diǎn)。
大家都知道大數(shù)據(jù)平臺基本上都來源于開源社區(qū)。在開源社區(qū)版中，系統(tǒng)管理員和上層應(yīng)用之間的權(quán)限管理沒有分開，是合在一起的。如果是運(yùn)維管理員的話，完全可以看到平臺上各種應(yīng)用的數(shù)據(jù)，這其實(shí)在很多條件下是非常不安全的。舉一個(gè)簡單的例子，假設(shè)我是一個(gè)公安局局長，公安局的所有數(shù)據(jù)都放在大數(shù)據(jù)平臺上，那么運(yùn)維管理員就可以知道局長、甚至部長的所有數(shù)據(jù)，其實(shí)這是非常不安全的。我們第一個(gè)做的事情就是把這個(gè)權(quán)限分離了，運(yùn)維人員只能運(yùn)維這個(gè)機(jī)器，不能看到上層應(yīng)用的數(shù)據(jù)。我們因?yàn)檫@個(gè)數(shù)據(jù)分開了，即使我們的開發(fā)人員，他也不能看到不該看的數(shù)據(jù)，這樣也能保證開發(fā)人員在現(xiàn)場實(shí)施的過程中看不到所有的數(shù)據(jù)，從而保障了數(shù)據(jù)的安全性。