云計(jì)算與SaaS化應(yīng)用的興起導(dǎo)致的軟件革命，讓行業(yè)競爭加劇，很多軟件廠商無所適從。就如一季度曾曝出的用友軟件的大幅度虧損一樣，不管做ERP還是小應(yīng)用，傳統(tǒng)的軟件公司的日子越來越難過了。這些軟件公司把進(jìn)軍大數(shù)據(jù)當(dāng)成解決軟件行業(yè)性問題的良方，結(jié)果是從一個(gè)火坑跳入另一個(gè)火坑。
再次，大數(shù)據(jù)開源技術(shù)的低門檻，玩家進(jìn)出無障礙。以最經(jīng)典的Apache Hadoop社區(qū)為例，Hadoop的項(xiàng)目結(jié)構(gòu)不斷豐富發(fā)展，已經(jīng)形成一個(gè)豐富的Hadoop生態(tài)系統(tǒng)，囊括HDFS、MapReduce、Yarn、Hive、Hbase、Sqoop、Zookeeper、Flume、Kafka、Spark等近30個(gè)模塊。雖然能夠?qū)ι鐓^(qū)提供持續(xù)原創(chuàng)性貢獻(xiàn)的企業(yè)不多，但并不妨礙眾多公司，一兩個(gè)熟手+若干個(gè)生手就可以承諾搭建并運(yùn)營一個(gè)實(shí)時(shí)交易風(fēng)控平臺(tái)(以實(shí)時(shí)流計(jì)算為主要模式的平臺(tái))。問題的關(guān)鍵在于，同樣面對(duì)新技術(shù)，新加入的玩家與傳統(tǒng)的BI廠商基本處于同一起跑線上。
最后，建設(shè)容易運(yùn)營難，大數(shù)據(jù)價(jià)值還未真正體現(xiàn)。數(shù)據(jù)價(jià)值已經(jīng)體現(xiàn)，但大數(shù)據(jù)價(jià)值還未真正體現(xiàn)。很明顯，之前大數(shù)據(jù)的虛火來自于建設(shè)的熱潮。當(dāng)建設(shè)的熱潮退去，需要通過真實(shí)的應(yīng)用價(jià)值來回報(bào)的時(shí)候，發(fā)現(xiàn)雖然有不少案例，但是總體的價(jià)值根本無法hold住之前的投入。因此反向的減少建設(shè)投入，導(dǎo)致市場空間相對(duì)于之前的高速擴(kuò)張有較大的萎縮。
一切正如2000年的互聯(lián)網(wǎng)寒冬一樣，當(dāng)前的大數(shù)據(jù)寒冬正是市場機(jī)制自動(dòng)產(chǎn)生的“優(yōu)勝劣汰”過程，這是歷史規(guī)律。
對(duì)于任何一個(gè)企業(yè)或組織來說，最終結(jié)局都逃不過失敗，但對(duì)于優(yōu)秀的企業(yè)來說，可以失敗得晚一點(diǎn)，生存得更久一些。就如華為任正非在《華為的冬天》里說到的一樣，“十年來我天天思考的都是失敗，對(duì)成功視而不見，也沒有什么榮譽(yù)感、自豪感，而是危機(jī)感。也許是這樣才存活了十年。我們大家要一起來想，怎樣才能活下去，也許才能存活得久一些。失敗這一天是一定會(huì)到來，大家要準(zhǔn)備迎接，這是我從不動(dòng)搖的看法，這是歷史規(guī)律。”
三、產(chǎn)品聚焦是前提
在大數(shù)據(jù)的寒冬里，要比別人活得久一點(diǎn)，首先得明確自身的產(chǎn)品是什么，市場在什么地方，與競爭對(duì)手相比，產(chǎn)品是否有差異。
大數(shù)據(jù)的產(chǎn)品很多，大的方面可以分為6類。
第一，大數(shù)據(jù)基礎(chǔ)平臺(tái)。解決分布式數(shù)據(jù)存儲(chǔ)、離線計(jì)算與資源管理問題，包含目前比較流行的Paas平臺(tái)。
第二，實(shí)時(shí)計(jì)算引擎。通過Storm\Spark streaming等架構(gòu)解決大批量實(shí)時(shí)計(jì)算問題。
第三，數(shù)據(jù)庫。各類DB，Sql，Mysql，Hbase等。
第四，大數(shù)據(jù)資產(chǎn)管理。數(shù)據(jù)從采集到應(yīng)用開放全過程的數(shù)據(jù)結(jié)構(gòu)管理。比如元數(shù)據(jù)管理，過程管理，隱私安全管理，開放管理與審計(jì)等。
第五，通用大數(shù)據(jù)應(yīng)用。適用與所有行業(yè)的工具與模型。比如可視化工具，統(tǒng)一分析門戶，互聯(lián)網(wǎng)內(nèi)容分析，智能營銷管理，數(shù)據(jù)挖掘工具/模型， SaaS化DMP等。
第六，垂直領(lǐng)域大數(shù)據(jù)應(yīng)用。與特定行業(yè)的緊密結(jié)合的產(chǎn)品，如金融征信，位置運(yùn)營，精準(zhǔn)扶貧，智慧醫(yī)療等。
如果你的產(chǎn)品線包含從第一到第六，那么你離倒下已經(jīng)不遠(yuǎn)了。如果你能夠在某一個(gè)領(lǐng)域做得足夠的精深，精深到讓其它所有的玩家都很難生存，那么恭喜你，你就是在戰(zhàn)場上確立了自己地位的人，一定活得更久。
從中國大數(shù)據(jù)技術(shù)大會(huì)連續(xù)幾年的趨勢預(yù)測，也可以幫助我們判斷出市場的需求前景所在。
2013首提的數(shù)據(jù)資源化(價(jià)值化)在后續(xù)兩年基本實(shí)現(xiàn)，在2016年越來越成熟。如果你擁有較好的數(shù)據(jù)資源，毫無疑問，活下去的概率會(huì)大增。
在2016年以前，大數(shù)據(jù)分析與可視化被持續(xù)提及。在實(shí)際中，市面上可視化工具數(shù)不勝數(shù)，其中國外有一款叫Tableau，已經(jīng)部分實(shí)現(xiàn)了2016年所預(yù)測的“可視化推動(dòng)平民化”。如果還想依靠類似可視化工具來提供原來的BI服務(wù)，基本上沒有市場空間了。
大數(shù)據(jù)的安全與隱私問題是持續(xù)令人擔(dān)心的熱點(diǎn)，這里其實(shí)隱藏另一個(gè)問題，如何將復(fù)雜數(shù)據(jù)結(jié)果算準(zhǔn)的問題。這意味著要詳細(xì)了解數(shù)據(jù)資源的構(gòu)成(元數(shù)據(jù))，世系關(guān)系(從哪兒來用在哪個(gè)應(yīng)用上)，這導(dǎo)致大數(shù)據(jù)治理或者大數(shù)據(jù)資產(chǎn)管理產(chǎn)品是一個(gè)適用于所有行業(yè)的剛性需求。
數(shù)據(jù)科學(xué)的興起是自2013年來持續(xù)提及的預(yù)測。實(shí)質(zhì)上目前的很多大數(shù)據(jù)應(yīng)用并未涉及到模型，這也是導(dǎo)致門檻低、競爭激烈的重要原因。因?yàn)檎嬲髷?shù)據(jù)的應(yīng)用應(yīng)該是“復(fù)雜數(shù)據(jù)的復(fù)雜分析”，該領(lǐng)域缺少對(duì)應(yīng)的產(chǎn)品。