文|李志勇
大數(shù)據(jù)必然會深刻地改變這個世界，這點(diǎn)是毋庸置疑的。但是從很多當(dāng)下的討論來看，大家似乎在大數(shù)據(jù)的使用邊界上走入了誤區(qū)，這篇文章想具體探討下大數(shù)據(jù)能干什么以及不能干什么上的原則問題。
大數(shù)據(jù)與預(yù)測
人們總是想預(yù)測未來，因?yàn)檫@樣經(jīng)濟(jì)收益會非常大，作為結(jié)果就經(jīng)?？吹酱髷?shù)據(jù)與票房預(yù)測的故事，有時準(zhǔn)，有時不準(zhǔn)。
大數(shù)據(jù)確實(shí)可以用來做預(yù)測，但是有能力邊界的，影響這個能力邊界的關(guān)鍵因素就是索羅斯經(jīng)常說的反身性。反身性說的是：參入者的思維與參入的情景之間相互聯(lián)系與影響，彼此無法獨(dú)立，認(rèn)知與參入處于永遠(yuǎn)的變化過程之中（百度百科）。反身性之所以對預(yù)測有影響，是因?yàn)樗鼤?dǎo)致出現(xiàn)不連續(xù)的變化。
這在邏輯上很好理解，當(dāng)一件事物是連續(xù)變化的，你比較容易計(jì)算出它未來的狀態(tài)，比如汽車，我們只要知道它的速度，那就比較容易預(yù)測它下一刻的位置。但如果是充滿突變的混沌系統(tǒng)，這種預(yù)測就很難實(shí)現(xiàn)，汽車本來走的好好的，突然天上掉下一架飛機(jī)來，那它當(dāng)然不會出現(xiàn)在本來預(yù)測的那個位置。所以做預(yù)測，第一關(guān)鍵是這系統(tǒng)是不是一個混沌系統(tǒng)，在充滿偶然的混沌系統(tǒng)里，基于數(shù)據(jù)的預(yù)測是無效的。而反身性正是導(dǎo)致混沌蝴蝶會出現(xiàn)的一個關(guān)鍵因素。
當(dāng)我們?nèi)ビ^察某個系統(tǒng)并采取行動時，系統(tǒng)本身會因?yàn)槲覀兊挠^察和行動發(fā)生改變，這就是反身性。而當(dāng)每個人都這么做時，那被觀察和操作的系統(tǒng)就會變成混沌系統(tǒng)。金融市場已經(jīng)充分說明了這點(diǎn)，如果大數(shù)據(jù)在預(yù)測上是沒邊界的，那只要掌握了大數(shù)據(jù)就應(yīng)用巧妙，那在金融市場上就沒人不會賠錢，但顯然這是不可能的，最多是不同人輸贏的概率不同。
容易預(yù)測的與不容易預(yù)測的
如果一種現(xiàn)實(shí)更多地依賴于某些不易改變的因素，比如一種文化傳統(tǒng)、一種生物特性，那這種現(xiàn)實(shí)是容易被預(yù)測的；如果一種現(xiàn)實(shí)更多地依賴于可被瞬間改變的因素，比如：人們的心情，那這種現(xiàn)實(shí)是不容易預(yù)測的，甚至是不可預(yù)測的。
具體來講，人們生病后會檢索，而傳染病會擴(kuò)散，因此Google那種監(jiān)測傳染病暴發(fā)區(qū)域以及預(yù)測其可能擴(kuò)散路徑的大數(shù)據(jù)使用方式是極為有效的。在這里反身性并不起太大作用。
但股票就不行，因?yàn)槟阍陬A(yù)測，別人也在預(yù)測，買家和賣家的行動又不一致，這就會使股票市場成為混沌系統(tǒng)。究竟怎么樣才能用大數(shù)據(jù)預(yù)測到國內(nèi)這波股票的上漲呢？
同傳染病和股票市場相比，電影票房的可預(yù)測性則在兩者之間。有必然性在支撐，比如基本上很垃圾的電影很難有好的票房，但偶然性影響也很大，你不好預(yù)測那個點(diǎn)戳到了人們的那個神經(jīng)，它突然就變火了。誰能預(yù)測《泰囧》的10億票房呢？所以我的判斷是在票房預(yù)測上，不管大數(shù)據(jù)怎么發(fā)展，它始終會處在時靈時不靈的狀態(tài)上，因?yàn)檫@根本不是個技術(shù)問題。
總結(jié)來看，反身性作用越大的領(lǐng)域越不容易預(yù)測，反之則預(yù)測的幫助會比較大。
監(jiān)測與預(yù)測
在預(yù)測上大數(shù)據(jù)必須面對自己的邊界問題，但在監(jiān)測上大數(shù)據(jù)的威力是無遠(yuǎn)弗屆的。
我們這個世界的數(shù)據(jù)化程度一定是越來越高的，當(dāng)我們在社交網(wǎng)絡(luò)中活動時，其實(shí)就是我們個人在不停數(shù)據(jù)化的過程，我們的偏好、關(guān)系、每日活動等正在源源不斷的數(shù)據(jù)化過程中，如果可穿戴設(shè)備、智能家居發(fā)展起來，那數(shù)據(jù)化的東西就會更多。
我在互聯(lián)網(wǎng)時代的方法論那系列文章里一直堅(jiān)持這樣一種觀點(diǎn)：
互聯(lián)網(wǎng)正在生成一個與現(xiàn)實(shí)世界并行的很像黑客帝國的意識空間，而這個意識空間是數(shù)據(jù)化的。
理論上講，在這個空間里不存在信息不透明這回事，空間和時間不再成為阻隔信息流動的障礙。所以不管你喜歡不喜歡，在數(shù)字化面前每個人正在變成透明人，也就是說100%可監(jiān)測。
監(jiān)測與預(yù)測間的橋梁是必然邏輯和直覺，直覺依賴于個人才情天分，放在一邊不提，主要談下必然邏輯。有必然邏輯在事情就有了發(fā)生的可能性，但不一定發(fā)生。這點(diǎn)比較不好理解，我們來看個例子：