進(jìn)入大數(shù)據(jù)時(shí)代
其實(shí),很多人行為軌跡的數(shù)據(jù)都被收集了?,F(xiàn)在還有人不用手機(jī)嗎?當(dāng)然,人們不會(huì)自欺欺人地去否認(rèn)這個(gè)事實(shí):即你的手機(jī)廠商知道你每一時(shí)刻都在哪里。他們不僅知道你的位置信息,還知道你打的每一通電話(為了統(tǒng)計(jì)話費(fèi))。他們不僅知道你在哪里,也知道其他成千上萬的客戶在哪里。所以,相對于我所收集的關(guān)于自己的數(shù)據(jù),他們掌握的數(shù)據(jù)要豐富很多。有了這些數(shù)據(jù),人們就可以對不同的個(gè)體進(jìn)行比較。當(dāng)然,手機(jī)商很擔(dān)心這些數(shù)據(jù)會(huì)外泄,因?yàn)樗麄円3钟脩魧λ麄兊男湃危瑫r(shí)外泄信息還會(huì)受到法律的處罰。但是近幾年,他們逐步意識(shí)到這些數(shù)據(jù)的價(jià)值所在,于是開始將數(shù)據(jù)提供給研究者和其他公司。我的研究小組也得到了大量有關(guān)人類行為軌跡和通話模式的信息,信息的主人當(dāng)然是匿名的,我們不知道主人是誰,也不知道他們的電話號(hào)碼。我們只是將他們看做在宇宙中移動(dòng)的小個(gè)體,就像組成汽油的溴一樣。
有了這些數(shù)據(jù),我們終于可以問:人類行為的可預(yù)測性是多少?人的行為可以預(yù)測嗎?
我們之前提出的問題之一是:人們每天會(huì)移動(dòng)多遠(yuǎn)?答案很簡單。如果你想要查一查移動(dòng)這么遠(yuǎn)的人有多少,這是一個(gè)典型的行車距離,大部分人都會(huì)移動(dòng)這么遠(yuǎn)。你會(huì)發(fā)現(xiàn)大部分人傾向于在一個(gè)相對小的范圍內(nèi)移動(dòng)。當(dāng)然也有少數(shù)住在城郊的人會(huì)移動(dòng)一段相當(dāng)長的距離,移動(dòng)范圍較小的人的數(shù)量對比移動(dòng)范圍較大的人的數(shù)量正好符合一個(gè)精確的“冪律分布”。所以,如果你掌握了大量數(shù)據(jù),就可以預(yù)測有多少人是旅行者,有多少人在很遠(yuǎn)的地方上班,有多少人大多數(shù)時(shí)間待在附近,或是在家中工作。這是我們研究的第一步。這已經(jīng)表明,在研究一個(gè)龐大的人群時(shí),我們會(huì)發(fā)現(xiàn)不同人的行為是迥異的。下一步,我們用得出的行為軌跡算出每個(gè)人的熵。
什么是熵呢?整個(gè)體系的熵是零,就是說這個(gè)系統(tǒng)的狀態(tài)很明朗,你知道每一個(gè)點(diǎn)在哪里,每一個(gè)點(diǎn)的位置都是完全確定的,這也就是我們所說的:“熵為零。”熵是衡量隨機(jī)性的值。原則上,如果可以根據(jù)個(gè)人過去出現(xiàn)的地點(diǎn)寫出數(shù)據(jù)挖掘運(yùn)算法則,那么就可以百分之百地精確算出他將出現(xiàn)的地點(diǎn),他的可預(yù)測性是1,也就是說這個(gè)人的運(yùn)動(dòng)完全沒有隨機(jī)性。他每天在同一時(shí)間往返于家和單位。
我們認(rèn)為人與人之間的行為模式存在很大差異,很多人的行為很難被預(yù)測,因?yàn)樗麄兊纳钬S富,并且行動(dòng)無計(jì)劃性。但是還有一些人可能更容易被預(yù)測,這種人是我們一開始就提到的,他們的行為發(fā)生在一個(gè)確定范圍內(nèi)。于是我們分別計(jì)算出了這些人的平均值,并將他們的可預(yù)測性標(biāo)記在圖中。我們測量的是大批手機(jī)用戶的可預(yù)測性,首先應(yīng)該注意到的就是這個(gè)預(yù)測基數(shù)很大,峰值是93,也就是說,對于一個(gè)普通人來講,如果我們知道他過去去過的地方,原則上有93%的可能性可以準(zhǔn)確預(yù)測出他接下來將出現(xiàn)的地方。而且所有人的可預(yù)測性都高于80%。
因此,一旦收集到足夠多的數(shù)據(jù),就可以提出這個(gè)基本的問題:我們的可預(yù)測性有多高,并且會(huì)得到一個(gè)令人震驚的答案?如果我們談到對未來的預(yù)測,我們可以說:“如果我們擁有足夠的數(shù)據(jù),是不是所有事情都是可以預(yù)測的?”這是我們現(xiàn)在要思考的問題。
(作者系美國東北大學(xué)榮譽(yù)教授,復(fù)雜網(wǎng)絡(luò)科學(xué)研究中心主任,《爆發(fā)》一書作者。本文譯者為湛廬文化。)