大數(shù)據(jù)(big data)，IT行業(yè)術(shù)語，是指無法在一定時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合，是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。大數(shù)據(jù)這個(gè)概念聽說過挺久的了，但一直沒有系統(tǒng)了解，由于工作需要，想做點(diǎn)深入了解，于是翻了關(guān)于大數(shù)據(jù)的經(jīng)典之作《大數(shù)據(jù)時(shí)代》，猛然發(fā)現(xiàn)這本書出版于2012年，已是七年前的著作了。

與大數(shù)據(jù)對(duì)應(yīng)的是小數(shù)據(jù)，在小數(shù)據(jù)時(shí)代，由于技術(shù)條件的限制，人類無法獲取大量的數(shù)據(jù)，即便獲取了，也無法快速處理那些數(shù)據(jù)，為了解決這一難題，聰明的人類發(fā)明了隨機(jī)采樣法。在隨機(jī)采樣中，由于一切都是隨機(jī)的，它本身就綜合了各種因素，又排除了人為因素，所以它的結(jié)論也大致滿足需求。但是在大數(shù)據(jù)時(shí)代，樣本=總體。要所有數(shù)據(jù)，不管這數(shù)據(jù)是對(duì)的還是錯(cuò)的，有意的或無意的，有用的還是無用的，全要。一個(gè)最簡(jiǎn)單的例子是翻譯軟件的發(fā)展，在最開始的版本中，翻譯學(xué)家想要把一切語言規(guī)則都內(nèi)置到軟件中，他們認(rèn)為這樣軟件就會(huì)實(shí)現(xiàn)自動(dòng)翻譯，結(jié)果他們發(fā)現(xiàn)自己得到了一坨屎。

《大數(shù)據(jù)時(shí)代》這部書算是易懂的，因?yàn)樗菑暮暧^的角度講了大數(shù)據(jù)時(shí)代帶來的思維變革，還有很多豐富詳實(shí)的案例，但并不涉及數(shù)據(jù)處理細(xì)節(jié)那些瑣碎的東西，所以對(duì)于非專業(yè)人士來講讀起來并不困難甚至可以說是有趣的。當(dāng)下的翻譯軟件則不然，它的“師傅們”不再是一堆語言規(guī)則，而是全世界人民!首先，開發(fā)人員先把館藏雙語對(duì)照的書籍植入計(jì)算機(jī)中，其次每個(gè)人每天在網(wǎng)絡(luò)上發(fā)的雙語對(duì)話都會(huì)被計(jì)算機(jī)記錄并學(xué)習(xí)，目前的計(jì)算機(jī)已經(jīng)可以實(shí)現(xiàn)深度學(xué)習(xí)，即不要內(nèi)置規(guī)則，它根據(jù)大量的輸入自己學(xué)習(xí)規(guī)則。

在這個(gè)簡(jiǎn)單的例子中已經(jīng)彰顯出大數(shù)據(jù)的三個(gè)特點(diǎn)：

更多：不是隨機(jī)樣本，而是全部數(shù)據(jù);

更雜：不是精確性，而是混雜性;

更好：不是因果關(guān)系，而是相關(guān)關(guān)系。

數(shù)據(jù)主義即只認(rèn)數(shù)據(jù)，唯數(shù)據(jù)是從，極端情況就類似于電影《少數(shù)派報(bào)告》所展現(xiàn)的場(chǎng)景了，在電影里有三個(gè)人具備預(yù)知能力，警方用他們的超能力實(shí)施罪前打擊，當(dāng)一個(gè)人想要犯罪還沒有犯罪的當(dāng)口抓住他，而在數(shù)據(jù)時(shí)代，當(dāng)一個(gè)人奉數(shù)據(jù)為圭臬時(shí)，他可能六親不認(rèn)只認(rèn)數(shù)據(jù)，當(dāng)數(shù)據(jù)預(yù)測(cè)到某人要犯罪時(shí)，是直接抓他坐牢還是坐等他犯罪?這是個(gè)問題。

首先第一點(diǎn)“要全部數(shù)據(jù)”很好理解，本來就是大數(shù)據(jù)嘛，其次第二點(diǎn)“不是精確性而是混雜性”這點(diǎn)也容易理解，這個(gè)世界本來就是混亂的，想要秩序不過是人類的一廂情愿而已，從混亂的世界中得到的數(shù)據(jù)自然也是混亂的、不精確的，但這樣的數(shù)據(jù)才能更真實(shí)地反映世界的本來面目，何必追求精確呢?在翻譯軟件的例子中，當(dāng)計(jì)算機(jī)去識(shí)別網(wǎng)絡(luò)上的語句時(shí)，它是無法保證每個(gè)人寫的都是正確的，但正是這種多樣性的存在才更能賦予計(jì)算機(jī)翻譯的智能性。最不好理解也最有爭(zhēng)議的就是第三點(diǎn)，用相關(guān)關(guān)系替代因果關(guān)系。相關(guān)關(guān)系顧名思義，當(dāng)一種現(xiàn)象發(fā)生變化時(shí)，另一種現(xiàn)象隨之改變，這說明兩種現(xiàn)象是相關(guān)的，但這里并不強(qiáng)調(diào)二者之間有什么邏輯上的因果性，因果關(guān)系則不然。

在心理學(xué)上有個(gè)第三變量問題，說當(dāng)兩個(gè)現(xiàn)象具有相關(guān)關(guān)系時(shí)，人們往往會(huì)把它誤當(dāng)作因果關(guān)系，而忽略第三變量。一個(gè)典型的例子是說私立學(xué)校和公立學(xué)校教育水平問題，一般來講，人們只看到私立學(xué)校教出來的學(xué)生更優(yōu)秀就認(rèn)為他們的教育水平更好，而往往忽略上私立學(xué)校的孩子家庭條件更好，父母的受教育程度更好，而這才是影響孩子學(xué)習(xí)成績(jī)的關(guān)鍵因素。

從大數(shù)據(jù)的角度來講，取消因果關(guān)系是明智的，因?yàn)楫?dāng)數(shù)據(jù)龐大了以后，想要分析因果關(guān)系勢(shì)必登天，因?yàn)樗鼱砍兜囊蛩靥嗔?，根本無法分析，更重要的是，人們需要因果關(guān)系嗎?人們只需要知道這件事發(fā)生了以后接下來會(huì)發(fā)生什么就足夠了，至于為什么會(huì)發(fā)生，誰關(guān)心呢?上帝嗎?關(guān)心這個(gè)問題的大概都是哲學(xué)家。哲學(xué)家們會(huì)擔(dān)心，沒有了因果關(guān)系，人在計(jì)算機(jī)面前就會(huì)像傻子一樣任人擺布，這是一種墮落。但不管如何，大數(shù)據(jù)時(shí)代的特點(diǎn)就是這樣，接受它你就邁入了大數(shù)據(jù)時(shí)代。在這樣的背景下，數(shù)據(jù)開始值錢了，但也不是說誰有數(shù)據(jù)誰就能雄霸天下。有的公司空有一堆數(shù)據(jù)但不會(huì)處理，有的公司知道怎么處理數(shù)據(jù)但卻缺少創(chuàng)新思維，不知道拿來何用。最好的是那些既有數(shù)據(jù)又知道怎么處理數(shù)據(jù)還具備創(chuàng)新思維的公司，但這樣的公司又極易淪為數(shù)據(jù)主義。