一、大數(shù)據(jù)的劈頭領(lǐng)略

好像一夜之間，大數(shù)據(jù)（Big Data）釀成一個IT行業(yè)中最時髦的詞匯。

首先，大數(shù)據(jù)不是什么完完全全的新鬧事物，Google的搜索處事就是一個典范的大數(shù)據(jù)運用，按照客戶的需求，Google及時從全球海量的數(shù)字資產(chǎn)（或數(shù)字垃圾）中快速找出最大概的謎底，泛起給你，就是一個最典范的大數(shù)據(jù)處事。只不外已往這樣局限的數(shù)據(jù)量處理懲罰和有貿(mào)易代價的應(yīng)用太少，在IT行業(yè)沒有形成成型的觀念。此刻跟著全球數(shù)字化、網(wǎng)絡(luò)寬帶化、互聯(lián)網(wǎng)應(yīng)用于各行各業(yè)，累積的數(shù)據(jù)量越來越大，越來越多企業(yè)、行業(yè)和國度發(fā)明，可以操作雷同的技能更好地處事客戶、發(fā)明新貿(mào)易時機、擴大新市場以及晉升效率，才慢慢形成大數(shù)據(jù)這個觀念。

有一個有趣的故事是關(guān)于奢侈品營銷的。PRADA在紐約的旗艦店中每件衣服上都有RFID碼。每當一個顧主拿起一件PRADA進試衣間，RFID會被自動識別。同時，數(shù)據(jù)會傳至PRADA總部。每一件衣服在哪個都市哪個旗艦店什么時間被拿進試衣間逗留多長時間，數(shù)據(jù)都被存儲起來加以闡明。假如有一件衣服銷量很低，以往的作法是直接干掉。但假如RFID傳回的數(shù)據(jù)顯示這件衣服固然銷量低，但進試衣間的次數(shù)多。那就能別的說明一些問題。也許這件衣服的下場就會截然差異，也許在某個細節(jié)的微小改變就會從頭締造出一件很是風(fēng)行的產(chǎn)物。

尚有一個是關(guān)于中國糧食統(tǒng)計的故事。中國的糧食統(tǒng)計是一個老浩劫的問題。中國的統(tǒng)計，固然有組織、有流程、有法令，但中央的統(tǒng)計人員依靠省統(tǒng)計人員，省靠市，市靠縣，縣靠鎮(zhèn)，鎮(zhèn)靠村，最后真正干活或上報的是下層兼職的觀測人員，由于眾所周知的KPI查核導(dǎo)向的原因，層層加碼，險些沒有人相信這個觀測數(shù)據(jù)，而個中國度統(tǒng)計局的人是最不信的。在前兩年北京的一個集會會議上，原國度統(tǒng)計局總經(jīng)濟師姚景源向我們報告了他們是如何做的。他們回收遙感衛(wèi)星，通過圖像識別，把中國所有的耕地標識、計較出來，然后把中國的耕地網(wǎng)格化，對每個網(wǎng)格的耕地抽樣舉辦跟蹤、觀測和統(tǒng)計，然后憑據(jù)統(tǒng)計學(xué)的道理，計較（可能說估算）出中國整體的整體糧食數(shù)據(jù)。這種做法是典范回收大數(shù)據(jù)建模的要領(lǐng)，沖破傳統(tǒng)流程和組織，直接得到最終的功效。

最后是一個炒股的故事。這個故事來自于2011年好萊塢的一部高智商影戲《永無盡頭》，報告一位崎嶇潦倒的作家?guī)扃辏昧艘环N可以迅速晉升智力的神奇藍色藥物，然后他將這種高智商用于炒股。庫珀是怎么炒股的呢？就是他能在短時間把握無數(shù)公司資料和配景，也就是將世界上已經(jīng)存在的海量數(shù)據(jù)（包羅公司財報、電視、幾十年前的報紙、互聯(lián)網(wǎng)、小道動靜等）挖掘出來，串聯(lián)起來，甚至將Face Book、Twitter的海量社交數(shù)據(jù)挖掘獲得普通公共對某種股票的情感傾向，通過海量信息的挖掘、闡明，使一切黑幕都不是黑幕，使一切趨勢都在面前，功效在10天內(nèi)他就贏得了200萬美元，神奇的表示讓身邊的職業(yè)投資者呆頭呆腦。這部影戲的確是揭示大數(shù)據(jù)魔力的課本性影戲，推薦沒有看過的IT人士看一看。

從這些案例來看，大數(shù)據(jù)并不是很神奇的工作。就如同影戲《永無盡頭》提出的問題：人類凡是只利用了20％的大腦，假如剩余80％大腦潛能被引發(fā)出來，世界會變得奈何？在企業(yè)、行業(yè)和國度的打點中，凡是只有效利用了不到20%的數(shù)據(jù)（甚至更少），假如剩余80%數(shù)據(jù)的代價激提倡來，世界會變得怎么樣呢？出格是跟著海量數(shù)據(jù)的新摩爾定律，數(shù)據(jù)發(fā)作式增長，然后數(shù)據(jù)又獲得更有效應(yīng)用，世界會怎么樣呢？

單個的數(shù)據(jù)并沒有代價，但越來越多的數(shù)據(jù)累加，量變就會引起質(zhì)變，就仿佛一小我私家的意見并不重要，但1千人、1萬人的意見就較量重要，上百萬人就足以掀起龐大的波濤，上億人足以改變一切。

數(shù)據(jù)再多，但假如被屏蔽可能沒有被利用，也是沒有代價的。中國的航班晚點很是多，對比之下美國航班準點環(huán)境好許多。這個中，美國航空管束機構(gòu)一個的好做法發(fā)揮了努力的浸染，說起來也很是簡樸，就是美國會發(fā)布每個航空公司、每一班航空已往一年的晚點率僻靜均晚點時間，這樣客戶在購置機票的時候就很自然會選擇準點率高的航班，從而通過市場手段牽引各航空公司盡力晉升準點率。這個簡樸的要領(lǐng)比任何打點手段（如中國當局的宏觀調(diào)控手段）都直接和有效。這里多說一兩句，已往一個虐政國度對內(nèi)的節(jié)制主要是物理上的暴力，就是強力機構(gòu)權(quán)力無限大，搞國度可怕主義；而此刻一個虐政國度，主要是就靠把持信息、封閉信息，讓公眾難以得到遍及而真實的信息，從而實現(xiàn)國度的節(jié)制。這個信息封閉，就是對大數(shù)據(jù)的封閉。