2009年，在甲型h1n1流感爆發(fā)的幾周前，谷歌的工程師們在《自然》雜志上發(fā)表了一篇令人矚目的論文，工程師們在文中探討了谷歌為什么能夠準確地預測冬季流感的傳播情況。
谷歌的這套預測系統的重點(diǎn)不在于提供有效的解決方案，它唯一關(guān)注的就是特定檢索詞條的使用頻率與疾病在時(shí)間和空間上的傳播之間的聯(lián)系，比如某地在某段時(shí)間上對某種疾病解決方案的搜索頻率越高，那么某地某種疾病在某段時(shí)間內流行的概率就越大，同時(shí)谷歌還利用龐大的歷史檢索數據來(lái)完成對已發(fā)生事件的驗證式“預測”，通過(guò)不斷地調整預測的數學(xué)模型使之更加符合事實(shí)真相，從而提升該預測系統的準確率，以更好地完成對未來(lái)事件的預測。
事實(shí)證明了谷歌利用龐大的搜索數據進(jìn)行趨勢預測的準確性，在2009年甲型h1n1流感爆發(fā)的時(shí)候，相比官方數據習慣性滯后的毛病，谷歌成為一個(gè)更為及時(shí)且更有效的指示標。
大數據與云計算，相伴相隨的最佳“伴侶”
谷歌的這套預測系統就是一個(gè)典型的基于大數據技術(shù)完成的成功案例。對于大數據的定義，目前業(yè)界并沒(méi)有形成一個(gè)一致的說(shuō)法，麥肯錫全球研究所對大數據的定義為一種規模大到在獲取、存儲、管理、分析方面大大超出了傳統數據庫軟件工具能力范圍的數據集合，具有海量的數據規模、快速的數據流轉、多樣的數據類(lèi)型和價(jià)值密度低四大特征。
不管大數據的定義如何(筆者以為這不是重點(diǎn))，但其相對傳統數據庫而言的差別還是需要知悉的，那就是它比傳統數據庫的規模要大得多，這種大不僅僅體現在數據的量上，亦體現在數據類(lèi)型上，這點(diǎn)不難理解，也正是這種規模與類(lèi)型上的巨大差別，導致了大數據的價(jià)值密度相對傳統數據庫而言要小，這點(diǎn)不妨簡(jiǎn)單地理解為在大數據的概念中，有價(jià)值的信息數據多，但無(wú)價(jià)值的信息數據同樣也多，這自然會(huì )稀釋大數據的價(jià)值密度了。
一般而言，在傳統的數據庫系統中，企業(yè)的數據中心往往是最耗費計算資源與財力的，大數據在數據量與數據類(lèi)型成倍增長(cháng)的情況下，對計算資源的索取自然就更變本加厲了，這對中小型企業(yè)而言，成本往往會(huì )成為其不能承受之重，此時(shí)，與大數據最為適配的搭檔就是云計算了!
云計算是通過(guò)讓任務(wù)(計算或數據處理等)分布在大量的分布式計算機上(這些分布式計算機是聯(lián)網(wǎng)的)，而非遠程服務(wù)器或本地計算機上，讓這些分布式計算機形成一個(gè)資源池共同完成任務(wù)，這就相當于把一份任務(wù)分給n個(gè)人做，而這個(gè)n究竟是多少是依據任務(wù)的難度而定的，云計算的優(yōu)勢顯而易見(jiàn)，不但可很好地解決計算資源不足的問(wèn)題(對本地的計算資源需求很低，但對網(wǎng)絡(luò )的要求較高)，同時(shí)網(wǎng)絡(luò )上閑散的計算資源也被很好地利用起來(lái)，這正好滿(mǎn)足了大數據應用對計算資源的龐大需求。
大數據如何改變我們的生活
大數據對我們日常生活的改變首先體現在思維方式上，嚴格來(lái)說(shuō)，大數據并非是一個(gè)確切的概念，說(shuō)大數據是一種工具，一種新的思維方式也許更加準確。大數據打破了人類(lèi)之所以是人類(lèi)的原因之一即邏輯思維方式，大數據不講究因果關(guān)系，而因果關(guān)系正是邏輯思維運作的基礎，大數據講究的是相關(guān)性，由這個(gè)相關(guān)性可產(chǎn)生一系列的大數據的實(shí)際應用。當然大數據的本質(zhì)還是一種數據庫技術(shù)，那么傳統數據庫所具有的一些特性，大數據當然也一個(gè)不少，比如數據分析，數據挖掘等等。
正如前文所言，大數據不講究因果關(guān)系，它更加關(guān)注事物的相關(guān)性，由著(zhù)這個(gè)相關(guān)性誕生了一系列的新應用，比如本文開(kāi)頭言及谷歌對于流感的預測報告就是如此，此外與我們日常生活更為息息相關(guān)的就是電子商務(wù)應用了。
當你在購物網(wǎng)站京東搜索了你想買(mǎi)的某類(lèi)產(chǎn)品，或是你在京東上常常瀏覽某種類(lèi)型的商品后，京東背后的大數據應用會(huì )為你建立一個(gè)小的數據庫，這個(gè)數據庫涵蓋你以往的購物歷史數據、搜索記錄(搜索了什么類(lèi)型的商品等)、瀏覽記錄(瀏覽了什么商品等數據)，基本上你在京東上的行為都被一一記錄下來(lái)形成一個(gè)你私人的大數據，這對你而言是沒(méi)有意義的，對京東而言就意義重大了，京東會(huì )由此預測你在此時(shí)此刻可能對某些商品會(huì )感興趣。
京東不會(huì )關(guān)注你為什么會(huì )對這些商品感興趣，因為原因對京東而言沒(méi)有意義，京東關(guān)注的是如何把商品賣(mài)出去，你的興趣才是它的關(guān)注點(diǎn)，于是當你在瀏覽其他網(wǎng)頁(yè)時(shí)(與京東合作的相關(guān)網(wǎng)站)，在該頁(yè)面的廣告欄便會(huì )輪番顯示你感興趣或者曾經(jīng)瀏覽過(guò)的商品，在大大提升廣告推廣效率的同時(shí)亦不會(huì )讓你反感(甚至某種你需求商品在其上的降價(jià)可激發(fā)你的感激之情)，除此之外，對商家而言，依據眾多用戶(hù)購買(mǎi)行為而建立的大數據，可有效地判斷某時(shí)某地大眾的消費趨勢，為更好地實(shí)施商業(yè)戰略規劃提供參考。
大數據在城市智能交通上的應用正是基于其在數據分析與挖掘之上的。記錄一座城市一天24小時(shí)的交通數據信息是一項龐大的工程，一個(gè)完善的城市交通大數據(這些數據主要來(lái)自城市各個(gè)干道上所安裝的智能化視頻監控系統、停車(chē)場(chǎng)的智能卡口系統、地鐵公交系統的刷卡記錄等)系統應該將這些數據悉數記錄，這些數據包括城市各個(gè)路段上實(shí)時(shí)的交通流量信息(如各個(gè)路段上事實(shí)的交通擁堵情況，單位時(shí)間的車(chē)流量，甚至某輛車(chē)由某位置到達某位置預計所需要的時(shí)間等等)、歷史交通信息的存儲與查詢(xún)等，城市交通大數據系統會(huì )依據相應的數據模型展開(kāi)數據分析與挖掘，并將分析報告的結果實(shí)時(shí)呈現出來(lái)，這些實(shí)時(shí)的交通信息報告給城市的交管部門(mén)更為良好的管理整個(gè)城市的交通運作提供最有價(jià)值的決策依據。
也許大數據應用對城市智能交通管理系統更大的價(jià)值在于一旦城市交通出現緊急情況，比如出現交通事故時(shí)，肇事司機駕車(chē)逃逸，此時(shí)管理部門(mén)啟動(dòng)整個(gè)交通平臺的大數據技術(shù)對罪犯進(jìn)行追捕將變得極為有效：在基本確定了在某個(gè)時(shí)間段內某地段所發(fā)生的交通事故后，在周?chē)贾玫闹悄芤曨l監控系統可依據該逃逸車(chē)輛的特征(車(chē)的類(lèi)型、顏色、逃逸司機的特征，車(chē)牌號中包括了哪些數字等)迅速地確定該逃逸車(chē)輛的車(chē)牌號，依據車(chē)牌號再確定司機姓名(即使有時(shí)不是車(chē)輛所有者本人亦無(wú)關(guān)系，依然可作為案件偵查的重要線(xiàn)索)，此時(shí)該范圍內所有布置的智能視頻監控系統(可依據監控物特征進(jìn)行識別)將悉數處于戒備狀態(tài)，一旦該車(chē)輛從其“眼皮”底下溜過(guò)時(shí)即會(huì )觸發(fā)報警，該報警會(huì )自動(dòng)上傳至城市智能交通管理系統，系統在完成位置的確定后即可實(shí)施抓捕，大數據在整個(gè)運作過(guò)程中扮演了幕后英雄的角色，最終將犯罪分子繩之以法!
大數據本質(zhì)是一種工具，其價(jià)值在于人類(lèi)如何利用它
盡管大數據的存在不露聲色，但它與我們的生活已密不可分，它就像一只看不見(jiàn)的手，在一定程度上操控著(zhù)我們的生活。當你瀏覽網(wǎng)頁(yè)時(shí)，大數據會(huì )依據你的喜好向你推薦感興趣的商品，你不討厭，你甚至欣喜若狂，因為你發(fā)現看上的某商品在低價(jià)出售，也許事后你又會(huì )恨得咬牙切齒，怪自己不該沖動(dòng)剁手，買(mǎi)了一件用不上的東西，但大數據卻扎扎實(shí)實(shí)地改變了你的生活。事實(shí)上，在你網(wǎng)購的同時(shí)，你的購買(mǎi)行為本身亦成為網(wǎng)站大數據應用的一部分，正是這許許多多的一部分成就了大數據應用的基礎。
太陽(yáng)底下無(wú)新事，大數據亦如此，它不追究事物的原因，不講究因果關(guān)系，但它把事物的相關(guān)性發(fā)揮得淋漓盡致，正是基于此，它建立了許許多多成功的商業(yè)應用，但這些商業(yè)應用成功的真正原因卻不在大數據本身，而是人類(lèi)自身所具備的智慧造就，誠如本文開(kāi)頭所言，谷歌收集的數據只是用戶(hù)的檢索數據，是谷歌的工程師們發(fā)現了用戶(hù)檢索與流感之間的聯(lián)系才產(chǎn)生了后來(lái)大數據具備的預測性應用，一句話(huà)，大數據的本質(zhì)只是一種工具，如何用好這個(gè)工具，還得仰仗人類(lèi)自身的智慧了!