摘要:當(dāng)前,全球的數(shù)據(jù)總量正呈指數(shù)增長(zhǎng),過(guò)去3年間產(chǎn)生的數(shù)據(jù)量超過(guò)以往總和。移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等的迅速發(fā)展,使新數(shù)據(jù)源不斷出現(xiàn),GPS、傳感器等數(shù)據(jù)持續(xù)、大量產(chǎn)生。而數(shù)據(jù)獲取成本、存儲(chǔ)成本和處理成本的下降,也推動(dòng)了數(shù)據(jù)量的膨脹。
當(dāng)前,全球的數(shù)據(jù)總量正呈指數(shù)增長(zhǎng),過(guò)去3年間產(chǎn)生的數(shù)據(jù)量超過(guò)以往總和。移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等的迅速發(fā)展,使新數(shù)據(jù)源不斷出現(xiàn),GPS、傳感器等數(shù)據(jù)持續(xù)、大量產(chǎn)生。而數(shù)據(jù)獲取成本、存儲(chǔ)成本和處理成本的下降,也推動(dòng)了數(shù)據(jù)量的膨脹。
美國(guó)麥肯錫全球研究院2011年6月發(fā)布題為《大數(shù)據(jù):下一個(gè)創(chuàng)新、競(jìng)爭(zhēng)和生產(chǎn)力的前沿》的研究報(bào)告,指出“大數(shù)據(jù)時(shí)代已經(jīng)到來(lái)”,數(shù)據(jù)正成為與物質(zhì)資產(chǎn)和人力資本相提并論的重要生產(chǎn)要素,大數(shù)據(jù)的使用將成為未來(lái)提高競(jìng)爭(zhēng)力的關(guān)鍵要素。美國(guó)政府于2012年3月宣布“大數(shù)據(jù)的研究和發(fā)展計(jì)劃”,以提高對(duì)大數(shù)據(jù)的收集與分析能力,增強(qiáng)國(guó)家競(jìng)爭(zhēng)力。
其實(shí),不僅是美國(guó),其他一些國(guó)家也都把大數(shù)據(jù)提升到國(guó)家戰(zhàn)略層面,認(rèn)為未來(lái)國(guó)家層面的競(jìng)爭(zhēng)力將部分體現(xiàn)為一國(guó)擁有數(shù)據(jù)的規(guī)模及運(yùn)用數(shù)據(jù)的能力。有學(xué)者把大數(shù)據(jù)形象地比喻為推動(dòng)人類社會(huì)發(fā)展的“新石油”。
信息技術(shù)領(lǐng)域原先已經(jīng)有“海量數(shù)據(jù)”、“大規(guī)模數(shù)據(jù)”等概念,但這些概念只著眼于數(shù)據(jù)規(guī)模本身,未能充分反映數(shù)據(jù)爆發(fā)背景下的數(shù)據(jù)處理與應(yīng)用需求,而“大數(shù)據(jù)”這一新概念不僅指規(guī)模龐大的數(shù)據(jù)對(duì)象,也包含對(duì)這些數(shù)據(jù)對(duì)象的處理和應(yīng)用活動(dòng),是數(shù)據(jù)對(duì)象、技術(shù)與應(yīng)用三者的統(tǒng)一。
大數(shù)據(jù)對(duì)象既可能是實(shí)際的、有限的數(shù)據(jù)集合,如某個(gè)政府部門(mén)或企業(yè)掌握的數(shù)據(jù)庫(kù),也可能是虛擬的、無(wú)限的數(shù)據(jù)集合,如微博、微信、社交網(wǎng)絡(luò)上的全部信息。
大數(shù)據(jù)技術(shù)是從各種各樣類型的大數(shù)據(jù)中,快速獲得有價(jià)值信息的技術(shù),包括數(shù)據(jù)采集、存儲(chǔ)、管理、分析挖掘、可視化等技術(shù)及其集成。
大數(shù)據(jù)應(yīng)用是對(duì)特定的大數(shù)據(jù)集合,集成應(yīng)用大數(shù)據(jù)技術(shù),獲得有價(jià)值信息的行為。對(duì)于不同領(lǐng)域、不同企業(yè)的不同業(yè)務(wù),甚至同一領(lǐng)域不同企業(yè)的相同業(yè)務(wù)來(lái)說(shuō),由于其業(yè)務(wù)需求、數(shù)據(jù)集合和分析挖掘目標(biāo)存在差異,所運(yùn)用的大數(shù)據(jù)技術(shù)和大數(shù)據(jù)信息系統(tǒng)也可能有著相當(dāng)大的不同。惟有堅(jiān)持“對(duì)象、技術(shù)、應(yīng)用”三位一體同步發(fā)展,才能充分實(shí)現(xiàn)大數(shù)據(jù)的價(jià)值。
大數(shù)據(jù)是信息技術(shù)與專業(yè)技術(shù)、信息技術(shù)產(chǎn)業(yè)與各行業(yè)領(lǐng)域緊密融合的典型領(lǐng)域,有著旺盛的應(yīng)用需求、廣闊的應(yīng)用前景。為把握這一新興領(lǐng)域帶來(lái)的新機(jī)遇,需要不斷跟蹤研究大數(shù)據(jù),不斷提升對(duì)大數(shù)據(jù)的認(rèn)知和理解,堅(jiān)持技術(shù)創(chuàng)新與應(yīng)用創(chuàng)新的協(xié)同共進(jìn),加快經(jīng)濟(jì)社會(huì)各領(lǐng)域的大數(shù)據(jù)開(kāi)發(fā)與利用,推動(dòng)國(guó)家、行業(yè)、企業(yè)對(duì)于數(shù)據(jù)的應(yīng)用需求和應(yīng)用水平進(jìn)入新的階段。
大數(shù)據(jù)對(duì)人類經(jīng)濟(jì)社會(huì)發(fā)展影響巨大,歸納起來(lái)主要有三個(gè)方面:
一是能夠推動(dòng)實(shí)現(xiàn)巨大經(jīng)濟(jì)效益。據(jù)麥肯錫全球研究院測(cè)算,大數(shù)據(jù)將給美國(guó)醫(yī)療服務(wù)業(yè)帶來(lái)3000億美元的價(jià)值,使美國(guó)零售業(yè)凈利潤(rùn)增長(zhǎng)達(dá)到60%,使制造業(yè)產(chǎn)品開(kāi)發(fā)、組裝成本下降50%。而大數(shù)據(jù)所帶來(lái)的新的信息技術(shù)應(yīng)用需求,將推動(dòng)整個(gè)信息技術(shù)產(chǎn)業(yè)的創(chuàng)新發(fā)展,預(yù)計(jì)2013年全球大數(shù)據(jù)直接和間接拉動(dòng)信息技術(shù)支出將達(dá)1200億美元。
二是能夠推動(dòng)增強(qiáng)社會(huì)管理水平。大數(shù)據(jù)在政府和公共服務(wù)領(lǐng)域的應(yīng)用,可有效推動(dòng)政務(wù)工作開(kāi)展,提高政府部門(mén)的決策水平、服務(wù)效率和社會(huì)管理水平,產(chǎn)生巨大社會(huì)價(jià)值。歐洲多個(gè)城市通過(guò)分析實(shí)時(shí)采集的交通流量數(shù)據(jù),指導(dǎo)駕車出行者選擇最佳路徑,從而改善城市交通狀況。
三是能夠推動(dòng)提高安全保障能力。大數(shù)據(jù)在國(guó)防、反恐、安全等領(lǐng)域的應(yīng)用,將對(duì)各部門(mén)搜集到的各類信息進(jìn)行自動(dòng)分類、整理、分析,有效解決情報(bào)、監(jiān)視和偵察系統(tǒng)不足等問(wèn)題,提高國(guó)家安全保障能力??偠灾?,大數(shù)據(jù)將為人們認(rèn)識(shí)世界和改造世界提供新的強(qiáng)有力工具,使人們能更加容易地把握事物規(guī)律,更準(zhǔn)確地預(yù)測(cè)未來(lái)。
如果沒(méi)有高性能的分析工具,大數(shù)據(jù)的價(jià)值就得不到釋放。
對(duì)大數(shù)據(jù)應(yīng)用必須保持清醒認(rèn)識(shí),既不能迷信其分析結(jié)果,也不能因?yàn)槠洳煌耆珳?zhǔn)確而否定其重要作用。
一方面,由于各種原因,所分析處理的數(shù)據(jù)對(duì)象中不可避免地會(huì)包括各種錯(cuò)誤數(shù)據(jù)、無(wú)用數(shù)據(jù),加之作為大數(shù)據(jù)技術(shù)核心的數(shù)據(jù)分析、人工智能等技術(shù)尚未完全成熟,所以對(duì)計(jì)算機(jī)完成的大數(shù)據(jù)分析處理的結(jié)果,無(wú)法要求其完全準(zhǔn)確。例如,谷歌通過(guò)分析億萬(wàn)用戶搜索內(nèi)容能夠比專業(yè)機(jī)構(gòu)更快地預(yù)測(cè)流感暴發(fā),但由于微博上無(wú)用信息的干擾,這種預(yù)測(cè)也曾多次出現(xiàn)不準(zhǔn)確的情況。
另一方面,必須清楚定位的是,大數(shù)據(jù)作用與價(jià)值的重點(diǎn)在于能夠引導(dǎo)和啟發(fā)大數(shù)據(jù)應(yīng)用者的創(chuàng)新思維,輔助決策。簡(jiǎn)單而言,若是處理一個(gè)問(wèn)題,通常人能夠想到一種方法,而大數(shù)據(jù)能夠提供十種參考方法,哪怕其中只有三種可行,也將解決問(wèn)題的思路拓展了三倍。
所以,客觀認(rèn)識(shí)和發(fā)揮大數(shù)據(jù)的作用,不夸大、不縮小,是準(zhǔn)確認(rèn)知和應(yīng)用大數(shù)據(jù)的前提。