最近,十多位院士向高層建議,我國(guó)應(yīng)制定大數(shù)據(jù)國(guó)家戰(zhàn)略,并在發(fā)展目標(biāo)、發(fā)展原則、關(guān)鍵技術(shù)等方面作出頂層設(shè)計(jì)。與此同時(shí),國(guó)家發(fā)改委與中科院正在啟動(dòng)“基礎(chǔ)研究大數(shù)據(jù)服務(wù)平臺(tái)應(yīng)用示范項(xiàng)目”。權(quán)威人士透露,有關(guān)部門正在積極研究,大數(shù)據(jù)國(guó)家戰(zhàn)略或?qū)⑻嵘献h程。
多位院士的建議方案認(rèn)為,所要制定的大數(shù)據(jù)國(guó)家戰(zhàn)略是國(guó)家層面的頂層規(guī)劃。其主要內(nèi)容包括:構(gòu)建大數(shù)據(jù)研究平臺(tái),整合創(chuàng)新資源,實(shí)施“專項(xiàng)計(jì)劃”,突破關(guān)鍵技術(shù);構(gòu)建大數(shù)據(jù)良性生態(tài)環(huán)境,制定支持政策,形成行業(yè)聯(lián)盟,制定行業(yè)標(biāo)準(zhǔn);構(gòu)建大數(shù)據(jù)產(chǎn)業(yè)鏈,促進(jìn)創(chuàng)新鏈與產(chǎn)業(yè)鏈有效嫁接。
什么是大數(shù)據(jù)
舍恩伯格在《大數(shù)據(jù)時(shí)代》中對(duì)大數(shù)據(jù)的定義簡(jiǎn)潔而清晰:所謂大數(shù)據(jù)就是大量的數(shù)據(jù)。那么,究竟多少數(shù)據(jù)才稱得上“大量”呢?日本野村綜合研究所的分析師城田真琴在《大數(shù)據(jù)的沖擊》一書中對(duì)大數(shù)據(jù)的表述是:用現(xiàn)有的一般技術(shù)難以管理的大量數(shù)據(jù)的集合??梢?jiàn),當(dāng)數(shù)據(jù)量達(dá)到“現(xiàn)有一般技術(shù)難以管理”時(shí),它們就足夠“大”了。所謂“用現(xiàn)有的一般技術(shù)難以管理”,舉例來(lái)說(shuō),就是用目前在企業(yè)數(shù)據(jù)庫(kù)占主流地位的關(guān)系型數(shù)據(jù)庫(kù)無(wú)法進(jìn)行管理、具有復(fù)雜結(jié)構(gòu)的數(shù)據(jù)。
更確切地說(shuō),幾帕字節(jié)(10^15)到幾埃字節(jié)(10^18)的數(shù)據(jù)量才可謂“大”。當(dāng)然,從多樣性的角度來(lái)說(shuō),除了傳統(tǒng)的銷售、庫(kù)存數(shù)據(jù),現(xiàn)在企業(yè)所采集和分析的數(shù)據(jù)還包括網(wǎng)站的日志數(shù)據(jù)、呼叫中心通話記錄、微博等社交媒體中的文本數(shù)據(jù)、智能手機(jī)內(nèi)置GPS所產(chǎn)生的位置信息,甚至還有圖片和視頻。另外,數(shù)據(jù)產(chǎn)生和更新的頻率,也是衡量大數(shù)據(jù)的一個(gè)重要特征。例如,日本全國(guó)公路上安裝的交通堵塞探測(cè)器和路面狀況傳感器每時(shí)每刻都在產(chǎn)生著龐大的數(shù)據(jù),波音客機(jī)的引擎每秒也產(chǎn)生數(shù)個(gè)GB的數(shù)據(jù)。
大數(shù)據(jù)國(guó)家戰(zhàn)略的驅(qū)動(dòng)力
人、 機(jī)、 物三元世界的高度融合引發(fā)了數(shù)據(jù)規(guī)模的爆炸式增長(zhǎng)和數(shù)據(jù)模式的高度復(fù)雜化,世界已進(jìn)入了網(wǎng)絡(luò)化的大數(shù)據(jù)(Big Data)時(shí)代。以數(shù)據(jù)為中心的傳統(tǒng)學(xué)科(如基因組學(xué)、 蛋白組學(xué),天體物理學(xué)和腦科學(xué)等)的研究產(chǎn)生了越來(lái)越多的數(shù)據(jù)。此前,美國(guó)政府認(rèn)為,大數(shù)據(jù)是“未來(lái)的新石油”,并將對(duì)大數(shù)據(jù)的研究上升為國(guó)家意志,這一定程度上對(duì)我國(guó)制定大數(shù)據(jù)國(guó)家戰(zhàn)略產(chǎn)生推動(dòng)力量。
據(jù)著名咨詢公司IDC的統(tǒng)計(jì),2011年全球被創(chuàng)建和復(fù)制的數(shù)據(jù)總量為1.8ZB(10的21次方),其中75%來(lái)自于個(gè)人(主要是圖片、 視頻和音樂(lè)),遠(yuǎn)遠(yuǎn)超過(guò)人類有史以來(lái)所有印刷材料的數(shù)據(jù)總量(200PB) 。傳感網(wǎng)和物聯(lián)網(wǎng)的蓬勃發(fā)展是大數(shù)據(jù)的又一推動(dòng)力,各個(gè)城市的視頻監(jiān)控每時(shí)每刻都在采集巨量的流媒體數(shù)據(jù)。工業(yè)設(shè)備的監(jiān)控也是大數(shù)據(jù)的重要來(lái)源。例如,勞斯萊斯公司對(duì)全世界數(shù)以萬(wàn)計(jì)的飛機(jī)引擎進(jìn)行實(shí)時(shí)監(jiān)控, 每年傳送PB數(shù)量級(jí)的數(shù)據(jù)。
大數(shù)據(jù)科學(xué)作為一個(gè)新興的交叉學(xué)科方向,其共性理論基礎(chǔ)將來(lái)自多個(gè)不同的學(xué)科領(lǐng)域,包括計(jì)算機(jī)科學(xué)、 統(tǒng)計(jì)學(xué)、 人工智能、 社會(huì)科學(xué)等。因此,將來(lái)推出一個(gè)國(guó)家科技和產(chǎn)業(yè)專項(xiàng)來(lái)引導(dǎo)和支持大數(shù)據(jù)的研究和產(chǎn)業(yè)發(fā)展,也會(huì)對(duì)相關(guān)學(xué)科的領(lǐng)域知識(shí)與研究方法論產(chǎn)生推動(dòng)作用。
大數(shù)據(jù)應(yīng)用前景
大數(shù)據(jù)專項(xiàng)研究的重點(diǎn)任務(wù)主要有布局關(guān)鍵技術(shù)、推進(jìn)示范應(yīng)用、完善支持政策等三方面,其中最關(guān)鍵的是應(yīng)用。
大數(shù)據(jù)最大的應(yīng)用之一是預(yù)測(cè)。大家都對(duì)航班晚點(diǎn)痛苦不已,怎么才能提前知道我訂的航班是否會(huì)晚點(diǎn)呢?FlightCaster網(wǎng)站可以讓你提前知道航班的晚點(diǎn)概率。這家美國(guó)公司的預(yù)報(bào)是基于交通統(tǒng)計(jì)局、聯(lián)邦航空局交通管制中心警報(bào)、美國(guó)氣象局和FlightStats(一個(gè)航班運(yùn)行狀況信息的網(wǎng)站)的數(shù)據(jù)而發(fā)布的。FlightCaster能在航空公司正式發(fā)布晚點(diǎn)信息前6小時(shí)告訴你,你乘坐的航班“正點(diǎn)概率只有3%,輕微晚點(diǎn)概率14%,晚點(diǎn)一個(gè)鐘頭以上的概率是83%”。
這家網(wǎng)站所采用的是過(guò)去十年上述單位保存的龐大統(tǒng)計(jì)數(shù)據(jù),通過(guò)人工智能分析,得出準(zhǔn)確率高達(dá)90%的預(yù)測(cè)。至于過(guò)去十年數(shù)據(jù)和未來(lái)某次航班是否晚點(diǎn)之間有何因果關(guān)系,暫時(shí)并不能解釋清楚——這便是大數(shù)據(jù)的另外一個(gè)特征:用相關(guān)關(guān)系取代因果關(guān)系。
對(duì)個(gè)人用戶而言,大數(shù)據(jù)還可以預(yù)測(cè)機(jī)票價(jià)格走勢(shì),為自費(fèi)旅游者省錢;預(yù)測(cè)交通擁堵情況,幫助人們選擇更好的時(shí)段和路線節(jié)省出行時(shí)間;也可以像亞馬遜那樣,為你提供更準(zhǔn)確的書單,幫你發(fā)現(xiàn)更多好書。谷歌還通過(guò)分析用戶的搜索關(guān)鍵詞,預(yù)測(cè)出了2009年禽流感在美國(guó)本土的嚴(yán)重程度以及未來(lái)的流行趨勢(shì),成功幫助衛(wèi)生部門抑制住了疾病的大規(guī)模爆發(fā)。
現(xiàn)代商業(yè)環(huán)境變化十分劇烈,對(duì)于企業(yè),在大數(shù)據(jù)時(shí)代做好準(zhǔn)備,利用好大數(shù)據(jù)尤為重要。如著名文具制造商萬(wàn)寶龍,通過(guò)分析監(jiān)控?cái)z像機(jī)的數(shù)據(jù),將最想賣出去的商品擺到最容易吸引顧客目光的位置,使得銷售量提高了20%。開(kāi)源分析機(jī)構(gòu)Wikibon預(yù)計(jì),2012年全球大數(shù)據(jù)企業(yè)營(yíng)收為50億美元,未來(lái)5年的市場(chǎng)復(fù)合年增長(zhǎng)率將達(dá)到58%,2017年將達(dá)到500億美元。
通過(guò)運(yùn)用過(guò)去無(wú)法獲取的數(shù)據(jù)來(lái)催生新的服務(wù),這才是人們對(duì)未來(lái)大數(shù)據(jù)時(shí)代的最大期望。