大數(shù)據(jù)和交通
正如維克托•邁爾舍-恩伯格及肯尼斯•庫克耶編寫的暢銷著作《大數(shù)據(jù)時代》中所說的:大數(shù)據(jù)不是用隨機分析法(抽樣調(diào)查)這樣的捷徑,而采用所有數(shù)據(jù)的方法。因而,大數(shù)據(jù)具有的4V特點:Volume(大量)、Velocity(高速)、Variety(多樣)、Value(價值)。隨著信息技術(shù)的發(fā)展,尤其是“互聯(lián)網(wǎng)時代,社交網(wǎng)絡(luò)、電子商務(wù)與移動通信把人類社會帶入了一個以“PB”(1024TB)為單位的結(jié)構(gòu)與非結(jié)構(gòu)數(shù)據(jù)信息的新時代”。 所以,在許多場景,大數(shù)據(jù)甚至通常就是用來形容大量非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù),這些數(shù)據(jù)在下載到關(guān)系型數(shù)據(jù)庫用于分析時會花費高昂的成本,而且難以實現(xiàn)預(yù)期目標(biāo)。面對如此龐雜的數(shù)據(jù)和信息,傳統(tǒng)的計算機的處理能力實際上也難以滿足。
因此從另外一個角度來看,正是運算方法和運算能力的發(fā)展到了云計算的階段才使得大數(shù)據(jù)的分析使用成為可能。“以云計算為基礎(chǔ)的信息存儲、分享和挖掘手段,可以便宜、有效地將這些大量、高速、多變化的終端數(shù)據(jù)存儲下來,并隨時進(jìn)行分析和計算。”云計算是繼1980年代大型計算機到客戶端-服務(wù)器的大轉(zhuǎn)變之后的又一巨變。“數(shù)據(jù),這個21世紀(jì)人類探索的新邊疆,正在被云計算發(fā)現(xiàn)、征服。”而智能交通系統(tǒng)(ITS)作為未來交通系統(tǒng)的發(fā)展方向,其本身就是將先進(jìn)的信息技術(shù)、數(shù)據(jù)通訊傳輸技術(shù)、電子傳感技術(shù)、控制技術(shù)及計算機技術(shù)等有效地集成運用于交通管理之中,從而建立一種在大范圍內(nèi)、全方位發(fā)揮作用的,實時、準(zhǔn)確、高效的綜合交通運輸管理系統(tǒng)。ITS綜合了交通工程、信息工程,通信技術(shù)、控制工程、計算機技術(shù)等眾多科學(xué)領(lǐng)域的成果,可以有效地利用現(xiàn)有交通設(shè)施、減少交通負(fù)荷和環(huán)境污染、保證交通安全、提高運輸效率。而它的關(guān)鍵支撐就在于新一代的信息技術(shù):移動通信、寬帶網(wǎng)、RFID、傳感器、云計算必然是智能交通的核心元素。
智能交通發(fā)展至今,各地采集的數(shù)據(jù)浩如煙海,存在巨大的潛力和價值,亟待處理和挖掘。不容置疑,隨著大數(shù)據(jù)時代的到來,智能交通也必然會產(chǎn)生重大變化,也將面臨重要的發(fā)展機遇,智能交通產(chǎn)業(yè)發(fā)展也將迎來新的機遇。年初,在北京召開的2014中國智能交通行業(yè)發(fā)展趨勢分析會上,業(yè)界對大數(shù)據(jù)在智能交通行業(yè)的運用趨勢進(jìn)行了分析判斷。準(zhǔn)確把握大數(shù)據(jù)時代的特征,深入分析對智能交通的影響和作用,對于在新的高度和起點上改善我國的交通狀況有著非常重要的意義。
如何看待大數(shù)據(jù)與智能交通的關(guān)系
既然時代潮流不可阻擋,那么我們該怎樣認(rèn)識大數(shù)據(jù)以及大數(shù)據(jù)與智能交通的關(guān)系呢?大數(shù)據(jù)只是一次簡單的技術(shù)革新還是手段的升級換代呢,還是根本意義上的變革革命呢?前面對于大數(shù)據(jù)產(chǎn)生背景已經(jīng)說到,大數(shù)據(jù)與云計算密切相關(guān)。大數(shù)據(jù)必然無法用單臺的計算機進(jìn)行處理,即使一般的網(wǎng)絡(luò)計算能力也難以達(dá)到,必須采用分布式計算架構(gòu)。它的特色在于對海量數(shù)據(jù)的挖掘,必須依托云計算的分布式處理、分布式數(shù)據(jù)庫、云存儲或虛擬化技術(shù)。
從技術(shù)上看,大數(shù)據(jù)與云計算的關(guān)系就像一枚硬幣的正反面一樣密不可分。也有學(xué)者認(rèn)為大數(shù)據(jù)與云計算是一個問題的兩面:一個是問題,一個是解決問題的方法。無論是從技術(shù)層面看,還從方法論意義上說,筆者認(rèn)為大數(shù)據(jù)的出現(xiàn)都具有美國科學(xué)哲學(xué)家托馬斯•庫恩在其《科學(xué)革命的結(jié)構(gòu)》中確立的范式和范式轉(zhuǎn)換的意味。范式,是指在一個時代里人們對事物具有支配地位的看法。特別是指理應(yīng)成為處理科學(xué)上的問題的前提、在某個時代人們公認(rèn)的有系統(tǒng)的思想體系。范式的變革不可能是知識的直線積累,而是一種創(chuàng)新和飛躍,一種科學(xué)體系的革命。人們已經(jīng)逐漸認(rèn)識到世界的本質(zhì)就是數(shù)據(jù)。所以維克托指出大數(shù)據(jù)時代的經(jīng)濟學(xué)、政治學(xué)、社會學(xué)和許多科學(xué)門類都會發(fā)生巨大甚至是本質(zhì)的變化和發(fā)展,進(jìn)而影響人類的價值體系、知識體系和生活方式。這難道不是范式轉(zhuǎn)換嗎!所以我們完全有理由相信大數(shù)據(jù)是一場根本性的革命,從思維方式到生活方式都會隨之轉(zhuǎn)變。正如《大數(shù)據(jù)時代》開宗明義所說:大數(shù)據(jù)是一場生活、工作與思維的大變革。開啟了一次重大的時代轉(zhuǎn)型。
交通作為人類行為的重要組成和重要條件之一,對于大數(shù)據(jù)的感知也是最急迫的。智能交通的發(fā)展以“保障安全、提高效率、改善環(huán)境、節(jié)約能源”為目標(biāo)已經(jīng)受到各國的重視,我國的智能交通也實現(xiàn)了快速發(fā)展,許多技術(shù)手段都達(dá)到了國際領(lǐng)先水平。但是,問題和困境也非常突出,從各個城市的發(fā)展?fàn)顩r來看,智能交通的潛在價值還沒有得到有效挖掘:對交通信息的感知和收集有限,對存在于各個管理系統(tǒng)中的海量的數(shù)據(jù)無法共享運用、有效分析,對交通態(tài)勢的研判預(yù)測乏力,對公眾的交通信息服務(wù)很難滿足需求。這雖然有各地在建設(shè)理念、投入上的差異,但是整體上智能交通的現(xiàn)狀是效率不高,智能化程度不夠,使得很多先進(jìn)技術(shù)設(shè)備發(fā)揮不了應(yīng)有的作用,也造成了大量投入上的資金浪費。這其中很重要的問題是小數(shù)據(jù)時代帶來的硬傷:從模擬時代帶來的管理思想和技術(shù)設(shè)備只能進(jìn)行一定范圍的分析,而管理系統(tǒng)的那些關(guān)系型數(shù)據(jù)庫只能刻板的分析特定的關(guān)系,對于海量數(shù)據(jù)尤其是半結(jié)構(gòu)、非結(jié)構(gòu)數(shù)據(jù)無能為力。
盡管現(xiàn)在已經(jīng)基本實現(xiàn)了數(shù)字化,但是數(shù)字化和數(shù)據(jù)化還根本不是一回事,只是局部的提高了采集、存儲和應(yīng)用的效率,本質(zhì)上并沒有太大的改變。而大數(shù)據(jù)時代的到來必然帶來破解難題的重大機遇。大數(shù)據(jù)必然要求我們改變小數(shù)據(jù)條件下一味的精確計算,而是更好的面對混雜,把握宏觀態(tài)勢;大數(shù)據(jù)必然要求我們不再熱衷因果關(guān)系而是相關(guān)關(guān)系,使得處理海量非結(jié)構(gòu)化數(shù)據(jù)成為可能,也必然促使我們努力把一切事物數(shù)據(jù)化,最終實現(xiàn)管理的便捷高效。另外,大數(shù)據(jù)的世界性特征最明顯,也在瞬間拉近了我們和西方發(fā)達(dá)國家的距離,我們有可能把握還這個重大機遇迎頭趕上甚至在某些方面超過西方發(fā)達(dá)國家。