僅僅幾年的時間,大數(shù)據(jù)技術就從之前的炒作階段逐漸發(fā)展成為新數(shù)字時代中的核心技術之一。2014年,大數(shù)據(jù)慢慢地從測試階段走向研發(fā)和生產。2015年,大數(shù)據(jù)將如何發(fā)展,發(fā)展重點是哪些呢? a&s就此相關問題向北京藍色星際軟件技術發(fā)展有限公司產品經理顏延峰進行采訪,探討大數(shù)據(jù)相關的技術發(fā)展趨勢。
Q:為什么要發(fā)展大數(shù)據(jù)技術?
A: 大數(shù)據(jù)是互聯(lián)網(wǎng)發(fā)展到現(xiàn)今階段的一種表象或特征,隨著云計算技術的發(fā)展,原本很難收集和使用的數(shù)據(jù)開始容易被利用起來了,通過各行各業(yè)的不斷創(chuàng)新,大數(shù)據(jù)會逐步為人類創(chuàng)造更多的價值。大數(shù)據(jù)時代的到來可以說是計算機技術發(fā)展的必然,也可以說是一種無奈。“必然”取決于用戶有大數(shù)據(jù)處理的需求,比如為了快捷準備的做出決策,需要在大數(shù)據(jù)中快速找到相應的依賴數(shù)據(jù);之所以說是“無耐”,是伴隨著計算機發(fā)展,數(shù)據(jù)呈現(xiàn)爆發(fā)式發(fā)展,魚龍混雜,如何快速提取和管理相應數(shù)據(jù)?
Q:您怎樣看待目前的大數(shù)據(jù)市場?
A:在現(xiàn)階段,大數(shù)據(jù)還處在初期發(fā)展階段,大數(shù)據(jù)的價值還未被真正發(fā)掘,且大數(shù)據(jù)本身就很“大”,泛泛而談大數(shù)據(jù)應該是微軟、IBM這類公司需要考慮的事情,且不一定能做好,對于中小型科技企業(yè)來講,針對行業(yè)和某種應用大數(shù)據(jù),應該是短期發(fā)展的重點。簡單些就是:前景很好,但需要在探索中行進,可借鑒的成功經驗不是很多。
Q:大數(shù)據(jù)得以實現(xiàn)的核心技術有哪些?
從“數(shù)據(jù)源-環(huán)節(jié)-目標”的思維出發(fā),大數(shù)據(jù)無非是獲取數(shù)據(jù)、存儲數(shù)據(jù)、分類檢索及應用數(shù)據(jù),其核心技術主要在以下幾個環(huán)節(jié):
一、 大規(guī)模并行處理(MPP)數(shù)據(jù)庫
二、 分布式文件系統(tǒng)
Q:將大數(shù)據(jù)技術引入安防的困難點有哪些?
A:常規(guī)的大數(shù)據(jù)應用,在存儲數(shù)據(jù)時,就已經通過數(shù)據(jù)庫具備了一個較好的檢索和統(tǒng)計接口,所以往往關注的是數(shù)據(jù)的存儲和分析統(tǒng)計;但視頻監(jiān)控系統(tǒng),視頻往是以視頻流結合報警進行存儲,除了按照時間和報警進行檢索條件外,很難對數(shù)據(jù)自身進行檢索和分析,這時需要借助智能分析等技術手段來輔助處理數(shù)據(jù)。由于智能分析除了周界保護、人臉分析、物品丟失遺留、視頻濃縮、車牌識別等應用相對成熟外,其他誤報率還很高,且對環(huán)境有很強的依賴性。
Q:目前安防行業(yè)是如何利用大數(shù)據(jù)技術處理數(shù)據(jù)信息的?
A:在安防行業(yè)視頻數(shù)據(jù)處理主要采用事中和事后兩種手段,事中是指特殊事件發(fā)生時可即使產生報警并形成相應的索引,如:移動偵測、人數(shù)統(tǒng)計、人臉識別、車牌識別等;事后是指對一段視頻錄像進行事后處理,主要是指對已存在的錄像資料進行視頻的二次處理,如:視頻濃縮、去霧去噪處理等。在目前階段,無論采用哪種技術,目前還均需要人為干預,還很難做到完全的智能。
Q:目前可以落地的大數(shù)據(jù)應用的系統(tǒng)架構是什么樣的?
A:在視頻監(jiān)控領域,目前使用的比較多的有兩部分:第一種:云存儲和云檢索;第二種為事后視頻數(shù)據(jù)的分析和處理,如視頻濃縮等技術。
Q:貴公司在大數(shù)據(jù)方面的投入和目前的實力怎樣?
A:大數(shù)據(jù)挑戰(zhàn)傳統(tǒng)的視頻監(jiān)控存儲與檢索機制,為各廠家?guī)砹诵碌奶魬?zhàn)和機遇,針對藍色星際針對大數(shù)據(jù)的開發(fā)和應用,投入了很大的精力,比如公司下一代視頻監(jiān)控系統(tǒng)平臺:星際云,結合云視頻、云數(shù)據(jù)、云分析形成一套完整的解決方案。
Q:大數(shù)據(jù)時代,該如何應對數(shù)據(jù)安全問題?
A:大數(shù)據(jù)時代,數(shù)據(jù)自身的安全是很好保障的,但隱私卻很難保障。大數(shù)據(jù)“大”的概念是無所不含,信息全面。而隱私恰恰是一個與之矛盾的話題。大數(shù)據(jù)可以為我們帶來便捷,但帶來便捷的同時,人的隱私權勢必會有所降低,不然數(shù)據(jù)從哪里來呢?目前最好的辦法就是,在人們所能接受的隱私范圍內,提供良好便捷的大數(shù)據(jù)服務。比如:公共場合、非私密數(shù)據(jù)等。
Q:大數(shù)據(jù)將會對安防產業(yè)格局產生什么樣的影響?
A:目前來看,在安防產業(yè)格局中,大數(shù)據(jù)還處在一個初級階段,一是大數(shù)據(jù)自身技術的發(fā)展還不足夠成熟,同時相關安防技術也存在一些瓶頸。短期內,大數(shù)據(jù)在安防行業(yè),更多的傾向于數(shù)據(jù)的存儲和檢索。
Q:您怎樣看待大數(shù)據(jù)與云計算的結合?
A:大數(shù)據(jù)離不開云計算,“大”為集大成,海量的數(shù)據(jù);有了海量的數(shù)據(jù),靠單臺PC去運算檢索,則很難滿足引用,云計算恰是為滿足此應用而來的。
Q:傳統(tǒng)安防企業(yè)與互聯(lián)網(wǎng)企業(yè)在大數(shù)據(jù)方面有哪些結合與沖突?
A:側重點不同,傳統(tǒng)安防行業(yè)的發(fā)展方向為專業(yè)、互聯(lián)網(wǎng)企業(yè)的優(yōu)勢在通用,兩者很難說孰優(yōu)孰劣。兩者更多是一種合作關系,而非競爭關系。