應(yīng)用

技術(shù)

物聯(lián)網(wǎng)世界 >> 物聯(lián)網(wǎng)新聞 >> 物聯(lián)網(wǎng)熱點(diǎn)新聞
企業(yè)注冊個(gè)人注冊登錄

透過“平安城市”看大數(shù)據(jù)

2012-08-14 09:52 中國計(jì)算機(jī)報(bào)

導(dǎo)讀:平安城市是一個(gè)特大型的管理系統(tǒng),綜合性非常強(qiáng)。它的建設(shè)目標(biāo)是滿足治安管理、城市管理、交通管理、應(yīng)急指揮等需求,往往還要兼顧災(zāi)難事故預(yù)警、安全生產(chǎn)監(jiān)控等方面對圖像監(jiān)控的需求,并考慮報(bào)警、門禁等配套系統(tǒng)的集成以及與廣播系統(tǒng)的聯(lián)動(dòng)。如何做到對海量視頻數(shù)據(jù)的精準(zhǔn)分析,正是平安城市的“大數(shù)據(jù)”痛點(diǎn)。

  現(xiàn)代經(jīng)濟(jì)活動(dòng)對于數(shù)據(jù)的依賴是前所未有的。今天,信息甚至被視為21世紀(jì)的“石油”,數(shù)據(jù)已變成生產(chǎn)資料,與硬資產(chǎn)和人同等重要,這也是為什么海量數(shù)據(jù)會(huì)在各行各業(yè)出現(xiàn)。在麥肯錫的一份調(diào)查報(bào)告中,僅就商業(yè)數(shù)據(jù)及射頻數(shù)據(jù)而言,美國15個(gè)主要行業(yè)中每家公司過去一年所產(chǎn)生的數(shù)據(jù)量,就超過了同期美國國會(huì)圖書館所存儲的數(shù)據(jù)量(235TB)。

  在中國,產(chǎn)生大數(shù)據(jù)的行業(yè)同樣層出不窮。比如,與智慧城市相關(guān)的項(xiàng)目所產(chǎn)生的數(shù)據(jù)量,就達(dá)到了200PB。而如何將海量數(shù)據(jù)轉(zhuǎn)化為城市治理的方法,則是“平安城市”建設(shè)過程中亟待破解的課題。

  需求轉(zhuǎn)變引發(fā)計(jì)算框架改變

  平安城市是一個(gè)特大型的管理系統(tǒng),綜合性非常強(qiáng)。它的建設(shè)目標(biāo)是滿足治安管理、城市管理、交通管理、應(yīng)急指揮等需求,往往還要兼顧災(zāi)難事故預(yù)警、安全生產(chǎn)監(jiān)控等方面對圖像監(jiān)控的需求,并考慮報(bào)警、門禁等配套系統(tǒng)的集成以及與廣播系統(tǒng)的聯(lián)動(dòng)。如何做到對海量視頻數(shù)據(jù)的精準(zhǔn)分析,正是平安城市的“大數(shù)據(jù)”痛點(diǎn)。

  近年來數(shù)據(jù)量爆發(fā)式的增長已經(jīng)將安防行業(yè)變成了典型的大數(shù)據(jù)行業(yè)。從“事后查看”到“事前預(yù)警”的需求變化,也為安防行業(yè)以視頻為核心的應(yīng)用帶來了巨大挑戰(zhàn)。??低暩笨偛?、CTO 蔣海青告訴記者,在各類的平安城市建設(shè)項(xiàng)目中,依靠大數(shù)據(jù)分析技術(shù),從海量視頻圖像中提取有效的安防信息,早已成為業(yè)界共識。而城市安全建設(shè)對大聯(lián)網(wǎng)的要求,也讓云計(jì)算、物聯(lián)網(wǎng)這樣的IT基礎(chǔ)架構(gòu)成為新型平安城市的首選。

  對平安城市而言,其IT基礎(chǔ)架構(gòu)不僅要完成數(shù)據(jù)的采集、傳輸,更要支撐對海量視頻數(shù)據(jù)的分析。計(jì)算平臺是實(shí)現(xiàn)數(shù)據(jù)分析的核心,什么樣的計(jì)算框架才是適合平安城市建設(shè)需求的呢?“在平安城市的安防項(xiàng)目中,視頻數(shù)據(jù)有其特殊性,一方面,流量非常大,另一方面,對高清的要求也很高。一個(gè)高清視頻的流量一般是8MB,數(shù)據(jù)則來自成千上萬的攝像頭,這些攝像頭的信息又是24小時(shí)不間斷傳送的,數(shù)據(jù)就像長年累月不停流出來的水一樣。如果采用全集中的計(jì)算框架,必然會(huì)存在很大風(fēng)險(xiǎn),不僅數(shù)據(jù)傳輸容易出現(xiàn)瓶頸,還很容易導(dǎo)致災(zāi)難性的損失。而全分布式的計(jì)算框架也有問題,比如管理、運(yùn)維會(huì)非常復(fù)雜,因?yàn)殡y以把專業(yè)的IT人員也分散到各個(gè)機(jī)房。所以,在計(jì)算框架上,我們所采用的其實(shí)是一種將二者相結(jié)合的計(jì)算框架,即區(qū)域性的、綜合性的集中和概念上的分散,以便讓我們的網(wǎng)絡(luò)更有效地支撐其上的應(yīng)用?!笔Y海青表示,海康威視目前正在基于至強(qiáng)平臺的Hadoop計(jì)算框架上進(jìn)行研發(fā),以期找到實(shí)現(xiàn)安防行業(yè)大數(shù)據(jù)分析的最佳方法。

  大數(shù)據(jù)分析將屬于開放平臺

  智能城市項(xiàng)目及物聯(lián)網(wǎng)的發(fā)展,正在讓大數(shù)據(jù)分析技術(shù)更廣泛地為城市的智能交通監(jiān)控、智能公共安全、氣象和污染變化的智能監(jiān)控及預(yù)測服務(wù)。蔣海青認(rèn)為,目前雖然平安城市的IT基礎(chǔ)架構(gòu)的框架已經(jīng)具備了實(shí)現(xiàn)大數(shù)據(jù)分析的能力,但在分析能力方面依舊存在短板。隨著數(shù)據(jù)分析技術(shù)的演進(jìn),平安城市的應(yīng)用才能豐滿起來。

  大數(shù)據(jù)分析的價(jià)值清晰可見,當(dāng)前產(chǎn)業(yè)界以及行業(yè)用戶對于加速大數(shù)據(jù)技術(shù)的發(fā)展和應(yīng)用達(dá)成了共識,但相關(guān)技術(shù)的成熟不可能是一蹴而就的。英特爾認(rèn)為,在相關(guān)IT基礎(chǔ)設(shè)施與服務(wù)層、數(shù)據(jù)組織與管理層、數(shù)據(jù)分析與發(fā)現(xiàn)層、決策支持與IT服務(wù)層需要全面導(dǎo)入創(chuàng)新技術(shù)。特別是在堪稱大數(shù)據(jù)應(yīng)用“載體”的IT基礎(chǔ)設(shè)施與服務(wù)層,采用基于開放架構(gòu)的平臺將是最佳選擇。因?yàn)槲覀儾粩嗫吹酱髷?shù)據(jù)飛速增長為更大的數(shù)據(jù),IT基礎(chǔ)架構(gòu)的計(jì)算能力、存儲能力和數(shù)據(jù)交換傳輸能力必須與這種成長速度相匹配,才能保證數(shù)據(jù)分析的實(shí)現(xiàn)。而實(shí)現(xiàn)這些能力的關(guān)鍵在于IT基礎(chǔ)架構(gòu)的可擴(kuò)展性,特別是橫向擴(kuò)展的能力。能讓其先天就具備強(qiáng)大、橫向的可擴(kuò)展性,并在實(shí)現(xiàn)這種擴(kuò)展時(shí)擁有成本和性價(jià)比優(yōu)勢的,一定是基于開放架構(gòu)的平臺。

  大數(shù)據(jù)處理任務(wù)對于開放架構(gòu)平臺的倚重,讓英特爾在這一領(lǐng)域獲得了越來越多合作伙伴與用戶的關(guān)注。當(dāng)前,英特爾正在傾力打造適用于大數(shù)據(jù)應(yīng)用的“芯”,比如今年3月英特爾發(fā)布的至強(qiáng)E5系列,就是可為大數(shù)據(jù)應(yīng)用中的分布式處理和高性能計(jì)算任務(wù)帶來更優(yōu)性能、能效、可擴(kuò)展性和可管理性的計(jì)算平臺。對于需要既有的關(guān)系型數(shù)據(jù)庫和商業(yè)智能技術(shù)及應(yīng)用來處理和分析的商業(yè)大數(shù)據(jù),至強(qiáng)E7系列則可實(shí)現(xiàn)很好的支撐。針對大數(shù)據(jù)的分發(fā)和管理需求,英特爾還在與Hadoop合作,共推基于英特爾平臺優(yōu)化的Hadoop 產(chǎn)品和服務(wù)。

  從另一個(gè)角度來看,大數(shù)據(jù)分析技術(shù)的演進(jìn)也將對計(jì)算平臺提出更高的要求,英特爾亞太研發(fā)有限公司總經(jīng)理、軟件與服務(wù)事業(yè)部中國區(qū)總經(jīng)理何京翔表示,海量數(shù)據(jù)未來很可能會(huì)要求計(jì)算平臺提供更強(qiáng)大的存儲訪問技術(shù),如通過SSD或二級緩存直接訪問內(nèi)存等,所以英特爾還會(huì)繼續(xù)加強(qiáng)硬件平臺的優(yōu)化。