主頁(http://www.130131.com):鄔賀銓:大數(shù)據(jù)挖掘是智慧城市建設(shè)與管理的無形生產(chǎn)資料 ![]() 十八大提出堅持走中國特色新型工業(yè)化、城鎮(zhèn)化、農(nóng)業(yè)現(xiàn)代化的道路,推動信息化與工業(yè)化的深度融合,工業(yè)化與城鎮(zhèn)化的良性互動,城鎮(zhèn)化與農(nóng)業(yè)現(xiàn)代化的相互協(xié)調(diào),促進工業(yè)化、城鎮(zhèn)化、信息化、農(nóng)業(yè)現(xiàn)代化的同步發(fā)展,這標志著我國城鎮(zhèn)化發(fā)展進入了新時期,智慧城市是城鎮(zhèn)化發(fā)展的一個新時期,推動城鎮(zhèn)化的發(fā)展。什么是智慧城市?我認為智慧城市是對人力與社會資源和傳統(tǒng)及現(xiàn)代設(shè)施的投資,促進可持續(xù)經(jīng)濟發(fā)展和高質(zhì)量生活,同時通過提供參與治理的機會實現(xiàn)對自然資源聰明的管理,這時一個城市就被稱為智慧城市。"Smart city"如果準確的翻譯應該是聰明的城市,智慧城市應該具有以下四個要素:一、可測量的, 可監(jiān)控的以及可分析的,也就是說通過分析服務于個人, 企業(yè)及政府的系統(tǒng)所產(chǎn)生的數(shù)據(jù)流, 提供新的洞察力和機會, 提高效率,測量的數(shù)據(jù)要整合和創(chuàng)新,提供市機關(guān),企業(yè),教育機構(gòu)和個人共同創(chuàng)造城市的構(gòu)想藍圖及實施方案,提高生活質(zhì)量。 從歐盟智慧城市評價體系看大數(shù)據(jù)應用現(xiàn)狀 歐盟對智慧城市的評價分為六個方面:智慧經(jīng)濟、智慧治理、智慧生活、智慧人民、智慧環(huán)境、智慧移動性。也就是說智慧城市要促進經(jīng)濟的發(fā)展,要改進和幫助更多大眾的參與,讓老百姓享受智慧的生活,人民得到更好的服務,居住環(huán)境更加優(yōu)化。智慧城市的應用很廣泛,我們都知道有物流、交通、電網(wǎng)、工業(yè)、農(nóng)業(yè)、建筑、環(huán)境、醫(yī)療等方面,F(xiàn)在我要講的是,智慧城市本身會催生大數(shù)據(jù),我們可以看到一個企業(yè)會涉及到很多環(huán)境,管理環(huán)境,開放環(huán)境,知識環(huán)境、服務環(huán)境,過去這些環(huán)境的關(guān)聯(lián)度不夠,那么現(xiàn)在通過數(shù)據(jù)庫使得這些環(huán)境能夠聯(lián)合起來,使得企業(yè)的效率提高40%-60%,根據(jù)賽門鐵克的一份最新調(diào)研報告,今天全世界所有企業(yè)的信息存儲總量已達2.2ZB,企業(yè)平均10PB,大企業(yè)更大點,小企業(yè)小點。一般企業(yè)都會建立數(shù)據(jù)庫,必須進行數(shù)據(jù)的集資和數(shù)據(jù)的挖掘,企業(yè)的數(shù)據(jù)在企業(yè)內(nèi)部已經(jīng)占有很重要的位置。 剛剛提到歐盟有幾個標準,在智慧經(jīng)濟方面,首先大數(shù)據(jù)在商業(yè)上怎么能很好運用,它會分析用戶的購物行為,什么商品搭配在一起會賣得更好,還有很多公司通過分析找到最佳客戶,淘寶數(shù)據(jù)魔方則是淘寶平臺上的大數(shù)據(jù)應用方案。那么商家可以了解淘寶平臺上的行業(yè)宏觀情況、自己品牌的市場狀況、消費者行為情況等,并可以據(jù)此作出經(jīng)營決策。美國有個投資公司分析了全球3.4億微博賬戶留言,判斷民眾情緒,人們高興的時候會買股票,而焦慮的時候會拋售股票,依此決定公司股票的買入或賣出,該公司今年第一季度獲得7%的收益率。阿里公司根據(jù)在淘寶網(wǎng)上中小企業(yè)的交易狀況篩選出財務健康和誠信的企業(yè),從而無需擔保來放貸,目前已放貸300多億元,壞帳率僅0.3%,大大低于商業(yè)銀行。企業(yè)通過信息收集很好的掌握企業(yè)的運營狀況,分析居民與財務有關(guān)的記錄包括貸款申請、租賃、房地產(chǎn)、購買零售商品、納稅申報、水電費繳付、有線電視繳費、電話繳費、報紙與雜志訂閱、機動車檔案等,能夠得出消費者的個人信用評分,從而推斷客戶支付意向與支付能力,發(fā)現(xiàn)潛在的欺詐。IBM日本公司建立了一個經(jīng)濟指標預測系統(tǒng),從互聯(lián)網(wǎng)新聞中搜索影響制造業(yè)的480項經(jīng)濟數(shù)據(jù),計算出采購經(jīng)理人指數(shù)PMI預測值。印第安納大學學者利用Google提供的心情分析工具,對270萬用戶在2008年3~12月所張貼的970萬條留言,挖掘出用戶happiness、kindness、 alertness、sureness、 vitality 和calmness等六種心情,進而對道瓊斯工業(yè)指數(shù)的變化進行預測,準確率達到87%。利用大數(shù)據(jù)分析可實現(xiàn)對合理庫存量的管理,華爾街對沖基金依據(jù)購物網(wǎng)站顧客評論分析企業(yè)產(chǎn)品銷售狀況,華爾街銀行根據(jù)求職網(wǎng)站崗位數(shù)量推斷就業(yè)率。 智慧治理方面,美國紐約的警察分析交通擁堵與犯罪發(fā)生地點的關(guān)系,有效改進治安。美國紐約的交通部門從交通違規(guī)和事故的統(tǒng)計數(shù)據(jù)中發(fā)現(xiàn)規(guī)律,改進了道路設(shè)計。利用短信、微博、微信和搜索引擎可以收集熱點事件與輿情挖掘。電信運營商擁有大量的手機數(shù)據(jù),通過對手機數(shù)據(jù)的挖掘,不針對個人而是著眼于群體行為,可從中分析:實時動態(tài)的流動人口的來源及分布情況;出行和實時交通客流信息及擁塞情況。利用手機用戶身份和位置的檢測可了解突發(fā)性事件的聚集情況。MIT的Reality Mining項目,通過對10萬多人手機的通話、短信和空間位置等信息進行處理,提取人們行為的時空規(guī)則性和重復性,進行流行病預警和犯罪預測。 倫敦200個交通攝像頭一天就產(chǎn)生8TB,中國的交通哪只200個,可以想象我們產(chǎn)生的數(shù)據(jù)量比它多得多,另外環(huán)境監(jiān)測對城市的河流進行采樣,通過衛(wèi)星發(fā)布,收集產(chǎn)量的數(shù)據(jù),這個數(shù)據(jù)非常大,通過這個數(shù)據(jù)分析能夠判別城市中有沒有污染。智慧醫(yī)療方面,無論是藥品的研發(fā)還是商業(yè)模式的開發(fā)運用數(shù)據(jù)分析都能夠得到很好的分析,我們醫(yī)院里有大量的病例,這里有大量的數(shù)據(jù),傳統(tǒng)的普通病例很難挖掘數(shù)據(jù),現(xiàn)在變成電子化有利于更高數(shù)據(jù)挖掘,數(shù)據(jù)的挖掘有利于發(fā)現(xiàn)醫(yī)療知識,由于醫(yī)療資源的分配不均,因此遠程醫(yī)療十分必要,另外,居家監(jiān)護很重要,谷歌公司與美國疾病控制和預防中心等機構(gòu)合作,依據(jù)網(wǎng)民搜索內(nèi)容分析全球范圍內(nèi)流感等病疫傳播狀況,谷歌的判斷與疾控中心的判斷是一致的。社交網(wǎng)絡為許多慢性病患者提供了臨床癥狀交流和診治經(jīng)驗分享平臺,醫(yī)院借此可獲得足夠多的臨床效果統(tǒng)計。個性化的醫(yī)療同樣很重要,我們發(fā)現(xiàn),同樣的治療對一些病人無效,75%癌癥病人,70%的老年癡呆者、50%的關(guān)節(jié)炎病人、43%的糖尿病患者、40%的哮喘病患者,38%的抑郁癥病人。因為人體對藥品代謝方式的差異取決于個體特定的基因、酶和蛋白質(zhì)組合,因此基因信息對選擇最優(yōu)治療非常關(guān)鍵。對人體個性體質(zhì)的挖掘會做到真正意義上的對癥下藥,一個人的基因信息大概1GB。 除此之外,我們還通過網(wǎng)絡進行學習,早期的網(wǎng)絡學習是通過網(wǎng)站專業(yè)人員編制的內(nèi)容,如今我們希望能夠?qū)崿F(xiàn)更加智能的搜索。隨著移動互聯(lián)網(wǎng)的出現(xiàn),搜索引擎會變成基于語音的智能搜索;基于位置的搜索;基于個性化搜索。大眾傳播發(fā)展的很快,這里包含著大量的數(shù)據(jù),例如微博傳播具有裂變性、主動性、即時性、便捷性、交互性、草根性,跟進性和臨場感,每一個微博用戶既是"服務器",也是"受眾"。中國的微博比社交網(wǎng)絡更熱,因為140個字符的微博在英文和中為分別約等于25個和85個英語單詞,即中文微博的信息量是Twitter的3~4倍。最近兩個月在YouTube上上載的視頻超過了ABC、 NBC和 CBS 電視臺自1948年以來24/7/365 連續(xù)播出的內(nèi)容,而"云平臺+多屏融合"模式已成為智能家居和智能車載等的發(fā)展方向。 大數(shù)據(jù)挖掘是智慧城市建設(shè)與管理的無形生產(chǎn)資料 支撐智慧城市的大數(shù)據(jù)技術(shù)是什么?物聯(lián)網(wǎng)不能基于單個事件(單個觀察或傳感器的讀數(shù))來觸發(fā)活動。需要利用專家系統(tǒng)和數(shù)學模型,綜合異構(gòu)來源的多種信息,對觀察到的數(shù)據(jù)進行過濾、匯聚和數(shù)據(jù)挖掘,參考歷史數(shù)據(jù),考慮事件間的相關(guān)性和上下文感知,進行分析推理,給出決策。大數(shù)據(jù)的挑戰(zhàn),數(shù)據(jù)管理,數(shù)據(jù)來自不同地方和不同標準,數(shù)據(jù)量大小、結(jié)構(gòu)形式、實時性等要求不同,增加采集、編索與整合的困難,需要對傳統(tǒng)的數(shù)據(jù)傳輸工具ETL(提取、轉(zhuǎn)換和加載)流程進行重新設(shè)計。數(shù)據(jù)存儲,傳統(tǒng)的集中式數(shù)據(jù)庫、數(shù)據(jù)倉庫系統(tǒng)已經(jīng)不能有效的處理大數(shù)據(jù)的存儲和分析,需要分布式處理;數(shù)據(jù)計算,大量的仿真和計算任務必須協(xié)調(diào)數(shù)百個參數(shù),為了處理具有高維特征的圖像等多媒體數(shù)據(jù),將高維數(shù)據(jù)看成位于一個相對低維子流形(局部具有歐氏空間性質(zhì)的空間)上,利用流形的性質(zhì)將數(shù)據(jù)降維后度量與處理。壓縮感知利用"數(shù)據(jù)是稀疏可壓縮"的先驗知識,使大數(shù)據(jù)轉(zhuǎn)換為更有效的"稀疏表達"。數(shù)據(jù)的呈現(xiàn)需要可視化最終甚至是中間的計算結(jié)果,可能需要腦機工程技術(shù),以便組合自動計算(機器)和高級智能獲得更直覺的洞察力。數(shù)據(jù)分享與訪問控制,安全與隱私保護。 智慧城市有大量的數(shù)據(jù),電力、交通、通信、消防、工業(yè)等等,這些行業(yè)產(chǎn)生了大量的數(shù)據(jù),關(guān)鍵是能不能共享,我們現(xiàn)在建立了很多垂直系統(tǒng)和應用,我們最大的問題是不能實現(xiàn)共享,這就影響到我們對智慧城市的管理,未來城市本身基礎(chǔ)設(shè)施建設(shè)比較容易,關(guān)鍵是怎么能把這些數(shù)據(jù)應用起來,所以智慧城市更需要管理者的大智慧,F(xiàn)在很多的智慧城市都和云城市聯(lián)系在一起,北京有祥云工程、上海由云海計劃,都是,最后無線城市、數(shù)字城市、寬帶城市、感知城市是智慧城市的必要條件;智慧城市是城鎮(zhèn)化進程的下一階段,是城市信息化的新高度,是現(xiàn)代城市發(fā)展的愿景;智慧城市每天產(chǎn)生大量的數(shù)據(jù),大數(shù)據(jù)的收集、存儲和分析處理及使用對智慧城市是很大的挑戰(zhàn),這不僅是技術(shù)也是法律和政策需要關(guān)注的問題;大數(shù)據(jù)的挖掘?qū)χ腔鄢鞘械慕?jīng)濟發(fā)展和社會管理是無形的生產(chǎn)資料,大數(shù)據(jù)價值的合理共享和利用將創(chuàng)造巨大的財富;創(chuàng)新智慧城市的數(shù)據(jù)管理,從數(shù)據(jù)管理中打造智慧城市新興產(chǎn)業(yè)和服務業(yè)! (中國集群通信網(wǎng) | 責任編輯:陳曉亮) |




