28日在武漢大學承辦的第二屆全國研究生智慧城市技術與創意設計大賽開幕式上,“兩院”院士李德仁作題為《智慧城市背景下的大數據》的主題報告,他表示,智慧城市大數據時代不僅面臨查不準、防不住的問題,更將迎來“存不起”的挑戰,亟須解決提高存儲和清理能力的技術難題。
李德仁認為,“查不準”,數據快速增長導致虛警輸出規模超出人工處理的極限可能;“防不住”,數據規模的急劇擴大進一步凸顯傳統預警分析技術的困境。
李德仁分析,互聯網流量全球新產生的數據年增40%,全球信息總量每兩年就可以翻番。2014年人均流量為每月1萬MB,2000年僅為每月10MB;2013年全球互聯網流量每天為2.7EB,2001年一年僅為1EB。1EB可刻滿1.68億張DVD,一本《紅樓夢》為1.74MB,1EB為6626億部,即全球人均100部《紅樓夢》。
李德仁表示,智慧城市應用中的大數據更是迅猛增長,快速增長的存儲規模和投入已成為制約城市監控系統發展。他認為,面對“存不起”的挑戰,必須雙管齊下,解決存儲能力和清理能力兩大問題。首先是解決存儲硬件研發,提升存儲空間能力;再就是加大對數據容量的壓縮、理解與清理,其實所存約有90%是無須存儲的,但目前處理能力跟不上,要么都存著、要么都扔掉,如何抽取、歸類、存放好,都是有待攻克的技術難題。
第二屆全國研究生智慧城市技術與創意設計大賽由教育部學位與研究生教育發展中心、中國科協青少年科技中心等單位主辦,118所高校(研究所)141支隊伍參加總決賽,29日下午決出結果。