日前,奧巴馬政府宣布 “大數據的研究和發展計劃。”通過提高我們從大型復雜的數字數據集中提取知識和觀點的能力,承諾幫助加快在科學與工程中的步伐,加強國家安全,并改變教學研究。
這個計劃里,六個聯邦政府的部門和機構宣布新的2億美元的投資,提高從大量數字數據中訪問、組織、收集發現信息的工具和技術水平。了解更多正在進行的聯邦政府的計劃,解決所大數據所帶來的機遇和挑戰,可通過大數據表來了解大數據革命。
我們還計劃與工業界、大學研究界、非營利性機構與管理者一起利用大數據所創造的機會。顯然,不能單單依靠政府,需要我們總統所呼吁的“眾人拾柴火焰高”這樣的努力。
一些相關的公司已經贊助大數據相關的比賽,并給大學提供這方面的研究資助。大學里也開始開設一門全新的研究型課程,培養下一代的“數據科學家”。一些無國界的組織幫助非營利性機構對公益性服務的數據進行采取、分析和可視化處理。白宮科技政策辦公室將會非常有興趣支持建立一個跟大數據相關論壇,包括最新的公私組織之間的合作。
美國政府的大數據計劃
亮點:為應對大數據革命帶來的機遇,聯邦政府制定計劃,推進相關研究機構進一步進行科學發現和創新研究。
國防部 (DOD)
國防部高級研究計劃局(DARPA)
多尺度異常檢測(ADAMS)項目解決大規模數據集的異常檢測和特征化。項目中對異常數據的檢測指對現實世界環境中各種可操作的信息數據及線索的收集。最初的ADAMS應用程序進行內部威脅檢測,在日常網絡活動環境中,檢測單獨的異常行動。
網絡內部威脅(CINDER)計劃,旨在開發新的方法來檢測軍事計算機網絡與網絡間諜活動。作為一種揭露隱藏操作的手段,CINDER將適用于將對不同類型對手的活動統一成“規范”的內部網絡活動,并旨在提高對網絡威脅檢測的準確性、和速度。
Insight計劃主要解決目前情報,監視和偵察系統的不足,進行自動化和人機集成推理,使得能夠提前對時間敏感的更大潛在威脅進行分析。該計劃旨在開發出資源管理系統,通過分析圖像和非圖像的傳感器信息和其他來源的信息,進行網絡威脅的自動識別和非常規的戰爭行為。
Machine Reading 項目,旨在實現人工智能的應用和發展學習系統的過程中對自然文本進行知識插入,而不是依靠昂貴和費時的知識表示目前的進程,并需要專家和相關知識工程師所給出的語義表示信息。
Mind's Eye 項目,旨在為機器建立視覺的智能。傳統的機器視覺研究的對象選取廣泛的物體來描述一個場景的屬性名詞,而Mind's Eye旨在增加在這些場景的動作認識和推理需要的知覺認知基礎。總之,這些技術可以建立一個更完整的視覺智能效果。
Mission-oriented Resilient Clouds 項目通過技術進行檢測,診斷并對攻擊作出響應,有效地建立了“社區衛生服務系統”的云,以解決云計算固有的安全挑戰。該方案還旨在開發新技術,使云應用和基礎設施受到攻擊時能夠繼續運行。只要整體能夠有效的運行和保存,可以允許個別主機和任務損失。
對加密數據的編程計算(PROCEED)的研究工作旨在開發實用的方法,相關現代化計算編程語言,使數據加密時仍然能使用云計算環境,以克服信息安全的重大挑戰。使用戶能夠不需首次解密的情況下能夠操縱加密的數據,它將使得對手攔截信息更加困難。
在視頻和圖像的檢索和分析工具(VIRAT)計劃旨在開發一個系統能夠利用軍事圖像分析員收集的數據進行大規模的軍事圖像分析。VIRAT如果成功,將使分析師能夠在相關活動發生時建立警報。VIRAT還計劃開發工具,能夠以更加準確率和召回率的去從大量視頻庫里進行視頻內容的檢索。
XDATA項目計劃旨在開發用于分析大量的半結構化和非結構化數據的計算技術和軟件工具。最核心的挑戰是,可伸縮的算法在分布式數據存儲應用、如何使人機交互工具能夠有效的迅速定制不同的任務,以方便對不同數據進行視覺化處理。對開源軟件工具包的靈活使用,使得能夠處理大量國防應用中的數據。