信息要點:
1.目前微軟已經開始展示如何利用正確的技術和工具來利用大數據,微軟大數據愿景是,希望基于標準化的產品,使所有人都能夠在任何時間任何地點利用數據,并更好地做出決策。
2.微軟的技術專家展示了近幾年微軟在研究的“城市計算”項目進展,這些項目能通過大數據技術切實解決城市交通擁堵、城市能源和防災救災等問題。其中,和普通老百姓關系最密切的,就是通過分析城市道路交通實時狀況、出租車歷史記錄、出租車趴活記錄和即將路過出租車,所構建的出租車推薦系統、最佳路線推薦系統和大規模實時動態智能拼車系統等。
3.微軟大數據解決方案包括三大層面:第一是大掌控,支持所有的數據類型的現代化的管理層。第二層面是大智匯,搜索并結合全世界數據,對其進行先進的分析與精煉,從而提高數據價值的富集層。第三層面是大洞察:通過大家熟悉的工具,如微軟 Office,為所有用戶提供直觀洞察力的洞悉層。
當其他廠商還更多地將注意力放在“如何利用大數據進行產業轉型和企業創新”時,微軟已經開始展示如何利用正確的技術和工具,讓每位普通大眾都能從大數據中直觀獲取洞察。
10月18日,微軟全球高級副總裁、大中華區董事長兼首席執行官賀樂斌在“大數據媒體日”上對記者表示,“與其他公司處理大數據的方式不同,微軟主張從發現數據、分析數據和對數據進行可視化的處理這三種方式來思考大數據的使用。微軟大數據愿景是,希望基于標準化的產品,使所有人都能夠在任何時間任何地點利用數據,并更好地做出決策。”
大數據并不只是針對IT行業,也不只針對企業分析團隊或財務部門等。任何人,只要他需要針對業務或日常生活做決策的話,就應該能夠獲取數據,并有工具幫他把這些數據變成有意義的數據,然后基于這些數據做出更好的決策;而不需要其他人為他專門準備這些數據。
微軟的技術專家還在活動中展示了近幾年微軟在研究的“城市計算”項目進展,這些項目能通過大數據技術切實解決城市交通擁堵、城市能源和防災救災等問題。其中,和普通老百姓關系最密切的,就是通過分析城市道路交通實時狀況、出租車歷史記錄、出租車趴活記錄和即將路過出租車,所構建的出租車推薦系統、最佳路線推薦系統和大規模實時動態智能拼車系統等。
如何思考大數據
說起大數據,很容易讓人產生的一個誤解是認為大數據一定是非常龐大的數據集或者數據量。但大數據實際上所展示的是,數量、速度和多樣性這三個維度的概念。微軟認為,大數據的核心理念并不等于數據的量級。大數據可以處理大的數據,也可以處理小型的數據;可以處理關系類型的數據,也可以處理非關系型類型的數據。而最重要的一點是怎樣能夠從數據當中得出非常精準的價值。
“這些認識改變了微軟獲取數據和思考數據的方式。”也就是說有更高級的工具和技術,可以幫助人們提高獲取大數據的經濟性,真正讓人們改善大數據發現,改善大數據分析能力,改善整個環境和改善企業運營的方式。
賀樂斌介紹,基于Excel的一些工具,微軟有三種非常簡單的方式來分析數據。比如用Power Pivot,可以獲取任何系統的數據,并可以以非常簡單的方式整合起來,不管是SAP系統還是用戶自己系統內的數據。同時,通過Power Pivot可以使數據變成有意義的數據。另外,通過PowerMap和PowerView,還可以以直觀的方式將挖掘與分析的結果呈現給出來,尤其是在地理的位置上,讓數據對你說話。由此,揭開大數據的神秘面紗。
如何駕馭大數據
到底從哪幾個方面駕馭大數據呢?賀樂賦說:“微軟大數據理念,就是通過先進算法幫助用戶更高效地挖掘有用數據,通過智能化的、甚至是基于云端的平臺和服務去管理和分析數據,從中獲取有價值的洞察信息,再以用戶最熟悉、最直觀的形式表現出來,從而幫助用戶做出決策。”
具體而言,微軟大數據解決方案包括三大層面:第一是大掌控,支持所有的數據類型的現代化的管理層。
微軟數據管理平臺可以無縫地存儲和處理包括結構化、非結構化和實時數據在內的所有類型的數據。微軟推出的HDInsight是一種適合企業使用的、基于HDP的Hadoop服務,它將Windows的簡易性和可管理性帶給Hadoop,提供了結合Hadoop的擴展平臺,并為大數據提供了靈活且可擴展的云,用戶可以根據自己的需求選擇Windows Server或Windows Azure平臺。
第二層面是大智匯,搜索并結合全世界數據,對其進行先進的分析與精煉,從而提高數據價值的富集層。
通過將數據和模型與公開的數據服務相結合,微軟大數據解決方案實現了突破性的數據發現,例如自動發現與共享防火墻外部和第三方數據源等。通過使用Windows Azure Marketplace中的應用程序和智能挖掘算法,用戶還能發現更多隱藏的信息與數據挖掘模式。此外,微軟大數據解決方案還能通過企業信息化管理工具將原始數據轉換成可靠一致的數據,并通過SQL Server 分析服務(SSAS)的高級分析功能來實現數據的精煉。微軟大數據解決方案支持Mahout等常用的第三方工具和框架,還可支持以C++, C#, Python, Ruby和Pearl來編寫定制的挖掘算法。
第三層面是大洞察:通過大家熟悉的工具,如微軟 Office,為所有用戶提供直觀洞察力的洞悉層。
微軟大數據解決方案致力于人人可用,它可以使客戶通過大家非常熟悉的由Hive add-in for Excel生成的Excel界面,從Hadoop功能中獲取有價值的洞察力。也可以經由企業熟悉的BI工具,如SQL Server 分析服務(SSAS)、PowerPivot以及通過Hive Open Database Connectivity (ODBC) 驅動生成的Power View來分析Hadoop中的非結構化數據。通過集成.NET和新的JavaScript庫,微軟簡化了Hadoop中的編程。開發者可以在JavaScript中使用新的JavaScript庫來輕松編寫MapReduce程序,然后通過一個簡單的瀏覽器來部署他們的JavaScript代碼。
如何讓數據分析平民化
對于整個大數據的發展趨勢和應用前景,微軟大中華區副總裁兼市場戰略部總經理、微軟大中華區首席云計算戰略官謝恩偉總結得深入淺出。
他眼中非常突出的趨勢有三個。第一個是數據量的增長非常快,第二是數據類型也在層出不窮,第三是從硬件、存儲等方面,數據存儲設備的價位不斷往下調整,這讓整個數據的存儲或數據分析會變得更加接地氣,更加能夠讓大眾都用起來。
基于這些對市場未來的判斷和把握,微軟現在希望做的一件事,降低數據分析的門檻,通過最簡單、最平民化的一系列工具,再通過現有的一些云的平臺或者基礎設施的服務,把大數據帶到每個人的身邊。
謝恩偉在現場隨手顯示了一個名為City Next的Windows 8應用,模擬一個“市長”,如何非常簡單的在桌面上看到一個城市的日常運行指標,比如供電量、城市概況,旅游狀況等。
當這個“市長”核查能源管理問題時,他不僅能分析怎樣在市政建設中真正做好節約能量的工作,還能查看國外的具體案例,學習其他城市是怎么來規劃能源的。比如,他可以對比美國達拉斯這個城市的能源管理,跟我的市政建設形成一種什么狀態等。從一些非常視覺化的能力當中,可以讓政府機構,或者政府一些決策者,真正了解達拉斯這樣一個城市怎樣去規劃供電站、怎樣去更新房屋年代,從而來降低能源損耗。而所有這些分析和洞察,都可以基于Excel表格、PowerMap提供的一系列的圖表就能夠看到。
據悉,在工業制造、金融保險、醫療衛生、公共服務、交通運輸等行業中,微軟也都可以提供從前端的數據采集到后端的洞察力呈現,全程為客戶業務增長服務、創造價值。
謝恩偉總結說,客戶的現實需求是微軟大數據解決方案的出發點和目的地。微軟解決方案的關鍵在于提供最易用、平民化的大數據工具,并整合在數據處理、云計算以及Office BI軟件上的技術優勢,以及對用戶使用習慣的理解,將這些數據轉化成了能夠直觀體現趨勢洞察,幫助用戶決斷的有價值的信息。