2015年，大數據產品和服務采購進入爆發期，大數據領域新技術和新產品層出不窮。然而，一個不容忽視的事實是：業界仍然缺乏統一的產品評測標準。面對市場上層出不窮的大數據技術和產品，企業CIO面臨如何評估、選擇和使用大數據的煩惱，企業IT部門也苦惱于如何搭建企業級的大數據平臺以支撐企業未來業務的發展。
2014年6月，業界第三方機構——數據中心聯盟聯合20多家企業啟動了大數據平臺基準測試標準的制定，力圖以標準化與測試為紐帶，將應用與技術、用戶與廠商有機聯系起來，推進我國大數據技術水平不斷提升，幫助企業解決大數據技術和產品評估、選型、使用等難題。經過半年研討，數據中心聯盟于2015年1月底發布了《大數據平臺基準測試》的技術要求和測試方法，這是國內第一個面向商用大數據產品的評測標準。
2015年5月至7月，受數據中心聯盟委托，中國信息通信研究院開展了大數據商業產品的第一輪測試，中移（蘇州）軟件技術有限公司的BC-Hadoop、華為技術有限公司的FusionInsight、星環信息科技（上海）有限公司的Transwarphadoop、上海優刻得信息科技有限公司的UDDP、中興通訊股份有限公司的GoldenData參加測試。這些軟件產品在中國信息通信研究院提供的16臺服務器上進行測評，而云服務則在優刻得公司提供的公有云環境中進行評測。
此次測試是業界第一次商用大數據軟件平臺測試活動，也是第一次多任務負載的大數據測試。測試在統一環境要求、統一數據規模、統一任務負載和統一測試周期的條件下進行。2015年7月30日，“2015年可信云大會”在北京召開，數據中心聯盟在會上正式發布了大數據商業產品第一輪測試結果，并披露了部分測試數據。
數據中心聯盟透露，在本次測試中，在批處理任務方面，數據排序處理的數據量達到13.6TB，集群最高處理速度達到1.66GB/s，平均吞吐率為1258MB/s；詞頻統計處理2.8TB的文本數據，速度最高達到1.67GB/s，平均吞吐率為1155MB/s。
在NoSQL數據庫任務中，“寫（Write）”操作向服務端寫入20億條記錄，最快為140萬ops；“讀（Read）”操作從服務端讀取20億條記錄，最快為87萬ops，平均為71.7萬ops；“掃描（Scan）”操作最快為9.6萬ops，平均為8.7萬ops。
在Hive任務中，Aggregation對1.83TB的大表做聚合，最快的吞吐率為3759MB/s，平均吞吐率為2087MB/s。
值得一提的是，除了性能測試外，本次測試還覆蓋產品的容錯性、安全與運維等方面，考驗參測企業在限定時間內完成環境安裝、平臺部署和性能調優的綜合能力。
此外，中國信息通信研究院還與華為在200臺服務器單集群上進行了預測試，這是國內第一次在大規模節點上進行的測試，為正式開展大規模集群測試工作積累了經驗。據悉，數據中心聯盟正在與金融、電信等行業用戶聯合，制定更貼近行業特點、針對更復雜任務和更大規模集群的測試標準，第二輪測試正在籌備中。
京公網安備 11010502049343號