近日,南大通用再次刷新國內MPP數據庫集群記錄。由其構建的國產新型大數據平臺規模由之前的80節點提升到120節點,平臺數據處理量達到真正的PB級,萬億條數據處理可在小時級水平完成。這是繼2013年國內首個超大規模行業大數據平臺問世以來,南大通用在國產數據庫領域實現的又一次技術飛躍。
圍繞行業大數據應用構建全數據處理基礎軟件平臺,MPP數據庫及其計算框架是核心組成部分。Gbase行業大數據大規模集群處理平臺,主要面向電信、金融、安全和政務等行業的經營分析類業務場景,對海量的結構化和半結構化數據進行高效存儲、管理,并對上層應用提供統一的數據服務接口支撐。與擁有海量非結構化數據的互聯網及電商企業使用Hadoop構建大數據平臺不同,MPP技術在保證關系數據庫強一致性要求的同時,可實現復雜的大表關聯等分析功能,更好地滿足電信、金融等行業對大數據分析類應用的需求。
Gbase新型大數據平臺是目前國內外唯一達到百節點以上的單一數據庫測試平臺,在120臺國產中高端服務器上部署Gbase 8a MPP Cluster單一集群,使用萬兆網絡互聯,支撐PB級數據查詢與分析處理,整體運算能力和數據吞吐能力達到20TB/小時。采用Gbase 8a MPP Cluster分布式并行數據庫集群構建新型大數據平臺,南大通用不僅能幫助用戶解決數據“大”的難題,還能實現數據“高”的價值。
高速度:處理萬億條數據在小時級水平完成,數據加載性能每小時平均幾十TB;
高可用:系統穩定性高,千并發級可平穩運行,出現問題節點可快速恢復;
高擴展:可動態擴展運算節點,且查詢性能保持良好的線性增長;
高價值:成本低廉,使用X86服務器 + Linux + SAS磁盤,系統擴展能力從容應對數據膨脹挑戰。
Gbase新型大數據平臺采用自主可控的全國產軟硬件搭建,已完成內測并實現穩定運行,是目前國內唯一能夠支撐多行業大數據應用的通用可靠平臺。電信運營商已率先啟用Gbase新型大數據平臺進行全國經營分析業務的集中測試,系統實測800TB萬億條數據處理可在小時級別完成。南大通用下一步將大數據平臺的測試與應用擴展到金融、國防、安全、海關、稅務等關系國計民生的行業中。
基于新型大數據平臺的成功搭建,南大通用近期已啟動企業測試培訓中心的籌建工作。測試培訓中心現階段主要服務于行業用戶與合作伙伴,為其提供專業的大數據技術咨詢、系統軟硬件平臺測試及定制化培訓等一體化解決方案。未來中心將發展成為產學研用的技術孵化器,面向科研機構、高校及全產業鏈開放。