近日,在美國孟菲斯ISO/IEC JTC1/SC32“數據管理與交換”分技術委員會2016年全會上,中國代表團提交的大數據技術提案“SQL對MapReduce及與之相關的流數據處理的支持”完勝美國、德國,獲得SC32全會決議通過。

會議確認以WG3“數據庫語言工作組”和中國國家成員體的名義聯合申報新工作項目“數據庫語言新技術設計說明 第1部分:SQL對流數據的支持”。這是29年來中國首度在國際標準委員會獨立提出技術提案并獲通過。

據悉,該項目中國國家成員體的發起人為中國電子技術標準化研究院的衛鳳林和柏睿數據科技(北京)有限公司的劉睿民。評審會專家認為,該提案標志著我國大數據領域國際標準化工作取得重大突破,提升了我國在數據庫語言領域的標準話語權。

目前,為進一步發揮國際信息標準化大數據領域各國專家力量,保證中國在國際大數據領域剛剛已經形成的領先水平得以大力發展,真正運用到國際民生的各個領域,我國專門在國際信標委平臺LiveLink網站上建立 “SQL對流數據的支持” 論壇,任命工信部中國電子技術標準化研究院的趙菁華為論壇主持人。本論壇全力支持對流數據支持的需求及相關技術問題。

劉睿民認為,該提案的通過,不僅說明中國核心大數據基礎技術的發展正在趕超國際水平,歷年來由美國、德國一統天下的高端數據庫核心技術,已經被中國突破,更使得大數據產業發展能夠有章可循、有據可依。

劉睿民特別強調,中國技術業已全面突破國際大數據核心技術壁壘,實現真正意義上的國產化。“只有國產化數據核心技術在自己手里,國家各個層面的數據安全才能得以有效保證。現在我國相關技術達到在國際上制定國際標準的領先水平了,應該可以進入大數據引領的高科技發展快車道。”他表示。

據悉,該提案是自中國加入數據庫標準組的29年來,由我國獨立提出的首項針對SQL標準的國際標準提案,目的在于擴展數據庫語言SQL標準,使其支持流數據處理及大數據應用,該類技術是大數據領域核心基礎軟件,決定著大數據體系內關鍵技術的流數據處理發展速度與方向。為此,國際信標委大數據分項技術委員會SC32論壇 向國際聯合技術委員會JTC1建議針對此新工作項開展為期3個月的投票工作。來自加拿大、中國、德國、日本、韓國、英國、美國7個國家的30余位代表參加了本次全會。

為準備該提案,中國信息技術標準化技術委員會秘書處于今年3月23日,在北京組織召開的《SQL對MapReduce及與之相關的流數據處理的支持》國際標準提案論證會,專門對由中國電子技術標準化研究院院聯合柏睿數據科技北京有限公司提出的該提案進行研討,后評審組一致同意中國電子標準化研究院與柏睿數據科技北京有限公司共同代表中國提交該國際標準提案。

做為該提案創始提出人,劉睿民認為,隨著大數據時代的到來,MapReduce作為主流的數據處理方式已被廣泛采用,但其編程過程繁瑣且對流數據的處理缺少規范化的操作,同時國際上作為大數據核心技術的數據庫缺乏適合現代技術發展的對應標準,導致現有數據庫語言SQL標準不支持對流數據的處理,使得眾多大數據解決方案公司為了使用SQL語言處理流數據開發了多種解決方案,而做為實際運用這些解決方案的客戶需要培養眾多理解不同標準的各種方案所需人才,大大增加了大數據系統的開發難度,降低了大數據系統的開發效率。而該提案恰恰可以建立一個國際標準的大數據流數據庫處理的體系標準,使得所有大數據公司把力量全部投入到對大數據本身的深度挖掘使用,而非廣泛使用非標準的各類處理手段,促使符合該標準的大數據平臺極大降低人為開發難度,顯著提高大數據系統的開發效率。

柏睿數據由海歸劉睿民攜原班惠普實驗室核心數據庫團隊和Oracle技術銷售支持創立。短短成立2年就已經通過移動、聯通和電信的技術測試,與銀聯、上交所和中科曙光在大數據領域形成了良好的戰略合作關系,一個大數據領域異軍突起的擁有國際標準的旗幟性領軍企業。