經過長達一年的測試期后,Azure HDInsight的Apache Kafka已經做好了承擔生產工作負載的準備,將與微軟聯合推出相關工作的解決方案。
Kafka是一個開源的流處理平臺,對于許多企業來說,將物聯網(IoT)所產生的豐富信息商業化變得越來越關鍵。Azure HDInsight是微軟基于云計算的大數據平臺。
微軟稱,通過整合,將Kafka作為Azure的托管服務,有助于消除某些企業在超連接的世界中搶占商機的障礙。
微軟Azure大數據項目經理Raghav Mohan,在12月18日發布的聲明中寫道:“HDInsight是一個管理平臺,在開源工作負載方面擁有99.9%的SLA (服務級別協議)。在此基礎上,我們的企業客戶不需要再擔心Kafka集群的管理問題,因為HDInsight管理并修復了在企業級運行Kafka所涉及到的問題”。
微軟是第一個在生產環境中使用自己產品的公司。
Azure上的Apache Kafka HDInsight提供了Siphon。Siphon是企業用來接收、分發和使用流數據的分布式系統,用于后續的處理和分析。據微軟稱,Siphon每天都要接收超過一萬億條消息,并傳送公司最大的一些云服務,包括Office 365、Skype和Bing Ads。
在華盛頓州以外,GE醫療集團正在Azure HDInsight上使用Apache Kafka,使用機器學習和大數據解決醫療機構及其患者面臨的問題,為新一代智能醫療服務提供支持。微軟最引人矚目的云客戶之一Adobe,也正使用該服務處理每天10億次的Adobe Experience Cloud交易。
微軟還宣布了與Azure Log Analytics的HDInsight集成一般可用性,允許客戶通過單一界面監控各種HDInsight集群。用戶可以查看各種開源框架生成的指標、虛擬機級別上集群的性能特征以及內存和CPU利用率。
最后,微軟正在解決在Azure HDInsight上運行大數據工作負載的成本問題。
從2018年1月5日開始,HDInsight的訂購價格最多可以降低52%。微軟源軟件分析的一個單獨的公告中,Azure Cosmos DB和Open開發團隊項目經理Rimma Nehme表示:”客戶將從Azure HDInsight的批量處理、交互式查詢、機器學習、流式分析和實時分析工作負載中以更低的成本獲得更高價值“。
她還指出,對于在Azure HDInsight上運行R Server分析平臺的用戶來說,節省的成本更多。微軟將R服務器的工作負載價格下調了80%,降到每小時0.016美元。