AirFlow日前加入了Apache孵化器工程。AirFlow作為一個工作流和調度系統,被設計用來管理數據管道。之前是由AirBnb開發并在內部使用,于去年九月份開源,詳見之前InfoQ的報道。
這個項目從AirBnb的內部使用外擴到了整個產業,每個月都會增加兩個新的使用該項目的公司,還有差不多10個新的貢獻者以及20個新用戶。截至目前,已經有30家公司在產線上使用該項目,并有8個代碼提交者和135個貢獻者,可以說,對于日后擴大,該項目已經有了堅實的基礎。
相對于其他項目,例如Azkaban,Luigui和Oozie,AirFlow有一個關鍵的區別是:管道是用代碼定義的,而任務是動態地實例化的。在AirFlow開發的設計理念中同樣包含了方便搭建和對開發者友好的思想。
在加入孵化器工程的同時,AirFlow也在準備加入Apache Software Foundation(ASF)的項目列表,同時加入的還有Impala, DataFu,AsterixDB,Zeppelin等項目. 現可以從Github上獲取AirFlow的代碼,AirFlow也會一直期待新的貢獻者的加入。
查看英文原文:AirFlow Joins Apache Incubator