AirFlow日前加入了Apache孵化器工程。AirFlow作为一个工作流和调度系统,被设计用来管理数据管道。之前是由AirBnb开发并在内部使用,于去年九月份开源,详见之前InfoQ的报道。
这个项目从AirBnb的内部使用外扩到了整个产业,每个月都会增加两个新的使用该项目的公司,还有差不多10个新的贡献者以及20个新用户。截至目前,已经有30家公司在产线上使用该项目,并有8个代码提交者和135个贡献者,可以说,对于日后扩大,该项目已经有了坚实的基础。
相对于其他项目,例如Azkaban,Luigui和Oozie,AirFlow有一个关键的区别是:管道是用代码定义的,而任务是动态地实例化的。在AirFlow开发的设计理念中同样包含了方便搭建和对开发者友好的思想。
在加入孵化器工程的同时,AirFlow也在准备加入Apache Software Foundation(ASF)的项目列表,同时加入的还有Impala, DataFu,AsterixDB,Zeppelin等项目. 现可以从Github上获取AirFlow的代码,AirFlow也会一直期待新的贡献者的加入。
查看英文原文:AirFlow Joins Apache Incubator
时间:2016-05-04 08:26
来源:伯乐在线
作者:顾俊
原文链接