Apache 基金会宣布 Apache Airflow 毕业成为顶级项目

来自:互联网
时间:2019-01-09
阅读:

Apache 软件基金会宣布,Apache AIrflow 已经成功地从孵化毕业,成为基金会的一个新的顶级项目。Apache Airflow 是一个灵活、可扩展的工作流自动化和调度系统,可编集和管理数百 PB 的数据流。项目可轻松编排复杂的计算工作流,通过智能调度、数据库和依赖关系管理、错误处理和日志记录,Airflow 可以自动化从单个服务器到大规模集群的资源管理。

项目采用 Python 编写,具有高扩展性,能够运行其他语言编写的任务,并允许与常用的体系结构和项目集成,如 AWS S3、Docker、Kubernetes、MySQL、Postgres 等。

Apache Airflow 于 2014 年由 Airbnb 发起,并于 2016 年 3 月提交给 Apache 进行孵化。

据悉,Apache Airflow 目前正被 200 多个组织使用,包括 Adobe、Airbnb、Astronomer、Etsy、Google、ING、Lyft、NYC City Planning、Paypal、Polidea、Qubole、Quizlet、Reddit、Reply、Solita、Square、Twitter 等。

返回顶部
顶部