airflow
2篇文章 · 0订阅
  • 工作流调度工具Airflow1.8搭建及使用
    最近工作任务需要把原来使用Kettle的ETL流程迁移到Hadoop平台上，就需要找一个替代Kettle工作流部分的工具。在大数据环境下，常用的无非是Oozie，Airflow或者Azkaban。经过简单的评估之后，我们选择了轻量化的Airflow作为我们的工作流工具。 Air…
    数据库 后端 Python
  • [译] Airflow: 一个工作流程管理平台
    Airbnb 是一个快速增长的、数据启示型的公司。我们的数据团队和数据量都在快速地增长，同时我们所面临的挑战的复杂性也在同步增长。我们正在扩张的数据工程师、数据科学家和分析师团队在使用 Airflow，它是我们搭建的一个可以快速推进工作，保持发展优势的平台，因为我们可以自己编辑…
    后端 开源 掘金翻译计划