airflow單機版搭建記錄——不使用mysql,redis

[toc]

airflow單機版搭建記錄

環境準備

Python(pip)——airflow由python編寫

安裝airflow

pip install apache-airflow

環境變量配置

本人是在root用戶下執行，可自行選擇

export AIRFLOW_HOME=~/airflow

執行airflow命令

airflow

爲了在AIRFLOW_HOME下生成配置文件airflow.cfg

修改配置文件

default_timezone = Asia/Shanghai

load_examples = False

base_url = http://etl1:9999

web_server_port = 9999

初始化數據庫

airflow initdb

修改時區

https://blog.csdn.net/crazy__hope/article/details/83688986

啓動

airflow webserver -p 9999 -D

airflow scheduler -D

附加程序

第三方開發的簡陋的dag模板配置程序

環境

須要額外安裝python3 https://www.cnblogs.com/Hunry/p/9350607.html

java環境

pyt

博客

Airflow 使用隨筆（內含 TimeZone 和 Backfill 等的詳解）https://www.cnblogs.com/piperck/p/10101423.html

如何部署一個健壯的 apache-airflow 調度系統 https://blog.csdn.net/somezz/article/details/82749495