airflow

execution date: 전날 실행 될 시간2020-08-11 02 작업 기준으로 execution date: 2020-08-10 022020-08-12 02 작업 기준으로 execution date: 2020-08-11 02start date은 데이터를 처음으로

task로 구성되어 ETL 역할을 수행dag 예시dag_id: dag의 id Airflow Web UI에서 dag_id를 통해 확인 가능.start date: 데이터를 처음으로 불러와야 할 날짜.schedule: 실행 주기, 크론탭 문법 사용max_active_runs

Docker를 통해 Airflow를 실행할 때 Import Error: no module named 'oauth2client'라는 오류가 발생한다. ubuntu에 sudo pip3 install oauth2client로 oauth2client 모듈을 설치해도 오류는 고