Airflow

1. Airflow란?

• Airbnb에서 개발한 워크플로우 관리도구
  • ex) Oozie
• 스케쥴링
• Python 기반
• Task를 DAG의 형태로 구성

2. Airflow 구조

• 웹서버, 스캐쥴러, 워커로 구성되어있다
• 웹서버
  • Flask기반, 웹UI를 통해 DAG의 성공여부를 확인 할 수도 있다.
  • 작업실행 or 재시작
  • 로그확인

Reference

• https://www.youtube.com/watch?v=OB1euuIATkE