Airflow Executor 종류 및 개념 설명

DAG 프로세서 및 태스크 스케줄러는 Airflow 스케줄러를 시작할 때 한 가지 방법에 의해서만 실행할 수 있습니다. 설치 시점에 환경이 고정되기 때문에 태스크 익스큐터는 성능의 확보와 자원의 여유를 고려하여야 합니다. Airflow Executor 종류는 다음과 같습니다. 구 성 항 목 종 류 AIRFLOW__CORE__EXECUTOR SequentialExecutor(default) LocalExecutor CeleryExecutor KubernetesExecutor 익스큐터 분산환경 설치 난이도 사용에 적합한 환경 SequentialExecutor(기본) 불가능 매우 쉬움 테스트 LocalExecutor 불가능 쉬움 단일 호스트 환경 권장 CeleryExecutor 가능 보통 멀티 호스트 확장 고려시 KubernetesExecutor 불가능 어려움 쿠버네티스 기반 컨테이너 환경 구성 고려시 SequentialExecutor SequentialExecutor는 airflow를 ...

원문링크 : Airflow Executor 종류 및 개념 설명