반응형
remote logging
-
Airflow 3.0.1 remote logging 에러 해결Airflow 2025. 5. 25. 11:57
기존 2.10.3 버전을 사용중이던 Airflow를 3점대 버전으로 업그레이드 하는 과정에서 마주한 에러해결 과정을 공유해봅니다. ⚙️ 개발 환경airflow를 ECS에서 멀티클러스터로 구축했습니다.api-serverschedulerdag-processorworker(CeleryExecutor)redis Airflow UI에서 DAG 실행을 하면1. DAG run이 생성이 되고 metadata DB에 queued 상태로 저장됨2. dag-processor가 DAG를 파싱하고 DB내 DAG의 metadata 업데이트 함3. Scheduler가 DB를 감지하고 있다가 queued task 정보(DAG ID, task ID, execution date, etc.)를 redis에 메세지로 보냄4. 이 task..