ssm
반응형
-
MS Teams에서 Airflow DAG 자동 실행 파이프라인 구축(Feat. Teams, Lambda, Airflow 연동)프로젝트 회고록 2022. 4. 22. 07:42
업무시작 배경 고객사 해지 요청이 왔을 때 업무 process: client.yml 고객사 setting정보(serviceKey) 삭제 git update(add/commit/push) Airflow DAGs 삭제 airflow 추천 서버 DAG 5개 airflow 세그먼트 서버 DAG 2개 고객사 해지 요청이 없어 위 process가 이루어지지 않을 경우: AI 검색어 추천 모델 배포 실패 cloudwatch log 내역 확인 위의 1,2,3 실행 keyword_train DAG 수동 trigger 30일동안 DAG 학습 진행(비용) 👉 AI 검색어 추천 모델 배포 실패 방지, 해당 업무에 뺏기는 시간 & 업무 흐름 끊김 방지를 위한 파이프라인 구축 필요 결론 🎥 구축과정 살펴보기 https://nin..