sensor1 [Airflow] Sensor Airflow 센서(Sensor)는 어떤 특정한 조건이 충족될 때까지 DAG의 실행을 잠시 멈추고 기다리는 역할을 하는 특별한 종류의 오퍼레이터(Operator)입니다. 마치 문 앞에 서서 특정 손님이 오거나, 특정 시간이 될 때까지 계속 문을 확인하며 기다리는 문지기와 같다고 생각할 수 있습니다. 조건이 충족되면 비로소 문을 열어주고 다음 단계(Downstream Task)가 진행되도록 합니다. 센서는 다른 시스템과의 의존성이 있을 때 매우 유용합니다. 즉, Airflow 외부의 어떤 작업이 끝나야 내 DAG 작업을 시작할 수 있을 때 사용됩니다.파일 도착 대기: 데이터 파이프라인에서 FTP 서버나 AWS S3에 특정 파일이 업로드될 때까지 기다렸다가 처리를 시작해야 할 때API 응답 대기: 외부 AP.. 2025. 9. 5. 이전 1 다음 반응형