[태그:] DW
-

Apache Airflow: 데이터 워크플로우를 위한 오픈소스 오케스트레이션 플랫폼
Apache Airflow는 배치 기반 데이터 파이프라인, 머신러닝 모델 학습, 에이전틱 및 LLM 기반 워크로드와 같은 워크플로우를 개발하고, 스케줄링하고, 모니터링하기 위한 오픈소스 플랫폼입니다. Airbnb에서 처음 만들어진 이후 Apache 소프트웨어 재단의 톱레벨 프로젝트가 되었고, 지금은 데이터 엔지니어링 분야에서 사실상의 표준 오케스트레이션 도구로 자리잡았습니다. Airflow의 핵심 철학은 “Workflows as Code“입니다. 워크플로우가 전적으로 Python 코드로 정의되기 때문에, 다음과 같은…
