목록Tech/Workflow Scheduling (1)
테키테크 TEKITECH
Apache Airflow 이해하기
목차 Managing Data Workflow Data Warehouse 데이터 ETL About Apache Airflow Airflow Concepts DAG (Directed Acyclic Graph): 방향성 비순환 그래프 Hook, Operator, and Task 그 외 Airflow Platforms Python으로 작성된 오픈소스 플랫폼 모듈화와 디버깅 사용자 인터페이스 지원 및 로깅, 모니터링, 알림 기능 Batch 프로세스 하나의 관리자 Execution Date Managing Data Workflow Date Warehouse를 구축/운영하는 과정에서 데이터 ETL과 같은 데이터의 Workflow를 실행하려면 Cron과 같은 Job Scheduling Tool이 필요하다. 보다 효율..
Tech/Workflow Scheduling
2021. 8. 28. 16:17
728x90