728x90 반응형 배치작업1 [후기] Apache Airflow 기반의 데이터 파이프라인 데이터 엔지니어링이 되고자 바스 하렌슬락 외 1명이 지은 아래 책을 읽어보았다. 독서 기간은 아래와 같다. 1회 차 : 2022-12-27 ~ 2023-01-13 2회 차 : 2023-01-13 ~ 2023-01-22 3회 차 : 2203-01-23 ~ 2023-01-31 2월이 오기 전에 3회 정독을 끝내어 기쁘다. 이 책은 순수하게 모든 내용이 Airflow가 중심이다. Airflow를 통한 테스트, Airflow와 요즘 핫한 클라우드 서비스(AWS, Azure, GCS 등)의 콜라보 등을 소개해주는데 개인적으로 알차다고 생각한다. 특히 인상적이었던 부분은 클라우드 서비스에서 Airflow의 로직을 구현(클라우드 내 관리형 서비스를 통해)하는 부분이었는데, 마지막에 테스트에 사용된 데이터를 지우는 내.. 2023. 1. 31. 이전 1 다음 728x90 반응형
