**데이터 수집과 변환: CDC, dbt, Spark로 변경 반영하기 | 최신 데이터 인프라 이해하기 시즌2 EP05**

주문 하나가 취소됐는데, 분석 결과는 왜 그대로일까요?

시즌1에서 본 수집과 변환 도구를 돌아보고, 서비스 DB의 변경을 레이크에 반영한 뒤 광고 분석 결과까지 갱신하는 과정을 살펴봅니다. CDC와 CDF의 차이, dbt와 Spark의 증분 처리, Airflow, Dagster, Prefect의 실행 관리, 재시도와 백필을 하나의 쇼핑몰 사례로 연결합니다.

Zero-ETL과 Fivetran, Databricks Lakeflow, Amazon EMR Serverless가 어디까지 운영을 맡아주는지도 짚습니다.

챕터

00:00 오늘의 질문: 바뀐 데이터를 결과까지 반영하려면

레이크의 주…

[https://news.hada.io/geekcast/data-infra-s2-ep05](https://news.hada.io/geekcast/data-infra-s2-ep05)