· software
왜 Idempotency가 데이터 엔지니어링에서 그렇게 중요한가
데이터 엔지니어링에서는 실패가 일상이다: 작업이 충돌하고, 네트워크가 타임아웃되며, Airflow가 작업을 재시도하고, Kafka가 메시지를 재생하고, 백필이 수개월 치 데이터를 다시 실행한다. In...
데이터 엔지니어링에서는 실패가 일상이다: 작업이 충돌하고, 네트워크가 타임아웃되며, Airflow가 작업을 재시도하고, Kafka가 메시지를 재생하고, 백필이 수개월 치 데이터를 다시 실행한다. In...
작동 방식: 흐름 !Webhook 전달 흐름 https://media2.dev.to/dynamic/image/width=800%2Cheight=%2Cfit=scale-down%2Cgravity=auto%2Cformat=auto/https%3A%2F%...