2周前 · software

事件驱动架构 101：使用 Kafka 构建简单应用 - 作者 Gopi Gugan

事件驱动架构（EDA）已成为现代后端系统的基石——为实时分析、通知流水线和可扩展的微服务提供动力。

3周前 · software

Kafka 大规模摄取与处理 | Rajamohan Jabbala

封面图片：Kafka 大规模摄取与处理 | Rajamohan Jabbala https://media2.dev.to/dynamic/image/width=1000,height=420,fit=cover,gravity=auto,forma...

3周前 · software

使用 Kafka、Avro、Schema Registry 与 PostgreSQL 构建事件驱动的 Spring Boot 应用

封面图片：构建一个使用 Avro、Schema Registry 和 PostgreSQL 的 Kafka 事件驱动 Spring Boot 应用程序 https://media2.dev.to/dynamic/image/width=1000,h...

0个月前 · software

Data Engineering 并非关于工具——而是关于这种思考方式

引言：数据工程常被误解为主要由工具驱动的学科。新手经常被建议掌握 Airflow、Spark、Kafka……

1个月前 · software

分布式系统中的双写问题

概述：双写问题发生在单个逻辑操作必须更新两个或多个独立系统时——例如，将数据持久化到数据库并发布…

1个月前 · software

为什么幂等性在数据工程中如此重要

在数据工程中，失败是常态：作业崩溃，网络超时，Airflow 重试任务，Kafka 重放消息，backfills 重新运行数月的数据。

1个月前 · software

Kafka Consumer 健康检查：死或活

很多人都有过这样的经历——凌晨 3 点，手机震动，你盯着一个警报：Kafka consumer lag 超过阈值。你匆忙走向笔记本电脑，……