围绕15分钟城市的数据管道

Source: Dev.to

概述

我刚完成了我的第二个数据工程管道。

• 代码仓库: GitHub – OSM 15 Minute City
• 仪表盘: Streamlit – OSMaps

该项目基于“15 分钟城市”概念。它：

• 采集 OpenStreetMap 数据
• 使用 Spark 和 dbt 进行转换
• 通过 Streamlit 提供仪表盘
• 使用 Airflow 进行编排

当前的评分权重是随意设定的；我希望能够使其更具科学性。期待听到你的想法。