2020sp finalproject dveetil github 源码

CSCIE-29-最终项目由Deepa Thazhathu Veetil提交 概述 该项目旨在使用python构建数据管道,并使用Apache Airflow将其自动化。 数据驻留在S3中,而python中的数据管道将帮助使Redshift数据库中的数据可用以进行分析。 使用在课堂上学到的python技术来建立有效的数据管道。 数据管道使用Apache Airflow自动化。 #在项目中执行的任务使用Python,从S3中读取数据并暂存到Amazon Redshift表中。 使用Python将数据从登台表转换为“星型”模式,并准备好数据供事实和维表在数据库中进行分析。 执行分析并将结果保存到实