aws lambda etl ref architecture:此参考架构演示了如何使用AWS Step Functions与AWS Lambda协调提取传输负

无服务器参考体系结构:提取传输负载 此参考架构演示了如何使用与协调提取传输负载(ETL)工作流程。 该解决方案处理全球空气质量数据,AWS注册表中提供获取开放数据。 它每天生成空气质量测量的最小,最大和平均等级。 ETL工作流程将必须手动触发,但是可以使用轻松地定期计划。 转换完成后,将通过电子邮件将S3位置通知您汇总数据。 建筑学 应用组件 该架构使用AWS Step Functions协调数据管道的提取,传输和加载阶段。 所有状态均由Lambda函数支持。 提取阶段 第一步是状态。 此功能列出了前一天的OpenAQ S3存储桶(openaq-fetches)的内容,并将文件分为6组,每组