Cron:在FAAS上运行的重复性操作 源码

cagov cron职位 此存储库主要用于covid19.ca.gov网站,用于处理数据和输出数据文件。 数据通常托管在许多不同的Snowflake数据库中。 我们使用Snowflake API检索数据,并使用Azure FaaS进程运行基于nodeJS的脚本进程。 这些是我们发布的数据集的主要组成部分: 雪花表和视图。上游管理的视图和表。 模式测试。我们汇总的数据集通常来自许多组织生成的数据,并且经常更新,并且可以更改。为了确保公共网站看到最准确和高质量的信息,我们为数据输入和输出创建了模式测试。这有助于确保我们获得期望的数据,并以可靠的格式交付数据。 样本数据。我们会定期捕获带有日期戳的样本数据集。示例: common/SQL/CDT_COVID/Daily-stats-v2/schema/tests/output/pass/2021-02-25.json 。 元内容。有关数据集的常规