刮板机 源码

这是v4。 v3(Colab文件)比v2(Dash和Heroku应用程序)快得多,但我想使其更快。 我注意到,一旦为当天设置了菜单,它就不会更改,因此我不得不利用这一点,找到一种每天运行一次代码并按用途运行其他代码的方法。 我调查了AWS Lambda和Google Cloud Scheduler,但无法弄清楚。 我最终选择了WayScript。 目录“ Daily Lambda”(不是真正的Lambda,我知道)中的代码每天凌晨12点01分运行(11月4日更新:现在,它每小时运行一次,以防菜单被更改)。 它执行Web抓取,将其存储为数据框,然后将数据框作为csv提交给scraped.tx