1. 首页
  2. 移动开发
  3. 其他
  4. Python 本项目在Celery分布式爬虫的基础上构建监控方案Demo

Python 本项目在Celery分布式爬虫的基础上构建监控方案Demo

上传者: 2020-08-06 19:39:52上传 ZIP文件 14.36KB 热度 8次
本项目在 Celery 分布式爬虫的基础上构建监控方案 Demo,在编写 Statsd InfluxDB 方案代码进行调研过程中,转向了 Prometheus 的怀抱 ,使用 Grafana 对监控序列进行可视化,爬虫部分目前只完成对下载和解析进行简单解耦,反爬部分和代码结构优化等后续会陆续进行完善
用户评论