scrapy memcached cache:用于Scrapy的Memcached HTTP缓存存储后端 源码
Scrapy Memcached缓存 Memcached HTTP缓存存储后端。 安装 使用pipenv install scrapy-memcached-cache或pip install memcached-cache安装软件包。 用法 在您的Scrapy settings.py : 使用HTTPCACHE_ENABLED = True启用HTTP缓存 设置缓存过期(以秒为单位),例如,使用HTTPCACHE_EXPIRATION_SECS = 600 使用HTTPCACHE_STORAGE = 'scrapy_memcached_cache.MemcachedCacheStorage
下载地址
用户评论