1. 首页
  2. 数据库
  3. 其它
  4. Python 多线程抓取图片效率对比

Python 多线程抓取图片效率对比

上传者: 2020-12-31 15:52:07上传 PDF文件 41.13KB 热度 37次
目的: 是学习python 多线程的工作原理,及通过抓取400张图片这种IO密集型应用来查看多线程效率对比 import requests import urlparse import os import time import threading import Queue path = '/home/lidongwei/scrapy/owan_img_urls.txt' #path = '/home/lidongwei/scrapy/cc.txt' fetch_img_save_path = '/home/lidongwei/scrapy/owan_imgs/' # 读取保存再文件里面
下载地址
用户评论