Python分布式爬虫1

一、开发环境的搭建 1.安装mysql 2.安装navicat for mysql 二、虚拟环境的搭建 1.创建cmd.bat 1)在桌面新建cmd.bat,里面输入cmd,保存 2.安装驱动 1)pip install mkvirtualenvwrapper-win pip install mkvirtualenv pip install mkvirtualenvwrapper 2)mk virtualenv -p C:\anaconda3\python.exe article_spider 即先选中要作为虚拟环境的python,再构建名为article_spider的文件夹 cd到文件目录