python爬虫1688一件代发电商工具二抓取商品详情页价格库存运费信息selenium

根据商品id指定需要抓取的商品范围抓取指定商品详情页价格库存运费信息存入数据库作数据分析和参考使用步骤1.搭建python环境配置好环境变量2.配置数据库环境根据本地数据库连接修改alibaba.py中的数据库初始化参数3.下载自己浏览器版本的浏览器驱动webdriver并将解压后的驱动放在python根目录下4.执行database DDL中的脚本进行数据库建表5.将alibaba.py中itemids参数替换成自己需要抓取的商品id找商品id的方法可参考url参数的规则6.运行alibaba.py开始需要手动滑动验证条验证控制台和数据库观察结果报错提示1.如果浏览器窗口能打开但没有访问url报错退出检查浏览器驱动的版本是否正确2.代码中有红色波浪线检查依赖包是否都安装完3.程序运行中途报错可能是出现滑动验证条导致页面捕捉不到元素中途手动完成验证即可