【python爬虫 系列】15.实战五 爬取笑话大全

BeautifulSoup4是爬虫必学的技能。BeautifulSoup最主要的功能是从网页抓取数据,Beautiful Soup自动将输入文档转换为Unicode编码,输出文档转换为utf-8编码。BeautifulSoup支持Python标准库中的HTML解析器,还支持一些第三方的解析器,如果我们不安装它,则 Python 会使用 Python默认的解析器,lxml 解析器更加强大,速度更快,推荐使用lxml 解析器。 爬取笑话大全: 冷笑话的页面: 1.寻找url规律: http://xiaohua.zol.com.cn/lengxiaohua/1.html http://xiaohua