超牛逼的异步协程爬虫

写在前面: 本来这篇文章只是用来记录一下学习异步协程爬虫的笔记,感谢CSDN的大力支持,引来了很多关注和浏览,也有很多大佬的批评指针。 事先声明:本文只是学习使用,在爬虫的实战应用中还要添加诸多限制,比如UA伪装,添加timeout,设置代理等等。 在此感谢以下大佬的批评指针: 血色v残阳 热爱造轮子的程序员 ... 文章目录一、引入二、异步协程1. event_loop2. coroutine3. task4. future5. 绑定回调三、多任务协程 一、引入 如果因为 IO 阻塞导致被操作系统强行剥夺走 CPU 的执行权限,程序的执行效率会降低了下来。 想要解决这个问题,我们可以自己从应用程