相信上过大学的朋友都懂，每学期选课季，堪比一场全民抢票大战。那些师资好、分数水、内容轻松的热门选修课，名额就几十个，几百个学生扎堆抢。你好不容易点进页面、按下确认，要么一直转圈加载，要么直接报错闪退，等刷新过来，课程早已抢空。不少同学不甘心，索性写了个自动抢课脚本，每隔几秒就自动提交一次选课请求。但很快就翻车了：自己的设备IP被学校系统直接封禁，别说抢课，连选课页面都彻底打不开。这里藏着一个互联网通用规则：服务器封禁IP，核心原因就是单个IP在短时间内发起了海量请求，行为完全违背了正常人的操作...

举个接地气的例子：你接到个活，要把老图书馆里10万本书的信息全抄下来，书名、作者、出版日期一个都不能落。刚开始你干劲十足，一天抄几百本，抄着抄着就崩溃了：书东一本西一本，A区跑B区，大半时间都浪费在路上；更闹心的是，中途有事出门，回来彻底忘光抄到哪了，只能从头翻。这就是咱们平时用的单机爬虫，毛病全一样。任务队列：给爬虫配个“待办小本本”后来你学机灵了：每天早上花半小时，把要抄的书写在便利贴上，一张贴一本，按书架排好。抄完一本就撕一张，临时有事？看一眼剩下的便利贴，立马知道从哪接着干，一点不耽误...