GitHub的代码仓库里，藏着一场没人声张但异常激烈的“战争”。你去搜“web scraping”（网页抓取），能出来三十多万个相关项目；而“anti bot”（反机器人）相关的仓库，过去五年里数量翻了快四倍。别以为这些开源代码都是程序员练手的玩具，它们其实是商业战场的“前线情报”——一边是做爬虫的工程师，想拿到网页上的数据；一边是做风控的团队，想拦住这些“自动抓取的机器人”。双方就在GitHub上相互试探、互相学习，技术更新的速度，比学术论文发表快多了。早期：请求频率与User-Agent的猫鼠游戏大概2015年前后，反爬手段还特别简单直接。...