标签聚合 · TAG STREAM

WAF规则

1 个站点本页 1 条

限流把蜘蛛也限了：403、429 和 WAF 规则里该给爬虫留的那道防刷、防采集的限流规则一上线，抓取量断崖式下跌，这种事在目录站上不算罕见。蜘蛛的请求在服务器眼里和攻击者长得差不多。这篇讲怎正常