Jireh程序猿的那些事 Jireh程序猿的那些事

记录分享生活、程序、信息的精彩人生

目录
Nginx限制爬虫抓取频率
/  

Nginx限制爬虫抓取频率

在 http中配置

http {
      limit_req_zone $anti_spider zone=grab_limit:10m** rate=15r/m;
      ……
}

然后在某个server当中配置

limit_req zone=grab_limit burst=5 nodelay;

if ($http_user_agent ~* "xxxBot") {
    set $anti_spider $http_user_agent;
}

如果觉得这篇文章不错的话,请我喝一杯 咖啡☕吧
标题:Nginx限制爬虫抓取频率
作者:Jireh
地址:https://jireh.xyz/articles/2021/05/10/1620610756852.html
本作品由 Jireh 采用 署名 – 非商业性使用 – 禁止演绎 4.0 国际许可协议进行许可,转载请注明出处。