卓越飞翔博客卓越飞翔博客

卓越飞翔 - 您值得收藏的技术分享站
技术文章11201本站已运行3223

Nginx屏蔽百度谷歌等搜索引擎蜘蛛方法

在nginx的server字段中配置下面内容即可

if ($http_user_agent ~* (baiduspider|googlebot|bing|sogou|yahoo)){
return 503;
}

如果单独屏蔽百度蜘蛛就是

if ($http_user_agent ~* baiduspider){
return 503;
}
 
卓越飞翔博客
上一篇: Nginx只允许百度谷歌等搜索引擎蜘蛛访问方法
下一篇: nginx限制蜘蛛的频繁抓取
留言与评论(共有 0 条评论)
   
验证码:
隐藏边栏