卓越飞翔博客卓越飞翔博客

卓越飞翔 - 您值得收藏的技术分享站
技术文章11201本站已运行3223

nginx设置只允许蜘蛛访问其他访问为404或者301跳转

ngxinx设置只允许百度360蜘蛛访问,其他任何IP或者蜘蛛访问为404状态
在这里插入图片描述
if ($http_user_agent !~* "Baidu|Yisou|Sogou|Google|360")
{
return 404;
}

实测浏览器打开为404状态,网站日志百度蜘蛛为200正常状态。

设置只允许百度360蜘蛛访问,访客浏览器跳转

 if ($http_user_agent !~* "Baidu|Yisou|Sogou|Google|360")
{
   return 301 http://www.hao123.com;

}

解释:这个是,非这几个蜘蛛,就301跳转到hao123.com

if ($http_user_agent !~* "Baidu|Yisou|Sogou|Google|6531.22.7")
{
return 302 http://www.baidu.com;

}

解释: 这是302跳转
卓越飞翔博客
上一篇: nginx限制蜘蛛的频繁抓取
下一篇: nginx禁止特定UA访问
留言与评论(共有 0 条评论)
   
验证码:
隐藏边栏