标签: 搜索引擎

1 篇文章

如何让Nginx禁止搜索引擎索引
为什么要禁止搜索引擎收录呢? 真的有人会这样吗? 其实还是有的,比如一个人搭建了镜像,但是不想被其他人发现,那他就需要这样配置。 怎么配置呢? 我采用的方式是让给让Nginx根据搜索引擎爬虫的UA来阻断连接,将以下代码放入Nginx的server块中即可 if ($http_user_agent ~* "qihoobot|Baiduspider|G…