通过Nginx/Apache配置文件屏蔽搜索引擎蜘蛛

通过Nginx/Apache配置文件屏蔽
对于Nginx：
进入宝塔面板，选择网站 → 设置 → 配置文件

在server段添加如下规则：

1. <p>nginx</p><p>if ($http_user_agent ~* (Baiduspider|360Spider|YisouSpider|Sogou|Googlebot)) {</p><p>    return 403;</p><p>}</p>

复制代码

对于Apache：
进入网站设置 → 配置文件

添加：

1. <p>apache</p><p>RewriteEngine On</p><p>RewriteCond %{HTTP_USER_AGENT} (Baiduspider|360Spider|YisouSpider|Sogou|Googlebot) [NC]</p><p>RewriteRule .* - [F]</p>
   
2. <div></div>

复制代码