宝塔面板屏蔽User-Agent访问_屏蔽空 User-Agent完整步骤
华夏名网虚拟主机屏蔽屏蔽空 User-Agent，Linux 主机在 .htaccess 用 SetEnvIfNoCase 配合 mod_rewrite，Windows 主机在 web.config 用 URL Rewrite 匹配 HTTP_USER_AGENT。UA 匹配不区分大小写，规则写在根目录即时生效，被拦截的请求返回 403 或 404。
屏蔽空 UA：RewriteCond %{HTTP_USER_AGENT} ^$ [OR]，RewriteCond %{HTTP_USER_AGENT} ^-?$，RewriteRule .* - [F,L]。正常浏览器和搜索引擎都带 UA，空 UA 请求 99% 是恶意扫描或脚本，直接封掉不影响收录。
配置参考（.htaccess SetEnvIf UA 黑名单）： ``` SetEnvIfNoCase User-Agent "badbot|scrapy|curl" bad_ua Order Allow,Deny Allow from all Deny from env=bad_ua ```
UA 黑名单维护建议按季度更新。新的采集器 UA 不断出现，从访问日志里统计 Top 20 的非浏览器 UA，排除正常搜索引擎后加入黑名单。长期不用的 UA 从规则里移除，保持规则文件精简，单条规则的 UA 不超过 30 个，过长的正则影响匹配性能。
UA 屏蔽对 SEO 的直接影响很小，因为正常搜索引擎 UA 不在黑名单里。间接影响是屏蔽采集器后内容不被镜像，原创内容排名更集中。屏蔽无用 SEO 蜘蛛（Ahrefs、Semrush 等）能省流量，但这些蜘蛛不影响百度排名，封不封看流量紧张程度。
UA 屏蔽对 SEO 的直接影响很小，因为正常搜索引擎 UA 不在黑名单里。间接影响是屏蔽采集器后内容不被镜像，原创内容排名更集中。屏蔽无用 SEO 蜘蛛（Ahrefs、Semrush 等）能省流量，但这些蜘蛛不影响百度排名，封不封看流量紧张程度。
更新时间：2026-08-27 11:58:22