华为云虚拟主机屏蔽扫描器 UA配置教程_Linux 虚拟主机UA黑名单正则
华为云虚拟主机做屏蔽扫描器 UA，先从访问日志里统计 UA 出现频率。正常浏览器 UA 占 90% 以上，异常 UA 占比高且请求路径集中在列表页、内容页、API 接口，这些就是屏蔽目标。用站长平台抓取诊断确认规则生效后正常浏览器和百度蜘蛛不受影响。
IIS web.config 用 URL Rewrite 屏蔽 UA：rule name="Block UA"，match url="(.*)"，conditions 加 input="{HTTP_USER_AGENT}" pattern="badbot|scrapy|python-requests" ignoreCase="true"，action type="CustomResponse" statusCode="403"。ignoreCase=true 不区分大小写。
配置参考（web.config 屏蔽空 UA）：
```
CDN 后 UA 正常但 IP 异常是常见坑。UA 匹配一定要加 [NC] 或 ignoreCase=true，否则 BadBot 和 badbot 会被当成两个 UA。正则里的点号要转义成 .，否则 . 匹配任意字符导致误杀。写规则前用在线正则测试工具验证匹配范围。
UA 屏蔽对 SEO 的直接影响很小，因为正常搜索引擎 UA 不在黑名单里。间接影响是屏蔽采集器后内容不被镜像，原创内容排名更集中。屏蔽无用 SEO 蜘蛛（Ahrefs、Semrush 等）能省流量，但这些蜘蛛不影响百度排名，封不封看流量紧张程度。
更新时间：2026-08-27 13:05:19
上一篇：子域名访问出现Directory Listing Denied_子站根目录配置