CPU 占用过高排查_访问日志awk统计与异常识别
35互联虚拟主机流量超标先排查再优化，不要盲目升级套餐。登录主机面板看本月流量曲线，找到流量突增的时间点，再下载访问日志按 IP、URL、Referer、UA 四个维度统计，90% 的超标原因能在日志里找到。
CDN 环境下流量统计要分清 CDN 流量和回源流量。CDN 缓存命中的请求不回源，不计入虚拟主机流量；未命中的回源请求计入。CPU 占用过高排查时先看 CDN 后台的回源率，回源率超过 30% 说明缓存策略有问题，调整缓存规则能大幅降低主机流量。
配置参考（Apache 开启 Gzip 压缩（.htaccess））：
```
预防流量超标建立日常监控。每天看一次面板流量，月中用掉 60% 以上就开始排查。设置流量告警，大部分主机面板支持剩余 20% 时短信或邮件通知。提前发现异常比超标后补救成本低，超标后网站可能被限速或停机。
流量排查的自动化脚本可以每周跑一次，自动统计 Top IP、Top URL、Top UA，异常数据邮件告警。虚拟主机不支持 cron 的话，本地电脑写个 Python 脚本，每天自动下载日志分析，发现单 IP 请求超 1 万次或单文件流量超 1GB 就告警。提前发现比超标后处理成本低 80%。
区分攻击和采集的特征：攻击是短时间内大量请求同一 URL（CC 攻击）或 SYN 包（DDoS），UA 随机或空，Referer 为空；采集是按顺序抓取列表页和内容页，UA 固定（如 Scrapy、python-requests），Referer 是自己站点的列表页。攻击要封 IP 或联系客服开防护，采集要封 UA 加 IP。
更新时间：2026-08-27 00:03:55