宝塔面板，网站屏蔽垃圾蜘蛛：/www/server/nginx/conf/enable-php-74.conf
if ($http_user_agent ~* "TelegramBot|DataForSeoBot|YandexBot|PetalBot|DotBot|facebookexternalhit|AhrefsBot|MJ12bot|SemrushBot|Slurp|twiceler|Scrubby|Robozilla|GPTBot|Amazonbot") { return 403; } 如果谷歌蜘蛛也不要，就加上Googlebot
