带宽治理

从访问日志统计 AI 训练爬虫的抓取量与流量占比，再用 robots.txt 声明、Nginx UA 限速和缓存策略把带宽压回可控范围，附可执行命令与核对指标。