#抓取规则

Robots 规则检查清单：避免误拦截与无效配置

逐项核对 robots.txt 的访问、语法、匹配范围、Sitemap 声明和发布变更。