标签：robots.txt

小标题：当宝塔云的WAF阻止了爬虫，怎样迅速修复并恢复网站索引？ 1. 精华：先查日志、确认拦截来源，再临时放行Googlebot/百度等正规爬虫。 2. 精华：排查并移除导致返回403/429/503的规则，提交重抓请求并推送Sitemap。 3. 精华：建立白名单、合理速率限制与监控策略，避免二次伤害并提升整体SEO稳定性。 作为一名有