关于robots.txt 生成器
生成带有标准规则的 WordPress robots.txt——并为 GPTBot、ClaudeBot、PerplexityBot、CCBot 和 Google-Extended 提供逐个开关。用一个个复选框决定谁能拿你的文字去训练。
相关
你可能还需要的其他工具
FAQ
常见问题
屏蔽 Google-Extended 会影响我的搜索排名吗？
不会。Google-Extended 控制的是你的内容是否会被用来训练 Gemini。它对 Googlebot、对收录、对你在 Google 搜索里的排名都没有影响。这是关于 AI 蜘蛛指令最常见的误解。
robots.txt 真的能阻止 AI 公司抓取我的网站吗？
它能拦住那些尊重它的抓取程序，也就是大多数被点名的那些。它是一个请求，不是一道围栏——一个无视 robots.txt 的蜘蛛完全不受影响。任何把 robots.txt 说成能防抓取的说法，都是在夸大其词。
robots.txt 文件放在哪里？
放在你站点的 Web 根目录里，和 wp-config.php 放在一起，这样它就能在 example.com/robots.txt 上访问到。当没有真实文件存在时，WordPress 会提供一个虚拟的 robots.txt；上传一个真实文件就会取代它。