Skip to content
Tools

robots.txt Generator

Kasama ang mga AI crawler na hindi mo mai-toggle sa iba

Tumatakbo sa iyong browser. Walang ina-upload.

WordPress basics
AI crawlers

Blocking a bot here asks it not to crawl. It is a request, not a fence — a crawler that ignores robots.txt is unaffected by anything on this page. Also worth knowing: blocking a search-adjacent AI bot can remove you from that product's citations, which is sometimes traffic you wanted.

Sitemap
robots.txt

WordPress serves a virtual robots.txt unless a real file exists at your web root. Upload this file and it takes over.

Tungkol sa robots.txt Generator

Bumuo ng WordPress robots.txt na may mga standard na panuntunan — at mga per-bot toggle para sa GPTBot, ClaudeBot, PerplexityBot, CCBot, at Google-Extended. Ikaw ang magdedesisyon kung ano ang nagtre-train sa iyong mga isinulat, isang checkbox sa bawat pagkakataon.

Kaugnay

Iba pang tools na baka kailanganin mo

WordPress .htaccess Generator

Ang mga panuntunang kailangan ng WordPress, kasama ang mga hardening rule na hindi kasama dito

FAQ

Mga Tanong

Nakakasama ba sa search ranking ko ang pag-block sa Google-Extended?

Hindi. Kinokontrol ng Google-Extended kung ang iyong content ay ginagamit para i-train ang Gemini. Wala itong epekto sa Googlebot, sa indexing, o sa iyong posisyon sa Google Search. Ito ang pinakakaraniwang maling pagkaunawa tungkol sa AI crawler directives.

Talaga bang pipigilan ng robots.txt ang mga AI company sa pag-scrape sa aking site?

Pinipigil nito ang mga gumagalang dito, na siyang karamihan sa mga pinangalanan. Ito ay kahilingan, hindi bakod — ang isang crawler na hindi pumapansin sa robots.txt ay buong hindi apektado. Sinuman ang nagbebenta ng robots.txt bilang proteksyon laban sa scraping ay nagpapalabis.

Saan napupunta ang robots.txt file?

Sa web root ng iyong site, katabi ng wp-config.php, para lumabas ito sa example.com/robots.txt. Naghahain ang WordPress ng virtual na robots.txt kapag walang tunay na file; ang pag-upload ng tunay ay magpapalit dito.