Bỏ qua tới nội dung
Công cụ

Trình tạo robots.txt

Bao gồm cả các trình thu thập AI mà không nơi nào khác cho bạn bật/tắt

Chạy trong trình duyệt của bạn. Không up gì cả.

WordPress basics
AI crawlers

Blocking a bot here asks it not to crawl. It is a request, not a fence — a crawler that ignores robots.txt is unaffected by anything on this page. Also worth knowing: blocking a search-adjacent AI bot can remove you from that product's citations, which is sometimes traffic you wanted.

Sitemap
robots.txt

WordPress serves a virtual robots.txt unless a real file exists at your web root. Upload this file and it takes over.

Về Trình tạo robots.txt

Tạo tệp robots.txt cho WordPress với các quy tắc tiêu chuẩn — và tùy chọn bật/tắt riêng cho từng bot: GPTBot, ClaudeBot, PerplexityBot, CCBot và Google-Extended. Quyết định thứ gì được huấn luyện trên nội dung bạn viết, từng ô đánh dấu một.

Liên quan

Các công cụ khác bạn có thể cần

Trình tạo .htaccess cho WordPress

Những quy tắc WordPress cần, cộng thêm các quy tắc tăng cường bảo mật mà nó không có sẵn

FAQ

Câu hỏi

Chặn Google-Extended có làm hại thứ hạng tìm kiếm của tôi không?

Không. Google-Extended kiểm soát việc nội dung của bạn có được dùng để huấn luyện Gemini hay không. Nó không ảnh hưởng gì đến Googlebot, đến việc lập chỉ mục, hay vị trí của bạn trên Google Search. Đây là hiểu lầm phổ biến nhất về các chỉ thị dành cho crawler AI.

robots.txt có thực sự ngăn được các công ty AI cào trang của tôi không?

Nó ngăn được những bên tôn trọng nó, tức là hầu hết những bên có tên. Đó là một lời đề nghị, không phải hàng rào — một crawler bỏ qua robots.txt thì hoàn toàn không bị ảnh hưởng. Ai bán robots.txt như một biện pháp bảo vệ chống cào dữ liệu đều đang nói quá lên.

File robots.txt đặt ở đâu?

Trong web root của trang bạn, cạnh wp-config.php, để nó truy cập được tại example.com/robots.txt. WordPress phục vụ một robots.txt ảo khi không có file thật; up một file thật lên sẽ thay thế nó.