Chuyển đến nội dung chính

Quy tắc UA + bot AI + Sitemap

Xem nhanh kết quả

robots.txt Generator: UA rules + AI bots + Sitemap. robots.txt Generator uses standard developer formulas to compute accurate results instantly.

robots.txt

User-agent: *
Disallow: /admin/
Disallow: /api/
Disallow: /tmp/

Sitemap: https://example.com/sitemap.xml

Tra cứu nhanh ngữ pháp

User-agent: *Applies to all crawlers
Disallow: /admin/Block path prefix
Disallow:(留空)Empty = allow all
Allow: /public/Exception inside a disallow
Disallow: /*? Wildcard support
Disallow: /*.pdf$End anchor
Crawl-delay: 10Politeness delay
Sitemap: https://…Sitemap location
robots.txt là thỏa thuận công khai chứ không phải kiểm soát truy cập — trình thu thập dữ liệu độc hại hoàn toàn không tuân theo, và mọi người đều có thể truy cập /robots.txt để xem nội dung (đừng viết đường dẫn nhạy cảm vào đó, tương đương với quảng bá rộng rãi). Nội dung thực sự cần bảo vệ vui lòng dùng xác thực quyền lưu trữ. Lưu ý: trang bị cấm bởi robots.txt nếu được tham chiếu bằng liên kết ngoài, vẫn có thể xuất hiện trong kết quả tìm kiếm dưới dạng "không có tóm tắt"; muốn loại bỏ hoàn toàn khỏi chỉ mục vui lòng dùng noindex meta. Google bỏ qua Crawl-delay, tốc độ thu thập của nó cần cài đặt trong Search Console.

Công cụ này có hữu ích cho bạn không?

Hướng dẫn sử dụng

  1. Paste or type content: drop code/text into the robots.txt Generator or fill the parameters.
  2. Choose mode/options: switch format, rules or processing as needed.
  3. Live output: results appear instantly — nothing is submitted, data stays in your browser.
  4. One-click copy: copy the output straight into your development environment.

Điểm chính

  • robots.txt Generator is a free online developer tool — open and use, no sign-up.
  • All calculations run locally in your browser; your data never leaves the device.
  • Key capability: UA rules + AI bots + Sitemap.
  • Results come with formulas and reference tables so you can verify every number.

Công thức và nguyên lý hoạt động

robots.txt Generator formula

robots.txt Generator uses standard developer formulas to compute accurate results instantly.

Câu hỏi thường gặp

How do I use the robots.txt Generator?
Open the page and fill in the input fields — results update automatically. UA rules + AI bots + Sitemap.
Are the results accurate?
Yes. Standard formulas and conversion factors are used and verified.
Is it free? Do I need to sign up?
Completely free. No registration, login or download required.
Does it work on mobile?
Yes. The responsive design works on phones, tablets and desktops.
Is my data saved?
No. Everything runs locally in your browser.

Công cụ liên quan

Hướng dẫn liên quan

Nguồn và cập nhật

Based on RFC 4648, ECMA-262 and related specifications. Last updated: 2025-07

Cập nhật gần nhất:

Công thức và nội dung trên trang này đã được đội ngũ YiJianSuan kiểm tra lại, chỉ dùng để tham khảo học tập, các nghiệp vụ thực tế vui lòng tuân theo thông báo chính thức.

Nội dung được đội ngũ biên tập YiJianSuan duy trì và kiểm tra lại định kỳ, quy trình cập nhật và kiểm duyệt xem tạiQuy định biên tập.

Trích dẫn trang này: YiJianSuan. Bộ Tạo robots.txt[EB/OL]. https://www.yijiansuan.com/vi/c/dev/robots-txt

Kết quả do công cụ này cung cấp chỉ mang tính tham khảo, không cấu thành bất kỳ lời khuyên chuyên nghiệp nào, vui lòng dựa trên kết quả tính toán chính thức.