پرش به محتوای اصلی

تولیدکننده robots.txt

ابزارهای توسعه‌دهنده

قوانین UA + ربات‌های هوش مصنوعی + نقشه سایت

پاسخ سریع

robots.txt Generator: UA rules + AI bots + Sitemap. robots.txt Generator uses standard developer formulas to compute accurate results instantly.

robots.txt

User-agent: *
Disallow: /admin/
Disallow: /api/
Disallow: /tmp/

Sitemap: https://example.com/sitemap.xml

جستجوی سریع گرامر

User-agent: *Applies to all crawlers
Disallow: /admin/Block path prefix
Disallow:(留空)Empty = allow all
Allow: /public/Exception inside a disallow
Disallow: /*? Wildcard support
Disallow: /*.pdf$End anchor
Crawl-delay: 10Politeness delay
Sitemap: https://…Sitemap location
robots.txt یک قرارداد عمومی است نه کنترل دسترسی — خزنده‌های مخرب اصلاً به آن توجه نمی‌کنند، و همه می‌توانند به /robots.txt دسترسی داشته باشند و محتوا را ببینند (مسیرهای حساس را در آن ننویسید، معادل اعلام عمومی است). برای محتوایی که واقعاً نیاز به محافظت دارد، از احراز هویت استفاده کنید. توجه: صفحاتی که توسط robots.txt ممنوع شده‌اند، اگر به وسیله لینک خارجی ارجاع داده شوند، هنوز ممکن است به صورت «بدون خلاصه» در نتایج جستجو ظاهر شوند؛ برای حذف کامل از فهرست از noindex meta استفاده کنید. Google Crawl-delay را نادیده می‌گیرد، نرخ خزیدن آن باید در Search Console تنظیم شود.

آیا این ابزار برای شما مفید بود؟

نحوه استفاده

  1. Paste or type content: drop code/text into the robots.txt Generator or fill the parameters.
  2. Choose mode/options: switch format, rules or processing as needed.
  3. Live output: results appear instantly — nothing is submitted, data stays in your browser.
  4. One-click copy: copy the output straight into your development environment.

نکات کلیدی

  • robots.txt Generator is a free online developer tool — open and use, no sign-up.
  • All calculations run locally in your browser; your data never leaves the device.
  • Key capability: UA rules + AI bots + Sitemap.
  • Results come with formulas and reference tables so you can verify every number.

اصول و فرمول‌ها

robots.txt Generator formula

robots.txt Generator uses standard developer formulas to compute accurate results instantly.

سوالات متداول

How do I use the robots.txt Generator?
Open the page and fill in the input fields — results update automatically. UA rules + AI bots + Sitemap.
Are the results accurate?
Yes. Standard formulas and conversion factors are used and verified.
Is it free? Do I need to sign up?
Completely free. No registration, login or download required.
Does it work on mobile?
Yes. The responsive design works on phones, tablets and desktops.
Is my data saved?
No. Everything runs locally in your browser.

ابزارهای مرتبط

مشاهده تمام 55 ابزار این دسته‌بندی →

راهنماهای مرتبط

منبع و به‌روزرسانی‌ها

Based on RFC 4648, ECMA-262 and related specifications. Last updated: 2025-07

آخرین به‌روزرسانی:

فرمول‌ها و محتوای این صفحه توسط تیم YiJianSuan بازبینی شده است و صرفاً برای مرجع آموزشی است. برای امور عملیاتی، به اطلاعات رسمی مرجع مراجعه کنید.

محتوا توسط تیم تحریریه YiJianSuan نگهداری و به صورت دوره‌ای بازبینی می‌شود — فرآیند به‌روزرسانی و بازبینی درسیاست تحریریه.

استناد به این صفحه: YiJianSuan. تولیدکننده robots.txt[EB/OL]. https://www.yijiansuan.com/fa/c/dev/robots-txt

نتایج ارائه شده توسط این ابزار صرفاً برای مرجع است و هیچ‌گونه توصیه حرفه‌ای محسوب نمی‌شود. برای محاسبات نهایی، به نتایج رسمی مرجع مراجعه کنید.