robots.txt 생성기
개발자 도구UA 규칙, AI 봇, 사이트맵 설정
빠른 답변 보기
robots.txt Generator: UA rules + AI bots + Sitemap. robots.txt Generator uses standard developer formulas to compute accurate results instantly.
robots.txt
User-agent: * Disallow: /admin/ Disallow: /api/ Disallow: /tmp/ Sitemap: https://example.com/sitemap.xml
문법 빠른 조회
| User-agent: * | Applies to all crawlers |
| Disallow: /admin/ | Block path prefix |
| Disallow:(留空) | Empty = allow all |
| Allow: /public/ | Exception inside a disallow |
| Disallow: /*? | Wildcard support |
| Disallow: /*.pdf$ | End anchor |
| Crawl-delay: 10 | Politeness delay |
| Sitemap: https://… | Sitemap location |
robots.txt는 공개된 약속일 뿐 접근 제어가 아닙니다 — 악성 크롤러는 전혀 따르지 않으며 누구나 /robots.txt에 접근하여 내용을 볼 수 있습니다(민감한 경로를 적지 마세요, 널리 알리는 것과 같습니다). 진정으로 보호해야 할 내용은 인증을 사용하세요. 참고: robots.txt로 금지된 페이지가 외부 링크로 인용되면 여전히 '요약 없음' 형태로 검색 결과에 나타날 수 있습니다; 인덱스에서 완전히 제거하려면 noindex 메타를 사용하세요. Google은 Crawl-delay를 무시하며 크롤링 속도는 Search Console에서 설정해야 합니다.
이 도구가 도움이 되셨나요?
사용 방법
- Paste or type content: drop code/text into the robots.txt Generator or fill the parameters.
- Choose mode/options: switch format, rules or processing as needed.
- Live output: results appear instantly — nothing is submitted, data stays in your browser.
- One-click copy: copy the output straight into your development environment.
핵심 요점
- robots.txt Generator is a free online developer tool — open and use, no sign-up.
- All calculations run locally in your browser; your data never leaves the device.
- Key capability: UA rules + AI bots + Sitemap.
- Results come with formulas and reference tables so you can verify every number.
원리 및 공식
robots.txt Generator formula
robots.txt Generator uses standard developer formulas to compute accurate results instantly.
자주 묻는 질문
How do I use the robots.txt Generator?
Open the page and fill in the input fields — results update automatically. UA rules + AI bots + Sitemap.
Are the results accurate?
Yes. Standard formulas and conversion factors are used and verified.
Is it free? Do I need to sign up?
Completely free. No registration, login or download required.
Does it work on mobile?
Yes. The responsive design works on phones, tablets and desktops.
Is my data saved?
No. Everything runs locally in your browser.
관련 도구
관련 가이드
출처 및 업데이트
Based on RFC 4648, ECMA-262 and related specifications. Last updated: 2025-07
최근 업데이트:
이 페이지의 공식과 내용은 YiJianSuan 팀이 재검토했으며, 학습 참고용으로만 제공됩니다. 실제 업무는 공식 발표 내용을 기준으로 하십시오.
내용은 YiJianSuan 편집 팀이 유지 관리하고 정기적으로 재검토하며, 업데이트 및 심사 절차는 다음에서 확인하십시오편집 정책.
이 페이지 인용: YiJianSuan. robots.txt 생성기[EB/OL]. https://www.yijiansuan.com/ko/c/dev/robots-txt
이 도구가 제공하는 결과는 참고용일 뿐 어떠한 전문적 조언도 구성하지 않으며, 공식 계산 결과를 기준으로 하십시오.