robots.txt 생성기
robots.txt 파일을 즉시 생성 — 봇 허용, 경로 차단, sitemap 추가. 업로드 없음.
줄당 하나의 경로 (예: /admin)
출력
robots.txt 파일 생성
robots.txt 파일은 검색엔진 크롤러에게 사이트의 어떤 페이지를 접근할 수 있는지 알려줍니다. 생성된 파일을 도메인 루트에 배치하세요.
모두 브라우저에서 실행 — 서버에 아무것도 전송되지 않습니다.
자주 묻는 질문
Allow: /는 무엇인가요? 모든 봇이 전체 사이트를 크롤할 수 있음을 의미합니다.
차단할 페이지를 모두 나열해야 하나요? 아니요 — 차단하고 싶은 경로 접두사만 적으면 됩니다.