robots.txt 만들기
사용방법 크롤러 이름과 경로를 넣으세요.
결과
참고
Allow 목록 밖의 경로가 자동으로 금지되지는 않습니다. 허용·제외가 모두 비면 전체 허용입니다. 경로는 /로 시작하며 공백·#은 인코딩해야 합니다. robots.txt는 인증이나 보안 차단 기능이 아닙니다.
사용방법 크롤러 이름과 경로를 넣으세요.
Allow 목록 밖의 경로가 자동으로 금지되지는 않습니다. 허용·제외가 모두 비면 전체 허용입니다. 경로는 /로 시작하며 공백·#은 인코딩해야 합니다. robots.txt는 인증이나 보안 차단 기능이 아닙니다.