Robots Meta·X-Robots 생성기

Robots Meta·X-Robots 생성기 사용 가이드

장바구니, 검색결과, 테스트 페이지처럼 검색결과에 나오지 않아야 하는 페이지에는 noindex 지시를 넣습니다. HTML 페이지는 meta robots 태그로, PDF나 이미지처럼 HTML이 아닌 파일은 서버의 X-Robots-Tag 응답 헤더로 지시합니다.

이 생성기는 index=yes·no, follow=yes·no와 max-snippet(설명 글자 수 제한), max-image-preview(none·standard·large), max-video-preview, noarchive, nosnippet, noimageindex, unavailable_after 지시를 받아 두 형식을 모두 만듭니다. bot=googlebot처럼 적으면 특정 검색로봇에만 적용되는 태그가 됩니다.

noindex를 고르면 '이 페이지를 robots.txt에서 막지 마세요'라는 안내가 붙습니다. robots.txt로 접근을 막으면 검색엔진이 페이지를 읽지 못해 noindex 지시 자체를 보지 못하기 때문입니다.

사용 방법

1. 1'지시값 (index=yes·no, follow=yes·no, max-snippet=, max-image-preview=, noarchive=yes, bot=googlebot)' 칸에 필요한 값을 한 줄에 하나씩 적습니다.
2. 2적지 않은 index와 follow는 yes로 처리됩니다.
3. 3'실행'을 누르면 meta 태그와 X-Robots-Tag 헤더 한 줄이 함께 나옵니다.
4. 4HTML 페이지는 meta 태그를 head에, 파일은 서버 설정에 헤더를 넣습니다.

index=no
follow=yes
max-image-preview=large

<meta name="robots" content="noindex, follow, max-image-preview:large">

# PDF·이미지처럼 HTML이 아닌 파일은 HTTP 헤더로
X-Robots-Tag: noindex, follow, max-image-preview:large

# noindex 페이지는 robots.txt에서 막지 마세요. 막으면 검색엔진이 noindex를 읽지 못합니다.

이럴 때 쓰면 좋아요

• 장바구니·마이페이지를 검색결과에서 뺄 때
• PDF 파일이 검색에 노출되지 않게 서버 헤더를 정할 때
• 검색결과 설명 길이(max-snippet)를 제한하고 싶을 때
• 행사 페이지를 종료일 이후 검색에서 빼고 싶을 때(unavailable_after)

문제가 생겼을 때

활용 팁

• index, follow는 기본값이라 아무 지시가 없어도 같은 효과입니다. 굳이 넣을 필요는 없습니다.
• max-snippet=-1은 '설명 길이 제한 없음', 0은 '설명 표시 안 함'입니다.
• unavailable_after에는 2026-12-31처럼 날짜를 적으면 그 뒤로 검색결과에서 빠집니다.

자주 묻는 질문