검색노출

블로그 사이트맵과 robots.txt의 역할

최근 업데이트: 2026년 7월 16일 · 에디터 고해

요약
sitemap.xml은 검색엔진에 페이지 목록을 알려주고, robots.txt는 크롤러에게 접근 규칙과 사이트맵 위치를 안내합니다.

1. sitemap.xml의 역할

사이트맵은 검색엔진이 사이트의 중요한 URL을 발견하도록 돕는 파일입니다.

robots.txt는 검색엔진 크롤러에게 어떤 경로를 허용하거나 제한할지 알려주는 파일입니다.

예시
User-agent: *
Allow: /
Sitemap: https://example.com/sitemap.xml

파일	목적
sitemap.xml	URL 목록 제공
robots.txt	크롤링 규칙 안내

두 파일은 사이트 최상위 경로에서 열려야 합니다.

사이트맵이 없으면 검색 노출이 안 되나요?

반드시 그런 것은 아니지만, 새 사이트라면 도움이 됩니다.

robots.txt로 검색 노출을 보장할 수 있나요?

아닙니다. 접근 규칙 안내일 뿐 색인 보장을 의미하지 않습니다.

이 글과 이어지는 기본 개념을 아래 순서로 함께 보면 사이트 운영 흐름을 더 쉽게 이해할 수 있습니다.