최장 매치는 어떻게 작동?

매칭 UA 그룹 내에서, 경로에 매칭되는 가장 긴 패턴 룰 우선. Allow·Disallow는 패턴 길이로만 가중 — 더 긴 Allow가 더 짧은 Disallow 이김.

URL 경로 끝에 패턴 고정. /foo$는 /foo와 정확히 매치, /foo/bar는 아님. /*.pdf$ 같은 특정 확장자 차단에 유용.

robots.txt 테스터

네트워크

Googlebot·Bingbot 매칭 룰 구현: 그룹은 user-agent 키, 가장 구체적 UA 우선(완전일치 > 부분문자열 > *), 그룹 내 최장 매칭 패턴 우선(동률 시 Allow 우선). * 와일드카드, $ 경로끝 앵커 지원. Sitemap: 선언도 모두 노출 — 사이트맵 URL 도달 가능성 점검.

—

robots.txt

파싱된 그룹: 3사이트맵: 1

테스트 케이스

User-agentURL 경로
허용룰: Allow: /admin/
User-agentURL 경로
허용룰: Allow: /admin/public/
User-agentURL 경로
차단룰: Disallow: /
User-agentURL 경로
차단룰: Disallow: /private/

https://example.com/sitemap.xml

부분문자열 UA 매치는 대소문자 무시. 가장 긴 패턴 우선; 동률 시 Allow.

사용법

robots.txt를 상단에 붙여넣기.
(user-agent, 경로) 테스트 케이스 추가 — UA를 '*'로 두면 catch-all 그룹 테스트.
오른쪽에서 판정과 해당 룰 확인.

자주 묻는 질문

최장 매치는 어떻게 작동?: 매칭 UA 그룹 내에서, 경로에 매칭되는 가장 긴 패턴 룰 우선. Allow·Disallow는 패턴 길이로만 가중 — 더 긴 Allow가 더 짧은 Disallow 이김.
패턴 끝 $는 뭐?: URL 경로 끝에 패턴 고정. /foo$는 /foo와 정확히 매치, /foo/bar는 아님. /*.pdf$ 같은 특정 확장자 차단에 유용.

robots.txt 테스터

사용법

자주 묻는 질문

관련 도구

IP 주소 분석

포트 번호 참조

DNS 레코드 참조

서브넷 계산기 (IPv4 / CIDR)

User Agent 파서

HTTP 상태 코드 레퍼런스