입력
결과
적용된 그룹: User-agent: *
| 경로 | 결과 | 적용 규칙 |
|---|---|---|
| / | 허용 | 해당 규칙 없음 |
| /admin/login | 차단 | Disallow: /admin/ (2번째 줄) |
| /admin/help | 허용 | Allow: /admin/help (4번째 줄) |
| /files/guide.pdf | 차단 | Disallow: /*.pdf$ (3번째 줄) |
| /blog/post?id=1 | 허용 | 해당 규칙 없음 |
가장 긴(구체적인) 규칙이 이기고, 길이가 같으면 Allow가 우선하는 방식입니다. 크롤러마다 해석이 조금 다를 수 있으며, 차단해도 다른 사이트의 링크로 색인될 수 있습니다. robots.txt는 접근 제어가 아닙니다.