robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

도구는 브라우저에서 바로 실행되므로 별도 프로그램 설치 없이 빠르게 확인할 수 있습니다.
입력을 즉시 지우고 다시 계산할 수 있어 반복적인 작은 작업에 편리합니다.
긴 텍스트, 구조화된 데이터, 큰 결과 블록을 다룰 때는 전체 화면 모드를 사용하세요.
복사 버튼으로 생성된 결과를 코드, 문서, 지원 채팅에 바로 재사용할 수 있습니다.
대부분의 작업은 결정적이어서 같은 입력과 옵션은 같은 결과를 만듭니다.
민감한 내용은 브라우저에서 로컬로 처리되는 도구를 사용하고, 공유하기 전에 결과를 확인하세요.