robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

Alət birbaşa brauzerdə işləyir və proqram təminatı quraşdırmadan sürətli yoxlamalara hazırdır.
Giriş dərhal silinə və yenidən hesablana bilər ki, bu da təkrarlanan kiçik tapşırıqlar üçün faydalıdır.
Uzun mətn, strukturlaşdırılmış məlumat və ya böyük nəticə blokları üçün daha çox yerə ehtiyacınız olduqda tam ekran rejimindən istifadə edin.
Kopyalama düymələri yaradılan çıxışda mövcuddur ki, nəticələr kod, sənədlər və ya dəstək söhbətlərində təkrar istifadə olunsun.
Əksər əməliyyatlar deterministikdir: eyni giriş və seçimlər eyni çıxışı verir.
Həssas məzmun üçün yerli brauzer alətlərinə üstünlük verin və daha sonra paylaşmadan əvvəl nəticəni nəzərdən keçirin.